Criteo Crawler - это робот, который посещает веб-страницы и анализирует их содержимое, чтобы показывать на них релевантную рекламу.
Робот собирает данные об общедоступном содержании страницы, например о языке и категориях содержания.