Определить свой User Agent (пользовательский агент)
User Agent — это та информация, которую сообщает о себе устройство, выполняющее запросы к Интернет ресурсам.
User Agent — является одним из заголовков HTTP протокола. По User Agent веб-сервер определяет, какая у пользователя операционная система, какой браузер и какая версия этого браузера.
Хотя User Agent не является чем-то принципиально необходимым, тем не менее, он может использоваться для определения версии веб-браузера пользователя — в результате для настольных браузеров будет показываться одна версия сайта, а для мобильных — другая. Некоторые серверы настроены так, чтобы не отвечать клиентам, у которых User Agent не установлен или является не типичным для веб-браузеров — это сделано для защиты сайта от ботов и автоматических сканеров.
Поэтому, хотя User Agent легко подменить, рекомендует использовать обычные значения данного заголовка. Сам по себе User Agent не может использоваться для идентификации пользователя. Тем не менее пользовательский агент может стать дополнительной подсказкой для разграничения клиентов использующих, например, один IP (технология NAT). Либо наоборот, помочь в идентификации пользователя в совокупности с другими данными.
Ваш User Agent:
CCBot/2.0 (https://commoncrawl.org/faq/)
Подробная информация:
Родительский браузер: CCBot
Платформа: unknown
Комментарий: CCBot
Браузер: CCBot
Создатель браузера: CommonCrawl Foundation
Версия: 2.0
Главный номер версии: 2
Тип устройства: unknown
Метод указания на устройстве: unknown
Второстепенный номер версии: 0
Является ли мобильным устройством? Нет
Является ли планшетом? Нет
Является ли обходчиком (роботом)? Да