Токен Google-Extended в robots.txt решает, можно ли уже скачанное использовать для обучения Gemini и для grounding. На включение сайта в Поиск и на сигнал ранжирования он не влияет, отдельной строки User-Agent у него нет.
Что справки Директа и Google Ads говорят о геопоказах при смене точки и почему VPN не обрывает связку визитов по отпечатку браузера.
Кто представляется в Метрике, как проверить Google и Яндекс по DNS, чем Google-Extended отличается от поиска и почему сбой проверки — не доказательство подделки.
Что номер автономной системы говорит о маршруте, чем общий IPv4 при CGN отличается от человека и как устроен DNS-список адресов.
Код 429 говорит «слишком много запросов» и не задаёт, кто такой пользователь. Чем лимит частоты отличается от капчи, блокировки IP и одного слабого сигнала.
Как JA4 сворачивает ClientHello в строку, чем это отличается от отпечатка браузера и почему строка сама по себе не доказывает автоматический визит.
Чем сайт узнаёт браузер без отдельной анкеты. Что в заголовке User-Agent, что называют отпечатком и чем пассивный съём отличается от активного.
Что Метрика делает, если нет JavaScript и Referer, чем активный съём в браузере отличается от заголовка запроса и почему отсутствие скрипта нельзя считать единственным отказом.
Что HTTP-заголовок User-Agent сообщает о программе, почему браузеры его урезают, как Google просит проверять робота не по строке и почему одного заголовка для решения о визите мало.
ASN — номер автономной системы с одной политикой маршрутизации, а не ярлык дата-центра. В примерах GIVT известный трафик дата-центров опознают списками, и адрес Яндекса в своей AS ещё не доказывает робота.
Заметка W3C называет отпечатком способность узнать браузер по настройкам и наблюдаемым чертам. Cookie и VPN связку по отпечатку не обрывают, а статья 11 закона биометрией технические черты не называет.
Прямой прокси ходит на сайт от имени клиента и не всегда прячет его адрес. Страницы MDN, RFC и Google Ads слово «резидентный прокси» не определяют.
Чем программа с целью в Метрике отличается от SIVT, браузера без окна, краулера поиска и захода по запросу в чат. Порядок, как не спутать эти случаи.
Капча в Директе и у OWASP замедляет автоматизацию, но тест можно решить. Чем она отличается от вычислительной задачи и что делать, если бот всё равно дошёл до сайта.
Кликбот в открытых описаниях — программа, которая изображает обычный обход ради клика или показа. Чем это отличается от браузера без окна, ботнета и повторных кликов людей.
В стандарте MRC клик-ферма — организованная нероботная активность через многих людей или машины. Чем SIVT отличается от рутинного GIVT и почему решённая капча не доказывает человека.