В 2026 году интернет переживает серьёзные изменения: переход от веб‑страниц «для людей» к веб‑страницам «для ИИ» меняет модели монетизации крупных компаний и создаёт трудности для малого и среднего бизнеса. По данным Cloudflare, доля AI‑роботов в глобальных запросах к HTML‑страницам стремительно растёт: в июне 2026 года она достигла 57,4 %, а по последним данным — уже 60,4 %.
Малые и средние сайты, зависящие от рекламы, несут убытки из‑за AI‑агентов, которые не кликают по рекламе. Чтобы защититься от AI‑краулеров, сайты усложняют капчи — из‑за этого настоящие пользователи тоже сталкиваются с трудностями при подтверждении своей личности. Кроме того, применяются технологии искажения контента и динамического запутывания кода: например, на веб‑страницах при каждом обновлении структура кода и расположение текста меняются случайным образом. Для человека страница выглядит нормально, а AI при извлечении кода получает беспорядочный набор символов. Чтобы получить полезные данные, AI вынужден преобразовывать страницу в изображение, а затем распознавать текст — это многократно увеличивает затраты вычислительных ресурсов. ：DeepSeek，500
ByteDance (через платформу Доубао) меняет бизнес‑модель. Раньше заработок компании был основан на «человеческом дофамине»: алгоритмы подбирали видео, увеличивая время использования платформы. Теперь ByteDance переходит от модели заработка на кликах к модели заработка на данных от AI‑сделок. Компания должна преобразовать контент‑платформы в сервисы, доступные для прямого использования AI.
Для этого ByteDance предпринимает ряд мер:
* в мобильных приложениях (Douyin, Toutiao, Dongchedi) усилена проверка идентичности — при использовании приложений генерируется зашифрованный «удостоверение личности устройства» (с использованием Secure Enclave от Apple или TEE от Android), и AI‑программы не могут получить подпись реального чипа устройства, а их запросы отклоняются;
* внешние разработчики для вызова ресурсов экосистемы Douyin (TikTok) должны использовать модель Doubao или платформу Coze;
* в августе 2026 года Doubao начнёт взимать 12 % комиссии с заказов в сфере гостиничного и туристического бизнеса.
Все AI‑программы работают в закрытой экосистеме ByteDance — от аутентификации до распределения доходов. Активы ByteDance переосмыслены в новый формат: собственная контент‑экосистема + полная цепочка транзакций + защита на стороне клиента.
Google тоже адаптируется к новой реальности. Раньше компания зарабатывала на рекламе, основанной на кликах и показах, благодаря позиции крупнейшего поисковика. Но распространение Agent обходит веб‑интерфейс поиска Google: пользователь даёт команду Agent, который автоматически ищет и систематизирует информацию. При этом Google сохраняет ключевые позиции в эпоху AI за счёт доступа к реальным данным в реальном времени. Компания упаковывает поиск и картографические сервисы в инструменты, доступные для прямого вызова AI.
У Google есть три уровня барьеров:
1. База данных в реальном времени.
2. Геопространственные данные (точные координаты, трафик, статус бизнеса, данные городского пространства) — они критически важны для AI в сфере транспорта, местной жизни и логистики.
3. Корректировка графа знаний — преобразование традиционного веб‑поиска в возврат структурированных фактических данных.
Google предлагает платные API для доступа к стандартизированным данным для AI‑компаний и разработчиков (включая OpenAI, Anthropic и местных производителей больших моделей). Для разграничения людей и AI используются технологии «человеко‑машинного распознавания», например аутентификация на основе аппаратных ключей (протокол WebAuthn с использованием безопасного чипа устройства). Платформы могут выборочно разрешать доступ согласованным AI и блокировать неизвестные краулеры.
Google внедряет аппаратные ключи на всех платформах: при выполнении ключевых операций (поиск, просмотр YouTube) сервер отправляет задачу на проверку, решить которую может только безопасный чип устройства. Поведенческие паттерны (частота посещений, время пребывания на странице, траектория кликов) позволяют идентифицировать автоматизированные программы: действия человека хаотичны, а краулеры AI действуют упорядоченно (с миллисекундными интервалами, массовым извлечением данных).
Также применяется анализ «ритма» сетевого подключения — например, технология JA4 от Google. Она оценивает детали установления соединения (порядок шифрования, ритм отправки пакетов данных) и позволяет за 1 мс определить, является ли источник AI, после чего можно применить меры (ограничение трафика, повышение стоимости, блокировка). Проект Project Lanterna за 31 час идентифицировал 14 известных AI‑краулеров, включая краулеры Claude и GPT. Anthropic 2，
Поставщики услуг (например, Cloudflare) составляют глобальный «чёрный список» AI‑краулеров, позволяя сайтам включать защиту в один клик. Всё больше платформ предоставляют стандартизированные официальные API — это позволяет контролировать количество запросов, взимать плату за API и определять объём открытых данных. Примеры таких решений — сервисные интерфейсы платформы Byte Coze, API поиска и картографических данных Google.
Происходит переход от модели To B/To C к To A, где буква A может означать AI, Agent или компании с изначальной ориентацией на AI (AI native или AI pilled). Бизнес‑логика смещается от ориентации на человека к ориентации на AI‑агенты, что приводит к экспоненциальному росту эффективности. Human not in the loop становится нормой. В эпоху To A ключевыми становятся вопросы данных, экосистемы Agent, базовой информационной инфраструктуры и прав доступа к API. Компании, такие как Byte и Google, используют разные стратегии для захвата новых прав в эпоху AI: Byte выстраивает экосистему, а Google создаёт информационную основу. Заканчивается эпоха «налога на трафик», начинается эпоха «налога на API».
Подписаться в Макс
