Технологии · 4 min read · Mar 03, 2026
AI Чат-боты стали тем, что ненавидит Google – Скраперы контента

Быстрый обзор
AI чат-боты, такие как Gemini и ChatGPT, сканируют контент и представляют его в чистом формате, все это во имя искусственного интеллекта.
AI-основанные мощные LLM, такие как ChatGPT, Perplexity, Claude и Gemini, считаются самыми горячими технологическими инновациями этого десятилетия. На самом деле, их называют способными выдавать лучшие результаты поиска по сравнению с Google или аналогичными современными поисковыми системами.
Однако с использованием независимых и интегрированных AI чат-ботов результаты поиска стали хаотичными. В добрые старые времена результаты поиска Google возглавляли сайты, которые имели фактические данные, полезный контент, который вы могли бы найти на первой странице результатов поиска.
Сообщается, что AI чат-боты исказили всю формулу результатов поисковых систем. Пользователи и веб-издатели жалуются, что AI чат-боты сканируют контент с ненадежных сайтов, создавая бесполезный контент.
Это означает, что использование AI чат-ботов для получения информации может привести к получению неверных данных или недостаточной информации, которая не будет служить вашей цели. Скрапинг контента – это то, чему Google всегда противился, чтобы освободить место для SEO-богатого, действительно человеческого контента.
Проблема с тем, что AI чат-боты захватывают результаты поиска
В ходе моего исследования по этой теме я наткнулся на интересную и последовательную точку зрения интернет-пользователей. Большинство предположило, что AI-основанные LLM должны стать окончательным приговором для уже саботированных и, казалось бы, неуправляемых рейтингов поиска Google, позволяя бесполезному контенту занимать места в результатах поиска и быть выбранным AI чат-ботами.
Вам даже не нужно углубляться в правду о AI чат-ботах, просто извлекая, перерабатывая существующий контент (даже бесполезный) и производя его быстро, когда поступает запрос. В некоторых из моих взаимодействий с ChatGPT он предлагал устаревшую и недействительную информацию, извлекая ее из результатов интернет-поиска.
Разочарованный, я начал искать информацию вручную в интернете, чтобы собрать полезные данные по теме, которую я пытался изучить. Это явно опровергает присутствие и использование AI чат-ботов. Усложняя ситуацию, повторное использование контента AI чат-ботами без атрибуции обесценило оригинальный блог/сайт, где был создан контент, а также повлияло на их доходы. Снижение трафика сайта привело к снижению доходов, негативно сказавшись на бизнесе сайта.
Понимание роли AI чат-ботов в скрапинге контента
Скрапинг контента относится к копированию контента с одного портала и публикации его с небольшими или без изменений на другом сайте. Google всегда был против этого, чтобы сохранить оригинальность и ценность контента.
В 2011 году Google выпустил обновление Panda, чтобы предотвратить скрапинг контента поддельными сайтами, чтобы помочь сайтам, производящим оригинальный контент, занять более высокие позиции. Работая с многочисленными популярными технологическими блогами в прошлом в качестве автора, основным правилом было генерировать идеи и создавать оригинальный контент. Эта концепция хорошо работала в производстве тысяч полезных блогов, списков, новостей и аналогичного контента.
Однако AI LLM теперь легко извлекают контент с случайных сайтов (включая те, которые предлагают ценный контент), чтобы предоставить его своим пользователям, и идея оригинальности контента стала делом прошлого. Чтобы справиться с разочаровывающей ситуацией веб-издателей, Google подчеркивает формат EEAT для веб-контента. EEAT – это аббревиатура для Опыт, Экспертиза, Авторитет и Достоверность.
Хотя EEAT может быть эффективным катализатором для производства полезного оригинального контента, запутанное обновление алгоритма поиска, похоже, предотвратило ранжирование такого контента и привело к тому, что AI чат-боты сканируют бесполезный контент и занимают первое место, еще больше вводя пользователей в заблуждение.
AI чат-боты наносят ущерб экономике блогов/веб-публикаций
** Я получил эти табличные данные из опросов/исследований, которые показывают, как AI чат-боты, сканируя контент с сайта, откуда он произошел, повлияли на коэффициент кликов, доход и пользовательский трафик.
| Набор данных | Отчет | Источник |
| Исследование Pew Center о влиянии AI-суммирования на результаты поисковых запросов | AI-суммирования сократили трафик и рекламные доходы почти вдвое | Pew Research |
| Отчет о судебном разбирательстве между OpenAI и The New York Times | Медиа-издатель подал в суд на AI-компанию за использование своего контента, ссылаясь на нарушение авторских прав и обесценивание контента. | Harvard Review |
| Данные о влиянии AI на трафик и присутствие сайтов | Реферальный трафик снизился на 10%, трафик не новостных брендов и новостных брендов снизился на 14% и 7% соответственно. | Digital Content Next |
AI смог использовать контент от его оригинальных производителей и опустил последних в рейтингах поиска, продвигая себя пользователям. Это явно нанесло огромный удар по экономике веб-публикации контента, сильно повлияв на просмотры и доходы.
Чтобы усугубить ситуацию, медиа-издатели не могут заблокировать AI-сканер Google от сканирования их контента, потому что это также заблокирует сканер Google поиска. В результате издатели не могут предотвратить сканирование их контента AI чат-ботами и вызвать значительное снижение их охвата и доходов.
AI чат-боты: инновация или современные машины, перерабатывающие старый контент
Google когда-то сосредоточился на политике “контент для человека, человеком”, чтобы продвигать легитимный контент, который может занимать высокие позиции и предоставлять ценность. Следуя текущему сценарию, кажется, что Google теперь позволяет своему AI сканировать любые данные, которые возможно, из уголков интернета и перенаправлять их на устройства своих пользователей, в попытке продвинуть интеграцию AI.
Обновление алгоритма поиска, похоже, не сделало много для улучшения и возвращения утраченной позиции популярных блогов и медиа-изданий, которые когда-то возглавляли первую страницу результатов поиска.
Что вы думаете? Эра полезных ориентированных на человека блогов/веб-медиа закончилась, и AI – это новый мировой порядок, доминирующий в обмене информацией, но с сканированным, ограниченным и регургитированным контентом? Дайте мне знать в комментариях.
Если у вас есть мысли по поводу AI Чат-боты стали тем, что ненавидит Google – Скраперы контента, не стесняйтесь оставлять их в комментариях ниже. Также, пожалуйста, подпишитесь на наш канал DigitBin на YouTube для видеоуроков. Удачи!
Get new posts in your inbox
No spam. Unsubscribe anytime.