Технологии · 4 min read · Mar 03, 2026

AI Чат-боты стали тем, что ненавидит Google – Скраперы контента

являются ли AI чат-боты скраперами контента

Быстрый обзор

AI чат-боты, такие как Gemini и ChatGPT, сканируют контент и представляют его в чистом формате, все это во имя искусственного интеллекта.

AI-основанные мощные LLM, такие как ChatGPT, Perplexity, Claude и Gemini, считаются самыми горячими технологическими инновациями этого десятилетия. На самом деле, их называют способными выдавать лучшие результаты поиска по сравнению с Google или аналогичными современными поисковыми системами.

Однако с использованием независимых и интегрированных AI чат-ботов результаты поиска стали хаотичными. В добрые старые времена результаты поиска Google возглавляли сайты, которые имели фактические данные, полезный контент, который вы могли бы найти на первой странице результатов поиска.

Сообщается, что AI чат-боты исказили всю формулу результатов поисковых систем. Пользователи и веб-издатели жалуются, что AI чат-боты сканируют контент с ненадежных сайтов, создавая бесполезный контент.

Это означает, что использование AI чат-ботов для получения информации может привести к получению неверных данных или недостаточной информации, которая не будет служить вашей цели. Скрапинг контента – это то, чему Google всегда противился, чтобы освободить место для SEO-богатого, действительно человеческого контента.

Проблема с тем, что AI чат-боты захватывают результаты поиска

В ходе моего исследования по этой теме я наткнулся на интересную и последовательную точку зрения интернет-пользователей. Большинство предположило, что AI-основанные LLM должны стать окончательным приговором для уже саботированных и, казалось бы, неуправляемых рейтингов поиска Google, позволяя бесполезному контенту занимать места в результатах поиска и быть выбранным AI чат-ботами.

Вам даже не нужно углубляться в правду о AI чат-ботах, просто извлекая, перерабатывая существующий контент (даже бесполезный) и производя его быстро, когда поступает запрос. В некоторых из моих взаимодействий с ChatGPT он предлагал устаревшую и недействительную информацию, извлекая ее из результатов интернет-поиска.

Разочарованный, я начал искать информацию вручную в интернете, чтобы собрать полезные данные по теме, которую я пытался изучить. Это явно опровергает присутствие и использование AI чат-ботов. Усложняя ситуацию, повторное использование контента AI чат-ботами без атрибуции обесценило оригинальный блог/сайт, где был создан контент, а также повлияло на их доходы. Снижение трафика сайта привело к снижению доходов, негативно сказавшись на бизнесе сайта.

Понимание роли AI чат-ботов в скрапинге контента

Скрапинг контента относится к копированию контента с одного портала и публикации его с небольшими или без изменений на другом сайте. Google всегда был против этого, чтобы сохранить оригинальность и ценность контента.

В 2011 году Google выпустил обновление Panda, чтобы предотвратить скрапинг контента поддельными сайтами, чтобы помочь сайтам, производящим оригинальный контент, занять более высокие позиции. Работая с многочисленными популярными технологическими блогами в прошлом в качестве автора, основным правилом было генерировать идеи и создавать оригинальный контент. Эта концепция хорошо работала в производстве тысяч полезных блогов, списков, новостей и аналогичного контента.

Однако AI LLM теперь легко извлекают контент с случайных сайтов (включая те, которые предлагают ценный контент), чтобы предоставить его своим пользователям, и идея оригинальности контента стала делом прошлого. Чтобы справиться с разочаровывающей ситуацией веб-издателей, Google подчеркивает формат EEAT для веб-контента. EEAT – это аббревиатура для Опыт, Экспертиза, Авторитет и Достоверность.

Хотя EEAT может быть эффективным катализатором для производства полезного оригинального контента, запутанное обновление алгоритма поиска, похоже, предотвратило ранжирование такого контента и привело к тому, что AI чат-боты сканируют бесполезный контент и занимают первое место, еще больше вводя пользователей в заблуждение.

AI чат-боты наносят ущерб экономике блогов/веб-публикаций

** Я получил эти табличные данные из опросов/исследований, которые показывают, как AI чат-боты, сканируя контент с сайта, откуда он произошел, повлияли на коэффициент кликов, доход и пользовательский трафик.

Набор данныхОтчетИсточник
Исследование Pew Center о влиянии AI-суммирования на результаты поисковых запросовAI-суммирования сократили трафик и рекламные доходы почти вдвоеPew Research
Отчет о судебном разбирательстве между OpenAI и The New York TimesМедиа-издатель подал в суд на AI-компанию за использование своего контента, ссылаясь на нарушение авторских прав и обесценивание контента.Harvard Review
Данные о влиянии AI на трафик и присутствие сайтовРеферальный трафик снизился на 10%, трафик не новостных брендов и новостных брендов снизился на 14% и 7% соответственно.Digital Content Next

AI смог использовать контент от его оригинальных производителей и опустил последних в рейтингах поиска, продвигая себя пользователям. Это явно нанесло огромный удар по экономике веб-публикации контента, сильно повлияв на просмотры и доходы.

Чтобы усугубить ситуацию, медиа-издатели не могут заблокировать AI-сканер Google от сканирования их контента, потому что это также заблокирует сканер Google поиска. В результате издатели не могут предотвратить сканирование их контента AI чат-ботами и вызвать значительное снижение их охвата и доходов.

AI чат-боты: инновация или современные машины, перерабатывающие старый контент

Google когда-то сосредоточился на политике “контент для человека, человеком”, чтобы продвигать легитимный контент, который может занимать высокие позиции и предоставлять ценность. Следуя текущему сценарию, кажется, что Google теперь позволяет своему AI сканировать любые данные, которые возможно, из уголков интернета и перенаправлять их на устройства своих пользователей, в попытке продвинуть интеграцию AI.

Обновление алгоритма поиска, похоже, не сделало много для улучшения и возвращения утраченной позиции популярных блогов и медиа-изданий, которые когда-то возглавляли первую страницу результатов поиска.

Что вы думаете? Эра полезных ориентированных на человека блогов/веб-медиа закончилась, и AI – это новый мировой порядок, доминирующий в обмене информацией, но с сканированным, ограниченным и регургитированным контентом? Дайте мне знать в комментариях.

Если у вас есть мысли по поводу AI Чат-боты стали тем, что ненавидит Google – Скраперы контента, не стесняйтесь оставлять их в комментариях ниже. Также, пожалуйста, подпишитесь на наш канал DigitBin на YouTube для видеоуроков. Удачи!

Share: X/Twitter LinkedIn

Get new posts in your inbox

No spam. Unsubscribe anytime.