Боты с искусственным интеллектом теперь являются важным источником веб-трафика

Вирусный виртуальный помощник OpenClaw — ранее известный как Молтбота до этого Clawdbot — символ более широкая революция В настоящее время это может фундаментально изменить функционирование Интернета. Вместо места, населенного преимущественно людьми, в сети очень скоро могут доминировать автономные боты с искусственным интеллектом.

А новый отчет Измерение активности ботов в сети, а также соответствующие данные, предоставленные WIRED интернет-компанией Akamai, показывают, что на ботов с искусственным интеллектом уже приходится значительная доля веб-трафика. Результаты также проливают свет на все более изощренную гонку вооружений, разворачивающуюся по мере того, как боты используют умную тактику для обхода защиты веб-сайтов, призванной не допускать их.

«В будущем большая часть интернет-трафика будет занимать бот-трафик», — говорит Тошит Панграхи, соучредитель и генеральный директор TollBit, компании, которая отслеживает активность веб-скрапинга и опубликовала новый отчет. «Это не просто проблема авторских прав, в Интернете появился новый посетитель».

Большинство крупных веб-сайтов пытаются ограничить контент, который боты могут собирать и передавать в системы искусственного интеллекта. учебных целях. (Материнская компания WIRED, Condé Nast, а также другие издатели в настоящее время подают в суд на несколько компаний, занимающихся искусственным интеллектом, за предполагаемое нарушение авторских прав, связанное с обучением искусственному интеллекту.)

Но сейчас набирает обороты и другой вид парсинга веб-сайтов, связанный с искусственным интеллектом. Многие чат-боты и другие инструменты искусственного интеллекта теперь могут получать информацию в реальном времени из Интернета и использовать его для расширения и улучшения своих результатов. Это могут быть самые свежие цены на продукты, расписание кинотеатров или сводки последних новостей.

По данным Akamai, трафик ботов, связанных с обучением, неуклонно растет с июля прошлого года. Между тем глобальная активность ботов, получающих веб-контент для агентов ИИ, также растет.

Read more:  Вот как это происходит с Siewert & Kau

«ИИ меняет Интернет, каким мы его знаем», — сказал WIRED Роберт Блюмоф, технический директор Akamai. «Последующая гонка вооружений будет определять будущий внешний вид, ощущения и функциональность Интернета, а также основы ведения бизнеса».

По оценкам TollBit, в четвертом квартале 2025 года в среднем одно из каждых 50 посещений веб-сайтов ее клиентов было совершено ИИ-ботом. За первые три месяца 2025 года этот показатель составлял лишь один из каждых 200. Компания сообщает, что в четвертом квартале более 13 процентов запросов ботов проходили в обход файла robots.txt, который некоторые веб-сайты используйте, чтобы указать, какие страницы боты должны избегать. TollBit сообщает, что доля ИИ-ботов, игнорирующих robots.txt, увеличилась на 400 процентов со второго по четвертый квартал прошлого года.

TollBit также сообщил о 336-процентном увеличении числа веб-сайтов, пытающихся заблокировать ботов с искусственным интеллектом, за последний год. Панграхи говорит, что методы парсинга становятся все более изощренными, поскольку сайты пытаются установить контроль над тем, как боты получают доступ к их контенту. Некоторые боты маскируются, создавая впечатление, что их трафик исходит из обычного веб-браузера, или отправляют запросы, имитирующие обычное взаимодействие людей с веб-сайтами. В исследовании TollBit отмечается, что поведение некоторых ИИ-агентов теперь практически неотличимо от человеческого веб-трафика.

Рынки TollBit инструменты которые владельцы веб-сайтов могут использовать для взимания платы скраперами ИИ за доступ к их контенту. Другие фирмы, включая Cloudflare, предложение подобные инструменты. «Любой, кто полагается на человеческий веб-трафик, начиная с издателей и заканчивая практически всеми, пострадает», — говорит Панграхи. «Необходим более быстрый способ осуществления межмашинного программного обмена ценностями».

2026-02-04 10:30:00


1770215948
#Боты #искусственным #интеллектом #теперь #являются #важным #источником #вебтрафика

Продолжение темы

Leave a Comment

This site uses Akismet to reduce spam. Learn how your comment data is processed.