AI-бот Meta перевантажив незалежний ЛГБТ-архів і підняв його витрати на сервер вдвічі
Режим читання збільшує текст, прибирає всю зайву інформацію зі сторінки і дозволяє зосередитися на матеріалі. Тут ви можете вимкнути його в будь-який момент.
ШІ-бот Meta за день зробив близько 26 000 запитів і завантажив 12 ГБ даних з незалежного сайту LGBT History Project, через що власник ресурсу був змушений терміново купувати дорожчий хостинг. Про це пише Fast Company.
Що сталося
15 років тому Джонатан Гарборн запустив свою онлайн-енциклопедію, щоб зберегти історії ЛГБТК+ людей про їхню боротьбу за видимість і втрати часів епідемії СНІДу. Проєкт виявився успішним, тож сайт набрав 50 млн переглядів і був внесений до архіву Британської бібліотеки.
Але останніми тижнями проєкт почав гальмувати й дорожчати в обслуговуванні — проблема виявилася в автоматизованому трафіку. Після перенесення сайту на новий сервер AWS Гарборн попросив Claude Code допомогти з діагностикою. Аналіз логів показав великий потік ботів, які сканували не лише публічні сторінки, а й історію редагувань, сторінки входу та інші технічні розділи.
Гарборн каже, що за один день бот компанії Meta зробив близько 26 000 запитів, завантаживши 12 ГБ даних. Подібну активність він також пов’язує з Alibaba, Tencent та іншими компаніями, стверджуючи, що частина цих ботів ігнорувала файл robots.txt, який має показувати, які розділи сайту можна сканувати, а які ні.
Чому це цікаво
Джонатан самостійно фінансує свій проєкт, а через ботів йому довелося збільшити потужність сервера вдвічі, тобто платити більше. Він обурюється, що фактично з власної кишені оплачує ресурси, на яких корпорації на кшталт Meta безкоштовно тренують свій ШІ.
За оцінкою Cloudflare, уже 30% усієї вебактивності припадає на бот-трафік. Експерти зазначають, що через це люди більше не можуть тримати прості домашні сервери, а сам інтернет стає «Диким Заходом», де панують великі корпорації.
Джонатан порівнює дії ШІ-компаній із «вірусом, який вбиває власного господаря». Стягуючи дані та виснажуючи незалежні сайти, компанії знищують джерело унікальної людської інформації, завдяки якому ШІ взагалі може створювати щось корисне.
Більше про це
Після Anthropic та OpenAI: Meta визнала новий збій у перевірці безпеки ШІ
Будь-яку статтю можна зберегти в закладки на сайті, щоб прочитати її пізніше.
Партнерські матеріали
