Cloudflare розкрила інформацію про серйозний збій, що відбувся 18 листопада 2025 року, який позначився на функціонуванні значної частини інтернету, включаючи сервіси як ChatGPT, X та Downdetector. Компанія охарактеризувала цю подію як "найгіршу з 2019 року" та пов'язала її з помилкою в системі управління ботами.
Причина проблеми полягала в неправильному налаштуванні запиту до бази даних ClickHouse, що створює конфігураційний файл для моделі машинного навчання у системі управління ботами. Зміни в поведінці запиту призвели до виникнення великої кількості дублікатів даних. Це викликало стрімке збільшення розміру конфігураційного файлу, який перевищив допустимі межі пам'яті.
У результаті цього збою вийшла з ладу основна проксі-система, що обробляє трафік клієнтів, які покладаються на модуль ботів. Клієнти, які застосовували згенеровані показники ботів у своїх правилах, почали блокувати реальний трафік, тоді як компанії, які не використовували цю функцію, залишалися доступними онлайн.
Cloudflare зазначила, що проблема не була пов'язана з DNS, кібератаками чи новими генеративними системами ШІ – помилка була влаштована в внутрішній логіці оновлення конфігурації системи управління ботами.
Для запобігання подібним ситуаціям компанія анонсувала чотири кроки:
- покращення обробки конфігураційних файлів та введення користувачів;
- розширення кількості глобальних "вимикачів" для функцій;
- запобігання випадкам, коли core dump або звіти про помилки можуть перевантажувати систему;
- перегляд усіх режимів відмови в основних проксі-модулях.
За оцінками Cloudflare, близько 20% всього інтернету проходить через їх мережу, тому будь-яка помилка в центральних модулях може мати глобальний вплив.