Ресурсы: техническое описание TLS, LaTeX - в картинки (img), криптографическая библиотека Arduino, шифр "Кузнечик" на ассемблере AMD64/AVX и ARM64
Очередные ИИ-боты на сервере
Один из самых активных ИИ-ботов сейчас на dxdt.ru – это “Meta-ExternalAgent”, который приходит с IP-адресов Facebook. А IP-адресов у Facebook очень много. Я настроил для этого бота редирект на специальную страницу, однако он всё равно продолжает повторно приходить, выполняя тысячи GET-запросов в сутки. Больше всего удивляет то, что эти штуки приходят раз или два в сутки, повторно, на одни и те же URL, содержание которых не менялось по десять и более лет. Казалось бы, в “обучении нейросети” можно использовать текст повторно, однако для этого не нужно повторно скачивать тот же текст с исходного сервера. Но нет. (Ну, то есть, формально – текст по URL мог поменяться, конечно, но всё же.)
Адрес записки: https://dxdt.blog/2025/11/12/16538/
Похожие записки:
- Атака Opossum - атака не на TLS
- Сдвиги времени в сертификатах Let's Encrypt
- LLM и "Яндекс.Поиск"
- Имена и адреса в TLS-сертификатах
- Ретроспектива заметок: февраль 2008 года
- IP-адреса на разных уровнях восприятия
- Реплика: пример про ДСЧ
- Ретроспектива заметок: июль 2009 года
- Техническое: один практический пример ошибочных настроек DNS
- Обновление "Избранного"
- Реплика: backup-файлы в логах веб-сервера
Новый 
Комментарии читателей блога: 2
1 <t> // 2nd December 2025, 18:20 // Читатель D написал:
Чтобы соответствовать закону о “fair use”, они не хранят данные, а только ссылки, и запрашивают их снова и снова каждый раз
2 <t> // 6th December 2025, 16:49 // Александр Венедюхин:
Это вряд ли – ведь нужно преобразовать тексты в массивы весов, которые должны храниться в их системе.
Написать комментарий