Краулер стянул 145,5 ГБ с сайтов 3D-моделей за 34 часа, включая 54,8 ГБ взрослого контента (open3dlab.com)
С 15 по 16 октября один адрес AWS сделал 26 429 запросов почти ко всем 18 926 проектам на Open3DLab, SFMLab и SmutBase, а затем скачал 1027 файлов из 712 из них. На два письма в Roblox ответа не пришло, а утверждение сайта, что это данные для обучения ИИ, — его собственный вывод.
Hacker News спорил о лицензиях самого сайта, а потом о том, как заблокировать следующий краулер.
Войдите, чтобы сохранить