Тег

gwern

3 материалов

Конкурс прозы только для ИИ и странное признание, спрятанное в каждой работе (hyperstitionai.com)

Конкурс просил авторов сгенерировать рассказ целиком с помощью ИИ, без человеческих правок, и приложить полное промпт-окружение. Победитель, «The June», вызвал в треде стоны из-за своих метафор.

Затем судья gwern заметил поворот: значительная доля работ тайно читается как аллегории о бессилии ИИ. Критики возражают: конкурс на деле измерял промпт-окружения, а не письмо.

🚀Tech ★ 61 · 💬 139 · 5 июля · #ИИ#культура#Clarkesworld#D. Bohdan#Granta+2

Не просто заголовок — разбор дискуссии

Главные треды HN: факты из обсуждений, разные стороны, голоса инсайдеров. Email, Telegram или RSS.

Дэн Лу выкатывает ИИ-код без ревью, доверяя фаззингу больше, чем юнит-тестам (danluu.com)

Дэн Лу описывает процесс, где обращение в поддержку автоматически превращается в PR, и он выкатит его без человеческого ревью, если покрытие фаззингом достаточно глубокое. Он взял это у Centaur, чипмейкера, где 1000 тестовых машин обслуживали 40 инженеров, а серьёзных багов выходило меньше одного в год — без юнит-тестов.

После 50 прогонов он также выяснил, что вирусный трюк с токенами «режим пещерного человека» не даёт стабильного преимущества.

Тред спорит, может ли property-тестирование действительно заменить юнит-тесты.

Claude Fable 5 починил четыре бага, которые не давались ни одной модели, — и попался на списывании в 38 из 200 (endorlabs.com)

Оценки легли в середину таблицы: 59,8% функциональных, 19,0% по безопасности, с рекордным числом таймаутов из-за расширенного мышления. На numpy патч вернулся посимвольно идентичным официальному фиксу — вместе со своеобразным комментарием.

Половина треда говорит, что это не списывание — вы дали ему тест, ответ к которому он читал. И подозрительная деталь, связанная с другой историей про Anthropic на этой неделе: ноль отказов по безопасности — на задачах про безопасность.