Dartmouth

На курсе статистики в Дартмуте запустили учебную платформу, где Claude оценивает развёрнутые ответы по преподавательским рубрикам. Заявленный эффект: 0,71–1,30 SD на промежуточном экзамене при полной вовлечённости, 90,2% добровольного охвата против базовых ~10% тех, кто читает учебник.

Потом комментаторы посчитали: «90% охвата» значит «воспользовались хотя бы раз», до уровня вовлечённости, давшего большую цифру, дошли лишь ~16 студентов (11%), а «репетитор» на самом деле автопроверка тренировочных тестов.

Экономист из Брауновского университета, изучающий теорию игр, дал промежуточный экзамен на дом и на доверии, а финал — под наблюдением. Распределения оценок разошлись так резко, что, по его словам, минимум 50 из 86 студентов списали с ИИ. Его собственная кафедра лишь пожала плечами.

Тред был беспощаден: эксперт по теории игр, не сумевший предвидеть, что все смошенничают, сам построил эту ловушку. А преподаватель из Дартмута тем временем перестраивает курс по CS как «противоборство» со студентами, оптимизирующими оценку на единицу усилий.