Дэн Лу дал агенту на GPT-6 Astra реализовать Pandoc и в каждом условии менял только указание, как тестировать: 25 условий по 25 прогонов, около 90 тысяч долларов по розничным ценам. Скрытые тесты разошлись от 40,5% у TDD до 45,1% у дифференциального тестирования при 44,1% без всяких указаний. Автор…
[Перевод] Прогнал агента на $90 тысяч с разными техниками тестирования: TDD снова в хвосте
Это краткое изложение. Полный текст материала доступен на сайте источника.