ИССЛЕДОВАНИЕ · RESEARCH · #1535
Akka проводит эксперимент по переносам с помощью AI на основе спецификаций в 65 open-source проектах
Akka протестировала рабочий процесс переноса ПО с помощью AI, управляемый спецификациями, на 65 open-source проектах, используя конвейер discovery→specification→porting→benchmarking→improvement. Начальная партия заняла 99.3 часа и потребила 9.41 миллиарда токенов; Akka сообщила об улучшении по строкам кода или производительности в 57 из 65 переносов, реализацию выполнял Claude вместе с Akka Specify, при этом Sonnet в среднем делал порт за 61 минуту против 120 минут у Opus (Opus использовал примерно на 40% меньше токенов).
КЛЮЧЕВЫЕ ТЕЗИСЫ
- Akka протестировала рабочий процесс переноса ПО с помощью AI, управляемый спецификациями, на 65 open-source проектах, используя конвейер discovery→specification→porting→benchmarking→improvement.
- Начальная партия заняла 99.3 часа и потребила 9.41 миллиарда токенов; Akka сообщила об улучшении по строкам кода или производительности в 57 из 65 переносов, реализацию выполнял Claude вместе с Akka Specify, при этом Sonnet в среднем делал порт за 61 минуту против 120 минут у Opus (Opus использовал примерно на 40% меньше токенов).
- Эксперимент даёт эмпирические данные о соотношении стоимости, скорости и эффективности при переносах с помощью AI на основе спецификаций, что важно для проектирования инструментов, выбора моделей и практик валидации.
ПОЧЕМУ ЭТО ВАЖНО
Эксперимент даёт эмпирические данные о соотношении стоимости, скорости и эффективности при переносах с помощью AI на основе спецификаций, что важно для проектирования инструментов, выбора моделей и практик валидации.