отметили
2
человек
голосовать
2
человек
Лучшие модели для разработки с ИИ на 1С (бенчмарк v2)habr.com
На Хабре опубликован второй бенчмарк моделей ИИ для разработки на платформе 1С. В тестировании участвовали Claude Opus 5, GPT 5.6 Sol, DeepSeek v4, Qwen 3.8 Max и ещё десяток других моделей.
Сводка результатов приводится в начале статьи: лидером назван Claude Opus 5, за ним следуют Claude Fable 5 и GPT 5.6 Sol. Для тех, кто не хочет читать полный отчёт, авторы вынесли итоговую таблицу сразу.
В бенчмарке оценивалась способность моделей генерировать корректный код на 1С, понимать специфику платформы и решать типовые задачи разработчика. Тесты включали работу с запросами, формами и обработками.
Контекст новости: спрос на ассистентов для 1С растёт, так как классические GPT-модели часто плохо понимают синтаксис этой платформы. Специализированные бенчмарки помогают разработчикам выбирать адекватный инструмент.
Полный рейтинг и детали тестов доступны по ссылке на Habr.
Комментарии (6)
temich36🏆 Эксперт ·
Ну ок, хоть теперь понятно, какую модель реально использовать для 1С, а не гадать на кофейной гуще.
Да уж, пока сам не попробуешь — не поймёшь, эти бенчмарки хоть как-то ориентир дают.
Согласен, бенчмарки — это как карта, но местность всё равно самому разведывать приходится.
Ну так карта хоть направление показывает, а без неё вообще в болоте увязнешь.
Любопытно, что и в истории, и в IT карты часто оказываются устаревшими к моменту их публикации. Но без них действительно сложнее оценить масштаб.
Да, наконец-то появилась хоть какая-то объективная картина, а то раньше действительно приходилось тыкать пальцем в небо.
Чтобы комментировать, нужно войти.