Попробовав все актуальные нейросети, я провёл их тестирование в условиях, приближенных к реальным задачам. Были рассмотрены такие модели, как GPT-5, Gemini 2.5 Pro, Claude 4.1 Opus и другие.
Краткие выводы по результатам:
- С использованием MCP-серверов с правильными правилами качество кода значительно увеличивается.
- Для вайбкодинга в 1С лучшей нейросетью стала Claude 4.1 OPUS, хотя Gemini 2.5 Pro почти не отстаёт и превосходит её по скорости и цене.
- Закрытые модели показывают значительно лучшие результаты по сравнению с открытыми.
- Среди открытых решений наилучшей оказалась Qwen3-Coder.
- GPT-5 и GPT-OSS не оправдали ожиданий для данной задачи.
Детализированные результаты экспериментов можно найти на GitHub: здесь. Для обсуждения или подписки на новости по теме предлагаю посетить наш канал в Telegram: здесь.
В целом, несмотря на некоторые успехи, открытые модели всё ещё уступают в качестве своим закрытым аналогам, хотя и имеют потенциал для использования в отдельных случаях.