скачать:
разбор оценки · L1prism
Alibaba
#35из 41 моделей · по Q
Ниже среднего по коду 1С. Лучше в алгоритмике.
Плюсы
+Синтаксис — почти всегда пишет компилируемый код
Минусы
−Логика — часто выдаёт неверный результат (слабее на «иерархия»)
−Оптимальность — местами лишние обращения к данным
−Платформа 1С — путается в метаданных — обращается к несуществующим полям и объектам
Алгоритмика
Чистый код: расчёты, строки, коллекции — без базы 1С.
решает 27% задач
Платформенные задачи
Запросы, регистры, работа с реальной базой 1С.
решает 10% задач
цена ответа<0.01 ₽дешевле большинства
скорость24.5 ссредняя скорость
токенов на ответ947средний расход
общая оценка4.5 / 10слабо
дешевле2× GPT-OSS 120B186× Qwen3.6-35B-A3B57× Alice AI LLM12× YandexGPT 5 Lite58× GPT-5 Mini49× YandexGPT 5.1 Pro
по общему качеству кода 1С
Оценка по категориям
Балл Q — среднее по осям метрики SMOP (шкала 0–10). Разбор по осям: S синтаксис · M логика · O оптимальность · P платформа 1С.
Категория A · алгоритмика
чистый код: расчёты, строки, коллекции
5.57/ 10
итоговый балл Q
S
8.9
M
2.7
O
7.0
Категория B · платформа
запросы, регистры, метаданные 1С
3.68/ 10
итоговый балл Q
S
8.5
M
1.0
Oне измерено
P
1.7
Где ломается
Из чего сложились все попытки модели: сколько задач решено полностью и на чём падают остальные — неверный ответ, ошибка выполнения или код не компилируется.
Категория A · алгоритмика
15 задач
27%решено
решено 4неверный ответ 0ошибка выполнения 6не компилируется 5
частая поломка: ошибка синтаксиса ×5
Категория B · платформа
20 задач
10%решено
решено 2неверный ответ 0ошибка выполнения 7не компилируется 11
частая поломка: ошибка синтаксиса ×11
Профиль навыков
Средний балл по типам задач — видно, где модель сильна, а где проседает. В алгоритмике — по оси M (логика), в платформенных — по оси P (работа с 1С).
Категория A · алгоритмика
по типам алгоритмов
2.2
2.5
2.5
2.0
Категория B · платформа
по видам конструкций 1С
0.0
1.1
0.0
1.1
1.1
0.0
Что написала модель
Реальный код по каждой задаче — тот, что запускали против синтетической базы. Выбери задачу слева; можно поставить рядом вторую модель.
загрузка генераций…