скачать:
разбор оценки · L1prism
OpenAI
#37из 41 моделей · по Q
Ниже среднего по коду 1С. Лучше в алгоритмике.
Плюсы
+Оптимальность — эффективный код — без лишних переборов и запросов в цикле
+Синтаксис — почти всегда пишет компилируемый код
Минусы
−Логика — часто выдаёт неверный результат (слабее на «иерархия»)
−Платформа 1С — путается в метаданных — обращается к несуществующим полям и объектам
Алгоритмика
Чистый код: расчёты, строки, коллекции — без базы 1С.
решает 27% задач
Платформенные задачи
Запросы, регистры, работа с реальной базой 1С.
решает 5% задач
цена ответа0.44 ₽средняя цена
скорость33 смедленнее большинства
токенов на ответ2.8кмногословнее большинства
общая оценка4.2 / 10слабо
по общему качеству кода 1С
Оценка по категориям
Балл Q — среднее по осям метрики SMOP (шкала 0–10). Разбор по осям: S синтаксис · M логика · O оптимальность · P платформа 1С.
Категория A · алгоритмика
чистый код: расчёты, строки, коллекции
5.76/ 10
итоговый балл Q
S
8.9
M
2.9
O
8.5
Категория B · платформа
запросы, регистры, метаданные 1С
3.10/ 10
итоговый балл Q
S
7.6
M
0.5
Oне измерено
P
1.2
Где ломается
Из чего сложились все попытки модели: сколько задач решено полностью и на чём падают остальные — неверный ответ, ошибка выполнения или код не компилируется.
Категория A · алгоритмика
15 задач
27%решено
решено 4неверный ответ 0ошибка выполнения 5не компилируется 6
частая поломка: ошибка синтаксиса ×6
Категория B · платформа
20 задач
5%решено
решено 1неверный ответ 0ошибка выполнения 2не компилируется 17
частая поломка: ошибка синтаксиса ×17
Профиль навыков
Средний балл по типам задач — видно, где модель сильна, а где проседает. В алгоритмике — по оси M (логика), в платформенных — по оси P (работа с 1С).
Категория A · алгоритмика
по типам алгоритмов
4.0
2.5
2.8
2.0
Категория B · платформа
по видам конструкций 1С
0.4
0.0
0.4
0.0
0.0
0.0
Что написала модель
Реальный код по каждой задаче — тот, что запускали против синтетической базы. Выбери задачу слева; можно поставить рядом вторую модель.
загрузка генераций…