Gemini 2.5 Flash Lite — разбор прогона

скачать:

разбор оценки · L1prism

Gemini 2.5 Flash Lite

Google

#29из 41 моделей · по Q

Ниже среднего по коду 1С. Лучше в алгоритмике.

Плюсы

+Оптимальность — эффективный код — без лишних переборов и запросов в цикле

+Синтаксис — почти всегда пишет компилируемый код

Минусы

−Логика — часто выдаёт неверный результат (слабее на «таб. часть»)

−Платформа 1С — путается в метаданных — обращается к несуществующим полям и объектам

Алгоритмика

Чистый код: расчёты, строки, коллекции — без базы 1С.

решает 33% задач

Платформенные задачи

Запросы, регистры, работа с реальной базой 1С.

решает 25% задач

цена ответа0.02 ₽дешевле большинства

скорость2.3 сбыстрее большинства

токенов на ответ631экономнее большинства

общая оценка5.5 / 10средне

дешевле5.1× GLM-4.7 Flash 9.4× Qwen3.7 Plus 5.7× Gemini 3.5 Flash Lite 35× Seed 2.0 Code 36× YandexGPT 5 Pro 27× Alice AI LLM

по общему качеству кода 1С

сильнееSeed 2.0 Code YandexGPT 5 Pro Alice AI LLM

слабееGLM-4.7 Flash Qwen3.7 Plus Gemini 3.5 Flash Lite

Оценка по категориям

Балл Q — среднее по осям метрики SMOP (шкала 0–10). Разбор по осям: S синтаксис · M логика · O оптимальность · P платформа 1С.

Категория A · алгоритмика

чистый код: расчёты, строки, коллекции

6.29/ 10

итоговый балл Q

Sсинтаксис

9.3

Mлогика

3.5

Oоптимальность

8.8

Категория B · платформа

запросы, регистры, метаданные 1С

4.89/ 10

итоговый балл Q

Sсинтаксис

8.9

Mлогика

2.5

Oоптимальность

8.8

Pплатформа 1С

3.5

Где ломается

Из чего сложились все попытки модели: сколько задач решено полностью и на чём падают остальные — неверный ответ, ошибка выполнения или код не компилируется.

Категория A · алгоритмика

15 задач

33%решено

решено 5неверный ответ 0ошибка выполнения 7не компилируется 3

частая поломка: перепутаны типы данных ×3

Категория B · платформа

20 задач

25%решено

решено 5неверный ответ 0ошибка выполнения 5не компилируется 10

частая поломка: ошибка синтаксиса ×10

Профиль навыков

Средний балл по типам задач — видно, где модель сильна, а где проседает. В алгоритмике — по оси M (логика), в платформенных — по оси P (работа с 1С).

Категория A · алгоритмика

по типам алгоритмов

строки

4.0

числа

5.0

коллекции

1.5

алгоритм

6.0

Категория B · платформа

по видам конструкций 1С

вирт. таблица

1.1

срез последних

3.3

регистр накопл.

1.1

регистр свед.

3.3

таб. часть

0.0

движения

3.3

Что написала модель

Реальный код по каждой задаче — тот, что запускали против синтетической базы. Выбери задачу слева; можно поставить рядом вторую модель.

загрузка генераций…