Типичная задача агента для кода стоит $0.011, у медианной модели — $0.101.
Цены разработчика за миллион токенов — и что они значат для целой задачи.
Независимые тестовые индексы, 0–100. Замеры из разных источников стоят рядом, а не сливаются в одно число.
Замеры по источникам
Для графика истории нужны хотя бы две записи цены с датами в нашем каталоге.
Цена задачи — наш расчёт: цены разработчика за токены, умноженные на набор токенов типичной задачи этого вида. Как мы считаем
Не вошли в оценку, потому что устарели: Aider Polyglot
Голосования людей «модель против модели» — на LMArena