Как считаем
Умность
Индекс Artificial Analysis — сводный балл по независимым тестам. Тир модели — по её лучшему уровню рассуждения.
Цена
Цена за одну задачу теста, а не за токен: умные уровни думают дольше и стоят дороже. Блёклые строки в тир-листе — есть модель умнее за те же деньги.
Картинки, видео, голос
Люди вслепую выбирают лучший из двух результатов. 100% — уровень лидера, 50% — лидер лучше в трёх случаях из четырёх.
Подбор под задачу
Запрос читает быстрая модель и определяет три вещи: тип задачи, её объём и сложность. Дальше считает обычная программа, без ИИ. Сначала берём то, что уже оплачено подпиской. «Баланс» — самая дешёвая модель, которой хватит ума на задачу. «Полная котлета» — самая умная из доступных, показываем её только для больших задач.
Стоимость задачи и число токенов — оценка, а не счёт. Мы умножаем цену одной задачи теста на объём работы: маленькая, средняя или большая. Настоящий расход зависит от проекта и может отличаться в разы.
Цены генераторов
Цены картинок, видео и голоса берём у fal.ai — это посредник, через которого модель можно запустить. У самого производителя цена может быть другой. Если модели на fal.ai нет, цену не показываем.
Обновление
Данные обновляются раз в сутки. В тир-листе — модели, вышедшие за последний год.