Hubris
Скачать из Google PlayСкачайте из RuStore
hubris

Gemini 2.5 FlashилиGPT-4.1

5 раундов из 9 — ничья или почти ничья. Главная разница — цена: Gemini дешевле в 6,7 раза на входе и в 3,2 раза на выходе. Ниже — счёт по трём источникам: что заявили поставщики, что намерила независимая лаборатория и что мы видим на реальных запросах. Переключатель «что важнее» меняет счёт — проверьте свой расклад.

  • Поставщик карточки моделей и правила кэша
  • Лаборатория Artificial Analysis, одна методика на обе
  • Hubris наши реальные запросы за 30 дней

Сводная оценка Лаборатория Hubris

Одно число на модель от 0 до 100: качество, скорость, цена, кэш и возможности, нормированные по всему каталогу. Засечки — остальные модели на той же шкале.

Gemini 2.5 Flash37,87 ₽ · google · май 2025
OpusDeepSeek 0731FlashFlash
56
GPT-4.1252 ₽ · openai · апрель 2025
SonnetLunaFlashOpus
56

Gemini и GPT-4.1 идут вровень по сводной оценке при выбранных весах — разница 0 %. Смотрите раунды: перевес есть, но в разных местах.

Счёт по раундам 88 : 70
Правила одни для всех сравнений: лучший в раунде получает 10, второй — пропорционально отставанию, разница до 5 % — ничья, обеим по 10. Раунд 2 и 8 в счёт не идёт: лаборатория ещё не опубликовала замер — максимум уменьшен. «Бюджет и скорость» удваивает цену и скорость, «Качество любой ценой» удваивает качество и не считает цену. Как считаем — в методике.

Раунд 1 из 11

Качество с рассуждениями

10:1013.1 против 12.7 по независимому индексу — в пределах погрешностипосле раунда 10 : 10

Качество мы не измеряем — это цифры независимой лаборатории: девять тестов одной методикой на обе модели, рассуждения включены на максимум. Шкала от 0 до 100.

Индекс интеллекта Лаборатория

Artificial Analysis, индекс v4. Замеры: Gemini 2.5 Flash (Non-reasoning), GPT-4.1.

С рассуждениями на максимумкак в карточках поставщиков
13.1
12.7
GPQA Diamondвопросы уровня аспирантуры, справочно
79 %
66,6 %
Humanity's Last Examсамый трудный набор задач, справочно
12,1 %
4,2 %
MMLU-Proширокие знания, справочно
83,2 %
80,6 %

Раунд 2 из 11

Качество без рассуждений

—:—раунд не считается — нет замера

В чате, поддержке и массовых задачах думать некогда — рассуждения выключены. Здесь картина часто другая.

Индекс интеллекта Лаборатория

Та же методика, режим без рассуждений.

Без рассужденийбыстрый ответ, как в чате и массовых задачах

Лаборатория ещё не измерила GPT-4.1 в этом режиме — раунд в счёт не идёт.

Раунд 3 из 11

Код

10:7счёт по 1 замеру лабораториипосле раунда 20 : 17

Задачи из настоящих репозиториев и соревновательный код. У разных моделей лаборатория успела измерить разное — в счёт идут те тесты, что есть у обеих.

Кодинг Лаборатория

Сводный индекс кодинга (0–100) и отдельные тесты в процентах решённых задач.

Сводный индекс кодингавсе кодовые тесты лаборатории одним числом

Лаборатория ещё не измерила Gemini 2.5 Flash в этом режиме — раунд в счёт не идёт.

LiveCodeBenchсвежие соревновательные задачи
69,5 %
45,7 %
SciCodeнаучный код по описанию задачи

Лаборатория ещё не измерила Gemini 2.5 Flash в этом режиме — раунд в счёт не идёт.

Сторонние лидерборды SWE-bench · LMArena

Справочно, в счёт раунда не идут: методика у каждого своя. У SWE-bench результат — это связка модели с конкретным агентом, поэтому рядом указаны агент и год лучшего известного прогона.

SWE-bench Verifiedдоля починенных багов в настоящих репозиториях
28,7 % · mini-SWE-agent, 2025
39,6 % · mini-SWE-agent, 2025

Раунд 4 из 11

Математика

10:5счёт по 2 замерам лабораториипосле раунда 30 : 22

Счёт, доказательства и олимпиадные задачи. Полезно там, где ответ либо верный, либо нет: аналитика, финансы, инженерные расчёты.

Математика Лаборатория

Сводный индекс (0–100) и доля решённых олимпиадных задач.

Сводный индекс математикивсе математические тесты лаборатории одним числом
73.3
34.7
AIMEолимпиадные задачи со строгим ответом
73,3 %
34,7 %

Раунд 5 из 11

Инструменты и агент

9:10счёт по 2 замерам лабораториипосле раунда 39 : 32

Модель в роли агента: вызвать нужный инструмент, довести многошаговый диалог до результата, поработать в терминале. Именно это отличает модель для агентского клиента от модели для чата.

Инструменты и терминал Лаборатория

Доля доведённых до конца сценариев.

𝜏²-benchвызовы инструментов в многошаговом диалоге
31,6 %
47,1 %
Terminal-Benchработа агента в терминале
13,6 %
13,6 %

Раунд 6 из 11

Следование инструкциям

10:9счёт по 1 замеру лабораториипосле раунда 49 : 41

Делает ли модель ровно то, о чём просили: держит формат, не добавляет лишнего, соблюдает ограничения. От этого зависит, придётся ли разбирать ответ костылями.

Следование инструкциям Лаборатория

Доля заданий, где все требования соблюдены.

IFBenchпроверяемые требования к формату и содержанию
50,3 %
43 %

Раунд 7 из 11

Длинный контекст

10:10счёт по 1 замеру лаборатории — в пределах погрешностипосле раунда 59 : 51

Большое окно контекста и умение им пользоваться — разные вещи. Здесь проверяется второе: рассуждения по длинному тексту, а не размер окна из карточки.

Рассуждения на длинном контексте Лаборатория

Доля верных ответов по длинному тексту. Размер окна — в раунде «Возможности».

Long Context Reasoningответы по тексту, который не помещается в один взгляд
65,3 %
68,3 %

Раунд 8 из 11

Скорость

—:—раунд не считается — мало данных

Пауза до первого слова и скорость письма. Очки — по нашим данным, это то, что вы получите на практике.

Один и тот же запросHubris

Проигрываем ответ на измеренной скорости: пауза до первого слова, потом письмо. Длина ответа одинаковая, иначе модели несравнимы.

Gemini 2.5 Flashgoogle/gemini-2.5-flashу нас 0,7 с · 255 ток/с
тишина 0,7 с
255 токенов в секунду
1,9 с
GPT-4.1openai/gpt-4.1

По GPT-4.1 пока мало запросов, чтобы мерить скорость.

Лаборатория меряет по прямому API одним промптом без рассуждений. У нас — реальные промпты реальных клиентов, часть с рассуждениями, и весь путь до вас целиком. Разница между дорожками — разница между стендом и жизнью.

Раунд 9 из 11

Цена

10:2Gemini дешевле в 6,7 раза на входе и в 3,2 раза на выходепосле раунда 69 : 53

В рублях, за миллион токенов. Списывается по факту — за то, что реально отправили и получили.

Прайс и реальный средний чек Hubris

Первые две колонки — ставки каталога. Третья — сколько в среднем стоит один запрос нашим пользователям к этой модели.

МодельВходные токеныто, что вы отправилиОтвет моделито, что она написалаТипичный запроссредний по нашим пользователям
Gemini 2.5 Flash37,87₽316₽0,19₽
GPT-4.1252₽1 010₽мало данных
Разницав 6,7 разав пользу Geminiв 3,2 разав пользу Gemini—
Средний чек считается по реальным запросам наших пользователей: он зависит от того, сколько модель пишет в ответ.

Раунд 10 из 11

Кэш

9:9у обеих включается сампосле раунда 78 : 62

Если начало промпта повторяется от запроса к запросу — системная инструкция, приложенный документ, история переписки, — эта часть считается со скидкой. Включается она у моделей по-разному, и на этом легко потерять деньги.

Правила кэширования Поставщик

Скидка применяется автоматически — Hubris списывает по фактической цене исполнения, в которой кэш уже учтён.

Gemini 2.5 Flash
Автоматический

Повторяющееся начало промпта кэшируется само. Ничего помечать не нужно: если первые токены совпадают с недавним запросом, скидка 90 % применится сама.

GPT-4.1
Автоматический

Повторяющееся начало промпта кэшируется само. Ничего помечать не нужно: если первые токены совпадают с недавним запросом, скидка 75 % применится сама.

Как пометить блок и проверить, что кэш сработал, — в документации. Сработавший кэш виден в ответе в поле cached_tokens.

Раунд 11 из 11

Возможности

10:8Gemini умеет рассуждатьпосле раунда 88 : 70

Контекст, что принимает на вход, рассуждения, приватность, надёжность. За каждый пункт — очки по одной шкале.

Gemini 2.5 Flash
  • ✓Контекст 1,05 млн токенов
  • ✓Принимает картинки
  • ✓Принимает файлы
  • ✓Умеет рассуждать перед ответом
  • ✓Доля неудачных запросов 1,7 %
GPT-4.1
  • ✓Контекст 1,05 млн токенов
  • ✓Принимает картинки
  • ✓Принимает файлы
  • —Без режима рассуждений

Итог

Кто победил

Gemini 2.5 Flash88
из 90 очковПобеждает Gemini
GPT-4.170
При равных весах побеждает Gemini — 88 : 70, уверенно. Gemini берёт код, математику, цену и возможности; GPT-4.1 отвечает без явных побед. Качество с рассуждениями, работа с инструментами, следование инструкциям, длинный контекст и кэш — ничьи. Переключатели наверху счёт не переворачивают: Gemini впереди при любом раскладе.

Коротко

Плюсы и минусы

Преимущества каждой модели над другой — из тех же данных, что и раунды, в процентах и секундах.

Gemini 2.5 Flash
  • дешевле в 6,7 раза на входе
GPT-4.1

Преимуществ перед соперником по нашим данным нет.

Мы рекомендуем Gemini 2.5 Flash: он впереди по сумме раундов при равных весах.

Выбор

Когда какую брать

Обе доступны по одному ключу — переключиться можно на любом запросе, поменяв одну строку.

Gemini 2.5 Flash
  • Голос и видео на входе: расшифровка звонков, разбор роликов
  • Чат-боты и подсказки в интерфейсе, где ответ нужен мгновенно
  • Черновая обработка больших объёмов перед дорогой моделью
  • Массовые задачи, где счёт за токены — главная статья расходов

Слабое место: на сложных рассуждениях уступает моделям того же ценового класса.

Открыть в чате
GPT-4.1
  • Длинный контекст по невысокой цене
  • Массовые задачи с инструментами
  • Совместимость со старыми интеграциями

Слабое место: уступает Luna по цене и качеству без рассуждений.

Открыть в чате

Вопросы

Что обычно спрашивают

Почему Gemini дешевле в 6,7 раза — он хуже?

По независимому индексу с рассуждениями — 13.1 против 12.7; второй режим лаборатория для одной из моделей ещё не измерила. Цена отражает размер модели и объём вычислений на ответ; проверьте на своих данных, заметна ли разница именно в вашей задаче.

Какая модель лучше для написания кода?

По независимому индексу с рассуждениями — 13.1 против 12.7. На практике для больших проектов берут ту, что лучше держит длинный контекст задачи; Gemini здесь предпочтительнее, а для мелких правок и массовых операций важнее скорость и цена.

Что такое кэш промптов и почему это важно?

У обеих кэш включается сам: если начало промпта совпадает с недавним запросом, эта часть считается со скидкой. Ничего помечать не нужно.

Откуда взяты цифры скорости?

Это наши измерения по успешным запросам через Hubris за последние 30 дней, а не заявления поставщиков: время до первого слова и скорость письма от начала до конца ответа. В паузу входит и наш участок пути. Лабораторная дорожка рядом — Artificial Analysis, прямой API одним промптом: это потолок, наша цифра — то, на что стоит рассчитывать.

Можно ли переключаться между моделями?

Да, обе доступны по одному ключу. Чтобы сменить модель, достаточно поменять её идентификатор в запросе — ни отдельного договора, ни второго ключа не нужно.

Дальше

Другие сравнения

Каждая из этих двух — против соседей по каталогу. Любую пару можно собрать в выборе наверху страницы.

Источники: Gemini 2.5 Flash (Non-reasoning) и GPT-4.1 — Artificial Analysis, 2026-09-28; цены, контекст и модальности — каталог Hubris, 2026-11-03; скорость и средний чек — запросы через Hubris за 30 дней.