hubris

Claude Opus 5илиGemini 2.5 Pro

Главная разница — качество с рассуждениями: 50.8 против 16.1 по независимому индексу. Ниже — счёт по трём источникам: что заявили поставщики, что намерила независимая лаборатория и что мы видим на реальных запросах. Переключатель «что важнее» меняет счёт — проверьте свой расклад.

  • Поставщик карточки моделей и правила кэша
  • Лаборатория Artificial Analysis, одна методика на обе
  • Hubris наши реальные запросы за 30 дней

Сводная оценка Лаборатория Hubris

Одно число на модель от 0 до 100: качество, скорость, цена, кэш и возможности, нормированные по всему каталогу. Засечки — остальные модели на той же шкале.

Claude Opus 5631 ₽ · anthropic · июль 2026
SonnetSonnetSolLuna
73+11 %
Gemini 2.5 Pro158 ₽ · google · июнь 2025
OpusGPT-5.5FlashFlash
66

Opus опережает Gemini Pro на 11 % по сводной оценке при выбранных весах. Из чего складывается — в раундах ниже.

Счёт по раундам 60 : 54
1Качество с рассужденияминезависимый индекс интеллекта10:3
2Качество без рассужденийне считаетсялаборатория ещё не измерила Claude Opus 5 в этом режиме—:—
3Кодсводный индекс кодинга, LiveCodeBench, SciCode10:6
4Математикане считаетсялаборатория ещё не измерила Claude Opus 5 в этих задачах—:—
5Инструменты и агентвызов инструментов и работа в терминале9:7
6Следование инструкциямне считаетсялаборатория ещё не измерила Claude Opus 5 в этих задачах—:—
7Длинный контекстрассуждения на длинном контексте10:9
8Скоростьне считаетсяпо Claude Opus 5 пока мало запросов, чтобы мерить скорость—:—
9Цена631 ₽ против 158 ₽ за миллион на входе4:1010Кэшявный против автоматический7:911Возможностиконтекст, вход, рассуждения, приватность10:10
Правила одни для всех сравнений: лучший в раунде получает 10, второй — пропорционально отставанию, разница до 5 % — ничья, обеим по 10. Раунд 2 и 4 и 6 и 8 в счёт не идёт: лаборатория ещё не опубликовала замер — максимум уменьшен. «Бюджет и скорость» удваивает цену и скорость, «Качество любой ценой» удваивает качество и не считает цену. Как считаем — в методике.

Раунд 1 из 11

Качество с рассуждениями

10:350.8 против 16.1 по независимому индексупосле раунда 10 : 3

Качество мы не измеряем — это цифры независимой лаборатории: девять тестов одной методикой на обе модели, рассуждения включены на максимум. Шкала от 0 до 100.

Индекс интеллекта Лаборатория

Artificial Analysis, индекс v4. Замеры: Claude Opus 5 (Max), Gemini 2.5 Pro.

С рассуждениями на максимумкак в карточках поставщиков
50.8
16.1
GPQA Diamondвопросы уровня аспирантуры, справочно
93,2 %
84,4 %
Humanity's Last Examсамый трудный набор задач, справочно
54,9 %
22,5 %
MMLU-Proширокие знания, справочно

Лаборатория ещё не измерила Claude Opus 5 в этом режиме — раунд в счёт не идёт.

Сторонние оценки LMArena · MERA

Справочно, очков не дают. LMArena — рейтинг по слепым голосам людей; MERA — открытый бенчмарк на русском языке от Альянса ИИ.

LMArena, общая доскарейтинг Elo по голосам людей
1490 · 13 место
—
MERAрусскоязычные задачи, доля верных ответов
63,1 %
—

Раунд 2 из 11

Качество без рассуждений

—:—раунд не считается — нет замера

В чате, поддержке и массовых задачах думать некогда — рассуждения выключены. Здесь картина часто другая.

Индекс интеллекта Лаборатория

Та же методика, режим без рассуждений.

Без рассужденийбыстрый ответ, как в чате и массовых задачах

Лаборатория ещё не измерила Claude Opus 5 в этом режиме — раунд в счёт не идёт.

Раунд 3 из 11

Код

10:6счёт по 2 замерам лабораториипосле раунда 20 : 9

Задачи из настоящих репозиториев и соревновательный код. У разных моделей лаборатория успела измерить разное — в счёт идут те тесты, что есть у обеих.

Кодинг Лаборатория

Сводный индекс кодинга (0–100) и отдельные тесты в процентах решённых задач.

Сводный индекс кодингавсе кодовые тесты лаборатории одним числом
78
33.3
LiveCodeBenchсвежие соревновательные задачи

Лаборатория ещё не измерила Claude Opus 5 в этом режиме — раунд в счёт не идёт.

SciCodeнаучный код по описанию задачи
56,4 %
46,3 %

Сторонние лидерборды SWE-bench · LMArena

Справочно, в счёт раунда не идут: методика у каждого своя. У SWE-bench результат — это связка модели с конкретным агентом, поэтому рядом указаны агент и год лучшего известного прогона.

SWE-bench Verifiedдоля починенных багов в настоящих репозиториях
—
53,6 % · mini-SWE-agent, 2025
LMArena, кодовая доскарейтинг Elo по голосам людей
1660 · 12 место
—

Раунд 4 из 11

Математика

—:—раунд не считается — нет замера

Счёт, доказательства и олимпиадные задачи. Полезно там, где ответ либо верный, либо нет: аналитика, финансы, инженерные расчёты.

Математика Лаборатория

Сводный индекс (0–100) и доля решённых олимпиадных задач.

Сводный индекс математикивсе математические тесты лаборатории одним числом

Лаборатория ещё не измерила Claude Opus 5 в этом режиме — раунд в счёт не идёт.

AIMEолимпиадные задачи со строгим ответом

Лаборатория ещё не измерила Claude Opus 5 в этом режиме — раунд в счёт не идёт.

Раунд 5 из 11

Инструменты и агент

9:7счёт по 2 замерам лабораториипосле раунда 29 : 16

Модель в роли агента: вызвать нужный инструмент, довести многошаговый диалог до результата, поработать в терминале. Именно это отличает модель для агентского клиента от модели для чата.

Инструменты и терминал Лаборатория

Доля доведённых до конца сценариев.

𝜏²-benchвызовы инструментов в многошаговом диалоге
42,1 %
54,1 %
Terminal-Benchработа агента в терминале
89,1 %
28,5 %

Раунд 6 из 11

Следование инструкциям

—:—раунд не считается — нет замера

Делает ли модель ровно то, о чём просили: держит формат, не добавляет лишнего, соблюдает ограничения. От этого зависит, придётся ли разбирать ответ костылями.

Следование инструкциям Лаборатория

Доля заданий, где все требования соблюдены.

IFBenchпроверяемые требования к формату и содержанию

Лаборатория ещё не измерила Claude Opus 5 в этом режиме — раунд в счёт не идёт.

Раунд 7 из 11

Длинный контекст

10:9счёт по 1 замеру лабораториипосле раунда 39 : 25

Большое окно контекста и умение им пользоваться — разные вещи. Здесь проверяется второе: рассуждения по длинному тексту, а не размер окна из карточки.

Рассуждения на длинном контексте Лаборатория

Доля верных ответов по длинному тексту. Размер окна — в раунде «Возможности».

Long Context Reasoningответы по тексту, который не помещается в один взгляд
79,3 %
69 %

Раунд 8 из 11

Скорость

—:—раунд не считается — мало данных

Пауза до первого слова и скорость письма. Очки — по нашим данным, это то, что вы получите на практике.

Один и тот же запросHubris

Проигрываем ответ на измеренной скорости: пауза до первого слова, потом письмо. Длина ответа одинаковая, иначе модели несравнимы.

Claude Opus 5anthropic/claude-opus-5

По Claude Opus 5 пока мало запросов, чтобы мерить скорость.

Gemini 2.5 Progoogle/gemini-2.5-pro

По Gemini 2.5 Pro пока мало запросов, чтобы мерить скорость.

Лаборатория меряет по прямому API одним промптом без рассуждений. У нас — реальные промпты реальных клиентов, часть с рассуждениями, и весь путь до вас целиком. Разница между дорожками — разница между стендом и жизнью.

Раунд 9 из 11

Цена

4:10Gemini Pro дешевле в четыре раза на входе и в 2,5 раза на выходепосле раунда 43 : 35

В рублях, за миллион токенов. Списывается по факту — за то, что реально отправили и получили.

Прайс и реальный средний чек Hubris

Первые две колонки — ставки каталога. Третья — сколько в среднем стоит один запрос нашим пользователям к этой модели.

МодельВходные токеныто, что вы отправилиОтвет моделито, что она написалаТипичный запроссредний по нашим пользователям
Claude Opus 5631₽3 156₽мало данных
Gemini 2.5 Pro158₽1 262₽мало данных
Разницав четыре разав пользу Gemini Proв 2,5 разав пользу Gemini Pro—
Средний чек считается по реальным запросам наших пользователей: он зависит от того, сколько модель пишет в ответ.

Раунд 10 из 11

Кэш

7:9у Opus скидку нужно включать вручнуюпосле раунда 50 : 44

Если начало промпта повторяется от запроса к запросу — системная инструкция, приложенный документ, история переписки, — эта часть считается со скидкой. Включается она у моделей по-разному, и на этом легко потерять деньги.

Правила кэширования Поставщик

Скидка применяется автоматически — Hubris списывает по фактической цене исполнения, в которой кэш уже учтён.

Claude Opus 5
Явный

Кэшируется только то, что вы пометили. Ставите cache_control на повторяющийся блок — от 1024 токенов, живёт около пяти минут. Чтение из кэша на 90 % дешевле. Не пометили — платите полную цену, даже если промпт повторяется слово в слово.

Gemini 2.5 Pro
Автоматический

Повторяющееся начало промпта кэшируется само. Ничего помечать не нужно: если первые токены совпадают с недавним запросом, скидка 90 % применится сама.

Как пометить блок и проверить, что кэш сработал, — в документации. Сработавший кэш виден в ответе в поле cached_tokens.

Раунд 11 из 11

Возможности

10:10по всем пунктам равныпосле раунда 60 : 54

Контекст, что принимает на вход, рассуждения, приватность, надёжность. За каждый пункт — очки по одной шкале.

Claude Opus 5
  • ✓Контекст 1 млн токенов
  • ✓Принимает картинки
  • ✓Принимает файлы
  • ✓Умеет рассуждать перед ответом
  • ✓Не обучается на ваших данных
Gemini 2.5 Pro
  • ✓Контекст 1,05 млн токенов
  • ✓Принимает картинки
  • ✓Принимает файлы
  • ✓Умеет рассуждать перед ответом
  • ✓Не обучается на ваших данных

Итог

Кто победил

Claude Opus 560
из 70 очковПобеждает Opus
Gemini 2.5 Pro54
При равных весах побеждает Opus — 60 : 54, уверенно. Opus берёт качество с рассуждениями, код и работу с инструментами; Gemini Pro отвечает в цене и в кэше. Длинный контекст и возможности — ничьи. При «Бюджет и скорость» — ничья: перевес Opus держится только на цене и скорости.

Коротко

Плюсы и минусы

Преимущества каждой модели над другой — из тех же данных, что и раунды, в процентах и секундах.

Claude Opus 5
  • качество с рассуждениями выше на 68 %
Gemini 2.5 Pro
  • дешевле в четыре раза на входе
  • кэш включается сам, без пометок в запросе
Мы рекомендуем Claude Opus 5: он впереди по сумме раундов при равных весах.

Выбор

Когда какую брать

Обе доступны по одному ключу — переключиться можно на любом запросе, поменяв одну строку.

Claude Opus 5
  • Самые сложные задачи: архитектура, исследование, длинные рассуждения
  • Код, где цена ошибки высока и нужна лучшая модель линейки
  • Многошаговые агенты с большим контекстом
  • Сложные задачи, где модели дают подумать: код, анализ, агенты

Слабое место: самая дорогая модель каталога — для потока запросов не подходит.

Открыть в чате
Gemini 2.5 Pro
  • Длинные документы и видео целиком
  • Сложные рассуждения с большим контекстом
  • Мультимодальные задачи: текст, картинки, звук в одном запросе
  • Массовые задачи, где счёт за токены — главная статья расходов

Слабое место: долгая пауза до первого слова на коротких запросах.

Открыть в чате

Вопросы

Что обычно спрашивают

Почему Gemini Pro дешевле в четыре раза — он хуже?

По независимому индексу с рассуждениями — 50.8 против 16.1; второй режим лаборатория для одной из моделей ещё не измерила. Цена отражает размер модели и объём вычислений на ответ; проверьте на своих данных, заметна ли разница именно в вашей задаче.

Какая модель лучше для написания кода?

По независимому индексу с рассуждениями — 50.8 против 16.1. На практике для больших проектов берут ту, что лучше держит длинный контекст задачи; Opus здесь предпочтительнее, а для мелких правок и массовых операций важнее скорость и цена.

Что такое кэш промптов и почему это важно?

У Gemini Pro кэш включается сам. У Opus повторяющийся блок нужно пометить маркером cache_control, иначе скидки не будет — одна строка в запросе, а на массовых задачах разница в счёте в разы.

Откуда взяты цифры скорости?

Это наши измерения по успешным запросам через Hubris за последние 30 дней, а не заявления поставщиков: время до первого слова и скорость письма от начала до конца ответа. В паузу входит и наш участок пути. Лабораторная дорожка рядом — Artificial Analysis, прямой API одним промптом: это потолок, наша цифра — то, на что стоит рассчитывать.

Можно ли переключаться между моделями?

Да, обе доступны по одному ключу. Чтобы сменить модель, достаточно поменять её идентификатор в запросе — ни отдельного договора, ни второго ключа не нужно.

Дальше

Другие сравнения

Каждая из этих двух — против соседей по каталогу. Любую пару можно собрать в выборе наверху страницы.

Источники: Claude Opus 5 (Max) и Gemini 2.5 Pro — Artificial Analysis, 2026-10-22; цены, контекст и модальности — каталог Hubris, 2026-10-22; скорость и средний чек — запросы через Hubris за 30 дней.