hubris

Claude Sonnet 5илиGemini 3.5 Flash

4 раунда из 8 — ничья или почти ничья. Flash впереди в работе с инструментами, в скорости, в цене и в кэше. Ниже — счёт по трём источникам: что заявили поставщики, что намерила независимая лаборатория и что мы видим на реальных запросах. Переключатель «что важнее» меняет счёт — проверьте свой расклад.

  • Поставщик карточки моделей и правила кэша
  • Лаборатория Artificial Analysis, одна методика на обе
  • Hubris наши реальные запросы за 30 дней

Сводная оценка Лаборатория Hubris

Одно число на модель от 0 до 100: качество, скорость, цена, кэш и возможности, нормированные по всему каталогу. Засечки — остальные модели на той же шкале.

Claude Sonnet 5253 ₽ · anthropic · июнь 2026
GeminiLunaFlashFlash
67+5 %
Gemini 3.5 Flash190 ₽ · google · май 2026
DeepSeek 0731FlashFableSpark
64

Sonnet опережает Flash на 5 % по сводной оценке при выбранных весах. Из чего складывается — в раундах ниже.

Счёт по раундам 69 : 77
1Качество с рассужденияминезависимый индекс интеллекта10:9
2Качество без рассужденийне считаетсялаборатория ещё не измерила Gemini 3.5 Flash в этом режиме:
3Кодсводный индекс кодинга, LiveCodeBench, SciCode10:10
4Математикане считаетсялаборатория ещё не измерила Claude Sonnet 5 в этих задачах:
5Инструменты и агентвызов инструментов и работа в терминале7:10
6Следование инструкциямне считаетсялаборатория ещё не измерила Claude Sonnet 5 в этих задачах:
7Длинный контекстрассуждения на длинном контексте10:108Скоростьпервое слово через 5,3 с против 6,9 с7:99Цена253 ₽ против 190 ₽ за миллион на входе8:1010Кэшявный против автоматический7:911Возможностиконтекст, вход, рассуждения, приватность10:10
Правила одни для всех сравнений: лучший в раунде получает 10, второй — пропорционально отставанию, разница до 5 % — ничья, обеим по 10. Раунд 2 и 4 и 6 в счёт не идёт: лаборатория ещё не опубликовала замер — максимум уменьшен. «Бюджет и скорость» удваивает цену и скорость, «Качество любой ценой» удваивает качество и не считает цену. Как считаем — в методике.

Раунд 1 из 11

Качество с рассуждениями

10:955.3 против 52 по независимому индексупосле раунда 10 : 9

Качество мы не измеряем — это цифры независимой лаборатории: девять тестов одной методикой на обе модели, рассуждения включены на максимум. Шкала от 0 до 100.

Индекс интеллекта Лаборатория

Artificial Analysis, индекс v4. Замеры: Claude Sonnet 5 (Non-reasoning, High Effort), Gemini 3.5 Flash (high).

С рассуждениями на максимумкак в карточках поставщиков
55.3
52
GPQA Diamondвопросы уровня аспирантуры, справочно
91,1 %
92,2 %
Humanity's Last Examсамый трудный набор задач, справочно
41,3 %
42,7 %
MMLU-Proширокие знания, справочно

Лаборатория ещё не измерила Claude Sonnet 5 в этом режиме — раунд в счёт не идёт.

Сторонние оценки LMArena · MERA

Справочно, очков не дают. LMArena — рейтинг по слепым голосам людей; MERA — открытый бенчмарк на русском языке от Альянса ИИ.

LMArena, общая доскарейтинг Elo по голосам людей
1461 · 45 место
1478 · 21 место

Раунд 2 из 11

Качество без рассуждений

:раунд не считается — нет замера

В чате, поддержке и массовых задачах думать некогда — рассуждения выключены. Здесь картина часто другая.

Индекс интеллекта Лаборатория

Та же методика, режим без рассуждений.

Без рассужденийбыстрый ответ, как в чате и массовых задачах

Лаборатория ещё не измерила Gemini 3.5 Flash в этом режиме — раунд в счёт не идёт.

Раунд 3 из 11

Код

10:10счёт по 2 замерам лаборатории — в пределах погрешностипосле раунда 20 : 19

Задачи из настоящих репозиториев и соревновательный код. У разных моделей лаборатория успела измерить разное — в счёт идут те тесты, что есть у обеих.

Кодинг Лаборатория

Сводный индекс кодинга (0–100) и отдельные тесты в процентах решённых задач.

Сводный индекс кодингавсе кодовые тесты лаборатории одним числом
71.5
70.1
LiveCodeBenchсвежие соревновательные задачи

Лаборатория ещё не измерила Claude Sonnet 5 в этом режиме — раунд в счёт не идёт.

SciCodeнаучный код по описанию задачи
53,6 %
53,1 %

Сторонние лидерборды SWE-bench · LMArena

Справочно, в счёт раунда не идут: методика у каждого своя. У SWE-bench результат — это связка модели с конкретным агентом, поэтому рядом указаны агент и год лучшего известного прогона.

LMArena, кодовая доскарейтинг Elo по голосам людей
1537 · 25 место
1501 · 37 место

Раунд 4 из 11

Математика

:раунд не считается — нет замера

Счёт, доказательства и олимпиадные задачи. Полезно там, где ответ либо верный, либо нет: аналитика, финансы, инженерные расчёты.

Математика Лаборатория

Сводный индекс (0–100) и доля решённых олимпиадных задач.

Сводный индекс математикивсе математические тесты лаборатории одним числом

Лаборатория ещё не измерила Claude Sonnet 5 в этом режиме — раунд в счёт не идёт.

AIMEолимпиадные задачи со строгим ответом

Лаборатория ещё не измерила Claude Sonnet 5 в этом режиме — раунд в счёт не идёт.

Раунд 5 из 11

Инструменты и агент

7:10счёт по 2 замерам лабораториипосле раунда 27 : 29

Модель в роли агента: вызвать нужный инструмент, довести многошаговый диалог до результата, поработать в терминале. Именно это отличает модель для агентского клиента от модели для чата.

Инструменты и терминал Лаборатория

Доля доведённых до конца сценариев.

𝜏²-benchвызовы инструментов в многошаговом диалоге
37,3 %
95,3 %
Terminal-Benchработа агента в терминале
80,5 %
78,7 %

Раунд 6 из 11

Следование инструкциям

:раунд не считается — нет замера

Делает ли модель ровно то, о чём просили: держит формат, не добавляет лишнего, соблюдает ограничения. От этого зависит, придётся ли разбирать ответ костылями.

Следование инструкциям Лаборатория

Доля заданий, где все требования соблюдены.

IFBenchпроверяемые требования к формату и содержанию

Лаборатория ещё не измерила Claude Sonnet 5 в этом режиме — раунд в счёт не идёт.

Раунд 7 из 11

Длинный контекст

10:10счёт по 1 замеру лаборатории — в пределах погрешностипосле раунда 37 : 39

Большое окно контекста и умение им пользоваться — разные вещи. Здесь проверяется второе: рассуждения по длинному тексту, а не размер окна из карточки.

Рассуждения на длинном контексте Лаборатория

Доля верных ответов по длинному тексту. Размер окна — в раунде «Возможности».

Long Context Reasoningответы по тексту, который не помещается в один взгляд
77 %
81 %

Раунд 8 из 11

Скорость

7:9первое слово у Sonnet на 1,6 с раньше, письмо у Flash быстрее в 2,8 разапосле раунда 44 : 48

Пауза до первого слова и скорость письма. Очки — по нашим данным, это то, что вы получите на практике.

Один и тот же запросHubrisЛаборатория

Проигрываем ответ на измеренной скорости: пауза до первого слова, потом письмо. Лабораторной дорожки у Flash нет — лаборатория скорость этой версии не публикует. Длина ответа одинаковая, иначе модели несравнимы.

Claude Sonnet 5anthropic/claude-sonnet-5у нас 5,3 с · 108 ток/сс раздумьями первое слово ответа — через 106,9 с
лаборатория 6,6 с
тишина 5,3 с
108 токенов в секунду
8,1 с
Gemini 3.5 Flashgoogle/gemini-3.5-flashу нас 6,9 с · 297 ток/с
тишина 6,9 с
297 токенов в секунду
7,9 с
Лаборатория меряет по прямому API одним промптом без рассуждений. У нас — реальные промпты реальных клиентов, часть с рассуждениями, и весь путь до вас целиком. Разница между дорожками — разница между стендом и жизнью.

Раунд 9 из 11

Цена

8:10Flash дешевле в 1,3 раза на входе и в 1,1 раза на выходепосле раунда 52 : 58

В рублях, за миллион токенов. Списывается по факту — за то, что реально отправили и получили.

Прайс и реальный средний чек Hubris

Первые две колонки — ставки каталога. Третья — сколько в среднем стоит один запрос нашим пользователям к этой модели.

МодельВходные токеныто, что вы отправилиОтвет моделито, что она написалаТипичный запроссредний по нашим пользователям
Claude Sonnet 52531 2642,50
Gemini 3.5 Flash1901 1371,69
Разницав 1,3 разав пользу Flashв 1,1 разав пользу Flashв полтора разав пользу Flash
Средний чек считается по реальным запросам наших пользователей: он зависит от того, сколько модель пишет в ответ.

Раунд 10 из 11

Кэш

7:9у Sonnet скидку нужно включать вручнуюпосле раунда 59 : 67

Если начало промпта повторяется от запроса к запросу — системная инструкция, приложенный документ, история переписки, — эта часть считается со скидкой. Включается она у моделей по-разному, и на этом легко потерять деньги.

Правила кэширования Поставщик

Скидка применяется автоматически — Hubris списывает по фактической цене исполнения, в которой кэш уже учтён.

Claude Sonnet 5
Явный

Кэшируется только то, что вы пометили. Ставите cache_control на повторяющийся блок — от 1024 токенов, живёт около пяти минут. Чтение из кэша на 90 % дешевле. Не пометили — платите полную цену, даже если промпт повторяется слово в слово.

Gemini 3.5 Flash
Автоматический

Повторяющееся начало промпта кэшируется само. Ничего помечать не нужно: если первые токены совпадают с недавним запросом, скидка 90 % применится сама.

Как пометить блок и проверить, что кэш сработал, — в документации. Сработавший кэш виден в ответе в поле cached_tokens.

Раунд 11 из 11

Возможности

10:10по всем пунктам равныпосле раунда 69 : 77

Контекст, что принимает на вход, рассуждения, приватность, надёжность. За каждый пункт — очки по одной шкале.

Claude Sonnet 5
  • Контекст 1 млн токенов
  • Принимает картинки
  • Принимает файлы
  • Умеет рассуждать перед ответом
  • Не обучается на ваших данных
  • Доля неудачных запросов 0,6 %
Gemini 3.5 Flash
  • Контекст 1,05 млн токенов
  • Принимает картинки
  • Принимает файлы
  • Умеет рассуждать перед ответом
  • Не обучается на ваших данных
  • Доля неудачных запросов 0,5 %

Итог

Кто победил

Claude Sonnet 569
из 80 очковПобеждает Flash
Gemini 3.5 Flash77
При равных весах побеждает Flash — 69 : 77, уверенно. Flash берёт работу с инструментами, скорость, цену и кэш; Sonnet отвечает без явных побед. Качество с рассуждениями, код, длинный контекст и возможности — ничьи. Переключатели наверху счёт не переворачивают: Flash впереди при любом раскладе.

Коротко

Плюсы и минусы

Преимущества каждой модели над другой — из тех же данных, что и раунды, в процентах и секундах.

Claude Sonnet 5
  • первое слово на 1,6 с раньше
  • качество с рассуждениями выше на 6 %
Gemini 3.5 Flash
  • дешевле в 1,3 раза на входе
  • пишет на 64 % быстрее
  • кэш включается сам, без пометок в запросе
Мы рекомендуем Gemini 3.5 Flash: он впереди по сумме раундов при равных весах.

Выбор

Когда какую брать

Обе доступны по одному ключу — переключиться можно на любом запросе, поменяв одну строку.

Claude Sonnet 5
  • Работа с кодом: правки в большом проекте, ревью, отладка
  • Разбор длинных документов, где важно не потерять деталь
  • Агенты, которые ходят по шагам и вызывают инструменты

Слабое место: дорог для массовых задач, где хватает модели попроще.

Открыть в чате
Gemini 3.5 Flash
  • Массовые задачи, где счёт за токены — главная статья расходов
  • Диалог с людьми: первое слово появляется раньше
Открыть в чате

Вопросы

Что обычно спрашивают

Какая модель лучше для написания кода?

По независимому индексу с рассуждениями — 55.3 против 52. На практике для больших проектов берут ту, что лучше держит длинный контекст задачи; Sonnet здесь предпочтительнее, а для мелких правок и массовых операций важнее скорость и цена.

Что такое кэш промптов и почему это важно?

У Flash кэш включается сам. У Sonnet повторяющийся блок нужно пометить маркером cache_control, иначе скидки не будет — одна строка в запросе, а на массовых задачах разница в счёте в разы.

Откуда взяты цифры скорости?

Это наши измерения по успешным запросам через Hubris за последние 30 дней, а не заявления поставщиков: время до первого слова и скорость письма от начала до конца ответа. В паузу входит и наш участок пути. Лабораторная дорожка рядом — Artificial Analysis, прямой API одним промптом: это потолок, наша цифра — то, на что стоит рассчитывать.

Можно ли переключаться между моделями?

Да, обе доступны по одному ключу. Чтобы сменить модель, достаточно поменять её идентификатор в запросе — ни отдельного договора, ни второго ключа не нужно.

Дальше

Другие сравнения

Каждая из этих двух — против соседей по каталогу. Любую пару можно собрать в выборе наверху страницы.

Источники: Claude Sonnet 5 (Non-reasoning, High Effort) и Gemini 3.5 Flash (high)Artificial Analysis, 2026-09-04; цены, контекст и модальности — каталог Hubris, 2026-09-04; скорость и средний чек — запросы через Hubris за 30 дней.

Claude Sonnet 5 или Gemini 3.5 Flash — что выбрать: цена, скорость, качество, код · Hubris