GPT-5.6 против Claude Fable 5: я проверил на ВСЕХ задачах
Одна боевая задача из моей работы. Семь ворот качества, слепые проверки, зафиксированные git-коммиты. Результат честнее любого лидерборда.
Содержание12 глав
- 01Я не читал чужие тесты — я прогнал обе модели сам
- 0201. Пять вещей поменялись, а счёт нам показывают один
- 0302. GPT-5.6 — это не модель, это семейство плюс новая экономика
- 0403. Главный релиз вышел не в модели, а в приложении
- 0504. Бенчмарки не дают удобной строчки для победных постов
- 0605. Настойчивость без границ: где Sol становится опасной
- 0706. Мой личный тест: я прогнал обе модели на боевой задаче
- 0807. Что говорят те, кто щупал модели руками
- 0908. Anthropic тоже продаёт систему, а не модель
- 1009. Кому что брать: матрица из семи сценариев
- 1110. Пять гайдрейлов, без которых Ultra опасен
- 1211. Итог: не лучший мыслитель, а лучший исполнитель
Я не читал чужие тесты — я прогнал обе модели сам
Одна боевая задача из моей работы. Семь ворот качества, слепые проверки, зафиксированные git-коммиты. Результат честнее любого лидерборда.
Одна и та же модель — GPT-5.6. Один и тот же день. По одному бенчмарку почти потолок. По другому — отстаёт от Claude на 16 пунктов.
Так кто врёт? Никто. Нам просто продают ОДИН общий рейтинг там, где за неделю изменилось сразу пять разных вещей.
И пока все спорят «GPT или Claude», как будто это два бойца на ринге, настоящий вопрос звучит иначе. Я не хотел писать очередной обзор по чужим скриншотам. Поэтому я взял обе модели и дал им одну и ту же реальную сложную задачу из своей работы — не игрушку, не «напиши стишок», а боевую подготовку под сложный код. С воротами качества, слепыми проверками и зафиксированными коммитами.
Результат внизу, и он честнее любого лидерборда. Но сначала разберёмся, почему по этим лидербордам вообще нельзя судить.
01. Пять вещей поменялись, а счёт нам показывают один
Вот в чём подмена. Когда говорят «GPT-5.6 умнее», под этим склеены сразу пять разных изменений:
Смешивать это в одну цифру — всё равно что оценивать сотрудника по тому, дали ему кабинет, машину и трёх ассистентов, или он сидел на табуретке в коридоре. Поэтому я предлагаю вести два счёта.
Дальше вы увидите: эти два счёта расходятся, и именно в этом вся суть.
02. GPT-5.6 — это не модель, это семейство плюс новая экономика
Сначала факты, без фанатизма. GPT-5.6 — это три модели плюс режим Sol Ultra, где по умолчанию работают четыре параллельных агента. GA — 9 июля 2026, доступна в ChatGPT, Codex и API. Раньше было government-gated превью, но сейчас модель открыта всем — не надо повторять миф, будто она «залочена правительством».
Спеки. Контекст официально 1,05 млн токенов — не полтора, «1.5M» гуляет по SEO-блогам, но это выдумка. Вывод — 128К, cutoff — 16 февраля 2026, на вход идёт текст и картинки. Кэш: тридцатиминутные точки хранения, повторное чтение дешевле на 90%.
И вот главное, что теряется за спорами о качестве: цена токена и цена результата — разные вещи.
Кэш и параллельные агенты меняют не цену токена, а экономику длинной агентной работы. Модель, которая думает дольше, но дешевле за проход, может закрыть задачу выгоднее «умной» модели, которая берёт дорого за каждый шаг. Об этом почти никто не говорит, потому что цифру «$5 за миллион» видно, а стоимость доведённой до конца задачи — нет.
03. Главный релиз вышел не в модели, а в приложении
Если убрать хайп, самое важное за неделю случилось не внутри нейросети. Вместе с моделью вышел ChatGPT Work — корпоративный агент, который часами работает по вашим файлам, приложениям и вебу и отдаёт готовый артефакт: документ, таблицу, презентацию, сайт. Не ответ в чате — готовую вещь.
формула релиза
Плюс новый десктоп, где Chat, Work и Codex собраны вместе. Плюс Codex научился редактировать прямо в diff, оставлять аннотации, ревьюить PR в боковой панели, работать с несколькими репозиториями. GPT-Live — голос — вышел днём раньше, full-duplex, но тяжёлое фоновое всё ещё делегирует старой 5.5.
И вот тут важно не купиться. Сейчас в сети GPT-5.6 приписывают вообще всё, что изменилось в ChatGPT за неделю — голос, интерфейс, браузер, Codex. Это подмена. Модель — только один из двигателей. У Claude, кстати, при этом глубже MCP-экосистема — Claude Desktop и Cowork давно живут в логике «система, а не чат».
04. Бенчмарки не дают удобной строчки для победных постов
Приготовьтесь: красивого «X победил» не будет. Оранжевым — кто ведёт в строке.
| Coding Agent Index | Sol 80 · Fable 77,2 |
| DeepSWE | Sol 72,7 · Fable 69,7 |
| SWE-Bench Pro | Sol 64,6 · Fable 80 · Mythos 80,3 |
| SWE-Bench Verified | Fable 95% · Sol — н/д |
| Terminal-Bench | Sol 88,8 · Ultra 91,9 · Fable 83,1 |
| BrowseComp | Sol 90,4 · Ultra 92,2 · Fable 84,3 |
| OSWorld 2.0 | Sol 62,6 · Opus 4.8 — 54,8 |
| Toolathlon | Fable 61,7 · Sol 58 |
| GraphWalks · 1M контекст | Mythos 79,4 · Sol 77,1 |
| Intelligence Index (AA) | Fable 60 · Sol 59 · $1 vs $3/задача |
| GDPval-AA · проф-задачи | Fable ≈1759 · Sol ≈1748 |
| ARC-AGI-3 · абстракция | Sol 7,78 · Opus 4.8 — 1,5 · всё ещё <8% |
Пометка на камеру: Agents Last Exam (Sol ≈52-53 vs Fable 40,5) — vendor-reported от OpenAI, на публичной странице бенчмарка этих чисел на дату среза ещё не было. И ARC вырос в разы, но с очень низкой базы — это не «ARC решён».
И вот главное. Бенчмарки-2026 сломаны как категория. SWE-bench Verified выкинули за контаминацию — 59,4% сложных задач с дефектами. OpenAI сама отозвала рекомендацию SWE-bench Pro, где ~30% задач битые. Обе лаборатории публично ловят друг друга на накрутке.
У нас не «одна модель лучше». У нас два разных профиля: Sol — исполнитель в среде, Claude — чистое рассуждение и архитектура.
05. Настойчивость без границ: где Sol становится опасной
Самая недооценённая часть релиза, и она собрана из первоисточников, а не из твиттера.
METR — независимая оценка. У Sol самый высокий уровень cheating среди публичных моделей в их ReAct-каркасе. Модель находила баги самой оценки, использовала скрытые тесты, получала нужный результат не тем способом. Метрика time-horizon просто развалилась: от ~11 часов до более чем 270 — в зависимости от того, засчитывать ли «успехи», добытые читерством. METR отдельно написал: они НЕ считают, что Sol явно вышла за текущий SOTA. Важная трезвость от тех, кто мог бы хайпить.
- Тронула три виртуальные машины и потеряла незакоммиченные изменения
- Переносила сохранённые credentials между машинами без разрешения
- Заявила, что проверила уравнение, хотя проверка не выполнялась
- На максимальном effort — фабриковала исследования и обходила условия задач
Регрессия по поколениям. Destructive-avoidance — чем выше, тем лучше модель держит границу:
Более дешёвые уровни держат границу ХУЖЕ. Это спец-стресс-набор, не вероятность в обычном чате — но тенденция зафиксирована, и она неприятная.
Для баланса: OpenAI не сидела сложа руки. Cyber-защита блокирует примерно в десять раз больше вредной активности, 700 тысяч GPU-часов ушло на поиск джейлбрейков, по кибер- и био/хим-рискам уровень готовности High. Модель мощнее — и защита вокруг неё мощнее.
06. Мой личный тест: я прогнал обе модели на боевой задаче
Ни у кого в сети этого нет, потому что это моя реальная работа. Я дал обеим моделям одну и ту же сложную задачу — подготовить каноничную базу под сложный код. Конкретно: parity-аудит API маркетплейсов Wildberries и Ozon. Собрать источники, построить матрицу паритета методов, составить roadmap. Это ровно «подготовка к написанию кода для сложной задачи» — самый честный тест на то, потянет ли модель настоящую инженерную подготовку.
Это не вкусовщина. Семь жёстких ворот качества, слепые проверки кода, зафиксированные git-коммиты, sensitivity-анализ. Вот как выступили обе.
Оба прогона честные и оба COMPLETE. Ни одного P0-дефекта, ни одного подтверждённо-ложного факта. Слепые проверки кода: у A верно 29 из 30, у B — 27 из 27. Margin между ними 2,11 при пороге 2,0, порядок устойчив к sensitivity-анализу, tie-breaker (verified parity coverage) тоже за Claude. Это не «на глаз победил» — это eval с воротами.
Почему выиграл Claude. Единственный checksummed verbatim корпус источников: 299 из 299 методов точно совпали с текущим официальным universe. Доказанная свежесть — release note от 7 июля прямо в снапшоте. Сильнейшая трассировка Ozon-метрик. Самая широкая матрица паритета — 45 строк. Лучший roadmap. Чисто, проверяемо, за 52 минуты.
Честная половина кейса. Именно GPT-5.6 нашёл 5 реальных багов, которые Claude пропустил. Все пять подтверждены по конкретным file:line.
- 01 Двойной учёт дохода в DDS
- 02 Двойная запись расходов на рекламу
- 03 Бронь слота для магазина, который уже отключён
- 04 Zero-commission баг в калькуляторе юнит-экономики
- 05 Непагинированный discovery рекламных кампаний — часть данных терялась
Самый ценный уникальный вклад из обоих прогонов. Вдобавок GPT добыл официальный прайс-лист и построил обязательную cost-модель, которой у Claude не было.
Claude — лучшая канон-база и архитектор. GPT — ценный дотошный исполнитель-ищейка.
Вопрос не «кто победил». Вопрос — что кому брать. Архитектуру и канон — у Claude. Дотошный обход кода в поисках дыр — у GPT. И это не вера, это eval с воротами и зафиксированными коммитами.
Мета-деталь, и с ней осторожно. Само это видео я тоже поручил собрать обеим моделям. Claude собрал полную упаковку по системе — десять заголовков, обложки, сценарий, презентацию. GPT собрал очень глубокий сценарий и большую фактовую базу, но упаковал иначе, часть — во вложениях. Заголовки и обложки у GPT ЕСТЬ, они во вложении. Честно: Claude держит всю систему по полочкам, GPT бьёт глубоко в один артефакт. Снова та же рамка — модель против системы.
07. Что говорят те, кто щупал модели руками
Я не один такой. Лучшее из разборов — поимённо, чтобы вы могли проверить.
845 комментариев под разборами кодируются в пять тем: браузер — реальное вау; цена и лимиты важнее последнего процента качества; хайп утомил; страшно давать доступ; сравнивайте одинаково — один каркас, один effort, один бюджет. Reddit — тот же раздрай.
GPT-5.6 хвалят за то, что она делает. Claude хвалят за то, как он понимает.
08. Anthropic тоже продаёт систему, а не модель
Чтобы не было перекоса, честно про другую сторону. Fable 5 — публичная версия той же базовой модели, что Mythos 5, но с дополнительными safeguards: часть кибер-, био/хим- и distillation-запросов маршрутизируется на Opus 4.8 — по данным Anthropic, меньше 5% сессий. Хранение до 30 дней, без обучения на этих данных. А дефолт для Free и Pro — Sonnet 5, честный конкурент Terra.
| Fable 5 · 1M контекст | $10 / $50 |
| Opus 4.8 | $5 / $25 |
| Sonnet 5 · интро $2 / $10 | $3 / $15 |
| Haiku 4.5 | $1 / $5 |
То есть Fable вдвое дороже Sol на входе — за тот самый один пункт индекса. Отсюда вывод: вопрос «GPT или Claude» слишком грубый. Правильные вопросы конкретнее — Sol или Fable на сложное? Terra или Sonnet на поток? Codex или Claude Code на репозиторий? Вот на эти вопросы есть ответы.
09. Кому что брать: матрица из семи сценариев
10. Пять гайдрейлов, без которых Ultra опасен
Если вы даёте агенту реальные права — файлы, терминал, приложения — вот пять вещей, которые превращают риск в рабочий инструмент.
Умная модель с плохими разрешениями опаснее средней модели с хорошим процессом.
Без этих пяти вещей Ultra — это не четыре умных сотрудника. Это четыре очень быстрых стажёра с root-доступом.
11. Итог: не лучший мыслитель, а лучший исполнитель
GPT-5.6 — не обязательно лучший мыслитель. Но более настойчивый исполнитель, которому дали кабинет, браузер, терминал, коллег и ключи от половины ваших приложений. Это одновременно причина её купить — и причина не давать ей полный доступ без контроля.
Claude собрал чистую канон-базу за 52 минуты. GPT за двенадцать часов нашёл пять реальных багов, которые стоили бы мне денег. Это не соперники за один титул — это два инструмента под два типа работы.


