Прямое соперничество в сегменте кодинг-агентов: Opus 4.8 немного впереди в NL2Repo и Toolathlon, V4-Pro отыгрывается в CyberGym и HLE, при этом разница в ценах сохраняется на порядок.
| Бенчмарк | GLM-5.3 | Kimi K3 | DeepSeek-V4-Pro | Opus 4.8 | GPT-5.6 Sol |
|---|---|---|---|---|---|
| Terminal-Bench 2.1 | 88.2 | 88.3 | 87.9 | 85.0 | 88.8 |
| Terminal-Bench 3.0 | 28.3 | 17.4 | — | 21.1 | 34.6 |
| DeepSWE v1.1 | 66.9 | 67.5 | 62.7 | 58.0 | 72.7 |
| NL2Repo | 58.0 | 58.0 | 61.1 | 69.7 | — |
| CyberGym | 84.5 | 80.0 | 83.3 | 78.1 | 83.6 |
| Toolathlon Verified | 73.0 | 76.5 | 74.1 | 76.2 | 74.9 |
| AutomationBench v1.0.6 | 48.2 | 46.7 | 43.2 | 41.0 | 45.8 |
| ALE-CLI | 28.5 | 27.6 | 25.7 | 25.7 | 28.6 |
| HLE w/ Tools | 62.5 | 59.8 | 60.0 | 57.9 | 64.5 |
| GDPval-AA v2 | 1769 | 1682 | 1590 | 1588 | 1730 |
Источник данных: официальный блог Z.ai (2026-08-14); неучастие в оценке обозначено знаком —. Цены DeepSeek: V4-Pro в непиковые часы $0.66/$1.98, V4-Flash $0.14/$0.28, V4.1-Flash-1017 $0.15/$0.60 за 1 млн tokens.
Opus 4.8: NL2Repo 69.7, Toolathlon 76.2, AutomationBench 41.0; V4-Pro: 61.1 / 74.1 / 43.2 — перевес на стороне то одной, то другой, разрыв составляет единицы процентных пунктов.
У обеих моделей контекстное окно уровня 1M; по данным сторонних тестов, recall при извлечении в MRCR у Opus 4.6/4.8 всё ещё лидирует, а DeepSeek за счёт CSA+HCA снижает затраты до 27% FLOPs / 10% KV.
CyberGym: V4-Pro 83.3 vs Opus 78.1 — в направлении поиска уязвимостей сейчас преимущество за DeepSeek; на ExploitGym семейство GPT/Fable ведёт себя агрессивнее.
Если вам важны лучшие впечатления от кодинга среди закрытых моделей и точность поиска по длинному контексту — выбирайте Claude; если вы ограничены в бюджете, вам нужны возможности аудита безопасности или самостоятельный хостинг — выбирайте DeepSeek.
大模型网摘