OpenAI

GPT-6 Astra: A new generation of intelligence

Nová generácia inteligencie

Predstavujeme GPT‑6 Astra, najinteligentnejší a najlepšie zosúladený model na svete.

GPT‑6 Astra spája roky výskumu a veľké stávky v oblasti predbežného trénovania, učenia posilňovaním a zosúlaďovania. Astra dosahuje špičkovú úroveň v používaní počítača, prehliadaní webu, softvérovom inžinierstve, kybernetickej bezpečnosti, vede a profesionálnej práci. Astra dosahuje v teste FrontierMath úrovne 4 skóre 98 % a už pomohla vyriešiť dlhodobo otvorené problémy v matematike. Astra tiež dosahuje v ARC-AGI-3 skóre 99,9 % a v ExploitBench maximálne skóre 100 %. Posúva tiež prelomové používanie počítačov a prehliadačov a zvláda aj tú najnáročnejšiu profesionálnu prácu s bezkonkurenčnou rýchlosťou, presnosťou a úsudkom. 

GPT‑6 Astra dnes postupne sprístupňujeme obmedzenému počtu organizácií a v priebehu nasledujúcich dní bude dostupný pre všetkých používateľov ChatGPT Plus, Pro, Business a Enterprise, ako aj prostredníctvom rozhrania API OpenAI, Microsoft Azure a AWS Bedrock.

„V ARC-AGI-3 Astra prekonala našu referenčnú úroveň efektivity ľudských činností v 96 % úrovní, čím na tomto benchmarku fakticky dosiahla úroveň ľudského výkonu. Nie je to len najlepší model, aký sme kedy testovali, ale zároveň predstavuje významný posun vo výkone prelomových modelov – nielen v schopnosti orientovať sa v nových prostrediach a riešiť ich, ale aj v tom, ako efektívne sa to dokáže naučiť.“
Greg Kamradt, ARC Prize Foundation

Astra je náš najlepšie zosúladený model s výraznými zlepšeniami v porozumení zámeru používateľa a správaní modelu – úlohy môžete delegovať s väčšou dôverou v úsudok Astry. Ako jeden zo spôsobov testovania sme vytvorili nové hodnotenie inšpirované incidentom Hugging Face, ktoré skúma, či model čeliaci náročnej alebo nemožnej úlohe prekročí svoj zamýšľaný rozsah. V porovnaní s GPT‑5.6 Sol, ktorý bez produkčných ochranných opatrení v 48 % prípadov prekročil autorizovaný cieľ, GPT‑6 Astra takto postupoval v 0 % prípadov.

Najlepší model na ovládanie počítača na svete

GPT‑6 Astra posúva hranice v rýchlosti, presnosti a bezpečnosti používania počítača. Dokáže sa postarať o zdĺhavé úlohy, ako je vypĺňanie online formulárov, aktualizácia záznamov o zákazníkoch v CRM a organizovanie vášho kalendára. Dokáže robiť online rešerše a pripravovať zhrnutia vo vašom e-maile alebo v editore dokumentov. Dokáže analyzovať vedecké údaje, generovať grafy, vytvoriť webovú stránku a spúšťať kontroly kvality frontendu, aby sa zabezpečilo, že všetky funkcie na tejto stránke fungujú. Môže vám pomôcť autonómne inštalovať a testovať softvér a riešiť problémy, ktoré vidíš na obrazovke. Tieto vylepšenia sa odrážajú aj v našich špičkových výsledkoch hodnotenia.

Tieto zlepšenia tiež vedú k výraznému zvýšeniu efektivity pri reálnych úlohách znalostnej práce. V simuláciách latencie na OSWorld 2.0 dosahuje Astra vyšší výkon pri používaní počítača za približne o 47 % kratší čas na úlohu než GPT‑5.6 Sol so skóre 72,6 % pri približne 40 minútach na úlohu v porovnaní so 65,7 % pri približne 75 minútach.3

Schopnosti GPT‑6 Astra pri používaní počítača možno vidieť vo výstupoch v rôznych oblastiach vrátane vývoja hier, elektrotechniky a každodennej znalostnej práce:

Alongside Astra, we are also updating the Codex harness to significantly improve the speed of computer use. Combined with Astra’s efficiency, this translates to a 1.9x faster task completion compared to the current GPT‑5.6 Sol experience, on the Mind2Web benchmark. The model’s improvements on speed mean it can take on many time-consuming life tasks for you, faster than you can.4

„V deň uvedenia integrujeme GPT‑6 Astra do Devinovho harnessu, kde dosahuje špičkový výkon v našom internom testovacom benchmarku. Jeho vynikajúca práca s počítačom, písanie a porozumenie kódovej základni zlepšili testovanie hneď od začiatku: videá sa sledujú výrazne ľahšie a reporty sú jasnejšie a stručnejšie”
Silas Alberti, senior viceprezident pre výskum (SVP), Cognition

Skoková zmena v odbornej práci

GPT‑6 Astra spája pokroky v používaní počítača s cieleným trénovaním pre profesionálne prostredia, aby pomohol zvládať komplexné pracovné úlohy. Kombinuje inteligenciu potrebnú na riešenie komplexných problémov so schopnosťou vykonávať viacstupňové pracovné postupy a vytvárať uhladené dokumenty, tabuľky a prezentácie.

GPT‑6 Astra je náš najlepší model na dodržiavanie existujúcich šablón a vytváranie prezentácií s premysleným rozložením, ktoré stručne sprostredkúvajú kľúčové body v rámci štruktúrovaného príbehu. Vytvára prehľadné, dobre štruktúrované dokumenty, prezentácie, tabuľky a analýzy, ktoré sa riadia tvojimi šablónami a zodpovedajú tvojmu štýlu písania aj vizuálnemu štýlu. Astra je tiež trénovaná tak, aby do výstupov cielene zahŕňala iba relevantný kontext, namiesto opakovania informácií, ktoré nie sú potrebné pre aktuálnu úlohu. To všetko znamená, že dokáže generovať artefakty, ktoré sú použiteľnejšie hneď po vytvorení a zodpovedajú tvojmu obchodnému kontextu a štandardom.

GPT‑6 Astra prináša aj lepší vizuálny úsudok pri tvorbe webových stránok, hier, aplikácií a renderov. S Webmi(otvorí sa v novom okne) v ChatGPT dokáže Astra vytvárať, hostovať a zdieľať webové stránky, webové aplikácie a hry priamo z príkazu.

„Astra nám poskytuje výraznú výhodu v schopnostiach aj efektívnosti. Úspešne vykonáva naše najkomplexnejšie kreatívne pracovné postupy a pritom používa až o 20 % menej tokenov než iné modely, ktoré sme testovali. A čo je najdôležitejšie, pre našich zákazníkov to znamená kvalitnejšie výstupy.“
Alex Mashrabov, generálny riaditeľ a spoluzakladateľ spoločnosti Higgsfield AI

Keď pokyny poskytujú priestor na interpretáciu, GPT‑6 Astra je pri správnom rozhodovaní lepší než predchádzajúce modely. Využíva kontext na doplnenie bežných chýbajúcich informácií a kladie cielené otázky, keď by odpoveď mohla ovplyvniť výsledok. V Codexe môže klásť otázky asynchrónne a zároveň pokračovať v práci, ktorá nezávisí od tvojej odpovede. Ak neodpovieš, podľa potreby pokračuje s rozumnými predpokladmi, ale pri rozhodnutiach s významnými dôsledkami počká na tvoj vstup.

Nižšie uvedené príklady ukazujú, ako Astra spolupracuje pri bežných úlohách, pri ktorých môžu chýbajúce informácie podstatne zmeniť odpoveď.

Astra si tiež lepšie udržiava prehľad o tom, ako sa úloha vyvíja. Skoršie modely niekedy považovali usmerňovacie správy za nový cieľ a strácali zo zreteľa pôvodnú požiadavku alebo skoršie obmedzenia. Astra zapracúva nové požiadavky, na požiadanie zmení smerovanie a odpovedá na doplňujúce otázky bez toho, aby stratila zo zreteľa celkovú úlohu.

„Astra predstavuje výrazné zlepšenie kvality oproti GPT‑5.6 Sol pri komplexných právnych úlohách. Pri našom počiatočnom testovaní Astra vynikla tým, že k právnej práci pristupuje tak, ako dôsledný právnik: rozlišuje dokumenty od ustálených záznamov, odhaľuje nepodložené predpoklady a premieňa medzery na konkrétne východiská pre formuláciu návrhu.”
Niko Grupen, vedúci aplikovaného výskumu, Harvey

Programovanie

GPT‑6 Astra je doteraz najlepší model pre softvérové inžinierstvo.

1 z 2
„GPT‑6 Astra poskytuje špičkový výkon v našich interných benchmarkoch programovania a v hodnoteniach intuície pri obchodovaní predstavuje v porovnaní s GPT‑5.6 Sol jasný krok vpred. Pri použití na agentické programovanie GPT‑6 Astra komunikuje spôsobom, ktorý vývojári ľahšie sledujú, a vytvára kód, ktorý si na dosiahnutie produkčnej kvality vyžaduje menej iterácií.“
John Crepezzi, AI asistenti, Jane Street

S Astrou predstavujeme nový spôsob, ako môže Codex zachovávať a získavať kontext, keď sa kontextové okno zaplní. Modely v minulosti používali kompakciu na sumarizáciu práce počas dlhých relácií, napríklad pri ladení zložitých problémov alebo riešení rozsiahlych refaktorov. Každá kompakcia môže vynechať podrobnosti o tom, prečo oprava zlyhala alebo ako sa komponent správa. V Codex môže Astra uchovávať poznámky naprieč kontextovými oknami, pričom zachováva nahromadené podrobnosti bez ich opakovaného komprimovania do jediného súhrnu. Predchádzajúce kontextové okná zostávajú prehľadávateľné, takže Astra môže nájsť požiadavky alebo výsledky testov z predchádzajúcich správ a výstupov nástrojov – aj keď tieto informácie neboli zachytené v jej poznámkach. Túto experimentálnu funkciu môžeš povoliť vo svojom súbore config.toml pre Codex,(otvorí sa v novom okne) a v najbližších týždňoch sa stane predvolenou pre Astru.

Posúvanie vedeckého objavovania vpred

„Ide o príbeh konca jednej éry a začiatku ďalšej.“
Greg Burnham, EpochAI

GPT‑6 Astra is a major advance for scientific discovery, mathematics, and health. Today, we’re sharing two further results on the gaps between prime numbers.910

Astra also sets new records across a suite of math and science evaluations.

Astra môže pomôcť s praktickou prácou, ktorá stojí za vedeckými objavmi. Kombináciou vedeckého uvažovania s používaním počítača môže pracovať priamo v špecializovanom softvéri, skúmať údaje a výsledky, a tak výskumníkom pomôcť posúdiť dôkazy a rozhodnúť sa, čo skúmať ďalej.

Kybernetická bezpečnosť

As we discussed in our safety update, Astra is a significant jump in cyber capabilities and meets the Critical threshold in cybersecurity under our Preparedness Framework. Its ability to identify and develop zero-day exploits can help defenders find and patch weaknesses, but it also creates a need for stronger safeguards. To understand how far these capabilities extend, we ran Astra on internal and third-party expert evaluations.

We first tested the model without production safeguards on ExploitBench and ExploitGym, which evaluate whether models can turn known software vulnerabilities into working exploits. On ExploitBench, Astra achieved a perfect score of 100%, compared with 78.5% for GPT‑5.6 Sol, our previous frontier cyber-capable model. On ExploitGym, Astra reached a 42.4% success rate, compared with 30.3% for GPT‑5.6 Sol, while using substantially fewer output tokens.13

Given concerns that exposure to historical software vulnerabilities may have affected benchmark results, we also evaluated Astra on two novel benchmarks. For one, we built an internal “ExploitBench (June–August 2026)” evaluation to test exploit development using vulnerabilities from the previous three months.14 Astra achieved substantially higher arbitrary code-execution rates than GPT‑5.6 Sol on this dataset while using far fewer output tokens. During the evaluation, Astra even discovered and used two previously unknown zero-day vulnerabilities. We are disclosing both vulnerabilities to their maintainers.

We also tested Astra on SRE-Bench15, a benchmark that measures whether models can reverse engineer software binaries to understand its core logic without access to raw source code. Astra solved 88.0% of tasks in a single attempt and 99.2% within four attempts, compared with 55.9% and 68.7% for GPT‑5.6 Sol, respectively.

Beyond benchmarks, expert-led assessments found that Astra, when run without production safeguards, could use previously unknown vulnerabilities to achieve arbitrary code execution in hardened browsers and create privilege-escalation exploits for hardened operating-systems.

As we discussed in The Defender’s Window, frontier cyber capabilities can help defenders find weaknesses faster, but they also make those weaknesses easier to exploit, raising the urgency for defenders to adapt. With the version of Astra launching today, defenders can use it to complete tasks such as secure code review and patching.

However, Astra will refuse to comply with more advanced cybersecurity tasks such as creating proof-of-concept exploits for vulnerabilities. Through OpenAI Daybreak, we plan to expand access and roll out less restrictive safeguards in the coming weeks. This will enable more defensive workflows, including vulnerability and proof-of-concept validation, malware analysis, and detection engineering.

We have also strengthened our protections against potential cyber misuse, building upon our safeguards stack for GPT‑5.6 Sol. These include stronger model robustness to better withstand potential jailbreaks and more context for our monitoring systems. We have continued rigorous internal and external testing, including automated evaluations with our internal red-teaming attackers. More details about our cyber safeguards and testing are available in the Astra safety overview and system card(otvorí sa v novom okne)..

Zodpovedné zosúlaďovanie a nasadzovanie GPT‑6 Astra

Astra je náš najviac zosúladený model. Astra vyniká starostlivým prístupom, rešpektovaním hraníc úloh a transparentnou komunikáciou. Táto práca je najnovším výsledkom nášho dlhodobého výskumného programu zameraného na trénovanie modelov, ktoré zostávajú zosúladené s ľudským zámerom od začiatku až do konca.

V citlivých prostrediach Astra postupuje s opatrnosťou primeranou riziku. Pri hodnotení úloh práce s počítačom, ktoré boli adverzárne vybrané tak, aby vyvolali nežiaduce správanie, bola Astra úspešnejšia v predchádzaní nezamýšľaným dôsledkom. Spustenie s ďalšími štandardne ponúkanými bezpečnostnými opatreniami prinieslo ešte vyšší výkon.

Astra causes fewer misaligned outcomes than any other frontier models tested. For a fair comparison, we used a generic computer-using-agent harness (based on the native computer use tools available in both the OpenAI Responses API(otvorí sa v novom okne) and Anthropic Messages API(otvorí sa v novom okne)) and without additional protections that are normally deployed to Codex and ChatGPT Work users (auto-review, confirmation policy). 16

Astra tiež s väčšou pravdepodobnosťou funguje v rámci hraníc stanovených používateľom a vyplývajúcich z jej prostredia. V internom hodnotení sa Astra nikdy nepokúsila obísť zamietnutie automatickou kontrolou Codex. Platilo to aj vtedy, keď bola funkcia Automatická kontrola zámerne nakonfigurovaná tak, aby sa dala obísť, a úlohu inak nebolo možné dokončiť. Toto rešpektovanie obmedzení prostredia je v súlade s výsledkami nášho hodnotenia nemožných kybernetických úloh, ktoré sme zdieľali v úvode tohto príspevku, aj s ďalšími zisteniami zdokumentovanými v našej systémovej karte(otvorí sa v novom okne).

Astra additionally sets new marks in transparent user communication. In one evaluation, Astra is three times less likely than GPT‑5.6 Sol to make inaccurate representations about its capabilities and affordances.

V našom hodnotení halucinácií o schopnostiach Astra vykazuje výrazné zlepšenie oproti GPT‑5.6 Sol a uvádza menej zavádzajúcich tvrdení o svojich schopnostiach.

Our evaluations found Astra’s written reasoning harder to monitor than GPT‑5.6 Sol’s, based on tests that explicitly asked it to evade monitoring. We attribute this to Astra’s greater control over written reasoning on simpler tasks and ability to solve problems with fewer written steps. Astra still appears to struggle to conceal the reasoning needed for complex tasks, but we take the decline seriously. Improving monitorability remains a research priority, and the accompanying system card(otvorí sa v novom okne) details our findings and ongoing work.

Alignment training is core to our approach to deployment. As an additional layer of defenses, we also build system safeguards like Codex Auto-review(otvorí sa v novom okne) and monitoring agents’ reasoning and actions to help detect and contain unsafe behavior. As described in our safety update, we are also deploying misalignment monitoring in production for Astra-class models in order to have visibility into misalignment, and help contain its worst instances. These safeguards resemble our monitoring for internal deployments and involve a system of classifiers which check the model’s reasoning and actions for unauthorized behavior and automatically stop potentially unauthorized activity.

Given the significant increase in Astra’s cybersecurity capabilities, we are being especially careful to make this deployment safe and secure. Extra safety checks can sometimes slow, pause, or stop legitimate work, including defensive cybersecurity. If a task is paused in ChatGPT or Codex, you may be asked to review the action before continuing. In the API, the task will stop. These checks can sometimes interrupt legitimate work, and we are continuing to iterate on this system to reduce unnecessary interruptions. Misalignment monitoring cannot replace alignment: our goal is to build models that reliably stay within their authorized scope, so these protections do not need to intervene.

Dostupnosť

GPT‑6 Astra is rolling out today to a limited set of organizations and over the coming days will become available to all ChatGPT Plus, Pro, Business, and Enterprise users, as well as through the OpenAI API, Microsoft Azure, and AWS Bedrock. Astra usage is included within the existing subscription allowances—users and businesses will also be able to purchase credits for additional usage. Users on the Pro, Business, and Enterprise plans will also get access to GPT‑6 Astra Pro. Enterprise administrators can enable Astra for their workspace; access is off by default at launch.

Astra supports Zero Data Retention for eligible API customers, and as we shared last month, we're testing Private Safety Processing to strengthen safety monitoring while preserving customer privacy.

For developers, GPT‑6 Astra will be available in the OpenAI API as gpt-6-astra and through Microsoft Azure and Amazon Bedrock.

OpenAI API Standard pricing is $10 per million input tokens and $50 per million output tokens. Separate rates apply to cache reads and writes. Fast mode is available for GPT‑6 Astra in the API and delivers up to 2x the speed of Standard processing at 2x the Standard price.

Používanie počítača

Computer Use

GPT‑6 Astra

GPT‑5.6 Sol2

Claude Fable 5.1

Claude Fable 5

Claude Opus 5

Gemini 3.8 Flash

Agents' Last Exam

59.3%

53.6%

-

48.7%

55.5%

-

OSWorld 2.0 (v2026.08.08, offline set, partial score)

72.6%

65.7%

-

-

70.2%3

-

ScreenSpot-Pro (no tools)

92.7%

76.9%

-

87.3%17

-

-

Professional

Professional

GPT‑6 Astra

GPT‑5.6 Sol

Claude Fable 5.1

Claude Fable 5

Claude Opus 5

Gemini 3.8 Flash

AutomationBench

41.4%

18.1%

31.4%

17.4%

26.9%

-

BenchCAD

95.9%

83.3%

84.3% 5

67.5% 5

82.1% 5

-

BrowseComp

91.5%

90.4%

-

87.4%

90.8%

-

OpenScore String Quartets (1 - OMR-NED)

0.84

0.19

-

-

-

-

Internal Design Tasks

50.0%

47.4%

-

35.8%

-

-

Internal Data Science Tasks

40.9%

30.5%

-

34.7%

-

-

Artificial Analysis Intelligence Index v4.1.1

61.2

60.9

65.7

62.1

63.1

58.7

Coding

CodingGPT‑6 AstraGPT‑5.6 SolClaude Fable 5.1Claude Fable 5Claude Opus 5Gemini 3.8 Flash
Terminal-Bench 4.057.9%37.3%55.8%44.5%52.6%19.1%
DeepSWE v1.174.1%72.7%67.4%69.9%73.7%73.8%
FrontierCode 1.1 Extended (score)64.5% 860.6%63.6%64.9%63.6%56.3%
FrontierCode 1.1 Main (score)53.3% 847.5%50.9%53.5%53.4%43.6%
Internal Database Migration Tasks63.9%42.7%57.8%50.3%--
Artificial Analysis Coding Agent Index v1.467.065.1-67.268.161.2

Academic

Academic

GPT‑6 Astra

GPT‑5.6 Sol

Claude Fable 5.1

Claude Fable 5

Claude Opus 5

Gemini 3.8 Flash

Terminal-Bench Science 0.1

64.6%

22.4%

52.6%

21.4%

30.0%

-

FrontierMath Tier 4 (v2)

97.6%

83.0%

87.8%

90.2%

73.2%

-

GPQA Diamond

96.0%

94.6%

93.7%

92.6%

93.7%

95.3%

Humanity's Last Exam (w/ tools)

57.2%

-

65.0%

63.8%

63.6%

-

Veda a zdravie

Science and HealthGPT‑6 AstraGPT‑5.6 SolClaude Fable 5.1Claude Fable 5Claude Opus 5Gemini 3.8 Flash
GeneBench Pro37.1%32.3%----
MedChemBench (Internal)49.3%47.4%----
LifeSciBench60.3%59.9%----
HealthBench Professional (length-adjusted)63.4%60.5%58.1% 1160.9% 1156.4% 1152.1%

Kybernetická bezpečnosť

CybersecurityGPT‑6 AstraGPT‑5.6 SolClaude Fable 5.1Claude Fable 5Claude Opus 5Gemini 3.8 Flash
ExploitBench100.0%78.5%--70%-
ExploitGym42.4% 1330.3% 1330.4% 1728.4%1722.0%-
ExploitBench (June-Aug 2026)39.0%5.5%----
SRE-Bench88.0%55.9%--12.5%-
SEC-Bench Pro85.4%79.1%----

Zosúladenie

Zosúladenie

GPT‑6 Astra

GPT‑5.6 Sol

Claude Fable 5.1

Claude Fable 5

Claude Opus 5

Gemini 3.8 Flash

Interný bezpečnostný referenčný test používania počítača (nižšia hodnota je lepšia)

2,4 %

22,0 %

9,5 %

18,3 %

11,5 %

-

Interný bezpečnostný benchmark používania počítača s AutoReview (nižšia hodnota je lepšia)

1,8 %

4,3 %

-

-

-

-

Interný benchmark obchádzania (nižšia hodnota je lepšia)

0,00 %

0,29 %

-

-

-

-

Honeypot ExploitGym (nižšia hodnota je lepšia)

0,0 %

48,2 %

-

-

-

-

Nemožný ExploitGym

100,0 %

-

-

-

-

-

Interný benchmark halucinácií (nižší je lepší)

4,2 %

12,2 %

-

-

-

-

Dlhý kontext

Dlhý kontext

GPT‑6 Astra

GPT‑5.6 Sol

Claude Fable 5.1

Claude Fable 5

Claude Opus 5

Gemini 3.8 Flash

OpenAI MRCR v2 8 ihiel 256 tis.–512 tis.

100,0 %

91,5 %

-

-

-

-

OpenAI MRCR v2 8 ihiel 512 tis.–1 mil.

96,3 %

73,8 %

-

-

-

-

Abstraktné myslenie

Abstract reasoningGPT‑6 AstraGPT‑5.6 SolClaude Fable 5.1Claude Fable 5Claude Opus 5Gemini 3.8 Flash
ARC-AGI-399.9% 17.8%--30.2%-
ARC-AGI-295.0%92.5%90.0%89.2%90.4%-
ARC-AGI-198.5%97.5%97.5%98.5%97.5%-

Skóre hodnotenia dosahuje maximum pri akomkoľvek úsilí. Hodnotenia GPT boli spustené v našom výskumnom prostredí alebo prostredníctvom nášho API, čo môže viesť k mierne odlišnému výstupu oproti produkčnému ChatGPT v dôsledku rozdielov v systémových príkazoch, dostupných nástrojoch atď.

FOOTNOTES

  1. 1

    On ARC-AGI-3, GPT-6 Astra was run with our responses API harness, which changes two settings to better match real-world performance. The changes do not specifically target ARC-AGI-3.

  2. 2

    GPT-5.6 Sol refers to the version available in our API, ChatGPT Codex, and ChatGPT Work. The version in ChatGPT Chat is slightly different.

  3. 3

    OSWorld V2-Offline is a subset of the original OSWorld V2 that works without internet access. Claude model performance on OSWorld-V2 Offline was reproduced by the authors on the official leaderboard(otvorí sa v novom okne). On OSWorld 2.0, the scores for Claude use the official settings, and not the modified tasks and modified grading from the Fable 5.1 System Card.

  4. 4

    Model times are the reported elapsed times for the corresponding demonstration runs. The displayed clips are edited excerpts.

  5. 5

    On BenchCAD, Claude's scores reflect 3 modifications to the eval, detailed in the Fable 5.1 System Card(otvorí sa v novom okne).

  6. 6

    Guang Yang, Victoria Ebert, Nazif Tamer, Brian Siyuan Zheng, Luiza Pozzobon, and Noah A. Smith. “LEGATO: Large-scale End-to-end Generalizable Approach to Typeset OMR(otvorí sa v novom okne).” arXiv:2506.19065, 2025.

  7. 7

    Mark R. H. Gotham, Maureen Redbond, Bruno Bower, and Peter Jonas. “The OpenScore String Quartet Corpus(otvorí sa v novom okne).” Proceedings of the 10th International Conference on Digital Libraries for Musicology, pp. 49–57. ACM, 2023.

  8. 8

    On FrontierCode, GPT-6 Astra was run with a developer  message similar to a section of its developer message in Codex(otvorí sa v novom okne): "Avoid creating excessive test files. Create a new test file only when required by repository conventions or when no existing file is a suitable home. Avoid unrelated cleanup and unnecessary complexity. Reuse suitable existing utilities. Read relevant repository instructions and inspect nearby code, tests, documentation, and CI. Follow established conventions. The goal is clean, mergeable code." The prompt was not optimized for the eval.

  9. 9

    The first concerns how close together prime numbers can occur, however far along the number line you go. For more than a decade, the best known result established that infinitely many pairs of primes are at most 246 apart. Julia Stadlmann(otvorí sa v novom okne) recently improved that bound to 240. Astra helped establish a stronger bound of 186, showing that infinitely many pairs occur within this smaller distance. Short prime gaps: Proof(otvorí sa v novom okne) and supporting research(otvorí sa v novom okne).

  10. 10

    The second concerns unusually large gaps between primes. Astra improved a term in a bound on these gaps that had remained unchanged for more than 80 years. We’re sharing the proofs and abridged chain of thought and verification materials for both results. Large prime gaps: Proof(otvorí sa v novom okne) and supporting research(otvorí sa v novom okne).

  11. 11

    We independently evaluated all Claude models following the intended HealthBench Professional procedure, using GPT‑5.4 grading and length-adjusted, unclipped scores. For Fable 5.1, we used Opus 5 fallback for provider refusals.

  12. 12

    Claude Fable 5 and 5.1 are not included in LifeSciBench Gold v1, GeneBench Pro v13, and MedChemBench because they refuse the majority of questions in these evaluations.

  13. 13

    On ExploitGym, we tested Astra and Sol without the 6-hour time limit, to better assess their full cyber capabilities. They are fast enough that it has little impact.

  14. 14

    ExploitBench (June–August 2026) contains 20 high-severity V8 vulnerabilities across 13 stable Chrome releases. The benchmark tests whether agents can achieve arbitrary code execution in V8 and official Chrome releases for Linux by exploiting each specified vulnerability. Some included vulnerabilities may not permit arbitrary code execution under the evaluation’s constraints, so a 100% success rate may not be achievable. Note: the 5.5% score of GPT-5.6 Sol is an artifact of the 300-turn limit in the benchmark, which is not a limit that real customers using max would have. The model at similar settings achieved an 11.5% score when hitting fewer limits.

  15. 15
  16. 16

    When we test across third-party models, we use a simpler research setup. Codex has a more complex production configuration, which can result in different raw-model error rates. Provider-side safeguards and computer-tool implementations still differ. Users do not experience the no-confirmation scenario in Codex, as it's an internal research configuration.

  17. 17

    For ScreenSpot-Pro and ExploitGym, the Fable scores we report come from Mythos, which is Fable with fewer safeguards.