Predstavljamo GPT‑4.5

Izdajamo raziskovalno predogledno različico GPT‑4.5 – našega doslej največjega in najzmogljivejšega modela za klepet. GPT‑4.5 predstavlja velik korak naprej pri skaliranju predtreniranja in naknadnega treniranja. S skaliranjem nenadzorovanega učenja GPT‑4.5 izboljša prepoznavanje vzorcev, povezovanje informacij in ustvarjanje ustvarjalnih uvidov brez eksplicitnega sklepanja.

Prvi testi kažejo, da je pogovor z GPT‑4.5 še bolj naraven. Širša baza znanja, boljše razumevanje uporabnikovih namenov in višja »čustvena inteligenca« ga naredijo izjemno uporabnega za izboljševanje pisanja, programiranje in reševanje praktičnih problemov. Prav tako pričakujemo manj halucinacij.

GPT‑4.5 objavljamo kot raziskovalni predogled, da bolje spoznamo njegove prednosti in omejitve. Še vedno raziskujemo, kaj vse zmore, in nestrpno pričakujemo, kako ga bodo ljudje uporabljali na načine, ki jih morda nismo predvideli.

Napredek umetne inteligence dosegamo s skaliranjem dveh dopolnjujočih se pristopov: nenadzorovanega učenja in sklepanja. Gre za dve glavni osi inteligence.

1. Nenadzorovano učenje izboljšuje natančnost notranjega modela sveta in intuicijo. V tej smeri napredujejo modeli, kot so GPT‑3.5, GPT‑4 in GPT‑4.5.
2. Po drugi strani pa skaliranje sklepanja⁠ modele uči razmišljati in oblikovati verigo misli, preden odgovorijo, kar jim omogoča reševanje zahtevnih nalog s področja naravoslovja, tehnike in logike. V tej smeri napredujeta na primer OpenAI o1 in OpenAI o3‑mini.

GPT‑4.5 je plod skaliranja nenadzorovanega učenja z večanjem računske moči, količine podatkov ter inovacijami v arhitekturi in optimizaciji. GPT‑4.5 je bil treniran na superračunalnikih Microsoft Azure AI. Rezultat je model s širšim znanjem in globljim razumevanjem sveta, ki povzroča manj halucinacij ter je zanesljivejši na najrazličnejših področjih.

Večji in zmogljivejši kot postajajo naši modeli, pomembneje je, da jih naučimo globljega razumevanja človeških potreb in namenov. Za GPT‑4.5 smo razvili nove skalabilne tehnike, ki omogočajo urjenje večjih modelov s podatki, pridobljenimi iz manjših modelov. Te tehnike izboljšujejo vodljivost modela, razumevanje nians in naravnost pogovorov.

Meritev človeških preferenc kaže odstotek poizvedb, pri katerih so preizkuševalci raje izbrali odgovor GPT‑4.5 kot GPT‑4o.

Združevanje globokega razumevanja sveta z izboljšanim sodelovanjem ustvari model, ki ideje naravno vpleta v tople, intuitivne in človeku bližje pogovore. GPT‑4.5 bolje razume, kaj uporabnik zares misli, in s še večjo občutljivostjo ter »čustveno inteligenco« zaznava subtilne namige ali implicitna pričakovanja. GPT‑4.5 kaže tudi izrazitejši estetski čut in ustvarjalnost. Še posebej blesti pri pomoči pri pisanju in oblikovanju.

GPT‑4.5 ne razmisli preden odgovori, zato so njegove prednosti povsem drugačne od modelov s sklepanjem, kot je OpenAI o1. V primerjavi z OpenAI o1 in OpenAI o3‑mini je GPT‑4.5 bolj vsestranski in naravno pametnejši model. Prepričani smo, da bo sklepanje osrednja zmožnost prihodnjih modelov in da se bosta pristopa skaliranja – predtreniranje in sklepanje – odlično dopolnjevala. Bolj pametni in vsevedni kot postajajo modeli kakršen je GPT‑4.5 na predtreniranju, močnejšo osnovo bodo predstavljali za agente s sklepanjem in uporabo orodij.

Vsaka izboljšava zmogljivosti modela je hkrati priložnost, da modele naredimo varnejše. GPT‑4.5 je bil treniran z novimi tehnikami nadzora, ki jih kombiniramo s klasičnim nadzorovanim fino nastavljanjem (SFT) in učenjem z ojačitvijo na podlagi povratnih informacij ljudi (RLHF), kot smo to počeli pri GPT‑4o. Upamo, da bo to delo služilo kot osnova za usklajevanje še zmogljivejših prihodnjih modelov.

Da bi preizkusili izboljšave varnosti, smo pred uvedbo izvedli obsežen nabor varnostnih testov v skladu z našim Okvirom pripravljenosti⁠(odpre se v novem oknu). Ugotovili smo, da skaliranje paradigme GPT prispeva k izboljšavam zmogljivosti na vseh naših evalvacijah. Podrobne rezultate teh evalvacij objavljamo v spremljevalni kartici sistema. sistemski kartici⁠.

Od danes dalje lahko naročniki ChatGPT Pro v izbirniku modelov na spletu, v mobilnih aplikacijah in na namizju izberejo GPT‑4.5. Naslednji teden bomo začeli z uvajanjem za uporabnike Plus in Team, teden za tem pa za uporabnike Enterprise in Edu.

GPT‑4.5 ima dostop do najnovejših informacij prek iskanja, podpira nalaganje datotek in slik ter lahko uporablja canvas za delo s pisanjem in kodo. Trenutno pa GPT‑4.5 še ne podpira večmodalnih funkcionalnosti, kot so glasovni način, video in deljenje zaslona v ChatGPT‑ju. V prihodnje si bomo prizadevali poenostaviti uporabniško izkušnjo, da bo umetna inteligenca »preprosto delovala« za vas.

GPT‑4.5 že danes predogledno ponujamo tudi v API-jih Chat Completions, Assistants in Batch vsem razvijalcem na plačljivih stopnjah⁠(odpre se v novem oknu). Model podpira ključne funkcije, kot so priklic orodja, strukturirani izhodi, pretakanje in sistemski pozivi. Podpira tudi vidne zmožnosti prek vnosov slik.

Po prvih preizkusih se zdi, da je GPT‑4.5 še posebej primeren za aplikacije, ki izkoriščajo njegovo višjo čustveno inteligenco in ustvarjalnost – na primer pomoč pri pisanju, komunikaciji, učenju, coachingu in iskanju novih idej. Kaže tudi odlične rezultate pri agentskem načrtovanju in izvajanju, vključno z delovnimi tokovi večstopenjskega kodiranja in zahtevno avtomatizacijo opravil.

GPT‑4.5 je zelo velik in računalniško zahteven model, zaradi česar je dražji⁠ od GPT‑4o in ga ne more nadomestiti. Zato trenutno presojamo, ali ga bomo dolgoročno obdržali v ponudbi API-jev, saj želimo uravnotežiti podporo trenutnim zmožnostim z razvojem prihodnjih modelov. Veselimo se novih spoznanj o njegovih prednostih, zmožnostih in možnih uporabah v resničnem okolju. Če GPT‑4.5 za vaš primer uporabe prinaša edinstveno vrednost, bodo vaše povratne informacije⁠(odpre se v novem oknu) ključne pri naši odločitvi.

Z vsako novo stopnjo računske moči pridobimo povsem nove zmožnosti. GPT‑4.5 je trenutno na samem robu možnega pri nenadzorovanem učenju. Še vedno nas preseneča ustvarjalnost skupnosti, ki odkriva nove zmožnosti in nepričakovane načine uporabe. Z GPT‑4.5 vas vabimo, da skupaj raziščete meje nenadzorovanega učenja in odkrijete še neznane zmožnosti.

Spodaj prikazujemo dosežke GPT‑4.5 na standardnih akademskih testih uspešnosti, ki ponazarjajo njegovo trenutno zmogljivost pri nalogah, tradicionalno povezanih s sklepanjem. Že zgolj s skaliranjem nenadzorovanega učenja GPT‑4.5 dosega opazne izboljšave v primerjavi s prejšnjimi modeli, kot je GPT‑4o. Veselimo se celovitejšega vpogleda v zmožnosti GPT‑4.5 prek te izdaje, saj se zavedamo, da akademski testi ne odražajo vedno uporabnosti v resničnem svetu.