Samhlacha a mhúineadh chun a n-éiginnteacht a chur in iúl i bhfocail

Léirímid gur féidir le samhail GPT‑3 foghlaim conas éiginnteacht faoina freagraí féin a chur in iúl i dteanga nádúrtha—gan logits samhla a úsáid. Nuair a chuirtear ceist uirthi, gineann an tsamhail freagra agus leibhéal muiníne araon (m.sh. "muinín 90%" nó "muinín ard"). Mapálann na leibhéil seo chuig dóchúlachtaí atá calabraithe go maith. Fanann an tsamhail measartha calabraithe freisin faoi aistriú dáilte, agus tá sí íogair d’éiginnteacht ina freagraí féin, seachas aithris a dhéanamh ar shamplaí daonna. Chomh fada agus is eol dúinn, is é seo an chéad uair a léiríodh go gcuireann samhail éiginnteacht chalabraithe faoina freagraí féin in iúl i dteanga nádúrtha. Chun calabrú a thástáil, tugaimid isteach sraith tascanna CalibratedMath. Déanaimid comparáid idir calabrú na héiginnteachta a chuirtear in iúl i bhfocail ("dóchúlacht bhriathraithe") agus éiginnteacht a bhaintear as logits samhla. Tá an dá chineál éiginnteachta in ann calabrú a ghinearálú faoi aistriú dáilte. Cuirimid fianaise ar fáil freisin go mbraitheann cumas GPT‑3 calabrú a ghinearálú ar léirithe folaigh réamhoilte a chomhghaolaíonn le héiginnteacht eipistéimeach faoina freagraí.