Léim go dtí an príomhábhar
OpenAI

25 Meán Fómhair 2023

Táirge

Is féidir le ChatGPT feiceáil, cloisteáil agus labhairt anois

ChatGPT Can Now See Hear And Speak

Táimid ag tosú ar chumais nua gutha agus íomhá a chur ar fáil i ChatGPT. Cuireann siad cineál comhéadain nua, níos iomasach ar fáil trí ligean duit comhrá gutha a bheith agat nó a thaispeáint do ChatGPT a bhfuil tú ag caint faoi.

Tugann guth agus íomhá níos mó bealaí duit ChatGPT a úsáid i do shaol. Tóg pictiúr de shainchomhartha agus tú ag taisteal agus bíodh comhrá beo agat faoi na rudaí suimiúla a bhaineann leis. Nuair atá tú sa bhaile, tóg pictiúir de do chuisneoir agus do stór bia chun a fháil amach cad atá don dinnéar (agus cuir ceisteanna leantacha ar oideas céim ar chéim). Tar éis an dinnéir, cuidigh le do pháiste le fadhb mhatamaitice trí ghrianghraf a thógáil, ciorcal a chur timpeall ar an tsraith fadhbanna, agus leideanna a fháil le roinnt libh beirt.

Táimid ag cur guth agus íomhánna ar fáil i ChatGPT d’úsáideoirí Plus agus Enterprise sna coicíse atá romhainn. Beidh guth ag teacht ar iOS agus Android (rogha isteach i do shocruithe) agus beidh íomhánna ar fáil ar gach ardán.

Labhair le ChatGPT agus lig dó freagra a thabhairt ar ais

Is féidir leat guth a úsáid anois chun comhrá déthreo a bheith agat le do chúntóir. Labhair leis agus tú ag gluaiseacht, iarr scéal codlata do do theaghlach, nó réitigh díospóireacht ag bord an dinnéir.

Use voice to engage in a back-and-forth conversation with your assistant.

Chun tús a chur leis an nguth, téigh chuig Settings → New Features san aip mhóibíleach agus roghnaigh comhráite gutha. Ansin, tapáil an cnaipe cluasán atá sa chúinne barr ar dheis den scáileán baile agus roghnaigh an guth is fearr leat as cúig ghuth éagsúla.

Tá an cumas nua gutha faoi thiomáint ag samhail nua téacs-go-hurlabhra, atá in ann fuaim dhaonna a ghiniúint ó théacs amháin agus ó chúpla soicind d’óráid shamplach. D’oibríomar le haisteoirí gutha gairmiúla chun gach ceann de na guthanna a chruthú. Úsáidimid Whisper freisin, ár gcóras foinse oscailte aitheantais cainte, chun do chuid focal labhartha a thras-scríobh ina dtéacs.

Ag lódáil...

Comhrá faoi íomhánna

Is féidir leat íomhá amháin nó níos mó a thaispeáint do ChatGPT anois. Réitigh cén fáth nach dtosóidh do ghríoscán, scrúdaigh a bhfuil i do chuisneoir chun béile a phleanáil, nó déan anailís ar ghraf casta le haghaidh sonraí a bhaineann leis an obair. Chun díriú ar chuid ar leith den íomhá, is féidir leat an uirlis líníochta inár n-aip mhóibíleach a úsáid.

Show ChatGPT one or more images.

Chun tús a chur leis, tapáil an cnaipe grianghraif chun íomhá a ghabháil nó a roghnú. Má tá tú ar iOS nó Android, tapáil an cnaipe móide ar dtús. Is féidir leat roinnt íomhánna a phlé freisin nó ár n-uirlis líníochta a úsáid chun do chúntóir a threorú.

Tá tuiscint íomhá faoi thiomáint ag GPT‑3.5 agus GPT‑4 ilmhódach. Cuireann na samhlacha seo a scileanna réasúnaíochta teanga i bhfeidhm ar réimse leathan íomhánna, amhail grianghraif, seatanna scáileáin, agus doiciméid ina bhfuil téacs agus íomhánna araon.

Táimid ag imscaradh cumais íomhá agus gutha de réir a chéile

Is é sprioc OpenAI IGS a thógáil atá sábháilte agus tairbheach. Creidimid inár n-uirlisí a chur ar fáil de réir a chéile, rud a chuireann ar ár gcumas feabhsuithe a dhéanamh agus maoluithe riosca a bheachtú le himeacht ama agus gach duine a ullmhú do chórais níos cumhachtaí amach anseo. Éiríonn an straitéis seo níos tábhachtaí fós le samhlacha ardleibhéil a bhaineann le guth agus fís.

Guth

Osclaíonn an teicneolaíocht nua gutha—atá in ann guthanna sintéiseacha réadúla a chumadh ó chúpla soicind d’fhíorchaint amháin—doirse do go leor feidhmchlár cruthaitheach agus dírithe ar inrochtaineacht. Mar sin féin, cuireann na cumais seo rioscaí nua i láthair freisin, amhail an fhéidearthacht go ndéanfadh gníomhaithe mailíseacha pearsanú ar dhaoine poiblí nó calaois.

Sin an fáth a bhfuilimid ag úsáid na teicneolaíochta seo chun cás úsáide ar leith a chumhachtú—comhrá gutha. Cruthaíodh comhrá gutha le haisteoirí gutha ar oibríomar leo go díreach. Táimid ag comhoibriú ar bhealach comhchosúil le daoine eile freisin. Mar shampla, tá Spotify ag úsáid chumhacht na teicneolaíochta seo do phíolótach a ngné Voice Translation(osclaíonn i bhfuinneog nua), a chabhraíonn le podchraoltóirí teacht níos leithne a thabhairt dá gcuid scéalaíochta trí phodchraoltaí a aistriú go teangacha breise i nguthanna na bpodchraoltóirí féin.

Ionchur íomhá

Cuireann samhlacha bunaithe ar fhís dúshláin nua i láthair freisin, ó siabhránachtaí faoi dhaoine go spleáchas ar léirmhíniú na samhla ar íomhánna i réimsí ardgheallta. Roimh imscaradh níos leithne, rinneamar tástáil ar an tsamhail le red teamers maidir le riosca i réimsí amhail antoisceachas agus cumas eolaíoch, agus le sraith éagsúil tástálaithe alfa. Chuir ár dtaighde ar ár gcumas teacht ar chomhaontú faoi chúpla mionsonra lárnach d’úsáid fhreagrach.

Fís a dhéanamh úsáideach agus sábháilte araon

Cosúil le gnéithe eile de ChatGPT, baineann fís le cuidiú leat i do shaol laethúil. Déanann sí é sin ar a fearr nuair is féidir léi an rud a fheiceann tú a fheiceáil.

Tá an cur chuige seo bunaithe go díreach ar ár gcuid oibre le Be My Eyes, aip mhóibíleach saor in aisce do dhaoine dalla agus lagamhairc, chun úsáidí agus teorainneacha a thuiscint. D’inis úsáideoirí dúinn go bhfuil sé luachmhar acu comhráite ginearálta a bheith acu faoi íomhánna ina mbíonn daoine sa chúlra, mar shampla má thagann duine ar an teilifís agus tú ag iarraidh socruithe do chianrialtáin a oibriú amach.

Tá bearta teicniúla glactha againn freisin chun cumas ChatGPT daoine a anailísiú agus ráitis dhíreacha a dhéanamh fúthu a theorannú go mór, ós rud é nach mbíonn ChatGPT cruinn i gcónaí agus gur cheart do na córais seo meas a léiriú ar phríobháideachas daoine.

Cuideoidh úsáid fhíorshaoil agus aiseolas linn na cosaintí seo a fheabhsú níos mó fós agus an uirlis á coinneáil úsáideach.

Trédhearcacht faoi theorainneacha na samhla

D’fhéadfadh úsáideoirí a bheith ag brath ar ChatGPT le haghaidh ábhar speisialaithe, mar shampla i réimsí ar nós taighde. Táimid trédhearcach faoi theorainneacha na samhla agus molaimid i gcoinne cásanna úsáide níos airde riosca gan fíorú cuí. Ina theannta sin, tá an tsamhail oilte ar théacs Béarla a thras-scríobh ach feidhmíonn sí go dona le roinnt teangacha eile, go háirithe iad siúd a úsáideann script neamh-Rómhánach. Molaimid dár n-úsáideoirí nach labhraíonn Béarla gan ChatGPT a úsáid chun na críche seo.

Is féidir leat tuilleadh a léamh faoinár gcur chuige i leith sábháilteachta agus faoinár gcuid oibre le Be My Eyes sa chárta córais d’ionchur íomhá.

Beimid ag leathnú rochtana

Beidh deis ag úsáideoirí Plus agus Enterprise taithí a fháil ar ghuth agus íomhánna sna coicíse atá romhainn. Táimid ar bís na cumais seo a chur ar fáil do ghrúpaí eile úsáideoirí, lena n-áirítear forbróirí, go gairid ina dhiaidh sin.

Údar

OpenAI

Admhálacha

Taighde lárnach ar mhód gutha

Alec Radford, Tao Xu, Jong Wook Kim

Taighde lárnach ar imscaradh fís

Raul Puri, Jamie Kiros, Hyeonwoo Noh, Long Ouyang, Sandhini Agarwal

Féach obair theicniúil agus údair GPT-4V(ision)