Root NationNuachtNuacht TFTá rúndiamhair na meaisínfhoghlama réitithe ag eolaithe ó Institiúid Teicneolaíochta Massachusetts

Tá rúndiamhair na meaisínfhoghlama réitithe ag eolaithe ó Institiúid Teicneolaíochta Massachusetts

-

Tar éis 2010, thosaigh feabhas mór ar halgartaim bogearraí, agus thug sé seo, in éineacht le ríomhairí cumhachtacha, spreagadh d'fhorbairt go mear líonraí néaracha. Déantar samhlacha bogearraí a oiliúint agus a oiliúint ar na mílte samplaí chun a ngníomhartha féin a fhoirmiú níos déanaí. Sa lá atá inniu ann, is é seo an líonra neural is cáiliúla Oscail AI GPT-3. Samhail meaisínfhoghlama é seo a fhoghlaimíonn le cabhair ó go leor sonraí Idirlín, is féidir blúire beag téacs a ghlacadh agus blúire neamhleor a chur leis ag leibhéal measartha ard. Agus baineann sé seo ní hamháin le téacs insinte, ach freisin dánta, chomh maith le línte cód bogearraí.

Líonra neural

Ach ní hé seo go léir go bhfuil samhlacha den phlean seo in ann. Tá taighdeoirí ag déanamh staidéir ar fheiniméan suimiúil ar a dtugtar "foghlaim i gcomhthéacs," ina bhfoghlaimíonn múnla teanga mór tasc a dhéanamh tar éis dó ach cúpla sampla a fheiceáil, cé nach bhfuil sé oilte ar an tasc.

Tá eolaithe ó Institiúid Teicneolaíochta Massachusetts, Google Research agus Ollscoil Stanford ag iarraidh an rúndiamhair seo a réiteach. Le foghlaim chomhthéacsúil, ní dhéantar paraiméadair an mhúnla a nuashonrú, mar sin dealraíonn sé go bhfuil an tsamhail ag foghlaim tasc nua gan aon rud a fhoghlaim.

Líonra neural

Léiríonn torthaí teoiriciúla na dtaighdeoirí go bhfuil na samhlacha ollmhóra seo de líonraí néaracha in ann samhlacha líneacha níos lú agus níos simplí a bheith i bhfolach taobh istigh díobh. Is féidir leis an tsamhail mhór algartam simplí a chur i bhfeidhm ansin chun an tsamhail líneach níos lú seo a oiliúint chun tasc nua a dhéanamh, gan úsáid a bhaint as ach an fhaisnéis atá sa tsamhail níos mó cheana féin.

A bhuí le tuiscint níos doimhne ar fhoghlaim chomhthéacsúil, beidh eolaithe in ann tascanna nua a chur i bhfeidhm le samhlacha gan athoiliúint costasach. Is é sin, ar dtús, le haghaidh aon tasc sonrach, is gá raon mór sonraí a bhailiú ar a mbonn a dhéanfar an oiliúint. Agus mar sin beifear in ann an líonra néarúil a sholáthar ach roinnt samplaí, a bhuíochas sin a dhéanfar oiliúint.

"Is feiniméan foghlama míréasúnta éifeachtach í an fhoghlaim chomhthéacsúil nach mór a thuiscint".

Líonra neural

Tá sé curtha i hipitéis go bhfuil múnlaí meaisínfhoghlama níos lú i samhlacha líonraí néaracha ar féidir leo múnla níos sine a mhúineadh chun tasc nua a dhéanamh. Chun a dteoiric a thástáil, ghlac na heolaithe le samhail líonra néarúil atá an-chosúil san ailtireacht le GPT-3, ach a tógadh go sonrach le haghaidh foghlama i gcomhthéacs. Is é sin, taobh istigh de na sraitheanna níos luaithe, cuireadh múnla i bhfeidhm, a bhí ag gabháil do mhúnla líneach a fhoghlaim, halgartaim foghlama simplí a chur i bhfeidhm.

"Is céim chun tosaigh iad na torthaí seo chun tuiscint a fháil ar conas is féidir le samhlacha tascanna níos casta a fhoghlaim agus cabhróidh siad le taighdeoirí modhanna níos éifeachtaí a fhorbairt chun samhlacha teanga a oiliúint chun a bhfeidhmíocht a fheabhsú tuilleadh.".

Léigh freisin:

Clarú
Fógra a thabhairt faoi
aoi

0 Comments
Léirmheasanna Leabaithe
Féach ar gach trácht