Príomhloingseoireacht

Conas a oibríonn eispéiris ghutha fíor-ama ar scála

Múnlaíonn uainiú, briseadh isteach, tost agus téarnamh an t-eispéireas a oiread céanna leis na focail.

Achoimre feidhmiúcháin

  • Tugann guth fíor-ama bealach iomlán difriúil do dhaoine chun idirghníomhú le feidhmchláir atá cumhachtaithe ag AI. In ionad clóscríobh nó nascleanúint a dhéanamh trí roghchláir, labhraíonn úsáideoirí go nádúrtha agus faigheann siad freagraí le luas fíor-ama agus comhthéacs mothúchánach.

  • Is éard atá i gceist le heispéireas iontach gutha fíor-ama a chruthú ná idirghníomhú beo a chomhordú. Seo an áit a dtosaíonn fíorobair an táirge. Tá an t-eispéireas fíor-ama láithreach agus nádúrtha; is dúshlán innealtóireachta ar leith é feidhmchlár a chruthú a chothaíonn é sin.

  • Níl sa tsamhail ach cuid amháin den chóras. Teastaíonn ó fheidhmchláir táirgthe bonneagar atá dúchasach don ghuth, deighilt shoiléir idir sreabhadh comhrá agus réasúnaíocht níos doimhne, agus rialú imeacht-tiomáinte chun an seisiún a bhainistiú de réir mar a tharlaíonn sé.

  • Sna cosaintí agus sa mheastóireacht atá cuid mhór den deacracht atá fágtha. Caithfidh seiceálacha sábháilteachta coinneáil suas le fuaim bheo, agus is deacair cáilíochtaí neamhbhuana comhrá amhail uainiú, ton agus sreabhadh a mheas le straitéisí traidisiúnta.

Réamhrá: guth fíor-ama mar réimse táirge

Oibríonn formhór fheidhmchláir AI ghuthchumasaithe an lae inniu ar an mbealach céanna fós: téann caint isteach, tagann téacs amach, déanann samhail machnamh, agus léann guth sintéisithe an freagra amach. Oibríonn sé. Ach mothaíonn an t-idirghníomhú díreach mar atá sé: píblíne, ní comhrá.

Athraíonn guth fíor-ama é sin. Labhraíonn úsáideoirí go nádúrtha agus faigheann siad freagraí a chuireann luas, ton agus comhthéacs mothúchánach in iúl. Tá an t-eispéireas níos tapa agus níos réidhe ná píblínte slabhrúla urlabhra-go-téacs; is cosúla é le labhairt le duine ná le córas a oibriú.

Chonaiceamar é seo ag cruthú deiseanna táirge a mbíonn ailtireachtaí píblíne ag streachailt leo. Is féidir le gníomhairí gutha fíor-ama idirghníomhaíochtaí seirbhíse custaiméirí a láimhseáil a d’éileodh roghchláir fhada shriantacha IVR agus aistrithe idir rannóga murach sin. Is féidir leo cóitseáil, ionduchtú agus cúnamh inrochtaineachta a chur ar fáil thar mheáin éagsúla, agus tuilleadh nach iad. Aon áit a bhfuil buntáiste ag comhrá labhartha ar chomhéadain téacsbhunaithe, is fiú guth fíor-ama a fhorbairt.

Slabhrúil seachas fíor-am: cad a athraíonn sa chúlra

Úsáideann formhór na bhfeidhmchlár guthchumasaithe an ‘cur chuige slabhrúil’: píblíne samhlacha ar leith d’urlabhra-go-téacs, do phróiseáil teanga agus do théacs-go-hurlabhra. Oibríonn na córais seo go maith agus cruthaíonn siad réimse leathan deiseanna, ach ní bhíonn an fhuaim ach ar imeall an phróisis. Cuireann na céimeanna ar leith struchtúr agus aga folaigh éigeantach leis, rud a chruthaíonn idirghníomhú nach bhfuil chomh nádúrtha le fíorchomhrá.

Glacann guth fíor-ama cur chuige difriúil. In ionad samhlacha ar leith a úsáid chun éisteacht, machnamh agus labhairt, láimhseálann samhail amháin na trí cinn go dúchasach agus tuigeann agus gineann sí fuaim agus tras-scríbhinní go comhuaineach. Tarlaíonn ionchur agus aschur go leanúnach, rud a ligeann don chóras freagairt le huainiú nádúrtha agus mothúchán a chur in iúl agus rithim réalaíoch comhrá bheo a choinneáil. Mar thoradh air sin, bíonn uainiú, ton agus láimhseáil bristeacha isteach ina ngnéithe lárnacha den táirge.

Léaráid a dhéanann comparáid idir píblíne ghutha shlabhraithe agus samhail ghutha fíor-ama a aschuireann fuaim agus tras-scríbhinní go díreach ó fhuaim an úsáideora.

Tá an t-eispéireas fíor-ama tarraingteach mar go mothaíonn sé láithreach; tá sé deacair mar nach bhfanann aon rud lena sheal. Teastaíonn níos mó ná giniúint fuaime thapa chruinn chun tacú leis. Gach rud eile an chuid is deacra. Feidhmíonn an tsamhail laistigh de sheisiún beo; ní mór do gach rud timpeall uirthi—staid, sábháilteacht, ceolfhoirniú agus rialú—feidhmiú taobh leis an gcomhrá ar an luas beo céanna.

I bhfeidhmchlár gutha slabhrúil, tugann comhráite bunaithe ar shealaíocht struchtúr soiléir anonn is anall duit. Labhraíonn an t-úsáideoir, freagraíonn an córas, agus tosaíonn an chéad chéim eile. Ní thugann guth fíor-ama an struchtúr sin duit. Féadfaidh an bheirt a bheith ag caint ag an am céanna, nó d’fhéadfadh ceachtar acu a bheith ina thost. Féadfaidh úsáideoir briseadh isteach i lár freagra nó ceist leantach a chur sula mbeidh an córas críochnaithe ag labhairt. Ní cásanna imeallacha iad bristeacha isteach a thuilleadh; bíonn siad ina bpríomhphatrún idirghníomhaíochta.

Is é an patrún seo a fhágann gur fadhb chomhordúcháin iad feidhmchláir fíor-ama go bunúsach, agus gurb ionann tábhacht an chórais timpeall na samhla agus tábhacht na samhla féin.

A bhfuil de dhíth i dtáirgeadh

Chun tacú leis an gcineál seo córais ar scála, ní mór dearadh sonrach a dhéanamh don idirghníomhú beo. Tá trí chuid i gceist a fheictear arís agus arís eile i gcórais a chuirtear i dtáirgeadh.

Bonneagar atá dúchasach don ghuth

Ní mór do sheisiúin ghutha fíor-ama sruthú fuaime, sealaíocht, bristeacha isteach, saolré an naisc agus cur i gcrích an ghníomhaire a láimhseáil. Ag brath ar an áit a n-imscartar an feidhmchlár, d’fhéadfadh tacaíocht teileafónaíochta a bheith riachtanach freisin. Is bunchodanna den eispéireas iad seo agus tá siad lárnach chun an feidhmchlár a mhéadú ar scála.

Is é ciseal seisiúin atá dúchasach don ghuth an chéad riachtanas. Tugann creataí Cumarsáide Fíor-Ama (RTC) áit don fheidhmchlár chun rannpháirtithe a bhainistiú, fuaim a shruthú agus gníomhairí a rith i dtimpeallacht teileafónaíochta. De réir ár dtaithí, bhí Livekit thar a bheith úsáideach. Soláthraíonn sé cruach WebRTC íseal-aga-folaigh ina bhfuil cealú torainn ardchaighdeáin agus laghdú giodaim mar ghnéithe réamhshocraithe. Is annamh is fiú an chastacht bhreise a bhaineann leis an gciseal seo a chur i bhfeidhm tú féin.

Scar an labhairt ón machnamh (go ceann tamaill ar a laghad)

Is éard atá i gceist go bunúsach le hailtireacht ilghníomhaire do ghuth fíor-ama ná freagrachtaí a scaradh.

Tá samhlacha gutha fíor-ama an-éifeachtach maidir le fuaim chomhrá a shruthú, ach níl siad optamaithe don réasúnaíocht níos doimhne. Is fearr tascanna amhail glaoch ar uirlisí, aisghabháil nó cinnteoireacht struchtúrtha a chur i gcrích le samhail eile.

Patrún úsáideach is ea ailtireacht an fhreagróra–smaointeora.

Is é an freagróir an gníomhaire gutha fíor-ama. Tá sé freagrach as an idirghníomhú beo a chothú: éisteacht, labhairt, bristeacha isteach a láimhseáil agus sreabhadh an chomhrá a chaomhnú. Tugann a dhearadh tús áite do fhreagrúlacht, soiléireacht agus leanúnachas mothúchánach.

Léaráid d’ailtireacht freagróra–smaointeora ina sreabhann fuaim an úsáideora chuig freagróir chun fuaim a aschur, agus smaointeoir ag comhordú uirlisí agus ag cur comhthéacs ar ais chuig an bhfreagróir.

Is gníomhaire ar leith é an smaointeoir, faoi thiomáint ag samhail atá in ann réasúnaíocht a dhéanamh. Feidhmíonn sé lasmuigh den phríomhshruth agus láimhseálann sé tascanna amhail úsáid uirlisí, aisghabháil agus pleanáil. Is féidir leis an bhfreagróir dul i muinín an smaointeora nuair is gá agus na torthaí a fhí isteach sa chomhrá.

I gcásanna áirithe, féadfaidh an smaointeoir an réasúnaíocht a láimhseáil go díreach. I gcásanna eile, féadfaidh sé feidhmiú mar cheolfhoirneoir do shraith gníomhairí speisialaithe. Is é an príomhsmaoineamh go ndéanann samhail atá níos oiriúnaí do thascanna réasúnaíochta an obair seo.

Tá an buntáiste simplí: fanann an freagróir tapa, comhráiteach agus dírithe, agus láimhseálann an smaointeoir obair a dteastaíonn níos mó ama, comhthéacs nó struchtúir uaithi.

D’fhéadfadh forbairtí amach anseo i samhlacha ceannródaíocha deireadh a chur leis an ngá leis an gcur chuige seo. Faoi láthair, áfach, feicimid go sáraíonn an patrún seo cuir chuige a úsáideann gníomhaire aonair go comhsheasmhach.

Rialú imeacht-tiomáinte

Cruthaíonn córais ghutha fíor-ama sruth leanúnach imeachtaí go nádúrtha.

Tosaíonn úsáideoirí ag labhairt, glacann siad sos agus briseann siad isteach. Nuashonraítear tras-scríbhinní de réir a chéile. Gintear agus sruthaítear freagraí. Tagann torthaí seachtracha isteach. Athraíonn na dálaí laistigh den seisiún. Is féidir iad seo go léir a ghabháil, a shruthú agus a stóráil mar phríomhimeachtaí a chruthaigh staid reatha shonrach an chomhrá. Gan iad, caillimid an cumas idirghabhálacha mionsonraithe spriocdhírithe a dhéanamh.

Tugann cur chuige imeacht-tiomáinte bealach soiléir chun é seo a bhainistiú. Gabhann an córas imeachtaí de réir mar a tharlaíonn siad, nuashonraíonn sé staid an tseisiúin agus spreagann sé na gníomhartha leantacha cuí.

Coinníonn láimhseálaithe éadroma an chonair fíor-ama freagrúil, agus spreagtar tascanna níos casta—amhail meaisíní staide a nuashonrú, méadrachtaí a logáil, faisnéis íogair a bhaint, bunachair sonraí a nuashonrú agus seisiún a fhágáil—mar thascanna cúlra aisioncronacha.

De réir mar a chuirtear gnéithe leis, is féidir líon na dtascanna cúlra seo a mhéadú go tapa. Féadfaidh fiú athruithe beaga táirge sreafaí imeachtaí agus spleáchais nua a chruthú. Tá ailtireacht dhea-struchtúrtha don chomhreathaíocht seo tábhachtach chun an córas a choinneáil sothuigthe agus iontaofa de réir mar a fhorbraíonn sé.

Tacaíonn an cur chuige imeacht-tiomáinte seo le ceist ríthábhachtach táirge freisin: an comhrá féin a mhúnlú. Déanann córas fuaime fíor-ama níos mó ná freagraí a ghiniúint; bainistíonn sé luas, láimhseálann sé tost agus bristeacha isteach, agus socraíonn sé conas agus cathain ba cheart deireadh a chur le seisiún. Is cuid d’eispéireas an táirge iad na hiompraíochtaí seo agus téann dearadh follasach chun tairbhe dóibh.

De réir mar a athraíonn staid an tseisiúin bunaithe ar líon na sealanna, ar an am atá caite nó ar iompar an úsáideora, is féidir leis an gcóras treoir spriocdhírithe a chur chuig an bhfreagróir. D’fhéadfadh sé leid a thabhairt don ghníomhaire cabhrú le húsáideoir críoch a chur leis an gcomhrá agus teorainn an tseisiúin ag druidim, nó soiléiriú a thabhairt má théann an t-idirghníomhú i bhfostú. Tá na hidirghabhálacha seo éadrom, ach tugann siad cuspóir agus comhleanúnachas don eispéireas.

Coinníonn córas dea-dheartha léargas soiléir ar staid an tseisiúin: cé atá ag labhairt, conas atá an comhrá ag dul ar aghaidh agus cé na coinníollacha atá comhlíonta. Cumasaíonn an staid seo, a nuashonraíonn an sruth imeachtaí go leanúnach, an treoir cheart ag an am ceart.

Caithfidh cosaintí feidhmiú ar luas fíor-ama

Ní rogha iad cosaintí in AI a bhíonn os comhair úsáideoirí. Bainistíonn siad sábháilteacht, comhlíonadh, mí-úsáid agus iontaofacht. I gcóras bunaithe ar shealaíocht, is léir cathain is féidir iad a rith: tar éis don úsáideoir labhairt nó sula seachadtar freagra.

Cuireann guth fíor-ama deireadh le formhór na seicphointí áisiúla sin. Tagann ionchur an úsáideora isteach go leanúnach. D’fhéadfadh an t-aschur fuaime a bheith á shruthú cheana féin. Is minic a bhíonn na tras-scríbhinní críochnaithe chun deiridh ar an bhfuaim. Má fhanann an córas le teachtaireachtaí iomlána sula seiceálann sé iad, ní bhíonn cuma fíor-ama ar an gcomhrá a thuilleadh.

Ina ionad sin, ní mór do na cosaintí feidhmiú taobh leis an gcomhrá chun an t-idirghníomhú nádúrtha a chaomhnú. Cur chuige amháin is ea fuaim a shruthú isteach i maolán agus blúirí tras-scríbhinne a mheas go haisioncronach de réir mar a bhíonn siad ar fáil. Ligeann sé sin do sheiceálacha sábháilteachta feidhmiú ar luas atá gar don fhíor-am gan bac a chur ar an idirghníomhú.

Léaráid a dhéanann comparáid idir cosaintí fíor-ama a fheidhmíonn ar fhuaim bheo agus ar bhlúirí tras-scríbhinne le linn seisiúin, agus cosaintí bunaithe ar shealaíocht a sheiceálann ionchur agus aschur timpeall ar fhreagra.

Nuair a spreagtar cosaint, is féidir leis an gcóras freagairt sa chomhthéacs tríd an gcomhrá a atreorú, an t-iompar a choigeartú nó deireadh a chur leis an seisiún más cuí. Cinntíonn sé seo go bhfeidhmíonn na cosaintí i bhfíor-am gan dochar a dhéanamh d’eispéireas an úsáideora.

tá meastóireachtaí fíor-ama deacair

Is í an ghné is deacra de chóras comhrá fíor-ama a mheas ná nach féidir cuid de na cáilíochtaí is tábhachtaí—uainiú, briseadh isteach, sreabhadh agus ton— a thomhas trí thástáil tras-scríbhinne amháin.

Cuireann gnáthphíblínte meastóireachta cásanna réalaíocha isteach sa chóras, breathnaíonn siad ar na haschuir agus tugann siad scór dóibh. Tá sé seo simplí i gcórais téacsbhunaithe nó i gcórais fuaime shlabhraithe: seol téacs isteach agus seiceáil an téacs a thagann amach. I bhfíor-am, is fuaim bheo an t-ionchur, agus baineann na dinimicí comhrá is tábhachtaí leis an am: an chaoi a láimhseálann an gníomhaire caint chomhthráthach, cé chomh tapa a fhreagraíonn sé agus an chaoi a dtagann sé chuige féin tar éis briseadh isteach.

Tugann tástáil láimhe—labhairt go díreach leis an ngníomhaire—na cáilíochtaí seo san áireamh, ach ní féidir í a mhéadú ar scála. Is féidir uathoibriú bunaithe ar thras-scríbhinní a mhéadú ar scála, ach baintear de an comhartha a dhéanann idirdhealú idir eispéireas maith agus drocheispéireas fíor-ama.

Ní leor aon mhodh amháin. Is é an freagra praiticiúil ná meascán modhanna:

  • Meastóireachtaí gníomhaire le gníomhaire: bíonn an dara gníomhaire fíor-ama, ar tugadh treoir dó pearsa úsáideora ar leith a ghlacadh, i mbun comhrá leis an gcóras atá á thástáil. Tugann tríú LLM, ag feidhmiú mar bhreitheamh, scór don idirghníomhú. Déanann sé seo tástáil ar an gconair fuaime iomlán, lena n-áirítear uainiú agus láimhseáil bristeacha isteach, ar scála.

  • Méadrachtaí neamhfheidhmiúla: tugann an t-am go dtí an chéad fhuaim agus anailís meoin ar an tras-scríbhinn tomhais chainníochtúla ionadacha ar cháilíocht an chomhrá.

  • Athbhreithniú cáilíochtúil láimhe: tá sé riachtanach fós chun fadhbanna nach dtugann méadrachtaí uathoibrithe faoi deara a aimsiú, go háirithe maidir le ton agus nádúrthacht.

Ní chlúdaíonn aon mhodh amháin gach rud. Chun gníomhairí fíor-ama a chur i dtáirgeadh, ní mór na trí mhodh a úsáid le chéile. Fiú ansin, níl na huirlisí chun fuaim fíor-ama a mheas chomh forbartha leis na huirlisí d’AI téacsbhunaithe.

Conclúid

Athraíonn guth fíor-ama cruth an táirge. Tá an t-uainiú, an briseadh isteach, an tost agus an téarnamh chomh tábhachtach céanna d’úsáideoirí leis na focail.

Ciallaíonn sé sin nach bhfuil sa tsamhail ach cuid den chóras. Teastaíonn ó ghuth fíor-ama i dtáirgeadh ciseal seisiúin atá dúchasach don ghuth, deighilt shoiléir idir labhairt agus réasúnaíocht, agus rialú imeacht-tiomáinte ar an seisiún beo. Is iad na cosaintí an tranglam aga folaigh fós, ach is féidir cuid mhór den eispéireas fíor-ama a chaomhnú le cuir chuige chruthaitheacha.

Is í an mheastóireacht an chuid is laige den chruach fós. Níl aon mhodh seanbhunaithe ann fós chun na cáilíochtaí a chruthaíonn eispéireas maith gutha fíor-ama a thástáil: uainiú, ton, láimhseáil bristeacha isteach agus sreabhadh comhrá. Go dtí go mbeidh a leithéid ann, beidh ar fhoirne a úsáideann an teicneolaíocht tástálacha uathoibrithe, trialacha gníomhaire le gníomhaire agus athbhreithniú láimhe a chur le chéile.

Údair

Oliver Wood, Sam Smith