Starfhæf vara með áframhaldandi rannsóknum og þróun
My Words er til vegna vandamáls sem er erfiðara en að þýða setningu: að halda samtali saman yfir tungumálamörk þegar húsnæði, öryggi eða heilsa einhvers er í húfi, og gera það á þann hátt að sagt sé satt um eigin óvissu. Það vandamál er ekki leyst, svo rannsóknirnar stöðvuðust ekki þegar varan kom út.
Hvaðan það kom
Starfið hófst sem Project Keystone, rannsókn INT6 Ltd á rauntímamiðlun tvítyngdra samtala með mállíkönum. INT6 smíðaði frumgerðina, Turnstone, sem var síðan þróuð í starfhæft kerfi og prófuð við raunverulegar aðstæður.
Forritið hefur síðan verið fært inn í C2 Discovery Labs CIC svo að það sé í eigu í þágu samfélagsins. My Words er sama prófaða kerfið, undir nýju merki og haldið áfram, og þróunin heldur áfram undir því.
Fræðileg staðfesting
Verið er að skipuleggja óháða staðfestingu með breskum háskóla. Ætlunin er að vinna með framhaldsnemum og fræðilegum rannsóknastofum að tvennu í senn: að bæta vöruna og að ganga úr skugga um að hún geri það sem þessi vefur segir að hún geri.
Því starfi er ekki lokið og ekkert á þessum vef byggir á því. Þegar niðurstöður liggja fyrir, þar með taldar þær sem ganga gegn okkur, verða þær birtar hér ásamt aðferðinni. Þangað til ber að líta á fullyrðingar á þessum vef sem okkar eigin fremur en óháð staðfestar.
Hverju verkefnið er í raun að reyna að svara
Þetta eru spurningarnar sem starfið er byggt í kringum, og þær sem við myndum leggja fyrir rannsóknarsamstarfsaðila á morgun. Engri þeirra er svarað til fulls.
Getur vél haldið samhengi eins og túlkur gerir?
Mennskur túlkur ber með sér andrúmsloftið, forsöguna og málsniðið án þess að vera beðinn um það. Hversu mikið af því má gera skýrt sem skipulagt samhengi, og hvað glatast við að gera það skýrt?
Getur kerfi vitað með gagnlegum hætti að það hafi rangt fyrir sér?
Trúfestimat er líkan sem dæmir líkan. Hvar fylgir það raunverulegum villum, og hvar bregst það í sömu átt og það sem það á að athuga?
Hjálpar skýringarspurning eða truflar hún?
Að spyrja er betra en að giska, í grundvallaratriðum. Með aðþrengda manneskju fyrir framan sig, hversu oft má trufla áður en búið er að skemma það sem átti að verja?
Hvernig á að sýna önnum köfnum fagmanni óvissu?
Merki sem er hunsað er ekki betra en ekkert merki. Merki sem stöðvar samtalið í hverri lotu er verra. Þetta er ekki síður rannsóknarspurning um viðmót en um líkangerð.
Hvað breytist þegar manneskjan heldur sjálf á tækinu?
Að lesa í eigin höndum, á eigin tungumáli, er annað en að lesa yfir skrifborð. Hvort það breytir því sem fólk segir frá er mælingaratriði, og við höfum ekki mælt það enn.
Hvar liggja mörkin í raun og veru?
Við höldum því fram að þetta sé fyrir fyrstu samtölin en ekki lögbundin viðtöl. Þau mörk ætti að prófa gagnvart því sem raunverulega gerist í þjónustu, ekki verja af því að við skrifuðum þau niður.
Hvernig starfið er metið
Kerfið býr til sín eigin gögn sem aukaafurð af rekstrinum: hver lota geymir frumtexta, þýðingu, trúfestimat, hverja endurskoðun og hverja skýringarspurningu. Það gerir ýmislegt mælanlegt án þess að bæta við nokkrum mælibúnaði.
- Hversu oft þýðing er endurskoðuð áður en hún er afhent, og hversu mikið matið breytist.
- Hversu oft miðlarinn spyr í stað þess að svara, og hvað samtalið gerir næst.
- Hvernig einkunnir dreifast eftir tungumálum, þannig að ójöfn þekja komi í ljós í stað þess að hverfa inn í meðaltal.
- Hvar starfsfólk tók fram fyrir hendurnar á kerfinu, endurtók sig eða hætti við samskiptin.
Það sem mælingarnar geta ekki sagt okkur er hvort samtalið hafi verið gott. Til þess þarf þjónustuna sjálfa og, þar sem það er hægt með sómasamlegum hætti, manneskjuna hinum megin við það.
Hvernig við höldum okkur við efnið
Prófa fyrir notkun. Ný hegðun er reynd gagnvart upptekinum og tilbúnum samtölum áður en hún mætir raunverulegu samtali nokkurs manns.
Mæla það sem var mælt. Engin ein nákvæmnistala sett í stað dreifingar sem við getum í raun sýnt.
Birta aðferðina. Það sem við lærum um að gera þetta á öruggan hátt er skrifað upp svo aðrir geti nýtt sér það, þar með talið það sem gekk ekki upp.
Neikvæðar niðurstöður telja. Eiginleiki sem gerði samtöl verri er niðurstaða, og er greint frá sem slíkri.
Hvað er smíðað og í rekstri
Þetta er starfhæft forrit, ekki sýnidæmi. Í grófum dráttum hefur það nú:
Beina miðlun lotu fyrir lotu
Streymandi þýðing með samtalssögu, skipulögðum staðreyndum og fagsamhengi innan seilingar í hverri lotu.
Trúfestimat og sjálfsendurskoðun
Einkunn fyrir hverja lotu, endurskoðun áður en afhent er ef einkunn er undir viðmiði, og skýringarspurning til baka til mælandans þegar frumtextinn er tvíræður.
Tvö samtalsviðmót
Samskjáshamur og pörunarhamur þar sem hinn aðilinn tengist frá eigin tæki um beina tengingu.
Staðfært viðmót
Viðmótstextar þýddir yfir á grunntungumálin og geymdir í skyndiminni, svo viðmótið sjálft er ekki eingöngu á ensku.
Aðgangar, hópar og aðgerðaskrá
Hópun og heimildir á vettvangi stofnunar, auðkenning með aðgangslyklum og lykilorðum ásamt tveggja þátta kóðum, og aðgerðaskrá yfir samtöl og stjórnun.
Endurspilanleg samtöl
Skráð samskipti má endurspila gagnvart nýrri útgáfu, þannig að breyting sé prófuð á raunverulegum samræðum en ekki á einhverju sem búið var til fyrir sýninguna.
Venjulegur vefhugbúnaður
Forrit í PHP og MariaDB, afhent um HTTPS. Vísvitandi óframandi, svo hægt sé að rökræða það, endurskoða það og hýsa það annars staðar en það situr í dag ef það reynist rétta svarið.
Vinnið að þessu með okkur
Við leitum að framhaldsnemum og rannsóknastofum með spurningu á þessu sviði, að þjónustum sem eru tilbúnar að láta rannsaka notkun sína, og að styrkveitendum sem styðja gagnreynt starf um tungumál sem hindrun í vegi þess að fá hjálp.