Darbojošs produkts ar nepārtrauktu pētniecību un attīstību
My Words pastāv tāpēc, ka ir grūtāka problēma nekā teikuma tulkošana: noturēt sarunu kopā pāri valodas robežai, kad uz spēles ir kāda cilvēka mājoklis, drošība vai veselība, un darīt to tā, lai tiktu pateikta patiesība par pašas sistēmas nenoteiktību. Šī problēma nav atrisināta, tāpēc pētniecība neapstājās brīdī, kad produkts nonāca lietošanā.
No kurienes tas nāca
Darbs sākās kā Project Keystone, INT6 Ltd pētījums par reāllaika divvalodu sarunas mediāciju, izmantojot valodas modeļus. INT6 izveidoja koncepcijas pierādījuma lietotni Turnstone, kas pēc tam tika attīstīta par darbojošos sistēmu un pārbaudīta reālos apstākļos.
Kopš tā laika lietotne ir pārcelta uz C2 Discovery Labs CIC, lai tā tiktu turēta kopienas un sabiedrības labumam. My Words ir tā pati pārbaudītā sistēma ar jaunu zīmolu, un izstrāde turpinās tās ietvaros.
Akadēmiskā validācija
Kopā ar partneri no Apvienotās Karalistes universitātes tiek organizēta neatkarīga validācija. Nolūks ir kopā ar maģistrantiem, doktorantiem un akadēmiskajām pētniecības laboratorijām strādāt vienlaikus pie divām lietām: uzlabot produktu un pārbaudīt, vai tas dara to, ko šī vietne apgalvo.
Šis darbs nav pabeigts, un nekas šajā vietnē uz to nebalstās. Kad būs rezultāti, tostarp tādi, kas ir mums nelabvēlīgi, tie tiks publicēti šeit kopā ar metodi. Līdz tam uztveriet šīs vietnes apgalvojumus kā mūsu pašu, nevis kā neatkarīgi pārbaudītus.
Ko projekts patiesībā cenšas noskaidrot
Šie ir jautājumi, ap kuriem darbs ir organizēts, un tie paši, ko rīt liktu priekšā pētniecības partnerim. Neviens no tiem nav atrisināts.
Vai mašīna spēj noturēt kontekstu tāpat kā tulks?
Cilvēks tulks bez atgādinājuma nes līdzi telpas noskaņu, notikumu vēsturi un valodas reģistru. Cik daudz no tā var skaidri izteikt kā strukturētu kontekstu, un kas tiek zaudēts, to izsakot?
Vai sistēma var lietderīgi zināt, kad tā kļūdās?
Atbilstības vērtēšana ir modelis, kas vērtē modeli. Kur tas sakrīt ar reālu kļūdu, un kur tas kļūdās tajā pašā virzienā kā tas, ko pārbauda?
Vai precizējošs jautājums palīdz vai pārtrauc?
Principā jautāt ir labāk nekā minēt. Bet, ja jūsu priekšā ir satraukts cilvēks, cik reižu var pārtraukt, pirms ir sabojāts tas, ko centāties pasargāt?
Kā nenoteiktība jāparāda aizņemtam profesionālim?
Apzīmējums, ko ignorē, nav labāks par nekādu apzīmējumu. Apzīmējums, kas aptur sarunu ik replikā, ir sliktāks. Tas ir tikpat lielā mērā saskarnes kā modelēšanas pētniecības jautājums.
Kas mainās, kad ierīci tur pats cilvēks?
Lasīt savās rokās, savā valodā, ir cita darbība nekā lasīt pāri galdam. Vai tas maina to, ko cilvēki atklāj, ir mērījumu jautājums, un mēs to vēl neesam izmērījuši.
Kur patiesībā atrodas robeža?
Mēs apgalvojam, ka tas ir paredzēts sākotnējām, nevis normatīvi noteiktām sarunām. Šī robeža ir jāpārbauda pret to, kas dienestos patiešām notiek, nevis jāaizstāv tāpēc, ka esam to pierakstījuši.
Kā darbs tiek izvērtēts
Sistēma darbības blakusproduktā rada pati savus pierādījumus: katrai replikai ir oriģināls, tulkojums, atbilstības vērtējums, iespējamie labojumi un iespējamais precizējošais jautājums. Tas padara vairākas lietas izmērāmas, neuzstādot neko papildu.
- Cik bieži tulkojums tiek pārlabots pirms nogādāšanas un par cik mainās vērtējums.
- Cik bieži starpnieks jautā, nevis atbild, un kas ar sarunu notiek pēc tam.
- Kā vērtējumi sadalās pa valodām, lai nevienmērīgs pārklājums parādītos, nevis izzustu vidējā rādītājā.
- Kur darbinieki neņēma vērā ieteikto, atkārtojās vai pārtrauca sarunu.
Ko mērījumi nevar pateikt, ir tas, vai saruna bija laba. Tam vajadzīgs pats dienests un, kur to var izdarīt pienācīgi, arī cilvēks otrā pusē.
Kā mēs to prasām no sevis
Pārbaude pirms darbības. Jauna uzvedība tiek pārbaudīta pret ierakstītām un sintētiskām sarunām, pirms tā nonāk kāda reālā sarunā.
Mērīt to, kas tiešām izmērīts. Nekādu virsraksta precizitātes skaitļu, kas aizstāj sadalījumu, ko varam patiešām parādīt.
Publicēt metodi. Tas, ko uzzinām par šī darba drošu veikšanu, tiek pierakstīts, lai citi to varētu izmantot, tostarp arī tas, kas neizdevās.
Negatīvi rezultāti ir svarīgi. Funkcija, kas padarīja sarunas sliktākas, ir atradums, un par to arī tiek ziņots kā par atradumu.
Kas ir izveidots un darbojas
Šī ir darbojoša lietotne, nevis demonstrācija. Vispārīgi runājot, pašlaik tajā ir:
Tiešsaistes mediācija replika pēc replikas
Straumēta tulkošana, kurā katrā replikā tiek ņemta vērā sarunas vēsture, strukturēti fakti un jomas konteksts.
Atbilstības vērtēšana un pašlabošanās
Vērtējumi katrai replikai, pārlabošana pirms nogādāšanas, ja vērtējums ir zem sliekšņa, un precizējošs jautājums runātājam, ja teiktais ir divdomīgs.
Divas sarunas saskarnes
Kopīga ekrāna režīms un sapārotais režīms, kurā otrs cilvēks pievienojas no savas ierīces tiešā savienojumā.
Lokalizēta saskarne
Saskarnes teksti ir iztulkoti sākotnēji sagatavotajās valodās un saglabāti kešatmiņā, tāpēc arī pati saskarne nav tikai angliska.
Konti, grupas un audits
Grupēšana un tiesības organizācijas līmenī, piekļuves atslēgu un paroļu autentifikācija ar divfaktoru kodiem, kā arī audita žurnāls par sarunām un administrēšanu.
Atkārtoti atskaņojamas sarunas
Ierakstītas sarunas var atkārtot ar jaunu versiju, tāpēc izmaiņas tiek pārbaudītas uz reāla dialoga, nevis uz kaut kā demonstrācijai improvizēta.
Parasts tīmekļa tehnoloģiju kopums
PHP un MariaDB lietotne, kas tiek piegādāta pa HTTPS. Apzināti neeksotiska, lai to varētu izprast, auditēt un izvietot arī citur, nevis tur, kur tā atrodas šodien, ja tā izrādīsies pareizā atbilde.
Strādājiet pie tā kopā ar mums
Meklējam maģistrantus, doktorantus un pētniecības laboratorijas ar jautājumu šajā jomā, dienestus, kas ir gatavi ļaut izpētīt savu lietojumu, un finansētājus, kas atbalsta uz pierādījumiem balstītu darbu par valodu kā šķērsli palīdzības saņemšanai.