Proizvod koji radi, uz stalno istraživanje i razvoj
My Words postoji zbog problema težeg od prevođenja rečenice: kako održati razgovor preko jezičke granice kada su u pitanju nečije stanovanje, sigurnost ili zdravlje, i to tako da alat govori istinu o vlastitoj nesigurnosti. Taj problem nije riješen, pa istraživanje nije stalo kada je proizvod pušten u rad.
Odakle je došao
Rad je počeo kao Project Keystone, istraživanje kompanije INT6 Ltd o posredovanju u dvojezičnom razgovoru u stvarnom vremenu pomoću jezičkih modela. INT6 je izgradio aplikaciju za dokaz koncepta, Turnstone, koja je zatim razvijena u sistem koji radi i testirana u stvarnim uvjetima.
Aplikacija je u međuvremenu prenesena u C2 Discovery Labs CIC kako bi se držala za korist zajednice i društva. My Words je taj isti testirani sistem, s novim imenom i nastavkom rada, a razvoj se pod njim nastavlja.
Akademska validacija
Nezavisna validacija dogovara se s partnerskim univerzitetom u Britaniji. Namjera je raditi s postdiplomcima i akademskim istraživačkim laboratorijima na dvije stvari odjednom: na poboljšanju proizvoda i na provjeri radi li ono što ova stranica tvrdi.
Taj rad nije završen i ništa na ovoj stranici ne ovisi o njemu. Kada bude rezultata, uključujući i one koji nam ne idu u prilog, bit će objavljeni ovdje zajedno s metodom. Do tada tvrdnje na ovoj stranici tretirajte kao naše, a ne kao nezavisno provjerene.
Šta projekat zapravo pokušava saznati
Ovo su pitanja oko kojih je rad organizovan i ona koja bismo sutra stavili pred istraživačkog partnera. Nijedno nije riješeno.
Može li mašina držati kontekst kao prevodilac?
Ljudski prevodilac nosi prostoriju, historiju i registar a da ga niko ne pita. Koliko se od toga može učiniti eksplicitnim kao strukturirani kontekst i šta se gubi time što se čini eksplicitnim?
Može li sistem korisno znati kada griješi?
Ocjenjivanje vjernosti je model koji sudi modelu. Gdje se to poklapa sa stvarnom greškom, a gdje zakaže u istom smjeru kao i ono što provjerava?
Pomaže li pitanje za pojašnjenje ili prekida?
Pitati je načelno bolje nego nagađati. S uznemirenom osobom pred sobom, koliko puta možete prekinuti prije nego što ste narušili upravo ono što ste štitili?
Kako nesigurnost prikazati zauzetom profesionalcu?
Oznaka koja se ignoriše nije bolja od nikakve oznake. Oznaka koja zaustavlja razgovor u svakoj poruci je gora. Ovo je pitanje istraživanja interfejsa koliko i modeliranja.
Šta se mijenja kada uređaj drži sama osoba?
Čitati u vlastitim rukama, na vlastitom jeziku, drugačiji je čin od čitanja preko stola. Mijenja li to šta ljudi otkrivaju, pitanje je za mjerenje, a mi to još nismo izmjerili.
Gdje granica zaista stoji?
Tvrdimo da je ovo za rane razgovore, a ne za zakonske postupke. Tu granicu treba provjeriti prema onome što se stvarno dešava u službama, a ne braniti je zato što smo je zapisali.
Kako se rad ocjenjuje
Sistem stvara vlastite dokaze kao nusproizvod rada: svaka poruka nosi izvorni tekst, prijevod, ocjenu vjernosti, svaku izmjenu i svako pitanje za pojašnjenje. To čini nekoliko stvari mjerljivim bez dodatnog instrumentiranja.
- Koliko se često prijevod izmijeni prije isporuke i za koliko se ocjena pomjeri.
- Koliko često posrednik pita umjesto da odgovori i šta se u razgovoru dešava dalje.
- Kako se ocjene raspoređuju po jezicima, tako da neravnomjerna pokrivenost bude vidljiva umjesto da nestane u prosjeku.
- Gdje su radnici poništili prijedlog, ponavljali se ili odustali od razmjene.
Ono što nam instrumentacija ne može reći jest je li razgovor bio dobar. Za to treba sama služba i, gdje se to može uraditi kako valja, osoba s druge strane.
Kako se toga držimo
Test prije rada uživo. Novo ponašanje provjerava se na snimljenim i sintetičkim razgovorima prije nego što dođe do nečijeg stvarnog.
Mjerimo ono što je izmjereno. Bez udarne brojke o tačnosti koja zamjenjuje raspodjelu koju zaista možemo pokazati.
Objavljujemo metodu. Ono što naučimo o sigurnom radu zapisujemo da drugi mogu koristiti, uključujući i ono što nije uspjelo.
Negativni rezultati se broje. Funkcija koja je razgovore učinila lošijim jeste nalaz i tako se i objavljuje.
Šta je izgrađeno i radi
Ovo je aplikacija koja radi, a ne demonstracija. U grubim crtama, trenutno ima:
Posredovanje uživo, poruku po poruku
Prevođenje u toku, s historijom razgovora, strukturiranim činjenicama i stručnim kontekstom u obuhvatu svake poruke.
Ocjenjivanje vjernosti i samoispravka
Ocjene po poruci, izmjena ispod praga prije isporuke i traženje pojašnjenja od govornika kada je izvorni tekst dvosmislen.
Dva načina razgovora
Način s dijeljenim ekranom i upareni način u kojem se druga osoba pridružuje sa svog uređaja preko žive veze.
Lokalizovan interfejs
Tekstovi interfejsa prevedeni su na ponuđene jezike i keširani, pa ni sama površina nije samo na engleskom.
Računi, grupe i revizija
Grupisanje i ovlaštenja na nivou organizacije, prijava pristupnim ključem i lozinkom uz dvofaktorske kodove te revizijski zapis o razgovorima i administraciji.
Razgovori koji se mogu ponoviti
Snimljene razmjene mogu se ponovo pustiti na novoj verziji, pa se izmjena testira na stvarnom dijalogu, a ne na nečemu improvizovanom za demonstraciju.
Običan web stek
PHP i MariaDB aplikacija posluživana preko HTTPS-a. Namjerno neegzotična, da se o njoj može rasuđivati, da se može revidirati i hostati negdje drugdje ako to postane pravi odgovor.
Radite na ovome s nama
Tražimo postdiplomce i istraživačke laboratorije s pitanjem u ovom području, službe spremne da se njihova upotreba prouči i finansijere koji podržavaju rad zasnovan na dokazima o jeziku kao prepreci u dobijanju pomoći.