V čom je tento nástroj slabý

Čo vám kontrola nedáva

Produkt počíta s tým, že sa niekedy pomýli, a úlohou, ktorá z toho vyplýva, je ukázať vám kedy. Byť jasný v tom, čo hodnotenie prináša, znamená byť rovnako jasný v jeho obmedzeniach.

1. Skóre nie je záruka. Opisuje kontrolu, ktorá sa na danej replike skutočne vykonala, a nič mimo nej.
2. Hodnotiaci nástroj je jazykový model, rovnako ako prekladač. Ponúka názor jedného modelu na prácu iného modelu a môže sa mýliť rovnakým smerom ako preklad, ktorý hodnotí.
3. Vysoké skóre pri replike nerobí rozhovor vhodným pre tento nástroj. Tento úsudok je na vás a začína sa zoznamom rozhovorov, ktoré nikdy nespadajú do rozsahu, na stránke o ochranných opatreniach.
4. Tam, kde bolo niečo o danom človeku zachytené z rozhovoru a nie systému oznámené, je to pre pracovníka viditeľné a dá sa to opraviť. Veková kategória a pohlavie menia, ako o človeku preklad hovorí, takže neopravený predpoklad je chyba, ktorá sa prenáša do každej ďalšej repliky.

Známe obmedzenia

1. Pokrytie jazykov je nerovnomerné. Kvalita nie je vo všetkých prednastavených jazykoch rovnaká a jazyky s najmenším množstvom tréningových dát sú často tie, ktoré služba v prvej línii potrebuje najviac.
2. Nárečie a register sa líšia. Regionálny variant môže byť spracovaný horšie než spisovná podoba toho istého jazyka.
3. Je písaný, nie hovorený. Dnes obaja píšu. To vyhovuje prepážke aj telefónu; je to pomalšie než rozprávanie a predpokladá to, že obaja vedia vo svojom jazyku čítať a písať. Hlasový vstup a výstup sa vyvíja a prinesie so sebou vlastné obmedzenia.
4. Samotné hodnotenie je výstupom modelu. Skóre vernosti je názor jedného modelu na prácu iného modelu. Môže sa mýliť rovnakým smerom ako preklad, ktorý hodnotí.
5. Aktívne sa vyvíja. Správanie sa medzi verziami mení. Práve tak sa produkt zlepšuje, a znamená to, že kontrola, ktorú ste urobili pred pol rokom, nie je kontrolou, ktorú ste urobili dnes.

Údaje

Obsah rozhovoru sa musí na preklad odoslať do hosťovaného jazykového modelu a ukladá sa, aby bolo možné výmenu skontrolovať a auditovať. Pre službu, ktorá spracúva citlivé zverenia, je to dôležité, preto je to rozpísané v oznámení o ochrane súkromia.

Ak má organizácia obmedzenia, ktoré toto nespĺňa, povedzte to čo najskôr. Možnosti nasadenia sú otvorenou otázkou, na ktorej pracujeme, a radšej si obmedzenie vypočujeme, než by sme sa o ňom hádali.

Táto stránka opisuje súčasné obmedzenia produktu. Ak si myslíte, že je tu niečo nepresné, alebo ste narazili na obmedzenie, ktoré tu nie je uvedené, dajte nám vedieť. Projektu to pomôže viac než pochvala.