W czym to narzędzie jest słabe

Czego sprawdzanie nie daje

Produkt zakłada, że czasem się pomyli, a zadaniem, które z tego wynika, jest pokazanie kiedy. Jasność co do tego, co daje ocena, wymaga takiej samej jasności co do jej ograniczeń.

1. Ocena nie jest gwarancją. Opisuje sprawdzenie faktycznie wykonane na danej turze i nic poza tym.
2. Oceniający jest modelem językowym, tak jak tłumaczący. Podaje opinię jednego modelu o pracy drugiego i może mylić się w tym samym kierunku co tłumaczenie, które ocenia.
3. Wysoka ocena tury nie sprawia, że rozmowa nadaje się dla tego narzędzia. Ta ocena należy do Państwa, a punktem wyjścia jest lista rozmów, które nigdy nie wchodzą w grę, na stronie o zabezpieczeniach.
4. Tam, gdzie coś o danej osobie zostało wychwycone z rozmowy, a nie podane systemowi, jest to widoczne dla pracownika i można to poprawić. Przedział wieku i płeć zmieniają sposób, w jaki tłumaczenie mówi o danej osobie, więc niepoprawione założenie jest błędem przenoszonym do każdej kolejnej tury.

Znane ograniczenia

1. Pokrycie językowe jest nierówne. Jakość nie jest jednakowa we wszystkich wprowadzonych językach, a języki z najmniejszą ilością danych treningowych to często te, których instytucja pierwszego kontaktu potrzebuje najbardziej.
2. Dialekt i rejestr bywają różne. Odmiana regionalna może być obsłużona gorzej niż standardowa forma tego samego języka.
3. To tekst, a nie mowa. Dziś obie osoby piszą. Sprawdza się to przy biurku i przy telefonie; jest wolniejsze niż mówienie i zakłada, że obie osoby potrafią czytać i pisać we własnym języku. Mowa na wejściu i wyjściu jest w budowie i przyniesie własne ograniczenia.
4. Sama ocena też jest wynikiem modelu. Ocena wierności to opinia jednego modelu o pracy drugiego. Może mylić się w tym samym kierunku co tłumaczenie, które ocenia.
5. Produkt jest aktywnie rozwijany. Zachowanie zmienia się między wydaniami. Tak właśnie się poprawia, ale oznacza to, że sprawdzenie wykonane pół roku temu nie jest sprawdzeniem wykonanym dzisiaj.

Dane

Aby treść rozmowy została przetłumaczona, musi zostać wysłana do hostowanego modelu językowego, a następnie jest przechowywana, aby wymianę zdań można było przejrzeć i zaudytować. Dla instytucji przyjmującej wrażliwe informacje ma to znaczenie, dlatego opisano to w informacji o prywatności.

Jeśli organizacja ma ograniczenia, których to nie spełnia, prosimy powiedzieć o tym wcześnie. Warianty wdrożenia to otwarta kwestia, nad którą pracujemy, i wolimy usłyszeć o ograniczeniu, niż się z nim spierać.

Ta strona opisuje bieżące ograniczenia produktu. Jeśli uważają Państwo, że coś tu jest nieścisłe, albo napotkali Państwo ograniczenie, którego nie wymieniono, prosimy nam o tym powiedzieć. To dla projektu bardziej użyteczne niż komplement.