Waar dit slecht in is

Wat de controle u niet geeft

Het product gaat ervan uit dat het er soms naast zit, en de opdracht die daaruit volgt is u laten zien wanneer. Duidelijk zijn over wat de score u geeft, betekent even duidelijk zijn over de grenzen ervan.

1. Een score is geen garantie. Zij beschrijft de controle die daadwerkelijk op die beurt is uitgevoerd, en niets over de wereld daarbuiten.
2. De beoordelaar is een taalmodel, net als de vertaler. Zij biedt het oordeel van het ene model over het werk van het andere, en zij kan in dezelfde richting fout zitten als de vertaling die zij beoordeelt.
3. Een hoge score op een beurt maakt het gesprek nog niet geschikt voor dit hulpmiddel. Dat oordeel is aan u, en de lijst met gesprekken die er nooit onder vallen op de pagina met waarborgen is het beginpunt.
4. Is iets over de persoon uit het gesprek afgeleid in plaats van aan het systeem verteld, dan is dat zichtbaar voor de medewerker en kan het worden gecorrigeerd. Leeftijdscategorie en geslacht bepalen hoe een vertaling naar iemand verwijst, dus een aanname die niet wordt gecorrigeerd is een fout die in elke volgende beurt doorwerkt.

Bekende beperkingen

1. De taaldekking is ongelijk. De kwaliteit is niet voor elke opgenomen taal gelijk, en de talen met de minste trainingsdata zijn vaak de talen die een eerstelijnsdienst het hardst nodig heeft.
2. Dialect en register wisselen. Een regionale variëteit wordt mogelijk minder goed verwerkt dan de standaardvorm van dezelfde taal.
3. Het is geschreven, niet gesproken. Vandaag typen beide personen. Dat past bij een balie en een telefoon; het is langzamer dan praten, en het veronderstelt dat beiden hun eigen taal kunnen lezen en schrijven. Spraak in en uit wordt gebouwd en zal zijn eigen beperkingen meebrengen.
4. Scoren is zelf ook uitvoer van een model. Een betrouwbaarheidsscore is het oordeel van het ene model over het werk van het andere. Zij kan in dezelfde richting fout zitten als de vertaling die zij beoordeelt.
5. Het wordt actief doorontwikkeld. Het gedrag verandert tussen versies. Zo verbetert het product, en het betekent dat een controle van een halfjaar geleden geen controle van vandaag is.

Gegevens

Gespreksinhoud moet naar een gehost taalmodel worden gestuurd om vertaald te worden, en wordt opgeslagen zodat de uitwisseling terug te lezen en te auditen is. Voor een dienst die met gevoelige informatie werkt is dat van belang, en daarom staat het uitgeschreven in de privacyverklaring.

Heeft een organisatie randvoorwaarden waaraan dit niet voldoet, zeg dat dan vroeg. Uitrolvarianten zijn een open vraag waaraan wij werken, en wij horen de randvoorwaarde liever dan dat wij ertegenin gaan.

Deze pagina beschrijft de huidige beperkingen van het product. Vindt u dat hier iets onjuist staat, of bent u tegen een beperking aangelopen die er niet bij staat, laat het ons weten. Daar heeft het project meer aan dan aan een compliment.