Wat een chatbot goed doet

Vertalen is iets waar ChatGPT, Claude en Gemini goed in zijn. Geef een van hen een brief van twee pagina's als digitale PDF en vraag om Engels, dan is het resultaat meestal nauwkeurig en leest het natuurlijk. Je kunt ook vervolgvragen stellen: wat een clausule betekent, of een bepaalde formulering formeel is.

Het gaat ook verder dan mensen verwachten. In onze test met vier lange opdrachten plakten we de eerste negen hoofdstukken van De Heerser van Machiavelli (11.729 woorden, ongeveer 30 pagina's) in GPT-6.1 Sol, Gemini 4 Argon en Claude Sonnet 5.5, met één regel: "Translate this document into Spanish." Alle drie gaven alle negen hoofdstukken terug. De Spaanse tekst besloeg 93 tot 95 procent van het aantal Engelse woorden, en die verhouding gold voor elk hoofdstuk, dus er was niets ingekort.

Waar het misgaat

Aan de kwaliteit van de vertaling ligt het zelden. Het gaat om volledigheid en om kleine, stille fouten.

  • Langer dan één antwoord. Onze tekst van 30 pagina's had per model 15.000 tot 26.000 uitvoertokens nodig. Een contract van 100 pagina's heeft er drie of vier keer zoveel nodig. Is een vertaling langer dan de app in één antwoord toestaat, dan stopt hij te vroeg of verandert hij in een samenvatting. Dan moet je vragen om door te gaan en zelf bijhouden waar elk deel eindigde.
  • Vreemde invoegingen. Een van de drie modellen schreef het Chinese woord voor wreedheid, 残酷, twee keer midden in de Spaanse tekst, en zette aan het eind een opmerking waarin de lezer werd gevraagd de juiste woorden in te vullen. Het is een kleine uitglijder, en precies het soort dat je alleen vindt als je elke regel leest.
  • Gescande PDF's. Een scan bevat afbeeldingen van pagina's, geen tekst. Afhankelijk van de chatbot wordt hij met fouten gelezen of helemaal niet.
  • Overgeslagen delen. Tabellen, voetnoten, bijlagen en kleine lettertjes laat een chatbot in een lang document het vaakst weg.
  • Geen bestand. De vertaling komt meestal in het chatvenster binnen, en er een document van maken moet je zelf doen.

Bij een contract of een officiële brief is de ontbrekende alinea precies degene waar het om gaat.

Waarom dit gebeurt

Een chatbot antwoordt steeds in één antwoord tegelijk. Als de volledige vertaling te lang is voor één antwoord, moet het model kiezen tussen stoppen en comprimeren, en beide zien eruit als een afgerond antwoord. Een gescande PDF is een apart probleem: als het bestand geen tekstlaag heeft, valt er niets te vertalen totdat iemand de paginabeelden leest, en niet elke chatbot doet dat voor elke pagina.

Zo test je het zelf

Kies een PDF van minstens tien pagina's in een taal die je een beetje kunt volgen.

  1. Vraag een chatbot het hele document volledig te vertalen, zonder samen te vatten.
  2. Bekijk de laatste pagina van het origineel. Staat de laatste alinea in de vertaling?
  3. Tel de koppen of genummerde paragrafen in beide versies.
  4. Vergelijk het aantal woorden. Tussen Europese talen zit een volledige vertaling meestal binnen ongeveer 15 procent van de lengte van het origineel.
  5. Vergelijk drie namen en drie bedragen.

Als alles erin staat, heeft de chatbot je document aangekund. Ontbreekt het einde of zijn er minder paragrafen, dan heb je een gedeeltelijke vertaling.

Wat je in plaats daarvan kunt gebruiken

Gebruik een tool die het document pagina voor pagina afwerkt. Onze PDF-vertaler maakt van elke pagina een afbeelding, leest die en vertaalt hem apart. Pagina 90 wordt dus precies zo behandeld als pagina 1, en gescande PDF's werken net als digitale. De tool heeft de opdracht alles te vertalen en nooit samen te vatten of over te slaan, koppen, alinea's, lijsten en tabelrijen als structuur te behouden en namen, getallen en datums ongewijzigd te laten. Er zijn 28 doeltalen. De vertaling verschijnt naast de originele pagina, je kunt hem daar bewerken en je downloadt het hele document als Word of TXT.

Twee dingen doet de tool niet. Hij bouwt de originele opmaak niet na: je krijgt de vertaalde tekst in een Word-bestand, geen PDF die er hetzelfde uitziet. En het is machinevertaling: prima om een document te begrijpen of een concept voor te bereiden, maar voor juridisch of officieel gebruik kan een beëdigde vertaling door een mens nodig zijn, dus vraag het na bij de instantie die het document ontvangt.

De eerste pagina van elk document is gratis en zonder account. Een heel document tot 100 pagina's kost $5, eenmalig betaald. Voor ondertitels werkt de ondertitelvertaler op dezelfde manier, regel voor regel.