Blogopmaak

Hoe betrouwbaar is DeepL Pro?

Els Peleman • 3 juni 2019

Over machinevertalingen zijn de meningen heel erg verdeeld. Je hebt de grote voorstanders van de MT-plugin in CAT-tools waaronder enerzijds de vertalers die bij hoog en bij laag zweren dat je grote tijdswinst kunt maken en anderzijds de grote vertaalbureaus die vinden dat je daarom je prijzen moet verlagen. Uit mijn vorige blogs over dit thema (*) blijkt al dat ik niet tot dat kamp behoor omdat ik niet overtuigd ben van de voordelen van machinevertalingen, maar de lofzangen over de MT-plugin DeepLPro en GT4T  blijven maar toenemen. Dus besloot ik de betalende MT-plugin van DeepLPro uit te proberen in Trados Studio 2019 en MemoQ 8.7. Is de plugin zijn geld waard of niet?

Duitse en Franse technische teksten naar het Nederlands

Ik vertaal zelf hoofdzakelijk technische teksten vanuit het Frans en het Duits naar het Nederlands, dit zowel voor België als voor Nederland dus het spreekt voor zich dat mijn ervaring zich tot deze talen beperkt. Ik denk echter wel dat deze blog met mijn bevindingen representatief is voor alle andere relatief grote talen, met uitzondering van het Engels.

Het is immers zeer waarschijnlijk dat DeepLPro voor Engels, de taal waarvan elke NMT ( Neural Machine Translation ) vertrekt, andere vertaalresultaten geeft. Of deze resultaten beter, of minstens bruikbaar, zijn, daar kan ik mij niet over uitspreken om bovenstaande reden.

In de twee maanden durende testperiode die ik de plugin gaf om mijn oordeel te vellen, kwamen er allerlei soorten te vertalen teksten langs, de ene al wat meer mijn ‘standaardwerk’ dan de andere, maar allemaal waren ze representatief voor de vertaalopdrachten die ik regelmatig op mijn bord krijg:

  • commerciële brochures en catalogi met een technische inslag,
  • handleidingen van allerlei aard,
  • maar ook meer algemene teksten zoals onkostenbeleidsnota’s en reclameteksten voor bestaande technische klanten
  • ….

Commerciële brochures

De eerste vertaling waar ik de MT-plugin op uitprobeerde, was een Franse brochure over bepleistering in ziekenhuizen en zorgcentra. Deze Franse tekst was al een gelokaliseerde vertaling van een Duits origineel.

Dit had zijn voor- en nadelen:

  • Nadeel : je ziet niet wat het in origineel was, temeer omdat het ook nog gelokaliseerd is (d.w.z. aangepast aan de Waalse markt);
  • Voordeel : een professionele vertaler heeft er een vlotte Franse versie van gemaakt; de kans is groot dat de vertaling beter geschreven is dan het origineel.

De MT-fouten die ik bij deze technische brochure tegenkwam, waren:

  • L’isolation joue ici son rôle de « ressort »
    => DeepL : springplank (later ook vering)
    => Context: het isolatiemateriaal veert mee
  • Arch. X
    => DeepL: Boog
    => Fout: hier architect
  • La réglementation belge en matière de protection au feu
    => DeepL : de Belgische brandveiligheidsvoorschriften
    => Fout : het gaat hier om de wetgeving, niet voorschriften
  • Coup de poing ou coup de genou
    => DeepL : ponzen of knielen
  • Pouvoir
    => Kan zowel kunnen als mogen zijn: contextafhankelijk, DeepLPro maakt het verschil niet
  • S’engager:
    => zich inzetten / zich ertoe verbinden

Bevindingen :

  • De door de MT-plugin voorgestelde vertalingen hadden zo goed als allemaal dezelfde zinsconstructie als in het origineel . Voor sommige teksten kan dit misschien geen kwaad maar bij een commerciële tekst is dat absoluut niet aan te raden.

Voorbeeld 1

DeepLPro
DeepLPro: letterlijke vertaling

Mijn vertaling
                Mijn geïnterpreteerde vertaling

Voorbeeld 2

DeepLPro: alle zinsdelen op exact dezelfde plaats

Mijn vertaling: niet 1 op 1

  • Bedrijfsinterne terminologie , die in een Termbase in MemoQ was opgenomen, nam hij niet mee over ( GT4T zou dat naar het schijnt wel doen); ook gaat hij IATE niet consulteren.
  • De MT-vertalingen waren niet constant op woordniveau: bijv. gipsblokken versus blokken gips
  • Ik had deze vertaling in MemoQ gedaan waarbij ik de plugin de vertalingen automatisch liet invullen. Dit bleek achteraf flink tegenvallen en heeft me waarschijnlijk veel meer tijd gekost omdat ik zo goed als alles terug kon wissen.
  • Zoals uit de voorbeelden blijkt, neemt DeepLPro geen context in acht. Er zouden echter wel andere NMT’s bestaan die dat wel zouden kunnen. Als jij daar meer over weet, laat het dan even weten in een comment!

Ik merkte ook bij het nalezen nog heel veel zaken (meer dan bij gewoon vertaalwerk) op die ik uiteindelijk toch nog heb aangepast.

Superstrakke teksten, dat moet een machine toch lukken?

De tweede te vertalen tekst was een onkostenbeleid over hoe vertegenwoordigers van een fabrikant moeten omspringen met verplaatsingskosten en dergelijke. Dit was een vrij strakke tekst. In tegenstelling tot de eerste tekst was deze tekst in het Frans geschreven. Bij deze vertaling heb ik de plugin in Trados uitgeprobeerd.

Dit had meteen al een heel groot voordeel. De AutoSuggest-functie in Trados werkt ook met de plugin en dit op verschillende niveaus:

  • De AutoSuggest stelt eerst de volledige zin van DeepLPro voor;
  • Vind jij hem niet goed en typ je gewoon je eigen vertaling verder, dan ‘loopt’ hij gewoon met je mee;
  • Vind je dat vanaf een bepaald moment de zin wel goed is, dan neem je in één beweging de hele zin over;
  • Dit gaat van halve zinnen, tot woordgroepen, tot de laatste twee woorden.

Ik vermoed dat dit een enorme tijdswinst kan betekenen bij bepaalde teksten, en zo voelde het ook voor mij aan. Helaas is Trados Studio 2019 op mijn nieuwe computer enorm traag bij de QA-check en daardoor ging alle vermoedelijke tijdswinst verloren en bleef ik met gemengde gevoelens achter.

Maar dat buiten beschouwing gelaten, dit is uiteraard niet de reden waarom je een MT-plugin aankoopt.

DeepLPro
                                                                                                        Sommige zinnen zijn gewoon goed

Bevindingen: scoort hij bij strakke teksten beter?

De eerste bevinding uit de vorige tekst – de één op één zinsconstructies – speelde bij deze tekst minder een rol. In dergelijke teksten kan de zinsstructuur vaak behouden blijven en dat leidde ertoe dat ik best veel vertalingen kon overnemen of op z’n minst grotendeels kon gebruiken. Toch maakte hij dezelfde fouten als bij de eerste vertaling:

  • Bedrijfsterminologie werd niet consistent toegepast: lijnmanager, supervisor, toezichthouder, begeleider, hiërarchische meerdere
  • Geen consistente vertalingen: ongerechtvaardigd, niet ondersteund ( non justifié )
  • Context blijft moeilijk: bedrijf, vennootschap, maatschappij ( société ), zuinig versus goedkoop versus Economy Class ( économique )

Maar er vielen mij nog andere zaken op bij deze tekst. Zo werd hier een aantal keer duidelijk dat DeepLPro telkens via het Engels gaat: Gestion des dépenses werd Expense Management.

Maar er was nog meer:

  • Hij herkent het type tekst en dus ook de stijl niet: treinkaartjes is niet het gepaste woordgebruik in een onkostenbeleid
  • Taaleigen zaken herkent hij niet
    => Les condensateurs…. : het lidwoord hoeft niet altijd mee vertaald te worden
  • Sommige uitdrukkingen slaat hij de bal volledig mis:
    => en bonne père de famille : als een voorzichtig gezinslid
    => cartes Visa : visitekaartjes (in het enkelvoud deed hij het wel juist)

Mijn conclusie is dat de MT-plugin voor strakke teksten zoals deze (en waarschijnlijk een heleboel juridische teksten) bruikbaar kan zijn, maar het is enorm goed opletten geblazen. Ook hier viel mij op dat ik in de naleesronde nog heel veel onnauwkeurigheden eruithaalde.

Opgelet: juridisch vaak vertrouwelijk

Bij dit soort teksten – zeker bij juridische teksten – speelt vertrouwelijkheid een grote rol en daar vertrouw ik DeepL en zijn bedenker Lingee voor geen haar. Als je kiest voor de betalende versie DeepLPro, beweren ze: “ Bij gebruik van DeepL Pro worden de teksten die u indient en de vertalingen daarvan nooit opgeslagen en worden ze alleen gebruikt voor zover dat nodig is om de vertaling te maken. Bij gebruik van DeepL Pro zetten wij uw teksten niet in om de kwaliteit van onze diensten te verbeteren.”

Maar om eerlijk te zijn stel ik mij hier zeer veel vragen bij: hoe kunnen zij anders hun MT-kwaliteit blijven verbeteren?

Om net dezelfde reden werk ik nooit met cloudtoepassingen zoals MemSource:

Klanten maar ook vertaalbureaus moeten erop kunnen vertrouwen dat ze de vertalingen later niet klakkeloos op internet terugvinden. 

Recepten: als je eens goed wilt lachen

Voor recepten is DeepLPro vanuit het Duits naar het Nederlands echt waardeloos om de reeds bekende redenen:

  • DeepLPro is niet consequent
  • hij kijkt niet naar de context: zo kent hij het verschil niet tussen bakken en braden, Bratolie kan bijvoorbeeld ook gewoon bakolie of frituurolie zijn, en in mijn tekst was het zelfs wokolie.

Voor ingrediëntenlijsten is hij dan weer wel handig maar anderzijds, als je veel recepten vertaalt, zitten die termen allemaal al in je Termbase en TM en dan gaat het net zo snel. Dus als culinaire vertaler lijkt het mij die 25 euro per maand niet waard.

Montage-instructies: vertalingen van duizend in een dozijn

Ook bij montagevoorschriften is context de grote bottleneck voor de MT-plugin:

  • broyeur
    => DeepL : versnipperaar
    => Context : vermaler (toilet)

Als NMT erin slaagt om beide aan elkaar te koppelen, zouden er een heleboel van de fouten die ik ben tegengekomen, opgelost zijn:

  • o ffres:  offertes in aanbestedingsdossiers maar aanbiedingen in reclame
  • point de chute: l ospunt (in de transportsector)

Maar hij maakte ook zware vertaalfouten die in instructies grote gevolgen kunnen hebben:

  • … dont deux au mur ǂ inclusief

Het gebruik van de MT-plugin vergt dus een zeer grondige talenkennis – die je als professionele vertaler weliswaar hebt – maar daarnaast ook een nog hogere concentratie, en daar wringt het schoentje: met de MT-plugin riskeer je fouten te maken die jij standaard nooit zou maken en waar je dus ook minder alert op bent.

Mij viel het ook bij deze vertaling op dat ik er achteraf best nog wel zware fouten uithaalde bij het nalezen. Dus voor montage-instructies vind ik het eveneens een heel gevaarlijk speeltje.

Dat de brontekst bijzonder slecht geschreven was, deed er uiteraard ook geen goed aan: in de echt slechte stukken was DeepLPro echt waardeloos .

Handleidingen: een krachtmeting of een lachertje?

En dan mijn specialisatie, handleidingen… Handleidingen zijn bijzonder typerend omdat er een aantal stukken telkens terugkeren (zie ook de blog ‘ Hoe herken ik een goede vertaling van een handleiding? ‘). Uit mijn twee vorige testen met de gratis DeepL-versie (zie onderaan voor de links naar deze artikelen) bleek al dat hij tot mijn grote verbazing zelfs de standaardteksten niet juist vertaalde, en de betalende versie deed het absoluut niet beter:

  • Sicherheitshandschuhe : beschermhandschoenen
  • Betriebsanleitung  : dan eens technische handleiding, dan eens gebruiksaanwijzing (allebei verkeerd trouwens)
  • Quetschverletzungen: verpletterende verwondingen

 

Standaardzinnetje handleiding
           Een standaardzin die in elke handleiding terugkeert

En soms vraag je je echt af waar je aan begonnen bent (en ben je blij dat het geen PEMT is):

  • Führungsrollen : leiderschapsrollen

Zoals reeds gezegd legt hij geen verbanden: Benutzer der Maschine = Bedienpersonal en hij gebruikt niet de typische stijl van handleidingen: imperatieven i.p.v. de Duitse infinitieven

Soms doet DeepLPro het beter dan de vertaler

Maar het moet gezegd zijn: soms stond ik echt verbaasd van de staaltjes die DeepLPro uit zijn mouw schudde:

  • Adhésion à la Service Level Agreement
    => DeepLPro : naleving
    => Dit bracht mij uiteindelijk bij instemming (al had naleving in deze tekst ook gekund)

Maar daarmee houdt het eigenlijk wel op

De vertalingen zijn in alle gevallen bijzonder letterlijk en missen elke vorm van creativiteit, en zelfs al is jouw tekst bijzonder staccato en strak geschreven, er is toch altijd enige creatieve aanpassing vereist die eigen is aan jouw doeltaal. En soms zit DeepLPro er gewoon naast:

  • la moindre disponibilité des transporteurs
    => DeepLPro: tekort van vervoerders (soms ook ‘dragers)
    => Mijn vertaling: verminderde beschikbaarheid
  • Tous les 15 jours
    => DeepLPro: elke 15 dagen
  • Un design réussi
    => DeepLPro: een succesvol ontwerp

Grappig fragmenet
Soms is DeepL echt grappig

DeepL vertaalt zoals het hem uitkomt

Klinkt raar he? Maar dat is een vaststelling die ik deed naar aanleiding van een websitevertaling waarvan de klant het eerste deel had vertaald met DeepL(Pro). Ik wist op voorhand niet dat de klant de vertaling met DeepL had gedaan maar toen ik zijn vertaling vergeleek met wat ik uit DeepLPro haalde, stelde ik bijzonder veel gelijkenissen vast. Maar niet helemaal. De gefabriceerde vertaling was niet identiek.

Dit kan eraan liggen dat ik de betaalde versie heb gebruikt en hij het misschien met de gratis versie heeft gedaan, maar ik vermoed dat zelfs met dezelfde versie er wisselende resultaten uit voortkomen omdat NMT werkt op basis van het beschikbare materiaal en omdat ik in mijn eigen vertalingen al had vastgesteld dat hij niet consistent was (zie voorbeelden hierboven).

DeepL en consoorten zijn bijzonder gevaarlijk voor klanten die de doeltaal niet kennen

En dan komen we meteen bij een tweede vaststelling. Ongetwijfeld zullen jullie net zoals ik je afgevraagd hebben hoe hij het in zijn hoofd haalt om een websitevertaling even door een machine te gooien. Wel, het antwoord is helaas simpel: hij kent de doeltaal niet en kan dus niet controleren wat DeepL ervan gemaakt heeft. Hij hoort overal de verhalen over machinevertalingen en gaat er vanuit dat het dus goed zit. Het resultaat zal ongetwijfeld zijn dat het door mij vertaalde deel veel conversie zal teweegbrengen op zijn website, terwijl de bezoekers zullen afhaken op het eerste deel (ik kan het helaas nog niet aantonen want de tekst staat nog niet online).

Ik hoop nu dat hij aan iemand die wel Nederlands kent, vraagt om de machinevertaling van deel 1 en mijn vertaling van deel 2 te vergelijken. En dat hij dan beseft wat er moet gebeuren: een menselijke vertaler alles opnieuw laten vertalen (want neen, ik zou niemand aanraden hier een PEMT op te doen, je kan het veel sneller gewoon opnieuw vertalen).

Andere tekstsoorten

In die twee maanden zijn er ook nog een aantal andere tekstsoorten voorbijgekomen, maar de bevindingen waren gelijkaardig:

  • Juridische overeenkomst: bij het nalezen nog heel wat gevaarlijke fouten eruitgehaald en hij maakte ook een aantal hele eigenaardige fouten waarvan ik toch verwacht had dat hij die wel zou juist hebben: la loi sur la vie privée werd Law Security, SPF Intérieur FOD Interieur, Léau bleef Léau in plaats van Zoutleeuw
  • Webshop kinderkleding: compleet waardeloos, geen vlotte, commerciële teksten
  • Artikel tijdschrift over brand van de Notre-Dame: veel te letterlijk, compleet onbruikbaar
    • Achterliggende reden: het origineel had een literaire inslag, het was nogal hoogdravend Frans

De ene taal is de andere niet

Zoals aan het begin al gezegd zijn mijn bevindingen gebaseerd op mijn talencombinaties en mijn specialisaties, namelijk Frans en Duits naar het Nederlands, met de nadruk op technische teksten. Dit kan voor andere talencombinaties en specialisaties helemaal anders zijn. Ik spreek hier dus alleen voor mijn eigen winkel en kan geruststellen dat ik me nog altijd geen zorgen maak over mijn toekomst als technische vertaler. En zoals jullie uit mijn vertalersavonturen en voorbeelden wel begrijpen heb ik mijn abonnement na de tweede maand opgezegd.

Voor mijn vertalingen is deze MT-plugin echt geen hulpmiddel en zeker zijn geld niet waard.

Wat is jouw ervaring met MT-plugins voor jouw talencombinaties? Ken jij machinevertaalsoftware die wel context meeneemt? Ik ben heel erg benieuwd! Laat het mij in een comment weten!

Andere Vertalersavonturen-blogs over machinevertalingen

Een zeer interessante blog in het Engels hierover is: Can machine translation save you money?

Ben jij onlangs als zelfstandig vertaler gestart en zit je met een heleboel vragen?
door Els Peleman 11 november 2024
Heb ik nog een toekomst als ik start als zelfstandig vertaler? Of is het allemaal machinevertaling à la Google Translate? Waar vind ik klanten die wel nog goede vertaalkwaliteit willen? Moet ik een vertaalprogramma aankopen? Moet ik mij specialiseren? Al deze vragen en nog veel meer zoek ik samen met jou uit.
Veel mensen denken nu dat vertalers overbodig worden, dat de computers het gaan overnemen, maar niet
door Els Peleman 11 november 2024
Veel mensen denken nu dat vertalers overbodig worden, dat de computers het gaan overnemen, maar niets is minder waar. Net zoals er nog steeds dokters nodig zijn om de bloedsuikerspiegelresultaten te analyseren, verpleegkundigen om eens echt te luisteren naar wat ouderen hebben en ook actie te ondernemen. In deze blog neem ik je mee in de wereld van vertalingen en machinevertalingen.
Met mijn 20 jaar ervaring coach ik je graag naar een succesvolle opstap als freelancevertaler
door Els Peleman 6 november 2024
Hoe weet je nu welke prijs je moet vragen voor vertaalwerk? Wat is op het randje en wat is een goede (woord)prijs? En wie is bereid die prijs te betalen?
Hoe lang duurt het om ca. 1000 woorden te vertalen? Dat lees je hier.
door Els Peleman 22 oktober 2024
Wanneer is mijn vertaling klaar? Wanneer kan ik mijn vertaling van 10 pagina's verwachten? Dat zijn allemaal heel logische vragen. Ik probeer je inzicht te geven in wat er allemaal bij een vertaling komt kijken, zodat jij weet wat een realistische deadline is. En ik geef tips voor vertalers om sneller te werken.
Combien coûte une traduction?
door Els Peleman 17 oktober 2024
« Votre offre de prix est deux fois plus chère que celle de votre collègue. Est-ce normal ? » « Oh là là, c’est bien cher. » Vous avez ce type de réactions lorsque vous envoyez des offres de prix ? Que répondez-vous à cela ?
Combien coûte une traduction vers le néerlandais? D'où vient ce prix?
door Els Peleman 10 september 2024
Lorsque vous demandez une offre de prix pour une traduction, le prix est alors en partie basé sur le nombre de mots, mais parfois, un grand nombre de mots peut aussi être à votre avantage.
Meer posts
Share by: