Evaluating the effectiveness of machine translation of audio description

The field of translation is undergoing various profound changes. On the one hand it is being thoroughly reshaped by the advent and constant improvement of new technologies. On the other hand, new forms of translation are starting to see the light of day in the wake of social and legal developments t...

ver descrição completa

Detalhes bibliográficos
Autores: Vercauteren, Gert|||0000-0001-6711-2005, Reviers, Nina|||0000-0003-0271-6662, Steyaert, Kim
Formato: artículo
Fecha de publicación:2021
País:España
Recursos:Universitat Autònoma de Barcelona
Repositorio:Dipòsit Digital de Documents de la UAB
Idioma:inglés
OAI Identifier:oai:ddd.uab.cat:250231
Acesso em linha:https://ddd.uab.cat/record/250231
https://dx.doi.org/urn:doi:10.5565/rev/tradumatica.288
Access Level:acceso abierto
Palavra-chave:Media accessibility
Audio description
Machine translation
Translation
Accessibilitat als mitjans
Audiodescripció
Traducció automàtica
Traducció
Accesibilidad a los medios
Audiodescripción
Traducción automática
Traducción
id ES_62037f0b76def491f3f9fd4d67c3ecc6
oai_identifier_str oai:ddd.uab.cat:250231
network_acronym_str ES
network_name_str España
repository_id_str
dc.title.none.fl_str_mv Evaluating the effectiveness of machine translation of audio description
the results of two pilot studies in the English-Dutch language pair
Avaluació de l'efectivitat de la traducció automàtica de l'àudiodescripció
Evaluación de la eficacia de la traducción automática de audiodescripciones
title Evaluating the effectiveness of machine translation of audio description
spellingShingle Evaluating the effectiveness of machine translation of audio description
Vercauteren, Gert|||0000-0001-6711-2005
Media accessibility
Audio description
Machine translation
Translation
Accessibilitat als mitjans
Audiodescripció
Traducció automàtica
Traducció
Accesibilidad a los medios
Audiodescripción
Traducción automática
Traducción
title_short Evaluating the effectiveness of machine translation of audio description
title_full Evaluating the effectiveness of machine translation of audio description
title_fullStr Evaluating the effectiveness of machine translation of audio description
title_full_unstemmed Evaluating the effectiveness of machine translation of audio description
title_sort Evaluating the effectiveness of machine translation of audio description
dc.creator.none.fl_str_mv Vercauteren, Gert|||0000-0001-6711-2005
Reviers, Nina|||0000-0003-0271-6662
Steyaert, Kim
author Vercauteren, Gert|||0000-0001-6711-2005
author_facet Vercauteren, Gert|||0000-0001-6711-2005
Reviers, Nina|||0000-0003-0271-6662
Steyaert, Kim
author_role author
author2 Reviers, Nina|||0000-0003-0271-6662
Steyaert, Kim
author2_role author
author
dc.subject.none.fl_str_mv Media accessibility
Audio description
Machine translation
Translation
Accessibilitat als mitjans
Audiodescripció
Traducció automàtica
Traducció
Accesibilidad a los medios
Audiodescripción
Traducción automática
Traducción
topic Media accessibility
Audio description
Machine translation
Translation
Accessibilitat als mitjans
Audiodescripció
Traducció automàtica
Traducció
Accesibilidad a los medios
Audiodescripción
Traducción automática
Traducción
description The field of translation is undergoing various profound changes. On the one hand it is being thoroughly reshaped by the advent and constant improvement of new technologies. On the other hand, new forms of translation are starting to see the light of day in the wake of social and legal developments that require that products and content that are created, are accessible for everybody. One of these new forms of translation, is audio description (AD), a service that is aimed at making audiovisual content accessible to people with sight loss. New legislation requires that this content is accessible by 2025, which constitutes a tremendous task given the limited number of people that are at present trained as audio describers. A possible solution would be to use machine translation to translate existing audio descriptions into different languages. Since AD is characterized by short sentences and simple, concrete language, it could be a good candidate for machine translation. In the present study, we want to test this hypothesis for the English-Dutch language pair. Three 30 minute AD excerpts of different Dutch movies that were originally audio described in English, were translated into Dutch using DeepL. The translations were analysed using the harmonized DQF-MQM error typology and taking into account the specific multimodal nature of the source text and the intersemiotic dimension of the original audio description process. The analysis showed that the MT output had a relatively high error rate, particularly in the categories of Accuracy - mistranslation and Fluency - grammar. This seems to indicate that extensive post-editing will be needed, before the text can be used in a professional context.
publishDate 2021
dc.date.none.fl_str_mv 2
2021-01-01
2021
2021-01-01
dc.type.none.fl_str_mv Article
http://purl.org/coar/resource_type/c_6501
VoR
http://purl.org/coar/version/c_970fb48d4fbd8a85
dc.type.openaire.fl_str_mv info:eu-repo/semantics/article
format article
dc.identifier.none.fl_str_mv https://ddd.uab.cat/record/250231
https://dx.doi.org/urn:doi:10.5565/rev/tradumatica.288
url https://ddd.uab.cat/record/250231
https://dx.doi.org/urn:doi:10.5565/rev/tradumatica.288
dc.language.none.fl_str_mv Inglés
eng
language_invalid_str_mv Inglés
language eng
dc.rights.none.fl_str_mv open access
http://purl.org/coar/access_right/c_abf2
https://creativecommons.org/licenses/by/4.0/
dc.rights.openaire.fl_str_mv info:eu-repo/semantics/openAccess
rights_invalid_str_mv open access
http://purl.org/coar/access_right/c_abf2
https://creativecommons.org/licenses/by/4.0/
eu_rights_str_mv openAccess
dc.format.none.fl_str_mv application/pdf
dc.source.none.fl_str_mv reponame:Dipòsit Digital de Documents de la UAB
instname:Universitat Autònoma de Barcelona
instname_str Universitat Autònoma de Barcelona
reponame_str Dipòsit Digital de Documents de la UAB
collection Dipòsit Digital de Documents de la UAB
repository.name.fl_str_mv
repository.mail.fl_str_mv
_version_ 1869409463372349440
spelling Evaluating the effectiveness of machine translation of audio descriptionthe results of two pilot studies in the English-Dutch language pairAvaluació de l'efectivitat de la traducció automàtica de l'àudiodescripcióEvaluación de la eficacia de la traducción automática de audiodescripcionesVercauteren, Gert|||0000-0001-6711-2005Reviers, Nina|||0000-0003-0271-6662Steyaert, KimMedia accessibilityAudio descriptionMachine translationTranslationAccessibilitat als mitjansAudiodescripcióTraducció automàticaTraduccióAccesibilidad a los mediosAudiodescripciónTraducción automáticaTraducciónThe field of translation is undergoing various profound changes. On the one hand it is being thoroughly reshaped by the advent and constant improvement of new technologies. On the other hand, new forms of translation are starting to see the light of day in the wake of social and legal developments that require that products and content that are created, are accessible for everybody. One of these new forms of translation, is audio description (AD), a service that is aimed at making audiovisual content accessible to people with sight loss. New legislation requires that this content is accessible by 2025, which constitutes a tremendous task given the limited number of people that are at present trained as audio describers. A possible solution would be to use machine translation to translate existing audio descriptions into different languages. Since AD is characterized by short sentences and simple, concrete language, it could be a good candidate for machine translation. In the present study, we want to test this hypothesis for the English-Dutch language pair. Three 30 minute AD excerpts of different Dutch movies that were originally audio described in English, were translated into Dutch using DeepL. The translations were analysed using the harmonized DQF-MQM error typology and taking into account the specific multimodal nature of the source text and the intersemiotic dimension of the original audio description process. The analysis showed that the MT output had a relatively high error rate, particularly in the categories of Accuracy - mistranslation and Fluency - grammar. This seems to indicate that extensive post-editing will be needed, before the text can be used in a professional context.El camp de la traducció està experimentant canvis profunds. D'una banda, està patint una autèntica transformació gràcies a l'arribada i la millora constant de les noves tecnologies. De l'altra, noves formes de traducció comencen a veure la llum arran de l'evolució social i legal que exigeix que els productes i continguts que es creen siguin accessibles per a tothom. Una d'aquestes noves formes de traducció és l'audiodescripció (AD), un servei que té com a objectiu fer accessibles els continguts audiovisuals a les persones amb pèrdua de visió. La nova legislació exigeix que aquests continguts siguin accessibles abans del 2025, la qual cosa constitueix una tasca immensa atès el nombre limitat de persones que actualment tenen formació com a audiodescriptors. Una possible solució seria utilitzar la traducció automàtica per traduir les audiodescripcions ja existents a diferents idiomes. L'AD, caracteritzada per frases curtes i un llenguatge senzill i concret, podria ser una bona candidata per a la traducció automàtica. En aquest estudi pretenem demostrar la hipòtesi per a la combinació lingüística anglès-holandès. Concretament, fragments de 30 minuts d'AD de tres pel·lícules holandeses que es van audiodescriure originalment en anglès, han estat traduïts a l'holandès per mitjà de l'eina DeepL. Les traduccions s'han analitzat utilitzant la tipologia d'error harmonitzada DQF-MQM i tenint en compte la naturalesa multimodal específica del text font i la dimensió intersemiòtica del procés d'audiodescripció original. L'anàlisi ha mostrat que la producció de TA té una taxa d'error relativament alta, especialment en les categories de precisió -errors de traducció- i fluïdesa gramatical. Això sembla indicar que caldrà una extensa postedició, abans que el text es pugui utilitzar en un context professional.El campo de la traducción está experimentando diversos cambios profundos. Por un lado, la llegada de nuevas tecnologías en constante desarrollo la está reconfigurando completamente. Por otro, están empezando a surgir nuevas formas de traducción como resultado de avances sociales y legales que establecen que los productos y contenidos que se crean han de ser accesibles para todo el mundo. Una de estas nuevas formas de traducción es la audiodescripción (AD), un servicio orientado a hacer accesible para las personas con pérdida de visión los contenidos audiovisuales. La nueva legislación establece que estos deberán ser accesibles para 2025, lo que representa una tarea desmesurada, dado el limitado número de personas actualmente cualificadas en AD. Una posible solución pasaría por utilizar la traducción automática para traducir las audiodescripciones existentes a diferentes idiomas. Teniendo en cuenta que la AD se caracteriza por el uso de frases cortas y un lenguaje sencillo y concreto, sería una buena candidata para la traducción automática. El presente estudio ha puesto a prueba esta hipótesis con la combinación lingüística inglés-holandés. Para ello, se utilizó DeepL para traducir al holandés tres fragmentos de 30 minutos de AD extraidos de varias películas holandesas que habían sido audiodescritas en inglés. Para analizar las traducciones se utilizó la tipología de error DQF-MQM armonizada y se tuvo en cuenta la naturaleza multimodal específica del texto de origen y la dimensión intersemiótica del proceso original de audiodescripción. El análisis mostró que el resultado de la TA presentaba una tasa de error relativamente elevada, especialmente en las categorías de Exactitud/Error de traducción y Fluidez/Gramática. Esto parece indicar que, antes de que el texto pueda ser utilizado en un contexto profesional, será necesario un proceso de posedición exhaustive. 22021-01-0120212021-01-01Articlehttp://purl.org/coar/resource_type/c_6501VoRhttp://purl.org/coar/version/c_970fb48d4fbd8a85info:eu-repo/semantics/articleapplication/pdfhttps://ddd.uab.cat/record/250231https://dx.doi.org/urn:doi:10.5565/rev/tradumatica.288reponame:Dipòsit Digital de Documents de la UABinstname:Universitat Autònoma de BarcelonaInglésengopen accesshttp://purl.org/coar/access_right/c_abf2Aquest document està subjecte a una llicència d'ús Creative Commons. Es permet la reproducció total o parcial, la distribució, la comunicació pública de l'obra i la creació d'obres derivades, fins i tot amb finalitats comercials, sempre i quan es reconegui l'autoria de l'obra original.https://creativecommons.org/licenses/by/4.0/info:eu-repo/semantics/openAccessoai:ddd.uab.cat:2502312026-06-06T12:50:31Z
score 15.301629