How Reliable Are AI Tools for Translating Culinary Recipes?

Some Surprises

Authors

DOI:

https://doi.org/10.14393/LL63-v42S-2026-9

Keywords:

Machine translation, Conventionality, Culinary recipes, Pellegrino Artusi

Abstract

This study compares the performance of neural machine translation tools with that of generative AI in the translation of a 19th-century Italian culinary recipe into Brazilian Portuguese and English. Ever since the development of machine translation tools, translators have feared for the future of their profession. However, research has shown that, for the time being, such tools speed up the translation task but still depend on human post-editing. The evolution of generative AI systems led to the release, in 2018, of the GPT model by OpenAI. Although this and other models were not originally designed for translation, they are now used as an alternative to neural machine translation systems such as Google Translate and DeepL. Based on a comparable corpus of Brazilian culinary language and a general-language corpus, the automatic translations are analyzed with respect to their acceptability in terms of conventionality in the target language. The study also enables a longitudinal analysis of translations carried out in 2022 and 2024.

Downloads

Download data is not yet available.

Author Biographies

  • Stella Esther Ortweiler Tagnin, Universidade de São Paulo

    Stella E. O. Tagnin é professora sênior do Departamento de Línguas Modernas da Universidade de São Paulo, Brasil. Embora aposentada, continua ativa em dois programas de pós-graduação, LETRA e PPGELLI. Lecionou disciplinas de Tradução no Curso de Especialização em Tradução por mais de 25 anos. Introduziu a Linguística de Corpus na USP em 1998. Coordena o Projeto COMET - Corpus Multilíngue de Ensino e Tradução. É autora de O Jeito que a Gente Diz (2013); organizou, em co-autoria com Vander Viana: Corpora no Ensino de Línguas Estrangeiras e Corpora na Tradução e com Cleci Bevilacqua Corpora na Terminologia. Acaba de publicar online uma versão beta do Bilingual Dictionary of Verbal Collocations disponível em https://cometverbalcollocations.fflch.usp.br/.

  • Rozane Rodrigues Rebechi, Universidade Federal do Rio Grande do Sul

    Rozane Rebechi é professora no Instituto de Letras da Universidade Federal do Rio Grande do Sul (UFRGS), atuando na graduação e pós-graduação. É coordenadora da Comissão de Avaliação de Proficiência em Leitura em Línguas Estrangeiras (CAPLLE) da UFRGS (2024-) e presidente da Associação Brasileira de Linguística de Corpus (2024-). Foi presidente da Associação Brasileira de Pesquisadores em Tradução (ABRAPT) no triênio 2020-2022 e membro-associada do programa European Masters in Technology for Translation and Interpreting (EM TTI) (2019-2024). 

References

ARTUSI, P. La Scienza in Cucina e l'Arte di Mangiar Bene. Firenze: Salvadore Landi, 1891.

ARTUSI, P. Science in the Kitchen and the Art of Eating Well. Trad. Murtha Baca e Stephen Sartarelli. Toronto, Buffalo, London: University of Toronto Press, 2004.

ARTUSI, P. A Ciência na Cozinha e a Arte de Comer Bem. Trad. Marusca Oliva Bertolozzi e Anabela Cristina Costa da Silva Ferreira. Salto e Itu, SP: Associação Emiliano Romagnoli Bandeirante, 2009.

DAVIES, M. The Corpus of Contemporary American English (COCA), 2008. Disponível em: https://www.english-corpora.org/coca/. Acesso em: 1 jun. 2025.

DAVIES, M. Corpus do Português: Web/Dialects, 2016. Disponível em: http://www.corpusdoportugues.org/web-dial/ . Acesso em: 1 jun. 2025.

FREITAG, P. H.; REBECHI, R. R. Analysing collocations in articles published in coworking blogs in Portuguese: A comparative study on authentic and translated texts. Cadernos De Tradução, 45, 1–25. 2025. Disponível em: https://doi.org/10.5007/2175-7968.2025.e102039. Acesso em: 1 jun. 2025.

JIAO, W.; WANG, W.; HUANG, J.; WANG, X.; SHI, S.; TU, Z. Is ChatGPT a Good Translator? Yes With GPT-4 As The Engine. arXiv:2301.08745v4, 2023. Disponível em . Acesso em 10 mar. 2024.

JURAFSKY, D.; MARTIN, J. H. Speech and Language Processing: an Introduction to Natural Language Processing, Computational Linguistics, and Speech Recognition. Unpublished manuscript. (2023, February 3). Disponível em https://web.stanford.edu/~jurafsky/slp3/ed3bookfeb3_2024.pdf. Acesso em 20 mar. 2024.

NAVEED, H.; Khan, A. U.; Qiu, S.; Saqib, M.; Anwar, S.; Usman, M.; Akhtar, N.; Barnes, N.; MIAN, A. A Comprehensive Overview of Large Language Models. arXiv:2307.06435v8 [cs.CL] (20 Feb 2024). Disponível em https://arxiv.org/pdf/2307.06435.pdf. Acesso em 30 jun. 2025.

NORD, C. Loyalty and Fidelity in Specialized Translation. Confluências: Revista de Tradução Científica e Técnica, pp 29-41, 2006. Disponível em https://www.academia.edu/12701555/Loyalty_and_Fidelity_in_Specialized_Translation Acesso em 30 jun. 2025.

PÉREZ-ORTIZ, J. A.; FORCADA, M. L.; SÁNCHEZ-MARTÍNEZ, F. How neural machine translation works. In: KENNY, D. (ed.): Machine translation for everyone: Empowering users in the age of artificial intelligence. Berlin: Language Science Press. pp. 141–164, 2022.

PYM, A. The Moving Text: Localization, Translation, and Distribution. John Benjamins. 2004.

PYM, A. Translation and Text Transfer - An Essay on the Principles of Intercultural Communication. Tarragona: Intercultural Studies Group, 2010

REBECHI, R. R. A Tradução da Culinária Típica Brasileira para o Inglês: um estudo sob o Enfoque da Linguística de Corpus. 2015. 393 p. Tese (Doutorado em Estudos Linguísticos e Literários em Inglês) - Faculdade de Filosofia, Letras e Ciências Humanas, Universidade de São Paulo, São Paulo.

REBECHI, R. R.; NUNES, R. R.; MUNHOZ, L. R.; MARCON, N. O. Restaurant Reviews in Brazil and the USA: A Feast of Cultural Differences and Their Impact on Translation. Mutatis Mutandis, Medellín, v.14, p. 372-396, 2021.

REBECHI, R. R.; MARCON, N. O.; FALLER, G. de A.; VILLAVICENCIO, A. Machine Translation of Multiword Expressions: Double Dutch or Crystal Clear? New Trends in Translation and Technology Conference - NeTTT 2024. Proceedings, 3-6 July 2024, Varna, Bulgaria, pp. 116-137, 2024.

ROTHWELL, A., MOORKENS, J., FERNÁNDEZ-PARRA, M., DRUGAN, J., & AUSTERMUEHL, F. Translation tools and technologies. London/New York: Routledge, 2023.

TAGNIN, S. E. O. Levels of Conventionality and the Translator´s Task. 274 f. Tese (Doutorado em Estudos Linguísticos e Literários em Inglês) – Departamento de Letras Modernas, Faculdade de Filosofia, Letras e Ciências Humanas, Universidade de São Paulo, 1987.

TAGNIN, S. E.O. O Jeito que a Gente Diz. São Paulo: Disal, 2013.

TAGNIN, S. E. O.; REBECHI, R. R.; TEIXEIRA, E. D. A fraseologia das receitas culinárias – com destaque para as brasileiras. In: NOVODVORSKI, A.; BEVILACQUA, C. (org.) Fraseologia: enfoques especializados e contrastivos. Uberlândia: Universidade Federal de Uberlândia, p. 441-473, 2022.

WEAVER, W. Translation. In LOCKE, W. N. and BOOTH, A. D. (ed.) Machine translation of languages: fourteen essays. Cambridge, Mass.: Technology Press of The Massachusetts Institute of Technology and Wiley, New York, 1955 (1949).

Published

2026-07-27

How to Cite

How Reliable Are AI Tools for Translating Culinary Recipes? Some Surprises. Letras & Letras, Uberlândia, v. 42, n. supl., p. e04109 | p. 1–22, 2026. DOI: 10.14393/LL63-v42S-2026-9. Disponível em: https://seer.ufu.br/index.php/letraseletras/article/view/78960. Acesso em: 28 jul. 2026.

Most read articles by the same author(s)