Trabalhos baseados em pesquisa
ANO XXVIII - NÚMERO 42 - 2026
BackTranslationLLM: uma Arquitetura Agêntica para Tradução e Validação de Conteúdo de Instrumentos Psicométricos
Resumo
A adaptação transcultural de instrumentos psicométricos é um processo metodologicamente complexo, lento e custoso. Este estudo apresenta e avalia o BackTranslationLLM, uma arquitetura de Inteligência Artificial (IA) multiagente projetada para automatizar a tradução e validação de conteúdo de testes. Guiado por princípios de engenharia de IA, o sistema utiliza uma pipeline sequencial com agentes especializados para tradução, retrotradução e refinamento, seguida por um comitê diversificado de juízes de IA para avaliação. O sistema foi aplicado na adaptação do Cuestionario de Impacto de la Sesión de Musicoterapia do espanhol para o português brasileiro. Os resultados foram comparados com uma validação paralela conduzida por cinco juízes humanos. A Análise de Grafo Exploratória confirmou a preservação da estrutura semântica do instrumento. Tanto o comitê composto por juízes de IA quanto por humanos atribuiu Coeficientes de Validade de Conteúdo (CVC) adequados. Contudo, a ausência de correlação entre os CVCs item a item (e.g., Clareza, ρ = -0,37) revelou padrões de julgamento distintos: a IA atuou como uma auditora de conformidade metodológica, enquanto os humanos se destacaram na avaliação de nuances culturais. Conclui-se que o BackTranslationLLM é uma ferramenta eficaz que complementa, em vez de substituir, a expertise humana, otimizando o processo de validação.
Referências
- AERA - American Educational Research Association, American Psychological Association, & National Council on Measurement in Education. (2014). Standards for educational and psychological testing. American Educational Research Association.
- Bhagwat, S. (2024). Principles of Building AI Agents (2nd ed.). Mastra.ai.
- Boateng, G. O., Neilands, T. B., Frongillo, E. A., Melgar-Quiñonez, H. R., & Young, S. L. (2018). Best practices for developing and validating scales for health, social, and behavioral research: A primer. Frontiers in Public Health, 6, 149.
DOI: https://doi.org/10.3389/fpubh.2018.00149
- Borsa, L. C.; Seize, M.. (2017). Construção e adaptação de instrumentos psicológicos: dois caminhos possíveis. In: Damásio, B. F.; Borsa, J. C.. Manual de desenvolvimento de instrumentos psicológicos. São Paulo: Vetor.
- Cassepp-Borges, V., Balbinotti, M. A. A., & Teodoro, M. L. M. (2010). Tradução e validação de conteúdo: uma proposta para a adaptação de instrumentos. In L. Pasquali (Org.), Instrumentação psicológica: Fundamentos e práticas (pp. 506-520). Artmed.
- Cripps, C.; Tsiris, G.; Spiro, N. (2016). Outcome measures in music therapy: A resource developed by the Nordoff Robbins research team. 1. ed. London: Nordoff Robbins. https://eresearch.qmu.ac.uk/handle/20.500.12289/4429
- Danon, L., Díaz-Guilera, A., Duch, J., & Arenas, A. (2005). Comparing community structure identification. Journal of Statistical Mechanics: Theory and Experiment, 2005(09), P09008–P09008. https://doi.org/10.1088/1742-5468/2005/09/P09008.
DOI: https://doi.org/10.1088/1742-5468/2005/09/P09008
- DeepL SE. (2024). DeepL Translator. https://www.deepl.com/
- Google. (2024a). Gemini: A family of highly capable multimodal models. https://deepmind.google/technologies/gemini/
- Google. (2024b). Gemma: Open models based on Gemini research and technology. https://ai.google/discover/gemma/
- Hernandez-Nieto, R. A. (2002). Contributions to statistical analysis. Universidad de Los Andes.
- Kyriazos, T. A., & Stalikas, A. (2018). Applied psychometrics: The steps of scale development and standardization process. Psychology, 9(11), 2531-2560.
DOI: https://doi.org/10.4236/psych.2018.911145
- Laverghetta Jr., A., & Licato, J. (2023). Generating better items for cognitive assessments using large language models. In E. Kochmar, J. Burstein, A. Horbach, R. Laarmann-Quante, N. Madnani, A. Tack, V. Yaneva, Z. Yuan, & T. Zesch (Eds.), Proceedings of the 18th Workshop on Innovative Use of NLP for Building Educational Applications (BEA 2023) (pp. 414–428). Association for Computational Linguistics. https://doi.org/10.18653/v1/2023.bea-1.34
DOI: https://doi.org/10.18653/v1/2023.bea-1.34
- Laverghetta Jr., A., Luchini, S., Linell, A., Reiter-Palmon, R., & Beaty, R. (2024). The creative psychometric item generator: A framework for item generation and validation using large language models. arXiv. https://arxiv.org/abs/2409.00202
- Nakano, T. C., & Siqueira, L. G. G. (2012). Validade de conteúdo da Gifted Rating Scale (versão escolar) para a população brasileira. Avaliação Psicológica, 11(1), 123-140.
- Pasquali, L. (2009). Psicometria: Teoria dos testes na psicologia e na educação. Vozes.
- Pasquali, L. (2010). Instrumentação psicológica: Fundamentos e práticas. Artmed.
- Pedrosa, F. G. (2023). Escala de Avaliação dos Efeitos da Musicoterapia em Grupo na Dependência Química (MTDQ) [Tese, Universidade Federal de Minas Gerais]. https://doi.org/10.13140/RG.2.2.21769.04962
DOI: https://doi.org/10.35699/2317-6377.2023.45027
- R Core Team. (2025). R: A language and environment for statistical computing. R Foundation for Statistical Computing. https://www.R-project.org/
- Russell-Lasalandra, L.L., Christensen, A.P. & Golino, H. (2026) Generative psychometrics via AI-GENIE: Automatic item generation and validation with network-integrated evaluation. Behavior Research Methods 58, 217. https://doi.org/10.3758/s13428-026-03082-
DOI: https://doi.org/10.3758/s13428-026-03082-1
- Silveira, M. B., et al. (2018). Construção e validade de conteúdo de um instrumento para avaliação de quedas em idosos. Einstein (São Paulo), 16(2).
- Vinh, N. X., Epps, J., & Bailey, J. (2010). Information theoretic measures for clusterings comparison. Journal of Machine Learning Research. 11(95):2837−2854.
- Vercher, I. B., Soler, A. A., & Ferrari, K. D. (2023). Cuestionario CISMA - Cuestionario del Impacto de las Sesiones de Musicoterapia en Pacientes Adultos. Brazilian Journal of Music Therapy, (33). https://doi.org/10.51914/brjmt.33.2022.385
DOI: https://doi.org/10.51914/brjmt.33.2022.385
- Zmitrowicz, M., & Moura, C. de F. (2018). Musicoterapia e reabilitação: uma revisão de escopo. Cadernos Brasileiros de Terapia Ocupacional, 26(4), 891-903.
-
Cristiana Kaipper Dias,
Gabriel Nunes Lopes Ferreira,
A INFLUÊNCIA DA MÚSICA NA PRODUÇÃO DE ESTADOS ALTERADOS DE CONSCIÊNCIA E POSSÍVEIS UTILIZAÇÕES NA CLÍNICA MUSICOTERÁPICA
,
Brazilian Journal of Music Therapy: ANO XXI – NÚMERO 27 – 2019
-
Gabriel Estanislau,
Wagner Ribeiro,
Abner Davi Barbosa,
Mariana Oliveira da Cruz Soares,
Marina Horta Freire,
MUSICOTERAPIA E EMPREENDEDORISMO: ESTUDO SOBRE A REMUNERAÇÃO DE MUSICOTERAPEUTAS NA CIDADE DE BELO HORIZONTE E REGIÃO METROPOLITANA
,
Brazilian Journal of Music Therapy: ANO XXI – NÚMERO 26 – 2019
-
Ambra Palazzi,
Denise Ren da Fontoura,
MUSICOTERAPIA NA AFASIA DE EXPRESSÃO: UM ESTUDO DE CASO
,
Brazilian Journal of Music Therapy: ANO XVIII – NÚMERO 20 – 2016
-
Revista Brasileiras de Musicoterapia,
Resumos de Monografias da primeira turma de Especialização em Musicoterpia da Universidade Federal de Goiás
,
Brazilian Journal of Music Therapy: ANO II – NÚMERO 3 – 1997
-
Gustavo Schulz Gattino,
Karina Daniela Ferrari,
Graciane Azevedo,
Felipe de Souza,
Flavia Christine Dal Pizzol,
Daniel da Conceição Santana,
TRADUÇÃO, ADAPTAÇÃO TRANSCULTURAL E EVIDÊNCIAS DE VALIDADE DA ESCALA IMPROVISATION ASSESSMENT PROFILES (IAPs) PARA USO NO BRASIL: PARTE 1
,
Brazilian Journal of Music Therapy: ANO XVIII – NÚMERO 20 – 2016
-
Thiago Bueno Reimberg,
O DISCURSO POÉTICO EM MUSICOTERAPIA: UMA ELUCIDAÇÃO FILOSÓFICA
,
Brazilian Journal of Music Therapy: ANO XV – NÚMERO 13 – 2012
-
Bruna Kaiser Wasem,
Rosemyriam Cunha,
PIANO EXPANDIDO: UMA PROPOSTA MUSICOTERAPÊUTICA
,
Brazilian Journal of Music Therapy: ANO XV – NÚMERO 14 – 2013
-
Gustavo Schulz Gattino,
MUSICOTERAPIA NO ORIENTE MÉDIO: ENTREVISTA COM MARION RITCHIE
,
Brazilian Journal of Music Therapy: ANO XIV – NÚMERO 12 – 2012
-
Fernando Dantas Castel,
Cristiane Amorosino,
POSSÍVEIS APLICAÇÕES MUSICOTERÁPICAS EM ATLETAS DE ALTO NÍVEL
,
Brazilian Journal of Music Therapy: ANO XIV – NÚMERO 12 – 2012
-
Marli Gimenez,
Pedro Gonçalves,
Scheila Amorim,
MUSICOTERAPIA E A EDUCAÇÃO INCLUSIVA
,
Brazilian Journal of Music Therapy: ANO XIII – NÚMERO 11 – 2011
<< < 9 10 11 12 13 14 15 16 17 18 > >>
Você também pode iniciar uma pesquisa avançada por similaridade para este artigo.