Avaliação cruzada entre modelos de inteligência artificial e humanos na produção de conteúdos para saúde auditiva para mídias sociais (2024)
- Authors:
- USP affiliated authors: JACOB, LILIAN CÁSSIA BORNIA - FOB ; ALVARENGA, KATIA DE FREITAS - FOB ; NADER, MARIA JÚLIA MENEGUELLO - FOB ; MATOS, HECTOR GABRIEL CORRALE DE - FOB ; GARRIDO, SARAH RODRIGUES THANIS - FOB ; CARDOSO, MARIA JULIA FERREIRA - FOB
- Unidade: FOB
- Subjects: INTELIGÊNCIA ARTIFICIAL; AUDIÇÃO; MÍDIAS SOCIAIS
- Language: Português
- Abstract: Introdução: Comunicação em saúde auditiva é recurso para prevenção de problemas auditivos. Estudos recentes exploram o uso da Inteligência Artificial (IA), particularmente Grandes Modelos de Linguagem, como os chatbots OpenAI ChatGPT e Google Gemini, na comunicação em saúde. Chatbots são capazes de extrair informações de fontes específicas, por exemplo, projetos colaborativos de conhecimento online como a Wikipédia. Entretanto, faltam estudos orientados para avaliar a IA na comunicação em saúde para mídias sociais como Instagram ou YouTube. Objetivo: Analisar a avaliação cruzada entre modelos de IA comparada com avaliação humana de textos em saúde auditiva produzidos por essas plataformas para mídias sociais. Metodologia: Trata-se de um estudo transversal e observacional baseado na avaliação de textos produzidos por IA utilizando a escala Likert, a qual avalia textos em três critérios: leiturabilidade (nível de clareza textual), acurácia de informações e adaptação ao público-alvo. Os modelos de IA do ChatGPT-4 e o Google Gemini foram selecionados para produção de textos nas temáticas zumbido e presbiacusia. Foi utilizada a entrada “Elabore uma publicação de comunicação em saúde para o Instagram sobre a TEMÁTICA. O texto deve apresentar linguagem acessível, descritiva, e referenciado a página pt.wikipedia.org/wiki/TEMÁTICA”. Utilizou-se a ferramenta Google Sheets para registrar a resposta dos modelos ChatGPT-4 e Gemini para entrada dos temas zumbido e presbiacusia. As respostas (textos) nas temáticas zumbido e presbiacusia foram submetidas de forma cruzada (ChatGPT-4 → Gemini/Gemini → ChatGPT-4) junto à entrada “Avalie quantitativamente essa publicação de comunicação em saúde para o Instagram sobre a TEMÁTICA. Avaliação deve ser uma escala Likert de 0 (muito negativa) a 5 (muito positiva) nos critérios: leiturabilidade; acurácia da informação; epúblico-alvo”. Dois avaliadores especialistas independentemente avaliaram os textos gerados pelos modelos com base nos mesmos critérios de pontuação da IA. As pontuações atribuídas foram adicionadas ao Google Sheets e analisadas de forma descritiva. Resultados: Os itens de leiturabilidade e acurácia da informação sobre zumbido produzidos pelos ChatGPT-4 e avaliados pelo Gemini apresentaram pontuação 4. A leiturabilidade dos textos sobre zumbido e presbiacusia produzidos pelo Gemini e avaliados por ChatGPT-4 pontuaram 4. Os demais itens da escala pontuaram 5 para ambos os modelos. Os avaliadores atribuíram pontuação média (zumbido|presbiacusia) para os textos produzidos por IA para leiturabilidade (4.0|4.2), acurácia da informação (2.0|2.4) e público-alvo (5.0|5.0). Conclusão: Os resultados demonstraram viabilidade da avaliação cruzada entre modelos de IA na validação de textos em saúde auditiva para mídias sociais, quanto a leiturabilidade e adequação textual ao público-alvo. Contudo, a acurácia das informações requer avaliação humana, pois houve divergência nas notas entre avaliações humanas e de IA. Embora as plataformas de IA facilitem a geração de textos, a validação por especialistas humanos é necessária para garantir a precisão e a confiabilidade das informações.
- Imprenta:
- Publisher: Faculdade de Odontologia de Bauru, Universidade de São Paulo
- Publisher place: Bauru
- Date published: 2024
- Source:
- Conference titles: Congresso Fonoaudiológico de Bauru "Profa. Dra. Wanderleia Quinhoneiro Blasca" - COFAB
-
ABNT
NADER, Maria Julia Meneguello et al. Avaliação cruzada entre modelos de inteligência artificial e humanos na produção de conteúdos para saúde auditiva para mídias sociais. 2024, Anais.. Bauru: Faculdade de Odontologia de Bauru, Universidade de São Paulo, 2024. . Acesso em: 02 abr. 2026. -
APA
Nader, M. J. M., Matos, H. G. C. de, Garrido, S. R. T., Cardoso, M. J. F., Alvarenga, K. de F., & Jacob, L. C. B. (2024). Avaliação cruzada entre modelos de inteligência artificial e humanos na produção de conteúdos para saúde auditiva para mídias sociais. In Anais. Bauru: Faculdade de Odontologia de Bauru, Universidade de São Paulo. -
NLM
Nader MJM, Matos HGC de, Garrido SRT, Cardoso MJF, Alvarenga K de F, Jacob LCB. Avaliação cruzada entre modelos de inteligência artificial e humanos na produção de conteúdos para saúde auditiva para mídias sociais. Anais. 2024 ;[citado 2026 abr. 02 ] -
Vancouver
Nader MJM, Matos HGC de, Garrido SRT, Cardoso MJF, Alvarenga K de F, Jacob LCB. Avaliação cruzada entre modelos de inteligência artificial e humanos na produção de conteúdos para saúde auditiva para mídias sociais. Anais. 2024 ;[citado 2026 abr. 02 ] - Potencial evocado auditivo de tronco encefálico na identificação da sinaptopatia auditiva: revisão de escopo
- Relação das alterações auditivas e vestibulares pós-vacinação contra a covid-19: revisão de escopo
- Série de casos: queixa de perda auditiva pós-COVID-19
- Julia as first programming language for computational literacy in health education: literature review
- Mapeamento das áreas de aplicação de métodos computacionais na audiologia: uma análise bibliométrica baseada em inteligência artificial
- Uso das metodologias computacionais Python, Julia, R e MATLAB na pesquisa audiológica: revisão de escopo
- Perspectivas de estudantes de graduação e pós-graduação sobre a importância da Wikipédia na formação acadêmica
- Potencial evocado auditivo de tronco encefálico na sinaptopatia auditiva em humanos e animais: revisão sistemática da literatura
- Wikidata as a tool for structuring open data and disseminating knowledge on the internet: Edit-a-thon event in hearing health
- Oficina da Wikipédia: editatona na universidade: relato de experiência
How to cite
A citação é gerada automaticamente e pode não estar totalmente de acordo com as normas
