Análise de ambiguidade linguística em modelos de linguagem de grande escala (LLMs)
Fuente:
Redalyc
Saved in:
| Main Author: | |
|---|---|
| Format: | Artículo científico |
| Language: | pt |
| Published: |
Universidade Federal de Minas Gerais
2025
|
| Subjects: | |
| Online Access: | |
| Tags: |
Add Tag
No Tags, Be the first to tag this record!
|
| _version_ | 1876465135807102976 |
|---|---|
| author | Lavínia de Carvalho Moraes |
| author_facet | Lavínia de Carvalho Moraes |
| contents | Análise de ambiguidade linguística em modelos de linguagem de grande escala (LLMs) Lavínia de Carvalho Moraes Irene Cristina Silvério Rafael Alexandre Sousa Marques Bianca de Castro Anaia Dandara Freitas de Paula Maria Carolina Schincariol de Faria Iury Cleveston Alana de Santana Correia Raquel Meister Ko Freitag Multidisciplinarias (Ciencias, Ciencias Sociales, Artes y Humanidades) Gemini ChatGPT Ambiguidade Modelos de linguagem A ambiguidade linguística ainda é um grande desafio para sistemas de processamento de linguagem natural (NLP) apesar dos avanços em arquiteturas como Transformers e BERT. Inspirado pelo êxito recente dos modelos instrucionais ChatGPT (versão 3.5) e Gemini (denominado Bard até 2023), este trabalho visa analisar e discutir a ambiguidade linguística nesses modelos a partir de três tipos de ambiguidade no Português Brasileiro: semântica, sintática e lexical. Para isso, foi desenvolvido um corpus com 120 frases ambíguas e não ambíguas, submetidas aos modelos para tipificação, explicação e desambiguação. Também foi explorada a capacidade de geração de frases ambíguas, solicitando a geração de conjuntos de frases para cada tipo de ambiguidade. Os resultados foram analisados qualitativamente, com base em referenciais linguísticos reconhecidos, e quantitativamente pela acurácia das respostas obtidas. Evidenciamos que equívocos e deficiências nas respostas permanecem mesmo em modelos mais sofisticados, como ChatGPT e Gemini, com explicações frequentemente inconsistentes. A acurácia foi de no máximo 49,58%, apontando a necessidade de estudos descritivos para o aprendizado supervisionado. 2025 artículo científico 1983-3652 https://www.redalyc.org/articulo.oa?id=577182239007 https://www.redalyc.org/journal/5771/577182239007/ https://www.redalyc.org/journal/5771/577182239007/html/ https://www.redalyc.org/journal/5771/577182239007/577182239007.epub https://www.redalyc.org/journal/5771/577182239007/movil 10.1590/1983-3652.2025.53181 pt http://www.redalyc.org/revista.oa?id=5771 Texto Livre: Linguagem e Tecnologia application/pdf Universidade Federal de Minas Gerais Texto Livre: Linguagem e Tecnologia (Brasil) Vol.18 |
| format | Artículo científico |
| id | redalyc_577182239007 |
| institution | Redalyc |
| language | pt |
| publishDate | 2025 |
| publisher | Universidade Federal de Minas Gerais |
| spellingShingle | Análise de ambiguidade linguística em modelos de linguagem de grande escala (LLMs) Lavínia de Carvalho Moraes Multidisciplinarias (Ciencias, Ciencias Sociales, Artes y Humanidades) Gemini ChatGPT Ambiguidade Modelos de linguagem Análise de ambiguidade linguística em modelos de linguagem de grande escala (LLMs) Lavínia de Carvalho Moraes Irene Cristina Silvério Rafael Alexandre Sousa Marques Bianca de Castro Anaia Dandara Freitas de Paula Maria Carolina Schincariol de Faria Iury Cleveston Alana de Santana Correia Raquel Meister Ko Freitag Multidisciplinarias (Ciencias, Ciencias Sociales, Artes y Humanidades) Gemini ChatGPT Ambiguidade Modelos de linguagem A ambiguidade linguística ainda é um grande desafio para sistemas de processamento de linguagem natural (NLP) apesar dos avanços em arquiteturas como Transformers e BERT. Inspirado pelo êxito recente dos modelos instrucionais ChatGPT (versão 3.5) e Gemini (denominado Bard até 2023), este trabalho visa analisar e discutir a ambiguidade linguística nesses modelos a partir de três tipos de ambiguidade no Português Brasileiro: semântica, sintática e lexical. Para isso, foi desenvolvido um corpus com 120 frases ambíguas e não ambíguas, submetidas aos modelos para tipificação, explicação e desambiguação. Também foi explorada a capacidade de geração de frases ambíguas, solicitando a geração de conjuntos de frases para cada tipo de ambiguidade. Os resultados foram analisados qualitativamente, com base em referenciais linguísticos reconhecidos, e quantitativamente pela acurácia das respostas obtidas. Evidenciamos que equívocos e deficiências nas respostas permanecem mesmo em modelos mais sofisticados, como ChatGPT e Gemini, com explicações frequentemente inconsistentes. A acurácia foi de no máximo 49,58%, apontando a necessidade de estudos descritivos para o aprendizado supervisionado. 2025 artículo científico 1983-3652 https://www.redalyc.org/articulo.oa?id=577182239007 https://www.redalyc.org/journal/5771/577182239007/ https://www.redalyc.org/journal/5771/577182239007/html/ https://www.redalyc.org/journal/5771/577182239007/577182239007.epub https://www.redalyc.org/journal/5771/577182239007/movil 10.1590/1983-3652.2025.53181 pt http://www.redalyc.org/revista.oa?id=5771 Texto Livre: Linguagem e Tecnologia application/pdf Universidade Federal de Minas Gerais Texto Livre: Linguagem e Tecnologia (Brasil) Vol.18 |
| title | Análise de ambiguidade linguística em modelos de linguagem de grande escala (LLMs) |
| topic | Multidisciplinarias (Ciencias, Ciencias Sociales, Artes y Humanidades) Gemini ChatGPT Ambiguidade Modelos de linguagem |
| url | https://www.redalyc.org/articulo.oa?id=577182239007 https://www.redalyc.org/journal/5771/577182239007/ https://www.redalyc.org/journal/5771/577182239007/html/ https://www.redalyc.org/journal/5771/577182239007/577182239007.epub https://www.redalyc.org/journal/5771/577182239007/movil |