Aplicação de Modelos de Linguagem de Grande Escala (LLMs) na Automação Cognitiva: uma prova de conceito em atendimento ao cliente
dc.contributor.advisor | Doutor Frederico Gadelha Guimarães | |
dc.contributor.author | Santana, Alexandre Fortes | |
dc.date.accessioned | 2024-10-18T14:55:24Z | |
dc.date.available | 2024-10-18T14:55:24Z | |
dc.date.issued | 2024-09-13 | |
dc.description.abstract | Este trabalho apresenta a aplicação de modelos de linguagem de grande escala (LLMs), especificamente o GPT-4, na automação da avaliação de atendimentos ao cliente, validando sua eficácia por meio de uma prova de conceito (PoC) implementada em um ambiente real na Efí Bank. A hipótese inicial propôs que o LLM poderia reduzir a necessidade de intervenção humana direta na classificação e análise de chamados, permitindo que ajustes fossem realizados por profissionais não especializados em TI, como líderes de atendimento ou analistas de qualidade. Os resultados corroboram essa hipótese, destacando a flexibilidade dos LLMs em se adaptarem a novas demandas com simples ajustes de prompts. Além disso, o projeto demonstrou que a automação pode realizar milhares de análises com um custo operacional competitivo, liberando os profissionais para focarem em atividades de maior valor agregado. Entre os principais desafios enfrentados, destacam-se a sensibilidade dos LLMs ao formato dos prompts e o fenômeno das ``alucinações", em que o modelo pode gerar dados inexistentes ao tentar responder a uma solicitação inadequada. Para mitigar esses desafios, foram implementadas estratégias de refinamento dos prompts e normalização de dados quantitativos. Os resultados obtidos demonstram que, além de serem economicamente viáveis, os LLMs podem superar as limitações de análises humanas tradicionais em termos de escala e consistência. O projeto também identificou oportunidades de aplicação dessa tecnologia em outras áreas da organização, como na detecção de fraudes e na automação de processos comerciais, ampliando o impacto estratégico da automação cognitiva dentro da empresa. | |
dc.description.abstract1 | This work presents the application of large-scale language models (LLMs), specifically GPT-4, in automating customer service evaluation, validating its effectiveness through a proof of concept (PoC) implemented in a real environment at Efí Bank. The initial hypothesis proposed that the LLM could reduce the need for direct human intervention in the classification and analysis of service requests, allowing adjustments to be made by non-IT professionals, such as customer service leaders or quality analysts. The results support this hypothesis, highlighting the flexibility of LLMs in adapting to new demands with simple prompt adjustments. Furthermore, the project demonstrated that automation can perform thousands of analyses at a competitive operational cost, freeing professionals to focus on higher-value activities. Among the main challenges encountered were the sensitivity of LLMs to prompt formatting and the phenomenon of ``hallucinations," where the model may generate non-existent data when attempting to respond to an inappropriate request. To mitigate these challenges, strategies for refining prompts and normalizing quantitative data were implemented. The results obtained demonstrate that, in addition to being economically viable, LLMs can overcome the limitations of traditional human analyses in terms of scale and consistency. The project also identified opportunities to apply this technology in other areas of the organization, such as fraud detection and the automation of commercial processes, expanding the strategic impact of cognitive automation within the company. | |
dc.identifier.uri | http://hdl.handle.net/20.500.14387/1892 | |
dc.language.iso | Português | |
dc.publisher.campi | Ouro Preto | |
dc.publisher.country | Brasil | |
dc.publisher.institution | Instituto Federal de Minas Gerais | |
dc.publisher.program | Especialização em Inteligência Artificial | |
dc.rights | Acesso aberto | |
dc.subject.keyword | Inteligência artificial generativa | |
dc.subject.keyword | Engenharia de prompt | |
dc.subject.keyword | Modelos de linguagem de grande escala | |
dc.subject.keyword | Automação cognitiva | |
dc.subject.keyword | ChatGPT | |
dc.subject.keyword | Atendimento ao cliente | |
dc.title | Aplicação de Modelos de Linguagem de Grande Escala (LLMs) na Automação Cognitiva: uma prova de conceito em atendimento ao cliente | |
dc.title.alternative | Application of Large Language Models (LLMs) in Cognitive Automation: A Proof of Concept in Customer Service | |
dc.type | Trabalho de Conclusão de Curso |
Arquivos
Pacote Original
1 - 1 de 1
Carregando...
- Nome:
- Aplicação_de_Modelos_de_Linguagem_de_Grande_Escala__LLMs__na_Automação_Cognitiva__Uma_Prova_de_Conceito_em_Atendimento_ao_Cliente__v1_3_fica_catal_folha_aprovacao.pdf
- Tamanho:
- 2.61 MB
- Formato:
- Adobe Portable Document Format
- Descrição:
Licença do Pacote
1 - 1 de 1
Carregando...
- Nome:
- license.txt
- Tamanho:
- 1.79 KB
- Formato:
- Item-specific license agreed to upon submission
- Descrição: