Construção e análise de protótipo de chatbot generativo com Retrieval-Augmented Generation (RAG) a partir de um vocabulário controlado para aplicação no domínio da Propriedade Intelectual (PI)

Resumo

A partir da criação de um protótipo de vocabulário controlado, no domínio da Propriedade Intelectual (PI), para ser o contexto de um protótipo de chatbot, objetiva-se analisar se o protótipo de chatbot está fornecendo respostas precisas, com definições e garantia literária, e se não está fornecendo respostas inventadas. A partir do protótipo de tesauro do domínio de PI, de Pereira (2022), foi elaborada a estruturação de um protótipo de vocabulário controlado no mesmo domínio que alicerçou o protótipo de chatbot. Foram usadas ferramentas de Inteligência Artificial (IA): LangChain, FAISS Vector Store, modelo GPT-4o mini, da OpenAI e RAG. O protótipo de vocabulário controlado foi usado como o contexto para o bot. A partir de testes empíricos nesta pesquisa, o bot visou responder perguntas com garantia literária. No entanto, suas configurações não impediram algumas imprecisões. Observa-se, desta forma, que é necessária a continuação da investigação científica em sistemas de inteligência artificial, atuando em conjunto com vocabulários controlados. A partir de resultados exploratórios, verificou-se que o RAG auxilia chatbots na identificação semântica das perguntas para trazerem respostas corretas, mas são necessários ajustes finos na programação de chatbots futuros para ampliar a capacidade de precisão semântica.