Please use this identifier to cite or link to this item:
http://dspace.sti.ufcg.edu.br:8080/jspui/handle/riufcg/30461| Title: | Estudo de caso: uso do ChatGPT para resolução de problemas de programação. |
| Other Titles: | Case study: using ChatGPT for programming problem solving. |
| ???metadata.dc.creator???: | SOUZA, Débora Lêda de Lucena. |
| ???metadata.dc.contributor.advisor1???: | GHEYI, Rohit. |
| ???metadata.dc.contributor.referee1???: | FARIA, Roberto Medeiros de. |
| ???metadata.dc.contributor.referee2???: | BRASILEIRO, Francisco Vilar. |
| Keywords: | Problemas de programação - resolução;ChatGPT;LeetCode;BeeCrowd;Resolução de problemas - programação;Programação;Chatbot;Linguagem GPT-3;Estudo de caso;Processamento de linguagem natural;Programming problems - resolution;Troubleshooting - programming;Schedule;GPT-3 language;Case study;Natural language processing |
| Issue Date: | 29-Jun-2023 |
| Publisher: | Universidade Federal de Campina Grande |
| Citation: | SOUZA, Débora Lêda de Lucena. Estudo de caso: uso do ChatGPT para resolução de problemas de programação. 2023. 10f. (Trabalho de Conclusão de Curso - Artigo), Curso de Bacharelado em Ciência da Computação, Centro de Engenharia Elétrica e Informática , Universidade Federal de Campina Grande – Paraíba - Brasil, 2023. Disponível em: http://dspace.sti.ufcg.edu.br:8080/jspui/handle/riufcg/30461 |
| ???metadata.dc.description.resumo???: | A geração de programas a partir de linguagem natural visa transformar frases ou comandos em linguagem natural em código de programação. O ChatGPT é um chatbot de propósito geral baseado no modelo de linguagem GPT-3 desenvolvido para gerar texto como humano, e treinado em uma forma de conversação usando aprendizagem por reforço com feedback humano. Nesse cenário, questionamentos a respeito da confiabilidade das respostas geradas pelo ChatGPT 3.5 foram levantados. Assim, neste estudo, foi realizada uma avaliação do desempenho do modelo na resolução de 100 problemas de programação selecionados aleatoriamente de plataformas populares como LeetCode e BeeCrowd. Os problemas selecionados estão distribuídos entre os graus de complexidade Fácil, Intermediário e Difícil. Do total de 100 problemas submetidos, o modelo de linguagem conseguiu responder corretamente 71 problemas ao longo de 3 tentativas, sendo 50 deles da plataforma LeetCode e 21 da plataforma BeeCrowd. Sendo assim, é possível concluir que o ChatGPT pode ser usado para resolver uma gama de problemas, porém seu uso requer muita atenção, uma vez que nem sempre o resultado gerado estará correto. |
| Abstract: | The generation of programs from natural language aims to transform sentences or commands in natural language into programming code. ChatGPT is a general-purpose chatbot based on the GPT-3 language model designed to generate text like a human. It has been trained using reinforcement learning with human feedback in a conversational format. In this scenario, concerns about the reliability of the responses generated by ChatGPT 3.5 have been raised. Therefore, this study evaluated the model's performance in solving 100 randomly selected programming problems from popular platforms such as LeetCode and BeeCrowd. The selected problems were distributed among the Easy, Intermediate, and Difficult complexity levels. Out of the total of 100 submitted problems, the language model was able to correctly answer 71 problems across 3 attempts, with 50 of them from the LeetCode platform and 21 from the BeeCrowd platform. Thus, it can be concluded that ChatGPT can be used to solve a range of problems, but its use requires careful attention as the generated result may not always be correct. |
| Keywords: | Problemas de programação - resolução ChatGPT LeetCode BeeCrowd Resolução de problemas - programação Programação Chatbot Linguagem GPT-3 Estudo de caso Processamento de linguagem natural Programming problems - resolution Troubleshooting - programming Schedule GPT-3 language Case study Natural language processing |
| ???metadata.dc.subject.cnpq???: | Ciência da Computação. |
| URI: | http://dspace.sti.ufcg.edu.br:8080/jspui/handle/riufcg/30461 |
| Appears in Collections: | Trabalho de Conclusão de Curso - Artigo - Ciência da Computação |
Files in This Item:
| File | Description | Size | Format | |
|---|---|---|---|---|
| DÉBORA LÊDA DE LUCENA SOUZA - TCC ARTIGO CIÊNCIA DA COMPUTAÇÃO CEEI 2023.pdf | Débora Lêda de Lucena Souza - TCC Artigo Ciência da Computação CEEI 2023. | 310.76 kB | Adobe PDF | View/Open |
Items in DSpace are protected by copyright, with all rights reserved, unless otherwise indicated.