ChatGPT Responde Perguntas de Programação Incorretamente 52% do Tempo: Estudo

Chatbots de inteligência artificial como o ChatGPT da OpenAI estão sendo vendidos como ferramentas revolucionárias que podem ajudar os trabalhadores a se tornarem mais eficientes em seus empregos, talvez substituindo completamente essas pessoas no futuro. Mas um estudo impressionante descobriu que o ChatGPT responde incorretamente a perguntas de programação de computadores 52% das vezes. A pesquisa da Universidade de Purdue, apresentada no Computer-Human Interaction Conference no Havaí, analisou 517 perguntas de programação no Stack Overflow que foram alimentadas ao ChatGPT. O estudo explicou que 52% das respostas do ChatGPT contêm informações incorretas e 77% são verbosas. No entanto, os participantes do estudo ainda preferiram as respostas do ChatGPT 35% do tempo devido à sua abrangência e estilo de linguagem bem articulado. Alarmantemente, os programadores no estudo nem sempre percebiam os erros produzidos pelo chatbot de IA. O estudo também apontou que eles ignoraram a desinformação nas respostas do ChatGPT 39% do tempo. Isso ressalta a necessidade de combater a desinformação nas respostas do ChatGPT a perguntas de programação e aumentar a conscientização sobre os riscos associados a respostas aparentemente corretas. Grandes empresas de tecnologia estão investindo bilhões de dólares em IA para entregar os chatbots mais confiáveis. No entanto, um dos principais problemas é que a IA frequentemente é pouco confiável, especialmente se um usuário fizer uma pergunta verdadeiramente única. É importante estar ciente desses desafios ao utilizar essas ferramentas, uma vez que elas têm o potencial de remodelar radicalmente nossa relação com a internet.