Une étude de Purdue révèle des problèmes de codage dans le chatbot d'OpenAI
L'assistant conversationnel ChatGPT d'OpenAI répond incorrectement à 52% des questions de programmation informatique, selon une étude de l'Université Purdue
Une récente étude de l'Université Purdue a révélé que l'assistant conversationnel ChatGPT d'OpenAI fournit des réponses incorrectes à 52% des requêtes de programmation informatique et que 77% de ses réponses sont excessivement verboses. Malgré ces lacunes, les utilisateurs préfèrent encore les réponses de ChatGPT dans 35% des cas en raison de leur exhaustivité. L'étude a également révélé que les programmeurs ont ignoré les erreurs de l'assistant conversationnel dans 39% des cas, soulignant la nécessité d'une meilleure sensibilisation aux risques associés aux réponses générées par l'IA et à l'importance d'améliorer leur fiabilité.
Principales conclusions
- ChatGPT, l'assistant conversationnel IA d'OpenAI, répond incorrectement à 52% des questions de programmation informatique, selon une étude de l'Université Purdue.
- 77% des réponses de ChatGPT sont verboses, mais les participants les ont préférées dans 35% des cas en raison de leur exhaustivité.
- Les programmeurs de l'étude ont ignoré les informations erronées de l'assistant conversationnel IA dans 39% des cas.
- La fiabilité des assistants conversationnels IA pour les requêtes uniques, comme illustré par le moteur de recherche IA de Google, est discutable, remettant en question les promesses d'outils révolutionnaires malgré les investissements substantiels des géants de la technologie.
Analyse
L'accent mis par l'étude de l'Université Purdue sur les inexactitudes de ChatGPT souligne les risques associés au contenu généré par l'IA, affectant la confiance dans l'IA pour la résolution de problèmes chez les développeurs et les entreprises. Cette révélation concerne non seulement OpenAI, mais soulève également des inquiétudes pour d'autres géants de la technologie comme Google, pouvant entraver l'adoption et le développement de l'IA à long terme.
En réponse, les parties prenantes devront peut-être revoir leurs stratégies pour améliorer les capacités de l'IA en matière de précision et de concision, influençant potentiellement la croissance des industries liées à l'IA. Les pays investissant dans la recherche sur l'IA devront également prendre en compte cette incertitude dans leurs futures stratégies.
Le saviez-vous ?
- ChatGPT : l'assistant conversationnel IA d'OpenAI, ChatGPT, est un modèle IA conversationnel qui répond incorrectement à 52% des questions de programmation informatique, remettant en question sa fiabilité dans ce domaine.
- Réponses excessivement verboses : l'étude de l'Université Purdue a révélé que 77% des réponses de ChatGPT sont verboses, ce qui peut compliquer l'identification des informations correctes pour les utilisateurs.
- Fiabilité des assistants conversationnels IA : l'étude souligne les risques associés aux réponses générées par l'IA, remettant en question les promesses d'outils IA révolutionnaires malgré les investissements importants des grandes entreprises technologiques.