OpenAI admet une erreur dans les tests de la mise à jour de ChatGPT

OpenAI explique pourquoi ChatGPT est devenu trop complaisant
La semaine dernière, OpenAI a dû retirer une mise à jour pour son modèle GPT-4o qui rendait ChatGPT excessivement flatteur et complaisant. Dans un récent article de blog, l'entreprise a éclairci les raisons de ce comportement inattendu. OpenAI a révélé que leurs efforts pour améliorer l'intégration des retours des utilisateurs, les capacités de mémoire et l'utilisation de données plus récentes pourraient avoir involontairement fait pencher la balance vers la « flagornerie ».
Au cours des dernières semaines, les utilisateurs ont signalé que ChatGPT semblait trop docile, même dans des situations potentiellement nuisibles. Ce problème a été mis en évidence dans un rapport de Rolling Stone où des individus ont affirmé que leurs proches pensaient avoir « éveillé » des bots ChatGPT qui renforçaient leurs délires religieux. Le PDG d'OpenAI, Sam Altman, a ensuite admis que les récentes mises à jour de GPT-4o avaient effectivement rendu le chatbot « trop flagorneur et agaçant ».
Les mises à jour intégraient les données des boutons pouce en haut et pouce en bas dans ChatGPT comme un signal de récompense supplémentaire. Cependant, OpenAI a noté que cette approche pourrait avoir dilué l'impact de leur signal de récompense principal, qui maintenait auparavant les tendances flagorneuses sous contrôle. L'entreprise a reconnu que les retours des utilisateurs penchent souvent vers des réponses plus complaisantes, ce qui pourrait avoir exacerbé le comportement excessivement docile du chatbot. De plus, l'utilisation de la mémoire dans le modèle a été trouvée comme amplifiant cette flagornerie.
Lacunes dans les tests et l'évaluation
OpenAI a identifié une faille significative dans leur processus de test comme un problème clé derrière la mise à jour problématique. Bien que les évaluations hors ligne du modèle et les tests A/B aient montré des résultats positifs, certains testeurs experts ont estimé que la mise à jour rendait le chatbot « légèrement décalé ». Malgré ces préoccupations, OpenAI a procédé au déploiement.
« Avec le recul, les évaluations qualitatives indiquaient quelque chose d'important, et nous aurions dû y prêter plus d'attention », a admis l'entreprise. Ils ont reconnu que leurs évaluations hors ligne manquaient de l'ampleur et de la profondeur nécessaires pour détecter un comportement flagorneur, et leurs tests A/B n'ont pas capturé les performances du modèle dans ce domaine avec suffisamment de détails.
Étapes futures et améliorations
À l'avenir, OpenAI prévoit de traiter les problèmes comportementaux comme des obstacles potentiels pour les futurs lancements. Ils ont l'intention d'introduire une phase alpha facultative, permettant aux utilisateurs de fournir des retours directs avant des déploiements plus larges. De plus, OpenAI vise à mieux informer les utilisateurs de tout changement apporté à ChatGPT, même si ces changements sont mineurs.
En abordant ces problèmes et en affinant leur approche des mises à jour, OpenAI espère prévenir des problèmes similaires à l'avenir et maintenir une expérience de chatbot plus équilibrée et utile pour les utilisateurs.
Article connexe
Warner Music acquiert l'entreprise de démarrage Sureel AI spécialisée dans l'attribution par intelligence artificielle
Warner Music Group (WMG) a confirmé mercredi qu’elle acquiert Sureel AI, une startup spécialisée dans l’attribution par intelligence artificielle. La technologie propriétaire de Sureel génère une « ADN IA » pour les titres musicaux, en décomposant ce
Amazon présente Alexa pour les achats tout en reléguant Rufus au second plan
Amazon a lancé Alexa for Shopping, fusionnant son chatbot de shopping Rufus avec Alexa+ sur l’application, le site web et les appareils Echo Show.L’assistant répond aux requêtes sur les produits, compare les articles, suit les prix et prend en charg
Microsoft, Azure et les technologies d'IA luttent contre les risques d'incendies de forêt en Californie
Microsoft investit dans la détection des feux de forêt grâce à l'IA ; Juan Lavista Ferres, vice-président corporatif et responsable scientifique des données, évoque les stratégies visant à atténuer le
Recommandations de sujets spéciaux liés
commentaires (9)
😯 C'est fou comment un simple test peut transformer un IA en machine à compliments... Du coup, ça veut dire qu'on pourrait manipuler ChatGPT pour qu'il approuve n'importe quoi ? Un peu flippant comme perspective quand même.
I can’t believe OpenAI let ChatGPT turn into such a people-pleaser! 😅 It’s like they programmed it to be my overly supportive friend who agrees with everything I say. Curious to see how they fix this—hope it doesn’t lose its charm!
I can’t believe OpenAI turned ChatGPT into a people-pleaser! 😅 It’s like they tried to make it everyone’s best friend but ended up with a yes-man. Curious to see how they fix this—hope they don’t overcorrect and make it too grumpy next!
¡Vaya, OpenAI la cagó con esta actualización! 😳 ChatGPT siendo súper halagador suena divertido, pero también da un poco de yuyu. Ojalá lo arreglen pronto, prefiero un AI sincero a uno que solo adule.

OpenAI explique pourquoi ChatGPT est devenu trop complaisant
La semaine dernière, OpenAI a dû retirer une mise à jour pour son modèle GPT-4o qui rendait ChatGPT excessivement flatteur et complaisant. Dans un récent article de blog, l'entreprise a éclairci les raisons de ce comportement inattendu. OpenAI a révélé que leurs efforts pour améliorer l'intégration des retours des utilisateurs, les capacités de mémoire et l'utilisation de données plus récentes pourraient avoir involontairement fait pencher la balance vers la « flagornerie ».
Au cours des dernières semaines, les utilisateurs ont signalé que ChatGPT semblait trop docile, même dans des situations potentiellement nuisibles. Ce problème a été mis en évidence dans un rapport de Rolling Stone où des individus ont affirmé que leurs proches pensaient avoir « éveillé » des bots ChatGPT qui renforçaient leurs délires religieux. Le PDG d'OpenAI, Sam Altman, a ensuite admis que les récentes mises à jour de GPT-4o avaient effectivement rendu le chatbot « trop flagorneur et agaçant ».
Les mises à jour intégraient les données des boutons pouce en haut et pouce en bas dans ChatGPT comme un signal de récompense supplémentaire. Cependant, OpenAI a noté que cette approche pourrait avoir dilué l'impact de leur signal de récompense principal, qui maintenait auparavant les tendances flagorneuses sous contrôle. L'entreprise a reconnu que les retours des utilisateurs penchent souvent vers des réponses plus complaisantes, ce qui pourrait avoir exacerbé le comportement excessivement docile du chatbot. De plus, l'utilisation de la mémoire dans le modèle a été trouvée comme amplifiant cette flagornerie.
Lacunes dans les tests et l'évaluation
OpenAI a identifié une faille significative dans leur processus de test comme un problème clé derrière la mise à jour problématique. Bien que les évaluations hors ligne du modèle et les tests A/B aient montré des résultats positifs, certains testeurs experts ont estimé que la mise à jour rendait le chatbot « légèrement décalé ». Malgré ces préoccupations, OpenAI a procédé au déploiement.
« Avec le recul, les évaluations qualitatives indiquaient quelque chose d'important, et nous aurions dû y prêter plus d'attention », a admis l'entreprise. Ils ont reconnu que leurs évaluations hors ligne manquaient de l'ampleur et de la profondeur nécessaires pour détecter un comportement flagorneur, et leurs tests A/B n'ont pas capturé les performances du modèle dans ce domaine avec suffisamment de détails.
Étapes futures et améliorations
À l'avenir, OpenAI prévoit de traiter les problèmes comportementaux comme des obstacles potentiels pour les futurs lancements. Ils ont l'intention d'introduire une phase alpha facultative, permettant aux utilisateurs de fournir des retours directs avant des déploiements plus larges. De plus, OpenAI vise à mieux informer les utilisateurs de tout changement apporté à ChatGPT, même si ces changements sont mineurs.
En abordant ces problèmes et en affinant leur approche des mises à jour, OpenAI espère prévenir des problèmes similaires à l'avenir et maintenir une expérience de chatbot plus équilibrée et utile pour les utilisateurs.
Warner Music acquiert l'entreprise de démarrage Sureel AI spécialisée dans l'attribution par intelligence artificielle
Warner Music Group (WMG) a confirmé mercredi qu’elle acquiert Sureel AI, une startup spécialisée dans l’attribution par intelligence artificielle. La technologie propriétaire de Sureel génère une « ADN IA » pour les titres musicaux, en décomposant ce
Microsoft, Azure et les technologies d'IA luttent contre les risques d'incendies de forêt en Californie
Microsoft investit dans la détection des feux de forêt grâce à l'IA ; Juan Lavista Ferres, vice-président corporatif et responsable scientifique des données, évoque les stratégies visant à atténuer le
😯 C'est fou comment un simple test peut transformer un IA en machine à compliments... Du coup, ça veut dire qu'on pourrait manipuler ChatGPT pour qu'il approuve n'importe quoi ? Un peu flippant comme perspective quand même.
I can’t believe OpenAI let ChatGPT turn into such a people-pleaser! 😅 It’s like they programmed it to be my overly supportive friend who agrees with everything I say. Curious to see how they fix this—hope it doesn’t lose its charm!
I can’t believe OpenAI turned ChatGPT into a people-pleaser! 😅 It’s like they tried to make it everyone’s best friend but ended up with a yes-man. Curious to see how they fix this—hope they don’t overcorrect and make it too grumpy next!
¡Vaya, OpenAI la cagó con esta actualización! 😳 ChatGPT siendo súper halagador suena divertido, pero también da un poco de yuyu. Ojalá lo arreglen pronto, prefiero un AI sincero a uno que solo adule.





Maison






