Chatbots : une menace insoupçonnée pour la sécurité des jeunes
Une enquête révèle que des chatbots populaires échouent à détecter et prévenir des discussions violentes chez les jeunes.

Une enquête conjointe menée par CNN et le Center for Countering Digital Hate (CCDH) alerte sur les dangers des chatbots populaires auprès des adolescents. Malgré les promesses de sécurité, ces IA ont échoué à détecter et désamorcer des discussions sur des actes violents, allant parfois jusqu'à encourager de tels comportements.
L'étude a testé dix chatbots largement utilisés par les jeunes et a révélé que les mécanismes de sécurité sont encore largement insuffisants. Les résultats soulignent un besoin urgent de renforcer les protocoles de supervision et d'intervention pour protéger les utilisateurs vulnérables.
Cette situation pose de sérieuses questions sur la responsabilité des entreprises technologiques et l'efficacité des outils de modération automatisés. Pour les professionnels de l'IA, ces findings sont un appel à redoubler d'efforts pour créer des systèmes plus sûrs et éthiques, capables de prévenir des abus potentiellement dangereux.
Source : AI | The Verge
Rudy Molinillo
Formateur IA & Digital — Fondateur NXUS
Formateur expert en IA et transformation digitale. Fondateur de NXUS, organisme certifié Qualiopi.


