Les écoles utilisent des conseillers IA pour suivre la santé mentale des élèves. Est-ce sécuritaire?

TheGuardian - 03/03
Alors que des centaines d’écoles mettent en œuvre un outil de surveillance automatisé, les enseignants affirment que les élèves peuvent trouver que parler à des chatbots est « plus naturel » que de se confier à un humain.

L'alerte est tombée vers 19 heures.

Brittani Phillips a vérifié son téléphone. Conseiller dans un collège du comté de Putnam, en Floride, Phillips reçoit des messages d'une plateforme thérapeutique basée sur l'intelligence artificielle que les élèves utilisent en dehors des heures de cours. Il signale quand un élève risque de se faire du mal ou de faire du mal à autrui, en fonction de ce qu'il tape dans une discussion.

Phillips a vu qu’il s’agissait d’une alerte « sévère » pour un élève de huitième.

Ainsi, Phillips a passé sa soirée au téléphone avec la mère de l’élève, la sondant pour comprendre ce qui se passait et à quel point l’élève était vulnérable. Phillips a également appelé la police, dit-elle, soulignant qu'elle dit aux étudiants que les discussions sont confidentielles jusqu'à ce qu'elles ne puissent plus l'être.

C'était l'année scolaire dernière, au printemps.

"Il est bel et bien vivant. Il est en neuvième année cette année", dit Phillips. Elle pense que cette interaction a établi un climat de confiance entre elle et la famille. Lorsque l'étudiant la croise désormais dans le hall, il se fait un devoir de la saluer, ajoute-t-elle.

Technologie naissante, vraie peur : comment l'anxiété liée à l'IA bouleverse les ambitions de carrière
En savoir plus

Face aux déficits budgétaires et au personnel limité en santé mentale, le lycée Interlachen Jr-Sr, où travaille Phillips, utilise une plate-forme d’IA pour évaluer les besoins des élèves en matière de santé mentale.

Le district de Phillips utilise Alongside, un système automatisé de surveillance des étudiants, depuis trois ans. Il s’agit d’un exemple de la catégorie croissante d’outils commercialisés auprès des écoles primaires et secondaires à des fins similaires, avec au moins neuf entreprises ayant obtenu des accords de financement depuis 2022.

Parallèlement, il affirme que son outil est utilisé par plus de 200 écoles aux États-Unis et affirme que sa plate-forme offre de meilleurs services que les options de télésanté classiques, car elle dispose d'un outil de chat de renforcement des compétences sociales et émotionnelles – dans lequel les étudiants discutent de leurs problèmes de vie avec un lama appelé Kiwi qui essaie de leur apprendre à développer leur résilience – et son contenu généré par l'IA est surveillé par des cliniciens. Le système offre aux écoles disposant de ressources ex...
[Courte citation de 8% de l'article original]

Loading...