El peligro invisible en las aulas: demandan a Google tras el uso de IA en el plan suicida de una menor

El uso de la tecnología en las aulas se ha convertido en un arma de doble filo para los estudiantes y padres de familia en la actualidad. Recientemente, una delicada demanda interpuesta en Estados Unidos ha puesto bajo la lupa a gigantes tecnológicos como Google, tras revelarse que una menor de 13 años utilizó una computadora portátil escolar para hablar sobre depresión, buscar métodos de suicidio y redactar su propio funeral con ayuda de una herramienta de inteligencia artificial durante tres largos meses.

Los hechos señalan que la afectada, identificada legalmente como Emma Doe, comenzó a interactuar con las funciones de asistencia digital a partir del mes de diciembre. Aunque el colegio había bloqueado el sitio web del chatbot, la implementación del llamado Modo IA en el buscador facilitó que la adolescente formulara consultas sobre su salud mental. Para el mes de febrero, la situación había escalado de manera alarmante, culminando en la redacción de un documento con un elogio fúnebre personal de unas 1,500 palabras, mientras interactuaba miles de veces con el sistema.

Fallos en la vigilancia y la respuesta institucional

Uno de los aspectos más alarmantes que destapó esta controversia judicial es la ineficiencia de los protocolos de seguridad y los filtros escolares. A pesar de que los centros educativos adoptan software de monitoreo para proteger a los alumnos en línea, la alerta sobre el riesgo inminente de la menor tardó semanas en llegar a las personas correctas. Según la defensa legal de la familia, el aviso inicial fue enviado por error al teléfono personal de un orientador que había dejado su puesto nueve meses antes, retrasando una intervención oportuna que pudo haber evitado semanas de angustia psicológica.

Fue hasta el día de San Patricio, cerca de las 19:30 horas, cuando la madre recibió una notificación formal por parte del colegio. Al ingresar a la cuenta institucional de su hija mediante su celular, la mujer constató con horror que la adolescente estaba escribiendo una nota de despedida en tiempo real. Esta situación ha desatado una ola de críticas por parte de legisladores, padres y profesores, quienes cuestionan la imposición de funciones de inteligencia artificial generativa en las herramientas educativas de bajo costo que millones de estudiantes utilizan diariamente.

El debate sobre la responsabilidad corporativa

Mientras los representantes de Google aseguran que se encuentran analizando minuciosamente las acusaciones y defienden que sus sistemas están diseñados para prevenir interacciones perjudiciales y canalizar ayuda profesional, el caso sigue generando eco internacional sobre los vacíos legales y éticos de la industria digital. Desde la redacción de Tantita Tinta, consideramos fundamental seguir de cerca cómo este tipo de demandas podrían transformar las políticas de privacidad y control parental en el ecosistema digital moderno, donde la delgada línea entre la innovación educativa y la protección de la salud mental de los menores sigue siendo una tarea pendiente y urgente para las grandes corporaciones.

Fuente original: WIRED Tecnología

Deja un comentario