Detector de IA de Turnitin: más alto

Te quedan /5 artículos.Regístrese para obtener una cuenta gratuita o inicie sesión.

La herramienta de detección de escritura de inteligencia artificial de Turnitin tiene una tasa de falsos positivos más alta de lo que la compañía afirmó originalmente, según Annie Chechitelli, directora de productos de la compañía. Cuando se lanzó el producto en abril, Turnitin promocionó que tenía una tasa de falsos positivos de menos del 1 por ciento. Ahora, la compañía no ha revelado la nueva tasa de falsos positivos a nivel de documento.

"Seguimos firmes en nuestra estrategia de ser transparentes con la comunidad educativa sobre nuestros hallazgos y avances", escribió Chechitelli. Turnitin atribuye la discrepancia a la diferencia entre las pruebas que hizo la empresa en el laboratorio y las experiencias que tuvieron los usuarios en el mundo real.

Cuando la herramienta de detección de IA de Turnitin informa que un escrito tiene menos del 20 por ciento de posibilidades de haber sido escrito por una máquina, tiene una mayor incidencia de falsos positivos, según el comunicado. Ahora, la compañía agregará un asterisco con un mensaje que arroje dudas sobre tales resultados.

La herramienta de detección de IA de Turnitin produce dos estadísticas: una a nivel de documento y otra a nivel de oración. La tasa de falsos positivos a nivel de oración es de aproximadamente el 4 por ciento, según Chechitelli.

Pero la herramienta parece tener problemas particulares con el texto que mezcla prosa generada por IA y escrita por humanos. Por ejemplo, más de la mitad (54 por ciento) de las oraciones falsas positivas (escritas por humanos) se encuentran justo al lado de las oraciones escritas por IA, según el comunicado. Más de una cuarta parte (26 por ciento) de las oraciones falsas positivas se encuentran a dos oraciones de distancia de una oración escrita por IA.

La compañía planea experimentar y probar más en los próximos meses.

"Como parte de nuestra mejora continua a medida que [los modelos de lenguaje grande] y la escritura de IA continúan evolucionando, nuestras métricas pueden cambiar", escribió Chechitelli. "Entendemos que, como comunidad educativa, estamos en un territorio desconocido".

A medida que las instituciones se enfocan más en guiar a los estudiantes hacia los mejores resultados de posgrado posibles, el servicio profesional

Kartik Chandra ofrece un mensaje a la Clase de 2023: sus palabras importan, ahora más que nunca.

La tecnología promete ayudar a los estudiantes con desventajas a desarrollar las habilidades necesarias para el éxito.

Los académicos que buscan un respiro de la manguera contra incendios de la información de IA y las tomas calientes lanzan talleres de verano.