¿El detector de IA marca a quien no es nativo en inglés? Prueba real

¿Los detectores de IA marcan como IA los textos en inglés de quienes no son nativos? La investigación publicada dice que a menudo sí, pero en nuestra prueba con un párrafo de discusión escrito por un investigador real, no lo hicieron. La redacción formulaica, un repertorio limitado de conectores y los patrones de frase de manual son justo lo que se sospecha que los detectores castigan, así que probamos un párrafo escrito a mano por un investigador de ciencia de materiales no nativo de inglés, el tipo de texto que motiva esa preocupación.

El resultado fue poco dramático, y esa es la cuestión. Cuatro de cinco modelos detectores lo leyeron como humano, no se marcó ninguna frase, Humanizer v2 no cambió nada y el proceso no costó nada.

Por qué este texto parecía en riesgo

Léelo como lo haría un detector. Las frases empiezan con fórmulas hechas: "In this study, we found that", "It is considered that", "Therefore, it is important to", "These results suggest that". El vocabulario es reducido y repetitivo. La gramática lleva las huellas de alguien que aprendió inglés como segunda lengua: "The reason of this improvement", "the tensile strength was decreased", "for obtaining the best mechanical properties".

La investigación que respalda esa preocupación es real. Liang y sus colegas de Stanford pasaron por siete detectores GPT de uso extendido ensayos escritos para el TOEFL por hablantes no nativos y encontraron una tasa media de falsos positivos del 61,22 %. De esos ensayos, el 97,80 % fue marcado como generado por IA por al menos un detector. Resumimos el artículo en Los detectores GPT tienen sesgo contra quienes escriben en inglés como segunda lengua.

Así que lo razonable habría sido predecir al menos algunas frases marcadas. No fue lo que ocurrió.

Qué dijeron los detectores

El veredicto del informe sobre el borrador fue escrito por humanos. Cuatro de los cinco modelos detectores votaron humano y uno votó IA. A nivel de frase, las nueve frases se leyeron como humanas; ninguna se marcó y ninguna fue no concluyente.

In this study, we found that the addition of 2 wt% graphene oxide improved the tensile strength of the epoxy composite by 27% compared to the neat epoxy. This result is consistent with the previous studies which reported similar improvement in the range of 20-35%. The reason of this improvement can be explained by the good dispersion of graphene oxide sheets in the matrix and the strong interfacial bonding between the oxygen functional groups and the epoxy chains. However, when the content was increased to 3 wt%, the tensile strength was decreased. It is considered that the agglomeration of graphene oxide sheets occurred at higher content, and these agglomerates acted as stress concentration points. This tendency was also confirmed by the SEM images, which showed the clusters of sheets on the fracture surface. Therefore, it is important to optimize the filler content for obtaining the best mechanical properties. In addition, the glass transition temperature was slightly increased from 142 to 147 degrees, which means the mobility of polymer chains was restricted by the graphene oxide. These results suggest that the graphene oxide/epoxy composite can be a promising material for the lightweight structural applications.

Análisis real de nuestra prueba. Las nueve frases se leyeron como humanas.

• Párrafo original1 de 5
• Resultado de Humanizer v2 (sin cambios)1 de 5

Fuente: proceso de producción de Humanizer v2. Mismo texto, mismos votos.

Qué hizo Humanizer v2: nada, a propósito

Humanizer v2 reescribe solo las frases que marcan los detectores. Sin frases marcadas no había nada que reescribir, así que el resultado es el texto de entrada, carácter por carácter.

1. Búsqueda de señales de IANueve frases analizadas; ninguna marcada, las nueve leídas como humanas.
2. Reescritura de las frases marcadasNada que reescribir, así que no cambió ninguna frase.
3. Nueva comprobación con detectores de IAMismo texto, mismo resultado: escrito por humanos, con cuatro de cinco modelos votando humano.
4. Guardado del resultadoUn proceso sin cambios cuesta 0 créditos, aunque de otro modo 1.235 caracteres serían 3.

Este es el comportamiento que más importa a quienes no son nativos. Una herramienta que lo parafrasea todo habría sustituido las frases de este autor por las de otra persona, habría introducido una redacción nueva a la que los detectores podrían reaccionar y encima habría cobrado por ello. Dejar intacta la escritura humana no es una función que falte. Es el diseño.

Cómo leer este resultado con cuidado

Un solo párrafo de prueba no refuta un estudio publicado, y no debe leerse como "los detectores ya no tienen problemas con la escritura no nativa". Tres advertencias:

• La discrepancia fue real. Uno de cinco modelos votó IA. Si hubieras comprobado el texto con una sola herramienta que se comporte como ese modelo, habrías visto un veredicto de IA en un texto escrito por una persona. Ese es el patrón que documentaron Liang y sus colegas, y por eso comparamos varios modelos en lugar de fiarnos de uno. Consulta por qué discrepan los detectores de IA.
• Las secciones de discusión contienen datos concretos. Este párrafo está lleno de valores concretos (2 wt%, 27 %, 20-35 %, 3 wt%, de 142 a 147 grados) y de evidencias con nombre (imágenes SEM, superficie de fractura). Un texto ligado a resultados concretos puede leerse de forma distinta a un ensayo breve y general como los del estudio del TOEFL.
• Tu texto no es este texto. Un párrafo con un planteamiento más genérico podría quedar marcado. El informe te lo dice frase por frase, lo que resulta más útil que una sola puntuación.

La gramática es otra tarea

Pasar por humano no es lo mismo que estar listo para una revista. El párrafo sigue teniendo errores que marcaría un corrector, y un humanizador no es la herramienta para arreglarlos. Su función es cambiar las frases que marcan los detectores; no toca las frases que ya se leen como humanas, errores incluidos.

Antes

The reason of this improvement can be explained by the good dispersion of graphene oxide sheets in the matrix and the strong interfacial bonding between the oxygen functional groups and the epoxy chains. However, when the content was increased to 3 wt%, the tensile strength was decreased. In addition, the glass transition temperature was slightly increased from 142 to 147 degrees, which means the mobility of polymer chains was restricted by the graphene oxide.

Después

The reason for this improvement can be explained by the good dispersion of graphene oxide sheets in the matrix and the strong interfacial bonding between the oxygen functional groups and the epoxy chains. However, when the content was increased to 3 wt%, the tensile strength decreased. In addition, the glass transition temperature was slightly increased from 142 to 147 °C, which means the mobility of polymer chains was restricted by the graphene oxide.

La última corrección supone que los valores están en grados Celsius; solo el autor conoce la unidad, y el original no la indica. Otras candidatas: "the previous studies which reported" (quitar "the"), "for the lightweight structural applications" (quitar "the") e "It is considered that", que muchas revistas cambiarían por "We attribute this to".

Una nota práctica. Si pasas este párrafo por una herramienta de IA de corrección gramatical o de pulido, la versión editada puede leerse ante los detectores de forma distinta a tu original. Vuelve a comprobarla después. El informe tiene un veredicto para ese caso, escrito por humanos y refinado con IA, para que sepas en qué situación estás. Nuestra comparación de humanizadores, parafraseadores y correctores gramaticales explica qué herramienta hace cada tarea.

Qué significa esto para los investigadores no nativos de inglés

Si escribes tus propios borradores con un estilo formal y formulaico, el riesgo de un falso positivo es real pero no seguro, y lo correcto es comprobar, no reescribir por si acaso. Reescribir un texto humano para que parezca "más humano" puede empeorar las cosas.

Academic Humanizer se creó con eso en mente: analiza tu borrador, reescribe solo las frases que marcan los detectores, te devuelve tus propias frases intactas y no cobra nada cuando nada cambia. Si ya te han marcado, nuestra guía sobre qué hacer si te acusan por error de usar IA es una buena lectura siguiente.