SIFT: Una Nueva Herramienta para la Detección de Fraude en Pruebas

Introducción

El fraude en pruebas es un fenómeno extremadamente común. Todos hemos visto artículos sobre trampas en exámenes. Sin embargo, existen muy pocas herramientas defendibles para ayudar a detectarlo. Una vez vi un seminario web de un proveedor de pruebas en línea que promocionaba con orgullo sus informes sobre seguridad en pruebas… pero resultó que todo lo que ofrecían era una simple exportación de las respuestas de los estudiantes para que se pudieran leer de forma subjetiva y formular conjeturas.

El objetivo de SIFT es proporcionar una herramienta que implemente índices estadísticos reales basados en investigaciones científicas sobre la detección estadística de fraude en pruebas. Es lo suficientemente fácil de usar para alguien sin un doctorado en psicometría o experiencia en análisis forense de datos. SIFT ofrece más índices de colusión y análisis que cualquier otro software, convirtiéndose en el estándar de la industria desde el día de su lanzamiento. La ciencia detrás de SIFT también se implementa en nuestra plataforma de pruebas en línea de clase mundial, FastTest, que admite pruebas adaptativas por computadora conocidas por aumentar la seguridad en los exámenes.

¿Interesado? ¡Descarga una versión de prueba gratuita de SIFT!

¿Qué es el Fraude en Pruebas?

Desde que existen las pruebas, las personas han intentado hacer trampa. Siempre que haya un sistema con incentivos o consecuencias, la gente intentará manipularlo. El verdadero culpable es el sistema en sí, no la prueba. Culpar a la prueba es como dispararle al mensajero.

En la mayoría de los casos, el sistema cumple una función útil. Las evaluaciones de K-12 brindan información sobre el plan de estudios y los maestros, las pruebas de certificación identifican a profesionales calificados, y así sucesivamente. Para preservar la integridad del sistema, debemos minimizar el fraude en las pruebas.

Cuando se trata de fraude en pruebas, el viejo dicho es cierto: “más vale prevenir que curar”. Aunque recomiendo implementar medidas preventivas para disuadir el fraude, algunos casos siempre ocurrirán. SIFT está diseñado para ayudar a encontrar esos casos. Además, el simple hecho de saber que se realiza este tipo de análisis puede disuadir a algunos examinados.

¿Cómo Puede SIFT Ayudar en la Detección Estadística de Fraude en Pruebas?

Al igual que otros programas psicométricos, SIFT no interpreta los resultados por ti. Por ejemplo, software para análisis de ítems como Iteman y Xcalibre no te dicen qué ítems retirar o cómo revisarlos; proporcionan resultados para que los analistas los interpreten. SIFT ofrece una amplia gama de resultados para ayudar a identificar:

• Copiado
• Asistencia del supervisor (proctor)
• Centros de pruebas sospechosos
• Uso de bancos de respuestas (brain dumps)
• Baja motivación del examinado

TÚ decides qué es importante para detectar fraude en pruebas y buscas la evidencia relevante. Se proporciona más información en el manual, pero aquí hay un adelanto.

Análisis Forense de Datos de Seguridad en Pruebas con SIFT

SIFT calcula varios índices para evaluar posibles fraudes:

• Índices de Colusión: SIFT calcula estos índices para cada par de estudiantes, resumiendo la cantidad de señales de alerta.

• Detección de Bancos de Respuestas (Brain Dumps): Compara las respuestas de los examinados con contenido conocido de bancos de respuestas, especialmente si ha sido sembrado intencionalmente por la organización.

• Análisis de Examinados Adyacentes: Identifica estudiantes en la misma ubicación con respuestas sospechosamente similares.

• Datos de Tiempos de Respuesta: Evalúa el tiempo dedicado a cada pregunta para detectar irregularidades.

Un ejemplo: un maestro podría tener calificaciones sospechosamente altas sin dedicar mucho tiempo por pregunta. ¿Es trampa? Posiblemente. Pero quizás el maestro tenía un grupo de estudiantes avanzados. Otro maestro podría mostrar calificaciones altas con tiempos de respuesta notablemente más cortos, lo que podría deberse a asistencia no autorizada.

Análisis a Nivel de Grupo

SIFT agrupa estadísticas a nivel de grupo. Esto ayuda a identificar patrones sospechosos en grupos de estudiantes, centros de pruebas o incluso profesores específicos.

La Historia de SIFT

Comencé a desarrollar SIFT en 2012. ASC vendía anteriormente un programa llamado Scrutiny!, pero dejamos de ofrecerlo debido a problemas de compatibilidad con las versiones más recientes de Windows. A pesar de eso, continuamos recibiendo solicitudes.

Decidido a crear una herramienta mejor, me propuse desarrollar SIFT. Quería incluir el análisis de Scrutiny! (el índice de Bellezza & Bellezza) y mucho más. Después de años de desafíos empresariales y horas incontables de trabajo, SIFT fue lanzado en julio de 2016.

La versión 1.0 de SIFT incluye:

• 10 Índices de Colusión (5 probabilísticos, 5 descriptivos)
• Análisis de Tiempos de Respuesta
• Análisis a Nivel de Grupo
• Herramientas adicionales para la detección de fraude en pruebas

Aunque no abarca todos los análisis existentes en la literatura, SIFT supera a otras opciones disponibles para los profesionales.

¿Sugerencias? ¡Nos encantaría saber de ti!