Aplicaciones
METRIX Engine
Renom Pinsach, J.; et al. (1992). METRIX Engine.
ISBN: 84-604-2240-2
Metrix (licencia profesional): METRIX Engine fue el primer programa comercializado en España para el análisis de tests psicológicos, cuestionarios, exámenes y encuestas en general.
Existen tres versiones del programa: Profesional, educativa y demo. La versión profesional de METRIX Engine admite por cada análisis un número ilimitado de examinados y 250 ítems agrupados en 10 pruebas diferentes.
METRIX Engine analiza toda clase de ítems, y puntuaciones. El programa ofrece tres opciones de análisis; modelo convencional de Norma de Grupo, el modelo de Rasch (modelo logístico de un parámetro) y el análisis de Escalograma.
DEMOTAC (1993)
DEMOTAC (1993)
Administrador de test adaptativos informatizados
Programa diseñado en 1993 con fines divulgativos en el Depto. de Metodología de las CC. del Comportamiento de la Universidad de Barcelona en vistas a la formación práctica de psicólogos y educadores en Test Adaptativos Informatizados (TAI).
Demotac fue el primer programa de TAI desarrollado en España. Básicamente permite administrar bancos de items mediante cuatro estrategias adaptativas diferentes: ramificada, binivel, autoadaptativa, y de máxima información.
DEMOTAC 2
Renom, J.; Doval, E. Y Sellés, M. (1999).Optimización de los TAI mediante el procedimiento de autoarranque. Relieve (Revista Electrónica http://www2.uca.es) 4,2-2. http://www.quadernsdigitals.net/numeros.asp?IdRevista=18&IdNumero=130
ISSN:1134-4032
Administrador de Tests adaptativos informatizados con opción autoarranque
Demotac 2 incorpora la posibilidad de trabajar en modo real y simulado mediante el Procedimiento de Autoarranque (PA) cuyo objetivo que permite aplicar une test adaptativo a partir de un banco de ítems no calibrado. PA emplea bancos con ítems ordenados por dificultad a los que asigna un valor constante de discriminación y valores provisionales de b equidistantes entre ±3θ.
Con estos parámetros se procede ya a la sesión de examen con una submuestra real de examinados. Para cada uno se obtiene la puntuación y Error Estándar de Medida (EEM. DEMOTAC 2 asigna valores 0 y 1 (error y acierto) aleatoriamente a los ítems no respondidos por el examinado cuyo parámetro b se encuentra en un rango cercano a su capacidad. El resto de la pauta incompleta de respuestas recibe valores 0 si se trata de items difíciles y 1 para los fáciles. A partir de esta matriz de respuestas de los examinados se calibran cíclicamente los parámetros de ítem.
BLOC-INFO (2002)
BLOC-INFO es una aplicación creada en 2002 de soporte para la corrección de las baterías de evaluación del lenguaje BLOC-Completo (580 ítems) y BLOC-Screening (118) editadas por Masson SA.
BLOC-INFO automatiza la administración de ambas baterías, permite cumplimentar la anamnésis del examinado, introducir respuestas de una sesión de evaluación y proceder a su corrección una vez acabada la administración obteniendo así todos los datos (puntuaciones brutas, percentiles, perfiles personales y curvas de desarrollo).
BLOC-INFO también guarda todos los datos de un examinado, de forma que en la siguiente administración de la prueba el programa comparará automáticamente los resultados de varias administraciones.
PIERT (2003)
PIERT (Protocolo Integrado para la Evaluación del Rendimiento mediante Test, 2003) es un tutorial multimedia desarrollado desde el Departamento de Metodología de las Ciencias del Comportamiento de la Universidad de Barcelona orientado a mejorar la calidad de la evaluación del aprendizaje de los estudiantes mediante test.
PIERT ofrecer a los docentes, instituciones y centros de evaluación que emplean este tipo de instrumentos un protocolo o sistema de trabajo integrado. Bajo la forma de un tutorial interactivo, el sistema describe y guía, a lo largo de un conjunto secuencial de 1000 pantallas agrupadas en 13 bloques o fases, metodológicas y técnicas, el proceso de creación, análisis y actualización de exámenes.
PIERT también incorpora una serie de herramientas informáticas de análisis (METRIX, SEDI y X-PAT) que permiten poner en práctica la metodología descrita a tests y escenarios reales. Así el docente o evaluador podrá verificar de forma autónoma las cualidades de sus exámenes, registros y pruebas en general de evaluación. En este sentido las aplicaciones de PIERT no son exclusivamente académicas ya que son totalmente válidas para cualquier organización que tome decisiones a partir de cuestionarios y test.
SEDI
SEDI (Sistema Experto para el Diagnóstico de Ítems incorporado en PIERT) es un programa que facilita la inspección de los resultados de un análisis de ítems efectuado con METRIX u otra aplicación similar. Se trata por tanto de una herramienta complementaria a otros programas de análisis de ítems ya que no trabaja directamente con las respuestas de los examinados a los ítems de un test, sino con los estadísticos de los ítems.
SEDI ayudará a los usuarios poco familiarizados con los resultados de un análisis de ítems a detectar las principales anomalías de los ítems y la forma en que podrían mejorarse.
Al igual que con X-PAT, SEDI fue desarrollado como complemento del proyecto PIERT. El usuario puede efectuar su descarga y análisis completos de forma libre siguiendo la ayuda que tiene disponible.
X-PAT
X-PAT (Explorador de patrones anómalos de respuesta, incorporado en PIERT 2003)
Es una aplicación que permite explorar patrones de respuestas a fin de identificar respuestas individuales que se alejan del perfil esperado (Patrones Anómalos de Respuesta, PAR) y respuestas que presentan un perfil de errores muy coincidente (Patrones con Errores Similares: PES). La utilidad de X-PAT se centra en su capacidad de detectar puntuaciones individuales no válidas en pruebas de rendimiento.
X-PAT implementa seis indicadores de PAR y un indicador de PES.
PIERT (Versión de Aprendizaje)
Jordi Renom Pinsach (coord.) Antonio Solanas Pérez, Eduardo Doval Diéguez y M. Isabel Núñez Peña (2003). PIERT: Tutorial multimedia para el diseño de pruebas de rendimiento (Versión de Aprendizaje). Barcelona: Edicions UB. ISBN 84-8338-283-0)
Es una versión de aprendizaje del Tutorial PIERT con prestaciones restringidas.
Metrix Engine UB (2003)
Jordi Renom Pinsach (2003). Metrix Engine UB: Analizador de tests y cuestionarios (versión Prof.). Barcelona: Edicions UB ISBN: 84-8338-428
Nueva reedición (2003) de la Universidad de Barcelona del programa Metrix Engine destinado al análisis de las cualidades evaluadoras de exámenes, tests psicológicos y cuestionarios con fines profesionales
UBaudit (2014)
UBaudit (2014) es un proyecto de innovación docente la Universitat de Barcelona y CV&A Consulting para la creación de una aplicación en entorno Moodle que efectúe una auditoria automática de los cuestionarios empleados en la evaluación del aprendizaje de los estudiantes.
UBaudit efectúa el “test del test” y ofrece al docente un informe de usuario final que le informa exhaustivamente sobre las cualidades métricas del test y sus preguntas así como de los posibles cambios que evitan sesgos en la evaluación.
TestingQuest (2018-2019)
TestingQuest (2018-2019): aplicación web para el análisis psicométrico principalmente gráfico de las cualidades de un test, cuestionario o examen.
http://hdl.handle.net/2445/126188