Modelos de evaluación y RED

Modelos de Evaluación de RED

Modelo 1

Título del modelo de evaluación.	Instrumento de Revisión de Objetos de Aprendizaje (LORI)
Descripción.	Es una herramienta que evalúa objetos de aprendizaje a través de nueves dimensiones. Esta tiene una estructura de análisis donde cada una de ellas se evalúan en una escala de cinco niveles.
Criterios de evaluación.	-        Calidad del contenido: fiable, relevancia y actualización del contenido. -        Alineación con los objetivos de aprendizaje: se ajusta a los objetivos y es coherente entre lo que se enseña y lo que se espera aprender.  -        Retroalimentación y adaptación: ayuda a mejorar significativamente y se ajusta al ritmo o necesidades del estudiante.  -        Motivación: se centra en atraer y mantener la atención del estudiante en el contenido del recurso.  -        Diseño de presentación: ofrece un diseño visual atractivo, organizado y fácil de lectura.  -        Usabilidad: su entorno es intuitivo y de fácil navegación  -        Accesibilidad: es gratuito y cumple con estándares para estudiantes con diversidad funcional.  -        Reusabilidad: qué tan fácil es usar el objeto en otros contextos, cursos o plataformas.  -        Cumplimiento técnico: es compatible con diferentes plataformas, tiempos de carga reducido, funcionamiento estable, estándares (SCORM, HTML5, etc.).
Métrica o escala de valoración.	Cada una de las dimensiones del modelo se valora mediante una escala de 1 a 5, representada en estrellas donde 1 estrella corresponde al nivel más bajo de calidad y 5 estrellas corresponde al nivel más alto de calidad, pero cuando una dimensión no es pertinente o el evaluador no tiene los conocimientos para emitir juicio solo selecciona NA (No Aplica).
Metodología.	Se aplica un proceso de: revisión del objeto, evaluación de las nueve dimensiones y calificación con la escala de 1 a 5 estrellas, pero cuando una dimensión no es pertinente se usa NA. Es una metodología establecida por los desarrolladores.
Instrumento de evaluación.	Contiene nueve dimensiones, evaluadas con escala de 1 a 5 estrellas y con opción NA cuando el criterio no aplica o no puede ser valorado ayudando a valorar la pertinencia pedagógica y funcional.

 

Modelo 2

Título del modelo de evaluación.	Calidad de Objetos de Aprendizaje (CODA)
Descripción.	Es una herramienta diseñada para evaluar la calidad de los Objetos de Aprendizaje en entornos digitales educativos. Además, mejora de la calidad docente, con la colaboración de varios autores y evaluadores.
Criterios de evaluación.	-        Incluye criterios como: -        Objetivo y coherencia didáctica. -        Calidad de contenidos. -        Capacidad de generar reflexión. -        Usabilidad -        Accesibilidad -        Reusabilidad e interoperabilidad.
Métrica o escala de valoración.	Los criterios obtienen una puntuación entre 1 y 5, donde 1 corresponde al puntaje mínimo y 5 al puntaje máximo.
Metodología.	Se utiliza una metodología de evaluación estructurado por 10 criterios (5 didácticos y 5 tecnológicos), puntuado de 1 a 5 e incluye una casilla de No Aplicable. Este proceso combina análisis cualitativo (observaciones) y cuantitativo (puntuación numérica), lo cual permite obtener una valoración precisa, sistemática y objetiva del OA.
Instrumento de evaluación.	Se lleva un formulario estructurado que contiene 10 criterios de calidad. Cada uno evaluado con una escala de 1 a 5 o No Aplicable (N/A). Además, se agrega un espacio para registrar  notas de observaciones cualitativas.

Modelo 3

Título del modelo de evaluación.	Modelo de calidad de McCall
Descripción.	Este modelo es uno de los primeros el cual fue diseñado para evaluar la calidad del software, en él se proponen tres niveles (Factores, Criterios y Métricas), con ello se puede analizar el comportamiento del software en términos de operación, revisión y transición, valorando atributos como la corrección, fiabilidad, usabilidad, mantenibilidad y portabilidad del sistema.
Criterios de evaluación.	Factores de Operación: Se centra en el uso diario y como el usuario lo percibe, esto debe presentar ante su uso la corrección, fiabilidad, eficiencia, integridad y usabilidad. Factores de Revisión: se basa en la sencillez para trabajar con él, esto debe permitir a los desarrolladores la mantenibilidad, flexibilidad y Capacidad de Prueba, sin la pérdida de su código base. Factores de Transición: Debe permitir la adaptación del software con otros entornos o su capacidad para la interacción con otros sistemas, esto debe favorecer la portabilidad, reusabilidad e interoperabilidad.
Métrica o escala de valoración.	Excelente: El software cumple totalmente el criterio sin observarse fallas. Satisfactorio: Cumple la mayoría de los aspectos, con mejoras menores. Deficiente: Presenta fallas que afectan parcialmente el funcionamiento. Crítico: No cumple y afecta gravemente la calidad del software.
Metodología.	Este modelo permite la revisión integral del software que incluye dentro de sus herramientas, el buen funcionamiento y desarrollo, el análisis documental, pruebas funcionales que permitan la corrección y fiabilidad, pruebas de eficiencia, revisión del código que permita su mantenimiento y flexibilidad y la verificación de factores de transición que posibilite la portabilidad.
Instrumento de evaluación.	Lista de verificación basada en los factores de McCall Rúbricas de evaluación cualitativa Pruebas de desempeño Pruebas funcionales Matriz de análisis para consolidar los resultados.

 

Modelo 4

Título del modelo de evaluación	Evaluación de Calidad de Software según ISO/IEC 25010
Descripción	Este modelo se basa en el estándar internacional ISO/IEC 25010, que define las características de calidad de un producto de software.
Criterios de evaluación	1. Adecuación funcional (completitud, corrección). 2. Eficiencia del desempeño. 3. Compatibilidad. 4. Usabilidad. 5. Fiabilidad. 6. Seguridad. 7. Mantenibilidad. 8. Portabilidad.
Métrica o escala de valoración	Escala de 1 a 5: 5 – Excelente 4 – Bueno 3 – Aceptable 2 – Bajo 1 – Deficiente
Metodología	• Análisis documental del software. • Pruebas técnicas de desempeño. • Pruebas de usabilidad. • Evaluación de seguridad. • Valoración por expertos. • Matriz comparativa.
Instrumento de evaluación	• Lista de verificación ISO 25010. • Rúbrica de evaluación. • Pruebas de desempeño. • Pruebas de usabilidad. • Encuestas y matriz.

Modelo 5

Título del modelo de evaluación.	MODELO DE EVALUACIÓN DE CALIDAD DE BOEHM
Descripción.	Este modelo se evalúa a partir de una jerarquía de características organizadas
Criterios de evaluación.	Consistencia Eficiencia, Accesibilidad Comunicatividad, Estructuración, Legibilidad Expansividad.
Métrica o escala de valoración.	Dentro de los componentes importantes a evaluar del RED según el modelo de Boehm (Chinchilla, 2016) se dividen en tecnológicos y comunicativos que a la vez son evaluados por medio de factores y criterios. En relación al ítem evaluador de factores se observa que para el componente tecnológico el RED cumple con aspectos de calidad como su portabilidad, y eficacia. Para el componente comunicativo se evidencia que el RED posee usabilidad, compresibilidad y confiabilidad debido a que no permite una comprensión fácil de los temas y presenta interactividad que permite a los usuarios comprender la temática expuesta.
Metodología.	En el nivel alto, sus características son: Utilidad, Mantenimiento y Portabilidad. Esto hace referencia a la calidad del producto, en cuanto a si es eficiente, confiable, si se puede modificar y si se puede seguir usando si cambia el medio de su uso. En cuanto a las características de nivel intermedio, encontramos factores como la portabilidad, la fiabilidad, la usabilidad, capacidad de prueba, comprensibilidad y flexibilidad. Las características primitivas, las cuales abarcan factores de independencia, completitud, exactitud, consistencia, eficiencia, accesibilidad, comunicatividad, estructuración, autodescriptividad, concisión, legitimidad y expansividad.
Instrumento de evaluación.	Software Boehm, fue diseñado para evaluar software y recursos digitales mediante una estructura jerárquica que conecta atributos cualitativos con métricas cuantitativas.

Modelo 6

Título del modelo de evaluación.	Evaluareed: herramienta para la evaluación de la calidad de los recursos educativos electrónicos
Descripción.	es una aplicación web diseñada para evaluar recursos educativos electrónicos, especialmente en educación superior. Se basa en un checklist de criterios de calidad que permite valorar los recursos, detectar debilidades, sugerir mejoras y generar informes automáticos con recomendaciones. Además, incluye un repositorio de recursos evaluados y bibliografía especializada.
Criterios de evaluación.	Calidad del contenido Objetivos y metas de aprendizaje Feedback (retroalimentación e interacción) Usabilidad Motivación Accesibilidad Requerimientos técnicos Propiedad intelectual Efectividad del recurso en términos de aprendizaje
Métrica o escala de valoración.	Escala de valoración: se aplica una escala tipo Likert de 1 a 5, donde: 1 = Muy deficiente 2 = Deficiente 3 = Aceptable 4 = Bueno 5 = Excelente
Metodología.	Checklist, Generador de informes, Repositorio de recursos evaluados y bibliografía sobre el tema
Instrumento de evaluación.	El resultado final del proyecto ha sido un portal web centrado en la evaluación de recursos electrónicos educativos desde el que se tiene acceso al checklist Evaluareed, núcleo del portal, y a una serie de secciones auxiliares que lo complementan y que sirven para profundizar en el tema (corpus teórico, informe detallado del proyecto, recursos evaluados y bibliografía), diseñado de forma que permite un acceso sencillo e intuitivo a los contenidos, especialmente al uso del checklist y de los informes de evaluación. Desde su lanzamiento piloto en 2011 el portal ha sido actualizado con regularidad, siendo la última versión de principios de 2015 (http://www.evaluareed.edu.es).