9.2: Calidad en e-Learning

El problema de la calidad

Ciertas innovaciones pedagógicas y de aprendizaje electrónico no han logrado cumplir una serie de promesas (Salmon, 2005), y han creado confusión entre el mero suministro de información y la construcción y capacitación reales del conocimiento (Barbera, 2004). Proyectos que tienen como objetivo apoyar entornos de e-learning como UK eUniversity, NYU Online, Scottish Knowledge, Universitas 21, Global University Alliance (Garret, 2004), así como varios proyectos europeos de aprendizaje corporativo (por ejemplo, StarScience, Dunes, Adapt-IT, Teachers-in-Europe, POLE STAR) no han logrado realizar muchos de sus objetivos. Sin embargo, el colapso de tales iniciativas no indica el fracaso del concepto de e-learning per se, sino la falta de calidad. Por ejemplo, la falta de planeación y comercialización fueron las principales razones del fracaso de UKeu (Garrett, 2004.) Entre las preguntas que se plantean destacan: ¿Qué constituye la calidad en el e-learning? ¿Por qué es importante? ¿Hay formas de garantizar la calidad del e-learning?

En general, la calidad se refiere a la idoneidad de propósito. En el e-learning, la calidad se refiere al aprendizaje (Stephenson, 2005), algo excelente en rendimiento (EFQUEL, 2005). En particular, la calidad en el e-learning significa proporcionar el contenido adecuado en el momento adecuado, permitiendo a los alumnos adquirir conocimientos y habilidades y aplicar su aprendizaje para mejorar su desempeño, ya sea como individuo o dentro de un marco organizacional (ASTD & NGA, 2001). Stephenson (2005) propuso que la calidad depende de su naturaleza interdisciplinaria, y la identificación de factores de calidad para un entorno determinado depende de la perspectiva elegida. Al existir dos niveles esenciales —el pedagógico y el operativo—, el objetivo de retorno de la inversión debe, por tanto, considerarse a largo plazo.

Organismos nacionales y organismos internacionales han desarrollado principios, lineamientos y puntos de referencia para describir la calidad a partir de los desarrollos internacionales en la materia (QAA, 1998; CHEA, 2001; USNEI, 2001; ISO-9000, Instituto Benjamin Franklin, 2001; EFQUEL, 2006). Además, también se da importancia a las normas nacionales resultantes de la globalización y el acceso universal de los alumnos como clientes y contribuyentes. Por ejemplo, en Europa, hubo esfuerzos para lograr sistemas armonizados regionalmente (véase la Declaración de Bolonia, Ministros Europeos de Educación, 1999) y desarrollos de sistemas de aseguramiento de la calidad (QA) y acreditación. Brajnik (2001) propuso que un modelo de calidad busca 'calidad' al:

• comprender, controlar y mejorar un producto o un proceso;
• identificar problemas o cuellos de botella de rendimiento, líneas de base y escalas de tiempo, y
• comparándolos para la evaluación del progreso, así como para distinguir ciertos atributos de otros.

Este método para desarrollar y documentar un modelo de calidad sugiere la producción de un conjunto completo y consistente de requisitos de calidad (Firesmith, 2003). Los intentos de proporcionar dichos marcos de calidad fueron realizados por organizaciones europeas, pero aún no se han probado completamente.

La Fundación Europea para la Calidad en el Aprendizaje Electrónico (EFQUEL) se estableció en junio de 2005 con el fin de proporcionar un marco coherente de factores de calidad para todas las organizaciones europeas. Su misión es “mejorar la calidad del aprendizaje electrónico en Europa mediante la prestación de servicios y apoyo a todas las partes interesadas” (Nascimbeni, 2005, EFQUEL). Esto significa que los factores de calidad están explícitamente conectados con la prestación de servicios y apoyo a todos los actores de diferentes ámbitos. EFQUEL ha intentado mapear un modelo de calidad incorporando la perspectiva de las partes interesadas para formuladores de políticas, investigadores, organizaciones relacionadas con la calidad del aprendizaje electrónico, tomadores de decisiones, usuarios de e-learning y estudiantes. EFQUEL realizó una encuesta europea entre el 15 de agosto de 2004 y el 15 de noviembre de 2004 (Panorama Report, Ehlers, Hildebrandt, Görtz & Pawlowski, 2005). De las 5,023 respuestas, 28 por ciento la completó, y sólo siete por ciento terminó las dos secciones básicas sobre calidad del e-learning. (La baja tasa de respuesta puede haberse debido a dificultades inherentes de entender y definir qué es la calidad del e-learning. Quizás sea más fácil describir qué es la calidad que definirla (Stephenson, 2005).) Según los resultados, la calidad se relaciona con obtener los mejores logros de aprendizaje (50 por ciento) y “algo que es excelente en desempeño” (19 por ciento). En detalle, el Reporte Panorama reveló lo siguiente:

1. la importancia de la calidad del e-learning: La calidad es, y será de gran importancia para el e-learning.
2. la necesidad de marcos específicos: Aunque se utilizaron numerosas estrategias y conceptos de calidad, la comprensión de la calidad es deficiente, concebida como una forma abstracta y no concreta. Los encuestados creyeron que conocían la calidad pero mostraron una falta general de información sobre las medidas de calidad, y eso los engañó.
3. requisitos de calidad en el diseño: Los alumnos son usuarios y clientes, y rara vez participan en el diseño en los sectores público y empresarial, pero el diseño para la calidad necesita considerar los siguientes temas:
   • sus recomendaciones para un desarrollo exitoso de la calidad. Esto evitará el bajo nivel de aceptación de diseños que carecen de calidad de usuario.
   • la inclusión de listas de control propias de las organizaciones para la calidad que se encuentran en los recursos web, foros de discusión y ferias;

     Lo anterior muestra que los diseñadores de calidad deben tener experiencia de calidad y capacidad para enfrentar desafíos; para cambiar y adaptarse, para incorporar estrategias de calidad, y estar abiertos a la creatividad para formas completamente nuevas de desarrollo de calidad.

4. conciencia crítica: Análisis y crítica de las demandas de calidad:
   • un alto grado de conciencia crítica;
   • sistemas de calidad que concilien los objetivos de todas las personas involucradas;
   • la calidad debe ser vista como un proceso dinámico de adaptación a las necesidades de los usuarios, principalmente a las de los alumnos.

Los investigadores produjeron un marco de procesos para describir enfoques de calidad. Este marco se refiere a las condiciones generales del e-learning que comprenden el análisis del contexto externo; el diseño y la producción que implican pruebas, adaptación y liberación de recursos de aprendizaje; implementación, evaluación y optimización; y por último, establecimiento de requisitos como iniciación, identificación de grupos de interés, definición de objetivos y análisis de necesidades. Destacaron que “los alumnos deben desempeñar un papel clave en la determinación de la calidad de los servicios de e-learning”, e insistieron en la integración de todos los actores involucrados en el proceso. El resultado de los esfuerzos europeos fue el libro blanco ISO/IEC 19796-1 titulado How to Use the New Quality Framework for Learning, Education and Training (Pawlowski, 2006), que aún no se ha probado completamente.

En el Reino Unido, la Universidad para la Industria del Gobierno ha adoptado un enfoque centrado en el alumno, aprendiendo a ser determinado por el alumno, para sus programas de TIC. Esto se debe hacer transformando los métodos tradicionales de aprendizaje (Universidad para la Industria, 2003). La Agencia de Aseguramiento de la Calidad para la Educación Superior (QAA, 2004) describió el aseguramiento de la calidad como un código de prácticas con condiciones para que los estudiantes las alcancen, según lo establecido por la institución (QAA, 1998). La evaluación de QAA se basa en equipos de académicos que realizan auditorías y procesan las revisiones de los alumnos. (Para los esfuerzos detallados de QA y comparación ver Parker, 2003.) El aseguramiento de la calidad parece ser una descripción de los factores de calidad para una revisión planificada y sistemática de una institución o programa. Esta descripción determina los estándares aceptables de educación centrada en el alumno, beca, cultura pedagógica y experiencia, infraestructura y estrategia y visión organizacional, y asegura que estos se mantengan y mejoren (Pond, 2002). En el sector empresarial, la calidad del e-learning en las organizaciones se asocia con pautas para encontrar y elegir la calidad en cursos, servicios y proveedores de e-learning en el mercado de e-learning (WR Hambrecht + Co, 2000).

Debido a sus dimensiones intangibles, el control de calidad del e-learning crea desafíos para la investigación contemporánea. En general, la calidad del aprendizaje electrónico parece derivar de enfoques interdisciplinarios sobre marcos centrados en el alumno y depende de la infraestructura, la estrategia organizacional y la visión de la organización. Sin embargo, trabajando en un metestudio sobre e-learning, Pinelle y Cutwin (2000) informaron que en entornos del mundo real solo una cuarta parte de los artículos incluyeron evaluaciones. Así, los investigadores se perdieron la transición actual de la Era Industrial a la Era de la Información y la Colaboración como había predicho el Instituto Tavistock en 1949 (Mumford, 1983; Dolence & Norris, 1995, citado en Parker, 2003). De hecho, estos cambios son evidentes en las formas en que las personas trabajan, aprenden y se entretienen, lo que demuestra la necesidad de múltiples habilidades dentro de una organización. Por lo tanto, aunque los procesos de QA son necesarios, es difícil establecer estándares específicos de QA en un periodo de transición. En este sentido, una encuesta europea sobre la calidad del e-learning reveló el problema de reflejar la realidad, y la asoció directamente con el diseño instruccional de e-learning (Massy, 2002).

Con el fin de garantizar una educación de calidad sin evaluación empírica y sistemática, Pond (2002) proporcionó un conjunto de atributos universales (criterios). Se refirió a las definiciones más utilizadas de calidad, aseguramiento de la calidad y acreditación, con el alumno en el centro del proceso de evaluación. Según Pond, la acreditación es el proceso que se utiliza en la educación para garantizar que las escuelas, las instituciones postsecundarias y otros proveedores de educación cumplan y mantengan los estándares mínimos de calidad e integridad. Esto incluiría académicos, administración y servicios afines (USNEI, 2001). Hizo un llamado al Consejo de Acreditación de la Educación Superior para definir la calidad. En su glosario para Revisión Internacional de Calidad, la calidad se define como “adecuación de propósito: cumplir o cumplir con estándares generalmente aceptados... [El aseguramiento de la calidad es]... revisión planificada y sistemática... de una institución o programa para determinar que los estándares aceptables de educación, beca, y se están manteniendo y mejorando la infraestructura” (CHEA, 2001). Es decir, hay que cumplir o superar las expectativas de los alumnos. Es decir, deben adquirir conocimientos y habilidades que no poseían antes de que se llevara a cabo la experiencia de aprendizaje. Wallace (1999) y Smulders (2002) vieron al alumno en e-learning como aprendiz y usuario, y luego los estándares de calidad deben definirse en términos prácticos tanto a nivel pedagógico como operativo.

Aseguramiento de la Calidad (QA)

El aseguramiento de la calidad (QA) es un proceso de revisión planificado y sistemático de una institución o programa para determinar que se mantienen y mejoran los estándares aceptables para la educación centrada en el alumno, la beca, la cultura pedagógica y la experiencia, la infraestructura y la estrategia y visión organizacionales. Esto incluiría expectativas de que los mecanismos de control de calidad para el benchmarking estén en su lugar y sean efectivos. QA proporciona los medios a través de los cuales una institución asegura que las condiciones son tales que los estudiantes puedan alcanzar los estándares establecidos por esa institución u otro organismo adjudicador. La evaluación comparativa proporciona señales con las que se pueden medir los resultados. Las declaraciones de referencia de materias permiten a la comunidad académica describir la naturaleza y características de los programas en una asignatura específica. También representan expectativas generales sobre los estándares para las calificaciones en un nivel determinado; articulan los atributos y capacidades que quienes poseen tales calificaciones deben poder demostrar. Por tanto, el benchmarking es un requisito previo para la evaluación de calidad

La evaluación de la calidad es una revisión diagnóstica y evaluación de la enseñanza, el aprendizaje y los resultados basados en el examen detallado de los planes de estudio, la estructura y la efectividad. Está diseñado para determinar si la institución o programa cumple o no con los estándares de excelencia generalmente aceptados, y sugerir nuevas mejoras de calidad.

La mejora de la calidad se refiere a las expectativas que una institución tendrá para planificar, monitorear y mejorar la calidad de sus programas. En la mayoría de los casos, el aseguramiento de la calidad de una agencia acreditadora requiere procedimientos establecidos para asegurar un proceso continuo (CHEA, 2001). Según Pond (2002), los nuevos paradigmas educativos en línea son centrados en el alumno, adaptados, abiertos, colaborativos, cualitativos y flexibles. También pueden diferenciarse localmente. Estos criterios cumplen con un conjunto universal de criterios de e-learning de calidad. Por tanto, la educación en línea debe proporcionar:

• continuidad entre la publicidad y la realidad
• continuidad entre propósito y práctica
• preparación para la acreditación externa/estudio adicional
• crecimiento personal/profesional/académico para el alumno
• relevante
• interacción rica y multidireccional
• interfaz funcional y fácil de usar
• recursos adecuados para: instructores, aprendices, currículo
• métodos/oportunidades de evaluación apropiados

Los criterios de Pond parecen ser eminentemente constructivos para el desarrollo de un alumno.

En conclusión, el aseguramiento de la calidad, la evaluación y la mejora requieren conjuntos de desempeño, puntos de referencia e indicadores basados en herramientas y técnicas de evaluación. Estos últimos necesitan criterios específicos anclados en factores de calidad. Los factores de calidad del e-learning describen estas revisiones sistemáticas y la evaluación de principios, lineamientos y puntos de referencia. Sin embargo, existe un problema relacionado con los temas de la dirección laboral durante la negociación colectiva en relación con la educación de calidad. Es importante que para estar en sintonía con las metas internacionales, nacionales y organizacionales se tenga que estar alineadas. Este es el mayor reto.

Factores de Calidad

Es evidente que 'la calidad es más fácil de describir e ilustrar que de definir' (Stephenson, 2005:1). Garantizar el diseño de e-learning para el compromiso cognitivo en la práctica asociada con los resultados es exactamente lo que constituye el e-learning (Kalantzis y Cope, 2004; Oliver, 2005). El diseño de sistemas tiene que asegurar factores de calidad en diferentes niveles y campos, micro o macro (Hedberg et al., 2002). Estudios recientes tienen como objetivo identificar factores de calidad. Estos estudios son guías de buenas prácticas (Grahan et al, 2002); indicadores para la enseñanza en línea (Corich et al., 2004); dimensiones pedagógicas para la evaluación de la educación basada en computadora (Reeves, 1997); gestión de la calidad (López et al., 2003); perspectiva del alumno (Ehlers, 2004); pilares para el aseguramiento de la calidad y acreditación (Pond, 2002); y marcos y herramientas de evaluación (Muir et al., 2003). Estos estudios se referían a los estándares de QA de instituciones específicas, definiendo los objetivos de todas las partes interesadas en base a marcos internacionales, nacionales y organizacionales.

De acuerdo con la Organización Internacional de Normalización ISO/IEC 19796-1, el QA puede garantizarse mediante:

• identificar el principal objetivo de calidad de un proceso;
• identificar a los actores responsables;
• identificar métodos o instrumentos que puedan utilizarse para asegurar la calidad; y
• diseñar para medir el éxito del objetivo de calidad.

Por ejemplo, si una organización ofrece cursos de programación a corto plazo para grupos de 20 estudiantes que aprenden C++ en dos semanas, el estilo de enseñanza y aprendizaje en línea es bastante diferente de lo que sería si el objetivo fuera aprender griego. El sistema necesita cumplir con los objetivos del alumno. Otro ejemplo es propuesto por Parker, como cuatro principios de QA (2003):

• garantizar la consistencia de los resultados del producto con base en valores a largo plazo;
• garantizar la coherencia en la educación gubernamental y corporativa;
• garantizar una educación centrada en el alumno;
• garantizando la colaboración entre actores internos y externos).

Parker considera que para mantener la continuidad y consistencia es importante definir valores. Como se mencionó anteriormente, la colaboración entre las partes interesadas para una educación centrada en el alumno es la clave del éxito. Las instituciones necesitan tener una comprensión adecuada de sus operaciones de monitoreo para mejorar la toma de decisiones y el desempeño. Haciendo esto, satisfarán tanto a ellos mismos como a organismos externos de que son efectivos en el logro de metas y objetivos, además de ser rentables y rentables (Rumble, 1986).

En resumen, son necesarios marcos específicos para especificar factores de calidad y requisitos adecuados para su propósito. La colaboración entre todos los grupos de interés es fundamental: la participación de todos los interesados en el proceso de diseño es importante: las buenas herramientas y técnicas de evaluación garantizan la calidad. El aprendizaje electrónico es valioso como un entorno de aprendizaje adicional para mejorar aún más las capacidades humanas.