Por qué la validez y la confiabilidad son importantes en investigación sobre aprendizaje y qué puede hacer al respecto

Los profesionales de L&D se enfrentan constantemente a decisiones: ¿qué evaluación de liderazgo usar , qué diagnóstico de equipo implementar o en qué perfil psicométrico confiar ? A menudo, estas herramientas incluyen informes brillantes y el respaldo de proveedores, pero en realidad, muchas carecen del rigor científico necesario para respaldar decisiones significativas. Por eso la validez y la fiabilidad son importantes. No son lujos académicos; son filtros esenciales que protegen a las organizaciones de desperdiciar recursos, engañar a los estudiantes y tomar malas decisiones sobre el talento.

COMPRENDER LA VALIDEZ Y LA CONFIABILIDAD

La validez tiene que ver con la verdad: ¿la herramienta mide lo que dice medir?

La confiabilidad tiene que ver con la consistencia: ¿se mide de manera consistente a lo largo del tiempo y entre evaluadores o situaciones?

Estos términos no son intercambiables. Una herramienta puede ser altamente confiable pero no válida (consistentemente errónea) o moderadamente válida pero aplicada de forma inconsistente. Ambos son importantes para la capacitación y el desarrollo porque determinan si un instrumento realmente apoya el desarrollo o si proporciona la ilusión de conocimiento.

...

LEER (inglés): https://3starlearningexperiences.wordpress.com/2025/06/12/why-validity-and-reliability-matter-in-ld-and-what-you-can-do-about-it/

Formación de ciudadanos digitales críticos desde Primaria: una lectura del Área 6 del MRCDD

 

En un mundo donde los estudiantes hacen "scroll" antes de saber multiplicar, la competencia digital se convierte no en una ventaja, sino en una necesidad pedagógica urgente. El libro en línea “B2 Primaria. Área 6. Desarrollo de la competencia digital del alumnado”, publicado por CATEDU, ofrece una guía didáctica actualizada y práctica para quienes enseñamos a formar ciudadanos digitales desde la educación primaria.

Más allá del clic: ¿Qué significa desarrollar la competencia digital?

El documento parte de una premisa clara: enseñar con tecnología no es suficiente. Se trata de enseñar sobre tecnología, desde una perspectiva crítica y ciudadana. El Área 6 del Marco de Referencia de la Competencia Digital Docente (MRCDD) responde a esta necesidad y traslada el foco desde el docente hacia el alumnado, proponiendo estrategias para que los niños y niñas aprendan a leer, escribir y vivir en el entorno digital.

Este enfoque es coherente con la LOMLOE y el desarrollo curricular actual, donde la competencia digital aparece transversalmente y se conecta con valores como la responsabilidad, la inclusión, la ética y el pensamiento crítico.

Estructura y contenidos del libro

La obra está organizada en cinco bloques que estructuran el desarrollo de la competencia digital desde un enfoque integral:

1. Alfabetización mediática e informacional

Este bloque abre con preguntas que deberían estar en todo examen de madurez digital: ¿cómo identificamos una fake news?, ¿qué rastro dejamos con un simple clic en “aceptar cookies”? El objetivo es que el alumnado aprenda a comprender, analizar y evaluar la información digital, y no solo a consumirla pasivamente.

2. Comunicación, colaboración y ciudadanía digital

Aquí se abordan temas esenciales como identidad digital, netiqueta, privacidad y participación democrática en línea. Se promueve una visión de la ciudadanía que trasciende lo analógico, situando al estudiante como un actor que también construye comunidad en entornos digitales.

3. Creación de contenidos digitales

El alumno no solo debe consumir: debe crear, expresar y construir en el medio digital. Este bloque ofrece propuestas para el desarrollo de narrativas digitales, uso de herramientas de edición y pensamiento visual, siempre con un enfoque pedagógico y creativo.

4. Uso responsable y bienestar digital

Porque no todo se reduce a saber usar la tecnología: también hay que saber cuándo parar, cómo protegerse y por qué no todo lo que brilla en una pantalla es oro. Este bloque aborda el bienestar digital, el equilibrio emocional y la seguridad en línea.

5. Resolución de problemas

Aquí se introduce el pensamiento computacional, la robótica educativa y la programación por bloques, como herramientas para resolver problemas reales. El objetivo no es formar programadores, sino pensadores estructurados, creativos y resilientes frente a los desafíos digitales.

Una herramienta útil para docentes e investigadores

Desde una perspectiva docente, el valor de este libro radica en su capacidad de traducir marcos normativos complejos en estrategias concretas, acompañadas de ejemplos de aula. No propone una revolución tecnológica, sino una transformación pedagógica, sostenida en la reflexión crítica y en la acción.

Como investigador, valoro especialmente la claridad con la que se abordan conceptos clave de la alfabetización digital, y la posibilidad de que esta guía funcione como punto de partida para estudios de intervención, formación docente, diseño curricular e incluso evaluación de impacto en contextos educativos diversos.

Reflexión final

Enseñar competencia digital no es enseñar a usar apps. Es enseñar a leer algoritmos como quien lee ideologías, a cuestionar las fuentes como quien sopesa argumentos, y a proteger la identidad digital como se protege una identidad cultural.

Este libro no es una panacea, pero sí un paso firme hacia una escuela más conectada con los desafíos contemporáneos. Formar ciudadanos digitales críticos no es solo un reto pedagógico, sino un imperativo democrático.

Enlace al libro: https://libros.catedu.es/books/b2-primaria-area-6-desarrollo-de-la-competencia-digital-del-alumnado

Artificial intelligence adoption test based on UTAUT2 and complex thinking: design with K coefficient and reliability analysis using structural equation modeling

Artificial intelligence adoption test based on UTAUT2 and complex thinking: design with K coefficient and reliability analysis using structural equation modeling

 Carlos Enrique George-Reyes, Icon,Edgar Omar López-Caudana, Raidell Avello-Martínez

COGENT EDUCATION, 2025, VOL. 12, NO. 1 

https://doi.org/10.1080/2331186X.2025.2511446

 La incorporación de la Inteligencia Artificial (IA) como herramienta tecnológica para fortalecer los procesos de formación puede aumentar potencialmente la calidad pedagógica y las experiencias de aprendizaje; sin embargo, es necesario analizar la aceptación de esta tecnología en la complejidad de los entornos universitarios. Esta investigación busca analizar el diseño, la validación y la confiabilidad de una prueba para evaluar los factores que guían la aceptación de la IA en la educación superior. El diseño del cuestionario del estudio incorporó la interacción entre la teoría unificada de adopción y uso de la tecnología (UTAUT2) y el paradigma de pensamiento complejo (PC) en un modelo. Se validó mediante la aplicación del coeficiente K para la selección de expertos y el método Delphi Digital Simplificado. Posteriormente, se realizó un análisis de confiabilidad mediante un modelo de ecuaciones estructurales. Los resultados indican que el cuestionario evaluó de forma confiable la aceptación de las aplicaciones de inteligencia artificial por parte de los estudiantes en la complejidad de la educación superior. Se demostró que la estrategia para analizar el diseño de validación de la confiabilidad del instrumento podría replicarse para producir sistemáticamente nuevos cuestionarios que midan la aceptación de las tecnologías emergentes. El estudio concluye que el cuestionario y la metodología pueden servir de referencia para medir la aceptación de las tecnologías en las universidades.

PORTUGAL | AIM@VET Multiplier Event

El 19 de mayo, la Escola Secundária de Caldas das Taipas acogió el evento nacional multiplicador del proyecto Erasmus+ AIM@VET (News – aim4vet): Módulos de aprendizaje de inteligencia artificial para adaptar la FP a la transformación digital del mercado laboral. 💡

Estudiantes, docentes e instituciones de 🇵🇹🇪🇸🇸🇮 participaron en una jornada completa de presentaciones, presentaciones de proyectos e intercambios. Se compartieron buenas prácticas, se exhibieron proyectos reales liderados por estudiantes y se crearon experiencias interculturales significativas en toda la comunidad. 🌍

Mientras tanto, la escuela también está completando la última lección de AIM@VET sobre Entornos Inteligentes, culminando así casi tres años de colaboración e innovación en FP e Inteligencia Artificial. 🤖

👉 Sígue el sitios de AIM@VET  https://aim4vet.udc.es/ para ver cómo la IA está transformando la formación profesional en toda Europa.

#AIMatVET #ErasmusPlus #VETeducation #DigitalSkills #AIinVET #Industry5_0 #VocationalTraining #SmartEducation #MultiplierEvent #EUVET #InterculturalLearning

1st International Workshop on AI Literacy Education For All

1.er Taller Internacional sobre Alfabetización en IA para Todos

26.ª Conferencia Internacional sobre Inteligencia Artificial en la Educación (AIED 2025)

Palermo, Italia

Más información en: https://ai-literacy-for-all-aied2025-activeai.vercel.app/ 

Taller de media jornada, 22 de julio de 2025, 14:00-16:00

Dado que la IA influye cada vez más en la sociedad, es fundamental garantizar que personas de diversos orígenes comprendan sus capacidades, implicaciones éticas e impacto social.

Sin embargo, el público sin conocimientos técnicos —incluidos estudiantes de primaria y secundaria, docentes y profesionales del sector— a menudo carece de la alfabetización en IA necesaria para desenvolverse responsablemente en este panorama cambiante. Los conceptos de IA, a menudo envueltos en una jerga compleja y basados ​​en matemáticas avanzadas, pueden resultar intimidantes para los recién llegados, lo que provoca una baja matriculación en programas de formación o una interacción superficial con los recursos existentes.

Este taller reunirá a educadores, investigadores, profesionales del sector y responsables políticos para explorar enfoques innovadores para la alfabetización en IA. Los asistentes abordarán de forma colaborativa los retos y las oportunidades para que la educación en IA sea más accesible y eficaz.

PISA 2029: La OCDE apuesta por una alfabetización crítica en medios e inteligencia artificial

 La Organización para la Cooperación y el Desarrollo Económicos (OCDE) ha anunciado que la evaluación PISA 2029 incluirá un nuevo dominio innovador centrado en la alfabetización en medios e inteligencia artificial (MAIL, por sus siglas en inglés). Esta iniciativa busca evaluar si los estudiantes han tenido oportunidades para aprender y participar de manera proactiva y crítica en un mundo cada vez más mediado por herramientas digitales y de inteligencia artificial. 

El objetivo principal de esta evaluación es comprender cómo los estudiantes interactúan con contenidos digitales y plataformas de manera efectiva, ética y responsable. Se pretende evaluar competencias como la capacidad para evaluar la credibilidad y calidad de los medios digitales, entender las consecuencias sociales y éticas del uso de herramientas digitales y de inteligencia artificial, y comunicarse y colaborar eficazmente utilizando estas tecnologías.

La evaluación se diseñará como un entorno simulado que permitirá recopilar evidencia sobre múltiples competencias del modelo de alfabetización. Estas competencias se evaluarán utilizando una variedad de herramientas funcionales accesibles para los estudiantes de manera realista durante la evaluación, como simulaciones realistas de internet, redes sociales y herramientas de inteligencia artificial generativa.

Los resultados de esta evaluación están previstos para diciembre de 2031, y el primer borrador del marco de evaluación y análisis estará disponible en diciembre de 2025.

Esta iniciativa representa un paso significativo hacia la comprensión y mejora de las competencias digitales y de inteligencia artificial de los estudiantes, preparándolos para participar de manera informada y responsable en la sociedad digital actual.

Más información: https://www.oecd.org/en/about/projects/pisa-2029-media-and-artificial-intelligence-literacy.html

¿El medio no importa? Una reflexión crítica sobre lectura digital y comprensión lectora

En una entrada reciente publicada el 11 de mayo de 2025 en el blog 3-Star Learning Experiences, el Profesor Paul A. Kirschner —reconocido investigador en el campo de la psicología educativa y el diseño instruccional— comenta un estudio relevante que desafía una creencia persistente en el ámbito educativo digital: la idea de que “el medio no es el mensaje”.

El estudio en cuestión, desarrollado por Jensen, Roe y Blikstad-Balas (2024), analizó el comportamiento lector de estudiantes noruegos de octavo grado al enfrentarse a textos en papel y en pantalla. El diseño metodológico fue riguroso, combinando seguimiento ocular (eye-tracking), entrevistas cualitativas y pruebas de comprensión, lo cual permitió obtener evidencia multifacética sobre las estrategias lectoras y sus resultados.

Los hallazgos son contundentes: los estudiantes comprenden significativamente mejor los textos cuando los leen en papel. La lectura en pantalla se asocia con una menor profundidad, más transiciones entre el texto y las preguntas (lo que se interpreta como fragmentación cognitiva), y una percepción errónea del propio desempeño por parte de los estudiantes. Es decir, no solo leen peor en digital, sino que no son conscientes de ello.

Kirschner plantea, con la claridad que lo caracteriza, que estos resultados no deberían ser sorprendentes, aunque sí preocupantes. En su análisis, señala que el mito de la neutralidad del medio ha sido promovido sin suficiente respaldo empírico. La preferencia declarada por la lectura digital —expresada por muchos estudiantes— no se traduce en mejores resultados, y eso debería bastar para cuestionar prácticas educativas que dan por sentada la equivalencia entre lo analógico y lo digital.

Este estudio es especialmente relevante en el contexto actual, donde la digitalización de materiales educativos avanza a gran velocidad, a menudo sin una reflexión pedagógica crítica. Como investigadores y docentes comprometidos con el aprendizaje significativo, debemos considerar con seriedad esta evidencia: el medio sí afecta el mensaje, y más aún, la manera en que ese mensaje es procesado cognitivamente.

En el ámbito de la tecnología educativa, esto no implica rechazar lo digital, sino asumir que no todos los medios son igualmente eficaces para todos los fines. Las interfaces digitales pueden ser poderosas cuando están diseñadas con base en principios cognitivos sólidos, pero también pueden dificultar procesos fundamentales como la comprensión profunda, la metacognición y la autorregulación lectora.

Este es un recordatorio oportuno de que el entusiasmo tecnológico debe ir acompañado de evaluación crítica y fundamentación científica. Como bien cita el profesor Kirschner: “No se trata de lo que los estudiantes prefieren, sino de lo que mejor les ayuda a aprender”.