[Orador 3]: Bienvenidos a un nuevo seminario del programa E-Madrid.
Es un placer contar con todos vosotros.
También bienvenidos a todos los asistentes por streaming, así como los que se
descarguen posteriormente las grabaciones que vamos a efectuar.
Este seminario va a tratar un tema un poco más transversal.
Hemos intentado recoger bajo un tema más horizontal, recoger distintos aspectos que
pueden ser importantes
con relación a entornos de aprendizaje adaptativos.
Entonces, vamos a contar con tres ponentes.
también desde el punto de vista de la empresa, académicos, y que nos van a
ofrecer su opinión o su perspectiva acerca de plataformas en general para poder
responder mejor a las necesidades de adaptar el entorno de aprendizaje del
estudiante, acerca de aspectos concretos como experimentos con móviles para el
acceso y este tipo de adaptación
de aprendizaje de los estudiantes y también acerca de Learning Analytics, de
qué tipo de datos son los que se pueden recoger para hacer un seguimiento y mejor
evolución del aprendizaje de estos estudiantes.
Bueno, pues esta es un poco la temática que vamos a presentar durante esta
jornada.
Entonces, quería presentaros al primero de los tres ponentes que vamos a tener.
Quería agradecer, por supuesto, la presencia de los tres y su disponibilidad
para poder
participar en ella.
[Orador 2]: Entonces, bueno, voy a hacer una presentación rápida.
[Orador 3]: El primero de ellos es Daniel Lamo, de las Escoles Minguellas, creo que se pronuncia
así, no sé.
Bueno, pues él es ingeniero técnico en informática de gestión con un máster de
educación ITIC por parte de UNIR y desde hace 15 años dirige proyectos de gestión
de la información en empresas.
Ha sido coordinador, administrador TIC en distintos centros, director del
laboratorio de innovación educativa, asesor de proyectos nacionales sobre
integración de las TIC en instituciones educativas...
formador de docentes e investigador principalmente en Learning Analytics.
Es autor de varios blogs y coautor de un libro de Learning Analytics.
Bien, entonces le voy a dar la palabra y agradecerle de nuevo y Daniel, plantea la
sesión como a ti te parezca bien en el tiempo que tienes disponible.
[Orador 5]: Gracias.
Gracias Edmundo.
Gracias por darme la oportunidad de estar aquí, viernes por la tarde a las 3.
Yo creo que nos vamos a divertir y me gustaría enfocar la sesión, como he dicho,
Edmundo, a que sea dinámica.
Voy a hablar un poquito, voy a presentaros una solución que yo aplico tanto en
Ascolas Minguella como en UNIR, en el experto que imparto de creación de
contenidos digitales.
voy a intentar plasmaros cómo se puede mejorar el seguimiento con estrategias
adaptativas.
Lo centro en Moodle porque es una plataforma que creo que en España está
bastante instaurada, pero se podría aplicar en cualquier tipo de dispositivo,
ya sea móvil, ya sea página web, ya sea un blackboard, ya sea lo que sea.
Bueno, como no, como ha dicho Edmundo, he hecho un libro y hoy voy a presentar mi
libro, pero también quiero dar el contrapunto.
Nosotros hemos escrito junto a Raúl Santiago este libro, Learning Analytics,
la relación del aprendizaje a través de los datos, con la editorial WOC.
Este es mi blog, eduliticas.com, y luego también os recomiendo otro libro de Neil
Sclater.
El mío es más enfocado a docentes, para que entiendan qué es esto de la analítica
del aprendizaje, que a veces es como ciencia ficción, y en cambio Neil se
dedica más al mundo académico, al mundo de investigación, que yo también estoy ahí,
pero yo quería bajar un poquito el nivel.
Para que os hagáis una idea, la analítica de aprendizaje, como la verían, consiste
en el típico ciclo de definición de objetivo, recolección de datos, análisis,
visualización, machine learning, y luego actúas y evalúas.
Todo con el fin de optimizar el aprendizaje y el contexto educativo en el
que vives.
Yo bajo un poquito el nivel y en lugar de ser más académico, cuando digo bajar el
nivel me refiero a bajar el nivel técnico de palabra.
Yo defino esa definición inicial como esa analítica de aprendizaje que permite
mejorar.
Mejorar la tutoría, la evaluación, el seguimiento, evidentemente el contexto
educativo.
pero en base a docentes y sobre todo alumnos que a veces son los que más
olvidamos por el camino.
[Orador 4]: Entonces, ¿a un docente qué es lo que le interesa?
[Orador 5]: Bueno, lo que vemos fuera es el ciclo analítico, definir, recolectar, analizar,
evaluar,
Pero lo que le interesa a un docente es estas tres burbujas de medio que es
optimizar, seguir y evaluar con el fin de mejorar.
Esto es lo que le interesa.
Más allá de esto, puede hacer muchas cosas, pero entra en una fase de ciencia
ficción y de cosas que a lo mejor ni me interesan.
Yo lo que quiero es mejorar mi contexto educativo.
Entonces, ¿qué estrategias, ya vamos al grano, tenemos dentro de Moodle y cómo nos
pueden facilitar la adaptación de ese contenido, de esos recursos, de esos
caminos de aprendizaje?
¿Qué aproximaciones nos da?
Muchas no hay, muchas la verdad es que no hay, pero las que hay son bastante
efectivas.
De algunas de ellas tenemos selección de recursos, presentación, navegación,
podemos hacer grupos, podemos hacer estas cuatro cositas principales.
¿Y cómo lo trabajaríamos dentro de Moodle en sí?
A través de cuestionarios, a través de...
Finalización de actividades.
Tú cuando finalizas una actividad en Moodle puedes indicar que se finalice
cuando un alumno envía dos mensajes en el foro.
o ha interactuado con una persona a través de otra persona, o una actividad se ve si
ha aprobado otra, si tiene una calificación aprobativa.
Tú puedes en una respuesta de un foro, de una calificación de un cuestionario, de
otra calificación de una actividad, emitirle hacia otro recurso, es decir,
Es un poco rimbombante, no es que tenga herramientas en sí para ofrecer una
adaptación real, no hay una tutoría inteligente detrás, no hay un sistema de
machine learning, no hay una automatización directa de este camino de
aprendizaje adaptativo, es decir, el profesor lo que tiene que hacer es
utilizar los cuatro recursos, que son los cuestionarios y finalización de actividad,
y a partir de aquí con creatividad intentar adaptar contenidos.
Funciona, hay experiencias que funcionan muy bien, en la UNIR hay unas cuantas que
han dado muy bien muchos resultados positivos, pero te limita básicamente a
estas tres opciones.
A mí lo que me preocupa no es cómo Moodle o cómo una plataforma de aprendizaje te
permita adaptar o no, lo que me preocupa es el seguimiento.
Es decir, cómo hacemos el seguimiento de estos alumnos, cómo detectamos ese
progreso, cómo sabemos si han aprobado o no han aprobado, en qué punto están, qué
les falta, cómo les puedo ayudar a conseguir el objetivo final que es
aprobar.
Muchas veces nos dedicamos a intentar que no suspendan y a lo mejor eso no es lo más
importante.
A veces lo que queremos es alcanzar otros objetivos.
Entonces, ¿de qué manera se hace eso en Moodle?
Bueno, yo aquí os pongo una cara triste porque la verdad es que hay muchas
opciones, pero dejan mucho que desear.
En el siguiente sentido, Moodle nos ofrece snapshots del estado de los alumnos.
Un snapshot es información de un momento dado, en este caso, del estado de un
alumno.
Encontrar ese progreso, es decir, cómo el alumno ha ido de este punto a este punto,
es una tarea bastante complicada dentro de Moodle.
Puedes utilizar plugins, puedes utilizar algunas herramientas que ahora os
enseñaré, pero por defecto, sin instalar nada,
Cuesta muchísimo el hecho de seguir, ver cómo ha progresado el alumno.
Un docente tiene que tener conocimientos técnicos para conseguirlo y entonces a
veces es más traba que avance.
Entonces, cuando me refiero que hay un snapshot del estado del alumno, me refiero
exactamente a esto, es decir, ¿qué herramientas te da Moodle para hacer el
seguimiento y para ver el progreso de los alumnos?
Bueno, pues te da unas calificaciones, te da unas competencias que ha conseguido, te
permite saber si ha finalizado la actividad o aún le quedan algunas
actividades por finalizar, te permite saber si ha finalizado el curso o no lo ha
finalizado.
Tienes un informe de número de visitas por actividad.
Eso no sé si alguien le puede dar mucha información, pero está ahí.
Te da un informe de participación, es decir, cuántos mensajes ha enviado en el
foro, qué mensajes puedes entrar, puedes ver el detalle.
Y luego te da unos logs.
Lo que pasa es que esos logs son datos crudos y no hay un flow.
Es decir, tú no puedes coger estos logs y sin tratarlos ver por dónde ha ido el
alumno.
Un docente le va a costar muchísimo.
Entonces,
¿Qué opciones tenemos para conseguir que estos snapshots no sean más snapshots,
sino que se conviertan en herramientas útiles de verdad para conseguir saber en
qué punto está el alumno, pero cómo ha ido de aquí a ahí y por qué?
Que a lo mejor esa es la pregunta más importante.
Es decir, ¿cómo lo ha conseguido?
¿Cómo no lo ha conseguido?
¿Por qué no lo ha conseguido?
Y si lo ha conseguido, ¿qué ha utilizado o qué recursos o qué le ha ido mejor?
Bueno.
Yo hago esta reflexión, es decir, ¿qué pasa si nos saltamos estos estándares?
Bueno, si nos saltamos los estándares lo que vamos a conseguir es que no vamos a
hacer más snapshots.
Porque al final tú miras los plugins que hay en el Moodle y lo que verás son
plugins snapshots.
Número de sesiones, número de visitas, accesos en el curso, accesos en el
recurso.
Eso está muy bien, pero a un docente no le da información de peso, información
accionable para deducir.
Tendrá que pasarse horas, tendrá que aprender lo que ahora se llama el data
literacy, coger un programa de estadística, pasar de los datos, sacar
conclusiones por el mismo.
Y ya sabemos que los profesores, que todos somos profesores,
[Orador 4]: No tenemos tiempo.
[Orador 5]: Entonces vamos a tener que coger herramientas que nos faciliten un poquito
la vida en ese sentido.
Entonces yo propongo una palabra que es negociación.
¿Eso qué significa de la negociación?
pues introducir herramientas de negocios en entornos de no negocio.
¿Vale?
¿Qué quiere decir?
Pues que en los mundos del negocio tenemos herramientas extraordinarias para analizar
a las personas.
Entonces, ¿cómo podemos utilizar estas herramientas en beneficio de la educación?
Que yo creo que muchas veces ya lo estamos haciendo, ¿no?
Bueno, pues podemos hacerlo de muchas formas.
Y si esta palabra suena mal, esto del mind reading educativo
ya es la bomba, es decir, ofrecer a los profesores aquello que necesitan, déjenme
leer porque es bastante gracioso, ofrecer a los docentes aquello que no saben que
necesitan, pero que necesitan, y además no hacerlo del todo bien, porque de estos hay
unos cuantos.
¿Esto qué significa?
Esto, es decir,
Tú le das a un profesor, esto es ciencia ficción, lo ve y dice, muy bien, pero
tiene que leer entre líneas, tiene que saber interpretar estos datos, tiene que
saber qué son los colores, cómo se interpreta una gráfica de líneas, una
gráfica de sectores, etc.
Esto es main reading educativo, es decir, crear un plugin a expectativas de que un
docente le vaya a sacar utilidad, cuando al final no le saca utilidad del todo.
¿Qué nos sucede en Moodle?
Que nos encontramos con snapshots que nos ofrecen datos crudos.
Entonces, los datos crudos no es información accionable.
Para un profesor, pues vale, saber cuántas visitas tiene un recurso está muy bien.
Le podrá decir si ha accedido mucha gente, no ha accedido mucha gente, con lo cual
quito o pongo ese recurso.
¿Pero por qué?
¿Por qué no?
¿Es que se van a otro sitio?
¿Es que no se puede acceder porque el enlace está roto?
¿Es que falla alguna cosa?
Entonces lo que quieren los docentes es eso, información accionable, es decir,
convertir los datos crudos en una ensalada rica.
Esa es la idea.
Entonces yo con esto, con esta idea, y viendo que en muchas investigaciones,
muchas publicaciones, muchos artículos, todos los investigadores ponen la
coletilla de que sería conveniente que en los gráficos se acompañara de texto para
que entendieran los gráficos que estamos incorporando en la investigación.
¿Por qué no lo haces?
¿Por qué no lo pones?
Bueno, pues yo hice una investigación con distintos profesores
donde intenté validar este dashboard, modelo visual, en el que para cada uno de
los alumnos, previa a encriptación de los datos, pues mostraba una serie de
información, evidentemente con gráficos, pero a través de técnicas de Machine
Learning, pues cogía la información de estos gráficos y los convertía a texto.
¿Qué pasa?
[Orador 4]: Que automáticamente un docente tiene información accionable.
[Orador 5]: ¿Por qué?
Porque ella sabe que en cómputo global, al final de todo de la derecha, se realiza
mal esfuerzo en el primer trimestre y se cae en una cierta relajación en el
segundo.
Y esto a lo mejor con una gráfica así de sencilla se ve, pero hay quien no la sabe
interpretar.
En la investigación nos dimos cuenta que hay docentes que no saben interpretar
gráficas.
Entonces vamos a darles...
Ese texto alternativo que permite a los docentes interpretar esto de forma muy
fácil y así para cada una de las gráficas que hay.
Y al final lo que hacíamos en la investigación era poner un cómputo global,
es decir, una conclusión de todas las gráficas, con lo cual si el docente quería
entrar en detalle iba a cada una.
¿Qué no?
Se iba directamente a la conclusión, leía el informe y ya tenía una idea global de
qué sucede, qué no sucede, dónde ha fallado, dónde no ha fallado.
Pero bueno, esto es algo que quería comentaros, pero no es el motivo de la
presentación.
Esta no se ve.
Bueno, cuando digo que hay datos crudos en Moodle, me refiero a que hay 31 plugins
que te ofrecen datos crudos a partir de variables.
El tiempo de dedicación, número de visitas, no sé, variables varias.
Y algunos te sacan más gráficos, otros menos.
¿Esto qué pasa?
que te ofrece diversidad, es rico, le complicas la vida al profesor, porque
tiene que tener 3, 4 o 5 plugins para conseguir exactamente lo mismo, con lo
cual tienes descentralización y fragmentación.
Y cuando digo fragmentación me refiero a que los administradores lo van a pasar muy
bien, porque los plugins no son los mismos.
de versión a versión no tienes las mismas posibilidades y además puedes perder datos
entre medio necesitas tiempo para comprobarlos necesitas tiempo para
instalarlos si pierdes algún dato dentro de un campus universitario
se puede liar de la de San Quintín.
Con lo cual para los administradores tener esta desfragmentación o esta fragmentación
complica mucho la existencia.
No sé si hay por aquí algún administrador o el que nos esté viendo ya sabe de lo que
hablo.
Yo soy administrador y la verdad es que tener 31 plugins entre distintas marañas
de versiones de Moodle y que unos te ofrecen una cosa u otra
Pues bueno, te lo pasas muy bien.
Entonces, de estos 31 plugins, 29 son para profesores, administradores, decisores e
investigadores y solamente 4, 4 de 31 son para alumnos.
Entonces, en la analítica del aprendizaje nos estamos dejando un factor muy
importante en el producto, que son los alumnos.
Que es para lo que...
están ahí no para estudiar para aprender entonces yo no puedo aprender por los
alumnos vamos a darle herramientas para que puedan aprender ellos pues solamente
tenemos cuatro muy bien desde todos los plugins de todos los desarrolladores del
mundo que han hecho cosas para model sólo tenemos cuatro súper interesante bueno
pues yo lo que he hecho es buscar una herramienta que te permita unificar todos
estos 30 hay un plugins en uno solo y creo que lo conseguido pero poderlo explicar
hoy vale
Esos 31 son estos, que son los internos, es decir, yo distingo entre herramientas
analíticas internas y externas.
Las internas, todas estas de aquí.
¿Y las externas?
Bueno, algunas.
Y hoy os voy a enseñar una.
Entonces, esto de la negociación educativa, ¿de qué trata?
De convertir cualquier artefacto digital, ya sea una página web, ya sea una
aplicación móvil, ya sea un programa informático, convertirlo en una página
web.
Porque al final, estos 31 plugins lo que utilizan es el clickstream.
El clickstream es decir, ese conteo de clics a lo largo de la página web, pues a
partir de ahí te pueden sacar el tiempo de la sesión, cuántas visitas han hecho, etc.
Entonces, ¿cómo puedo yo utilizar una herramienta de negocio para ampliar las
posibilidades que me da el clickstream dentro de un LMS?
Y ya no hablo de Moodle.
LMS puede ser una aplicación, puede ser lo que sea.
Entonces, ¿qué nos permite negociar?
Pues aplicar herramientas de negocio y además sumar capacidades y funcionalidades
dentro del LMS, además de las que ya nos trae por defecto.
Así que solución, una única herramienta
para todos.
Es decir, si juntamos Moodle, y digo Moodle, repito, LMS, Google Analytics,
tenemos una solución única que nos va a dar toda la información que nos dan los
plugins, más toda la riqueza de lo que es el Clickstream.
Y espero que hoy os lo pueda demostrar.
Si además a toda esta información le damos caña con TensorFlow, ya sabéis que
TensorFlow es la aplicación de código abierto de Google que nos permite hacer
matching learning con paquetes ya incorporados, entonces ya rizamos el rizo.
Pero claro, evidentemente, tú no puedes darle este peso, tú no puedes coger al
profesor y decirle, mira, este año vamos a trabajar Google Analytics con TensorFlow.
Entonces ya directamente nos vamos de vacaciones.
¿Qué es lo que pasa?
¿Qué tenemos que hacer?
Tenemos que fusionar roles.
Tenemos que hacer una fusión.
El rollo Son Goku, coger un docente y un administrador, fusionarlos y ¿qué
tendremos?
Pues un superdocente.
¿Qué hace este superdocente?
Ser capaz de que esto sea posible.
Es decir, ¿qué es lo que es posible?
Esto.
Que con una sola herramienta consigamos el 99% de la información que nos da todo el
LMS, en este caso Moodle.
Que el nivel de interacciones, de información que nos da de las
interacciones de los alumnos sea superior.
Y que además tengamos muchas más posibilidades de analizarlo en
estudiantes, de dos mil y una formas.
Así que vamos a convertirnos en superdocentes
y vincular estas dos áreas que a veces los pobres administradores reciben más yoyas
que halagos.
Son como un matrimonio, es decir, los halagos no se los dicen y las quejas son
continuas.
Vamos a intentar integrarlos y vamos a intentar que funcionen como uno, porque el
docente no va a ser capaz de incorporar estas herramientas.
Así que necesitamos de la ayuda del administrador.
Entonces,
Ahora lo que voy a hacer es daros una serie de ejemplos de cómo Google Analytics
se puede utilizar dentro de cualquier LMS y qué funcionalidades extras nos dan de
las que ya nos da Moodle o cualquier otro entorno virtual de aprendizaje.
Entonces, ¿qué podemos hacer?
Pues seguimiento a tiempo real, ¿vale?
De los alumnos, de las actividades, de los recursos, de lo que queramos.
¿Esto qué significa?
Bueno, pues que a tiempo real podremos ver, esto es de una investigación que
hice, yo hice un MOOC en secundaria, creo que fue el primer MOOC en España que se
hizo en secundaria con 376 alumnos de toda España, y yo a tiempo real, pues podría ir
viendo cómo van accediendo los alumnos dentro de la plataforma, ¿vale?
¿Qué más?
Seguimiento mediante segmentación.
Si no segmentas, mueres.
¿Cómo puedes con una herramienta de análisis estudiar a los alumnos si no
segmentas?
Segmentar significa que puedas seleccionar aquella información que te interesa.
Entonces, Moodle limita en este sentido.
Limita porque no puedes escoger, quiero ver exactamente esto de este alumno en
este momento, de esta fecha a esta fecha y con esta información.
¿Vale?
Con Google Analytics lo podemos conseguir.
¿Qué quiere decir?
Que tú puedes generar filtros de lo que sea.
Es decir, puedes escoger y decir, yo quiero analizar los alumnos que estén
entre este rango de edad y que además quiero ver las chicas cómo van o quiero
ver los chicos.
Quiero ver si entra distinta gente de distintos países, pues saber de qué
países.
Tecnología, puedo saber si vienen de Windows, vienen de iPhone, vienen de
móviles, lo que queramos.
¿Comportamiento?
Pues cómo se comportan, en qué rango de horas entran, cuánta duración de sesión
están realizando, es decir, lo que queramos, al nivel que queramos y además a
la vez.
Puedes decir que quiero saber si los de Windows entran a las 12 y si los de iPhone
entran a la 1 y si hay más alumnos que entran por dispositivos móviles que por
dispositivos desktop o por la página web o lo que sea.
Pero lo más interesante de todo es esto, las condiciones.
Tenemos condiciones, es decir, podemos programar los segmentos, podemos
distinguir a los alumnos según lo que a nosotros nos interese y de esta forma
nosotros podemos crear segmentos
donde podamos comparar alumnos con el grupo clase.
Es decir, con expresiones regulares, que son los docentes, pues les suena chino,
pero los administradores no.
Solo hace falta, puedes introducir un pequeño texto, este es sencillo, hay
muchas más expresiones regulares más complicadas, que te permiten segmentar
exactamente aquella información que tú quieras.
Entonces, con un script de Google, que luego os compartiré,
integrado dentro de la plataforma, tú puedes conseguir este nivel de información
dentro de Google Analytics.
¿Qué más?
Seguimiento comparativo.
Esto para conseguirlo en Moodle,
Vas a sudar.
Ese nivel de información.
¿Por qué?
Porque aquí tú tienes un seguimiento compartido con dos estudiantes.
Tú puedes comparar tres.
Puedes comparar un grupo de trabajo.
Puedes comparar un grupo de trabajo con el grupo clase.
Y además puedes seleccionar abajo a la izquierda donde pone page views.
Puedes contrastarlo con otras métricas.
Con todas las métricas que te da el clickstream.
Todas y cada una de ellas.
[Orador 4]: Esto te da unas posibilidades infinitas.
[Orador 5]: Pero bueno, esto para ver un poquito de información.
Es decir, cuántas páginas ha visto, páginas únicas, el tiempo que se han
pasado trabajando, si han entrado y han salido rápidamente o en cambio se han
pasado más tiempo viendo los recursos.
Esto de noviembre a diciembre, pero aquí podríamos poner solamente un día.
una semana, ver la tendencia de tiempo a lo largo del aprendizaje dentro del LMS.
¿Qué más?
Tiempo de dedicación, es decir, ¿cómo sé yo si un alumno está haciendo lo que debe
hacer?
¿Cómo sé yo si un alumno es una hormiguita?
Si lo deja para el final, si lo que hace es un busto al principio, luego se
desanima, ¿qué tengo que estar, enviando mails recurrentes a todos los alumnos por
igual?
No.
Dependiendo de cómo tengas la información, pues mandarás unos correos a unos o a
otros.
Lo puedes automatizar porque estos datos de aquí los puedes sacar, los puedes poner
en un TensorFlow, los puedes poner en cualquier plataforma de análisis de datos
y que te automatice toda la información.
Entonces tú puedes ver si los alumnos pasan solamente 10 segundos dentro de la
plataforma, si se están entre un minuto y dos minutos, si tus recursos están siendo
visualizados,
Si se pasan mucho tiempo en los recursos o no se pasan nada de... Eso te puede
indicar si el recurso es bueno o el recurso es malo.
Si se pasa muy poco tiempo y resulta que tiene tres páginas, ¿qué te ha pasado?
O a lo mejor el texto no os queda claro.
En cambio, si se lo leen todo, y ahora os enseñaré cómo detectar si lo han leído
todo o se han quedado por la mitad, pues entonces quiere decir que es interesante.
Y ahí como profesor puedes cribar qué información, qué recursos son interesantes
para tus alumnos.
Y más cosas que puedes hacer.
Tú puedes saber si un alumno está en cada sesión que hace, visita una página web,
visita dos páginas web, si se pasa la tarde visitando todos los recursos que hay
en el Moodle, puedes llegar a un nivel de información brutal.
[Orador 4]: Y si esto no es suficiente, pues lo puedes comparar.
[Orador 5]: Es decir, puedes comparar toda la información en cualquier momento, con
segmentos, creas segmentos y comparas información.
Y eso es genial, porque tú puedes coger a Manu Rodríguez, que es este ejemplo que he
puesto aquí, y lo puedes comparar con el grupo clase.
Y puedes contrastar.
Pero también es importante para el alumno, si tú le envías a un alumno esta gráfica,
él sabrá en qué estado está.
Si un alumno no se sitúa según su grupo clase, pues a lo mejor piensa que va bien.
Pero si dices, mira, es que tú estás aquí, pero los alumnos están por aquí encima.
Vamos a hacer alguna cosa para solucionarlo.
Analítica de aprendizaje para profesores.
No automatismos con algoritmos, machine learning, que lo que hacen es dinamitar la
excelencia del profesor.
Educación es comunicación.
Si metemos todo algoritmos ahí para que lo hagan de forma automática, nos cargamos
esa máxima.
Y yo creo que el seguimiento y tutorización es importante, aunque haya
adaptativo.
Que eso no queda claro y es demasiado técnico, a lo mejor gráficos de este tipo,
que también se pueden sacar con Google Analytics, queda más claro.
Aquí tenemos el típico alumno que va trabajando semana a semana.
Este es el que no hace nada en todo el curso y al final te hace el esfuerzo,
estudia tres horas o cinco la noche anterior con café a tope y venga.
Este al principio va muy bien y luego se afloja.
Si esta información como profesores la tenemos antes
de la evaluación de las tareas, nosotros podemos actuar y evitar que se metan al
castañazo padre.
Es decir, dar herramientas a los profesores, esto es accionable.
¿Por qué es accionable?
Porque tú ves esto...
Si tú estás en la primera semana y ves que aquí hay un pico, aquí hay un pico, aquí
hay un pico y aquí y aquí no hay, pues estos dos tíos no han empezado.
Estos dos chicos de aquí están de campo en playa aún.
En septiembre están en la playa.
Pues vamos a hacer alguna cosa.
Oye, quitaros las chacletas, poneros los zapatos y vamos a estudiar un poquitín.
Porque os va a llegar la evaluación y os va a pasar esto.
Tiempo de dedicación es solo una variable.
Cuando digo una sola variable es que podemos estudiar lo que nos dé la gana.
Es decir, esto es variable tiempo, pero podemos accionar lo que queramos dentro de
Clickstream.
Y en Clickstream tenemos pues eso, número de visitas, tiempo, accesos, visitas
terminadas, no terminadas.
Los bonuses, que es un nombre muy técnico, pero son cuántas veces tú entras y te vas.
Es decir, si un recurso es interesante o no es interesante, entre otras muchas
cosas.
Entonces, una de las cosas que es excelente dentro de Google Analytics son
los eventos.
¿Qué es un evento?
Tú puedes programar que cuando suceda algo en tu entorno virtual de aprendizaje y no
dentro de tu entorno virtual de aprendizaje, sino dentro de Google
Analytics, te avise, te salte una alarma.
te da información de cómo tus alumnos están adquiriendo, viendo, estudiando esos
recursos.
Es decir, tú puedes colgar un vídeo en Moodle y saber si los alumnos han visto
todo el vídeo, han visto un trocito, no han visto nada y si lo han visto todo, si
han repetido pedazos de vídeo.
Tú puedes coger y saber si tú colgas un artículo, lo han leído todo, se han
quedado en la primera página, en la segunda o a mitad de la tercera.
Con todo esto lo puedes ver.
Y esto con los eventos.
Pongo también el ejemplo del audio.
Es decir, tú puedes saber si habrás escuchado todo el audio o no.
Se te ha quedado la mitad.
Tú puedes actuar sabiendo esa información.
Entonces, por ejemplo, esto yo lo tengo puesto en uno de los Moodles.
Nosotros trabajamos con la UPC.
Son súper abiertos y nos dejan poner mucha información.
Y yo puedo saber, en este caso que es el evento leer, yo puedo saber las acciones.
Es decir, si el artículo lo han cargado, cuántos lo han cargado.
Luego puedo filtrar por alumno.
Esto es grupo clase.
luego puedo ver si han empezado a leer si han llegado abajo y si incluso han llegado
abajo del todo de la página es decir si han querido buscar más información enlaces
a nota de artículo que podemos ver con analítica del aprendizaje todo este
comportamiento si esto además utilizamos comparativas con los alumnos con los
grupos clase
Con todas las herramientas de comparación podremos saber dónde están nuestros
alumnos, podremos hacer un seguimiento exhaustivo.
¿Qué más?
El flow de comportamiento, eso me encanta.
¿Qué es el flow de comportamiento?
Pues puedo saber exactamente qué ha hecho un alumno desde que entra hasta que se va.
Y eso es interesantísimo, porque si resulta que el tío, perdón, el alumno va
pululando por el Moodle, pues yo puedo detectarlo.
¿Qué estás haciendo?
Que estás entrando, pero no estás haciendo nada.
¿Qué estás intentando?
Trucar al sistema, porque al final cuando los alumnos saben que hay analítica de
repentece que por detrás, intentan hackear el sistema.
Es decir, yo entro y ya está.
Ya no recibo el mail del profesor diciendo es que no entras nunca.
No, no, ya he entrado.
Pero ¿qué has hecho cuando has entrado?
Pues el flow del comportamiento.
que es esto de aquí.
Entonces yo puedo ver, este chico o chica entró en esta página, de esta se fue para
esta, y de esta se fue para aquí, y de aquí para aquí, y de aquí pues sigue.
hasta un nivel de profundidad, desde que entra hasta que se va.
No hay ningún plugin dentro de Moodle que te dé esa información.
Y los logs de datos que tienes de datos crudos dentro de Moodle, busca esta
información.
Encuéntrala.
Por alumno, por grupo clase, por grupos de trabajo, por lo que sea.
Y luego esto lo puedes desglosar, evidentemente.
Es decir, tú le das un clic aquí, te dice cuánto rato se ha pasado aquí, qué ha
hecho, con qué actividad se vincula esta página.
¿Vale?
Toda esta información, Google Analytics.
¿Qué más?
Eventos.
Flow de comportamiento con eventos.
Un evento es cuando un alumno lee un artículo, finaliza una actividad, finaliza
una tarea.
Si tú tienes el flow de eventos,
Perdón.
Tú tienes el flow de eventos, pues podrás saber qué ha estado haciendo este alumno.
Podrás saber el tracking.
En Moodle tienes el informe de comprensión y puedes ver, pues este alumno está aquí.
Ha hecho estas y les falta estas de aquí.
Pero con esto puedes ver, ha hecho estas en este orden y ahora le faltan estas.
Y a lo mejor para estas tú dices, oye, en lugar de empezar por aquí como has hecho
antes, empieza por allá que te va a ir mejor.
seguimiento y progreso seguimiento mediante machine learning a mí google me
encanta porque sabe toda mi vida y eso me gusta porque me puede decir si tengo que
salir ya porque hay un atasco en la autopista o hoy tienes una cena con tu
mujer acuérdate de comprarle algo como ha hecho google en muchas ocasiones
¿Para educación?
Pues va muy bien.
¿Por qué va muy bien?
Porque te agrupa de forma automática los alumnos.
En negocio te agrupa de forma automática los usuarios dentro de una página web para
que lo puedas estudiar, puedas analizar su comportamiento y hacer acciones dentro de
la página web.
Aquí lo que nosotros vamos a hacer es utilizar el Machine Learning que te da el
propio Google para hacer un seguimiento progreso y mejorar la experiencia de
aprendizaje de los alumnos.
¿Cómo lo hace?
Pues de forma mágica.
Él te coge unos numeritos y te dice esto de aquí es un alumno y esto de aquí
también.
Y este ha hecho 103 sesiones, una media de 5 minutos por sesión, tiene un rango de
salto, es decir, un bounce rate es yo entro en la plataforma y me voy.
Con lo cual, si tienes un porcentaje de bone rate bajo, guay.
Si lo tienes alto, mal.
Quiere decir que esto es un alumno que entra y se va, entra y se va.
Y esto no nos interesa.
Entonces, ¿por qué enseño esto?
Porque este explorador de usuarios, que el matching learning de Google Analytics te
los agrupa,
te dice exactamente, es decir, si yo le doy un clic aquí, te dice exactamente qué
ha hecho ese alumno en un día concreto.
Y no un día, sino un día, el año, el mes, la hora, por la mañana, por la tarde, qué
ha visto, qué no ha visto y cuánto tiempo se ha pasado.
Es decir, este alumno de aquí se olvidó la contraseña.
Recuperó la contraseña con la página web del Moodle.
Cuando la recuperó, entró, se fue al Moodle de Escolas Minguella, que es el mío
en este caso, y luego se fue al curso de religión.
Y esto en 36 segundos.
Imagínate el nivel de información que tú tienes de los alumnos con Google
Analytics.
Lo tienes todo.
A mí se me ocurren muchas formas de utilizar esta información para mejorar mi
seguimiento de los alumnos.
Y ver el progreso.
Y ver si un alumno está entrando muchas veces, pocas veces, si hace sesiones
cortitas de 36 segundos, lo correlaciono con las calificaciones, lo correlaciono
con otras variables y puedo sacar información.
Esto es brutal.
Ese nivel de profundidad no te lo da Moodle.
Lo sé todo de todos y además bien puestecito, bien bonito.
¿Qué más?
Seguimiento por alertas.
Moodle tiene seguimiento por alertas.
Tú puedes decir cuando se complete un evento, manda un correo.
Pero no puedes decir cuando se complete un evento de este alumno, manda un correo.
Google Analytics sí que te permite.
Entonces tú las alertas, tú puedes decir, tienes condiciones que se aplican a todas
las métricas de Clickstream, páginas, landing page, eventos, goals.
No he introducido los goals porque en Google Analytics te limitan los objetivos
a cinco.
O 10 creo que ahora.
Con los eventos puedes poner los que quieras.
Para programar los eventos necesitas el administrador que te ponga un código
especial dentro de Google Analytics.
Esto lo puede hacer un administrador, es decir, un profesor puede redactar un
documento y decir, mira, yo quiero recibir alertas de este, este, este y este.
Y un administrador, con esto de enviar mails o poner el teléfono móvil, va
creando esas alertas y automáticamente avisa al profesor que le toque.
Esa fusión de roles es imprescindible para que esto funcione.
Así que tienes alertas además.
Tú te despreocupas y puedes recibir qué información van haciendo los alumnos
dentro del LMS.
Luego tenemos lo que os comentaba, que siempre voy diciendo, y toda la
información que te da el clickstream.
Bueno, pues toda la información que te da el clickstream es esto de aquí,
seguimiento de datos de acceso.
Interesante, no solamente para docente, sino para administradores, pero también
para principales, para cualquier rol educativo.
¿Por qué?
Porque tienes de todo, es decir,
Tú puedes ver en qué idioma están visitando nuestro Moodle, desde qué
localización, el comportamiento en base a demografía, qué tecnología, si es móvil o
no es móvil, puedes crear variables personalizadas, puedes hacer un
benchmarking, es decir, si el recurso tarda más tiempo de lo normal en cargar,
si un recurso tiene más visitas que otro, puedes hacer comparativa directa desde
aquí.
Y esto es uno de los ejemplos de localización.
¿A quién le interesa esto de la localización?
Pues hay mucha gente que accede desde fuera, sobre todo cuando tenemos másteres,
doctorados online, no hace falta trasladarse aquí, lo haces online y tú
desde aquí puedes controlar exactamente qué nicho de mercado te está dando cada
uno de los estudiantes.
alumnos que están distribuidos por el mundo.
Y no solo han hecho de mercado, es decir, si tú tienes distintos grupos de alumnos,
pues puedes ver cuáles tiran más, cuáles tiran menos y actuar en consecuencia.
Al final, la analítica del aprendizaje es para eso.
Rendimiento del LMS.
Para administradores, ¿qué quiere decir?
Que tú puedes saber para cada una de las páginas que están visitando los alumnos,
alumnos, profesores, cualquiera que entra en el entorno virtual, cuántos segundos
tarda en cargar.
Si la media resulta que son dos y nos estamos en una media de doce, pues alguna
cosa pasa con ese contexto.
Que Google Analytics no solamente es útil para ver el seguimiento y el progreso de
los alumnos, sino que además nos da muchas herramientas para que esto funcione para
todos los profesores y alumnos.
Es decir, los administradores tenemos recursos.
Y yo con este tipo de información pude detectar que los lunes el servidor se
colapsaba porque en fin de semana los alumnos es cuando trabajaban.
Esto, si no lo tienes en cuenta, te vas a volver loco para saber dónde está fallando
el servidor, por qué se te está colgando, dónde está el fallo.
Entonces tú tienes que actuar con los profesores para cambiar modos de
funcionamiento o, sencillamente, incrementar potencia de los servidores.
Si es cloud computing, de domingo a lunes y se acabó el problema.
Pero necesitas ese benchmarking.
Lo que comentaba antes de los 31 plugins descentralizados, que todo está
fragmentado, necesitamos un sitio donde poner toda esta información.
Claro, yo todos estos espacios de aquí, toda esta información se accede desde el
menú de la izquierda y efectivamente está descentralizada y está fragmentada.
Tú puedes ir por separado a cada una de ellas, pero es que también puedes crearte
unos dashboards que tú puedes compartir como administrador y administrador
hacia los profesores, hacia los docentes, para que desde un solo sitio vean toda la
información.
Google incluso te da plantillas para que no tengas que hacer nada.
Tú las coges, las cargas y te crea el dashboard.
Cuando digo dashboard me refiero a esto.
Esto sería también un dashboard general.
Esto es el típico dashboard que te ofrece Moodle, que son accesos, de dónde vienen,
cuántas sesiones, cuántas páginas vistas.
A lo mejor esto para tomar decisiones viene muy bien.
¿Que no tienes suficiente con los dashboards generales?
Pues te vas, bueno esto es un dashboard de un alumno, esto lo utilizaba yo en la
investigación de los MOOCs, donde yo puedo ver en la actividad foro, pues este alumno
se pasó 1 hora 21 minutos.
se pasó tres horas viendo el vídeo que era bastante largo.
Luego veía en qué día de la semana se pasaba el tiempo y las tres semanas que
deriva el curso, cómo iba ese alumno.
Entonces tú estos dashboards los puedes ir generando y crearlos para cada uno de los
alumnos.
Con lo cual tú puedes tener una radiografía.
Dime, tres minutos.
Y luego puedes hacer comparativas.
Grupo clase, entre fechas, ver la evolución.
¿Qué no tienes suficiente?
Informes personalizados.
¿Qué no tienes suficiente?
Te vas a Google Data Studio.
Y aquí puedes montar dos mil y una cosas.
Y con Google Data Studio puedes añadir comentarios de texto como soporte a los
gráficos.
Con lo cual estás utilizando una única herramienta para que el profesor tenga
toda la información de cada uno de los alumnos.
Así que toda esta información que os he mostrado sirve tanto para developers, para
principales, docentes, investigadores, pero también para los estudiantes.
Que a veces toda la información que se genera dentro de Moodle nos dejamos al más
importante, que son los estudiantes.
Mucho gráfico, mucho plugin, pero de los 31 solo hay 4.
y nada toda esta información es decir todo este compendio de como uno google
analytics con moodle lo tenemos en este código qr vale en la presentación pongo
debajo el enlace para ir directamente
al script es gratuito lo dejo open source es cuestión de instalarlo dentro del
moodle o cualquier entorno que te permita incorporar google analytics que ya sabemos
todos que es un código de javascript y a partir de aquí pues empezar a capturar
información de cada uno de los alumnos de forma personalizada
y que podamos hacer un seguimiento y ver el progreso de los alumnos como tiene que
ser, sin tener que saltar entre un plugin y otro, sino que desde una sola
herramienta lo puedas tener todo.
Y nada, eso es todo.
Un poco intensivo, pero espero que haya aclarado lo que es para mí la analítica
del aprendizaje.
[Orador 3]: Muchas gracias Daniel por ajustarte al tiempo también, ha sido estupendo.
Bueno, si queréis hacer alguna pregunta, por favor, a Daniel.
[Orador 1]: Muchísimas gracias por tu presentación.
Una preocupación que me da respecto a los LMS es si estás trabajando en algún plugin
que nos garantice que quien se ha logueado es realmente el alumno y no otra persona.
[Orador 5]: Esa es una buena pregunta.
Es decir, ¿cómo garantizamos que lo que estamos viendo aquí lo hace el propio
alumno o no?
Bueno, hay una cosa que se llama Model Learning Analytics, que lo que hace es ir
un paso más allá.
Es decir, te registran la cara, ven qué emociones tienes, ven cómo estás
escribiendo, te analizan tus ritmos cardíacos, te analizan si estás sudando,
es decir,
es un paso más allá, que yo creo que es exagerado, es decir, ya veo las caras, es
exagerado, pero se está trabajando en ello.
Es decir, Learning Analytics ya sabéis que viene de la Solar Research, que viene de
Estados Unidos, entre Inglaterra, y ellos van un paso más allá.
Xavier Ochoa es el que está haciendo esto de Modal Learning Analytics, y van en ese
sentido, es decir, descubrir las emociones de los alumnos, ver realmente si ese
alumno es el que está interaccionando, y a partir de ahí, pues, estudiar caligrafía,
ritmos cardíacos, va a otro nivel.
Se puede hacer, pero es más recambulesco.
[Orador 4]: ¿Alguna pregunta más?
Bueno, muchas gracias por la presentación.
Hay una cuestión que...
Normalmente yo no me gusta ser muy picajoso en estos aspectos, pero ¿te has
planteado lo de la normativa de datos europea?
Me parece que tenemos un pequeño problema, porque los datos de Google Analytics no
siguen la normativa de que tienen que estar alojados en Europa, por lo menos
hasta donde yo sé, y eso significa que por lo menos no se puede utilizar en...
en ningún tipo de enseñanza obligatoria, por lo menos oficial, hasta ese aspecto.
Me parece que el trabajo está muy bien.
Simplemente lo que digo es que hay un pequeño problema legal.
[Orador 5]: ¿Estás seguro de ello?
Hace nada, por eso por ejemplo Evernote tuvo problemas casi quiebra por la nueva
ley que obligaba a las grandes tener servidores dentro del espacio europeo.
Uno de ellos de Google está en Escocia y los datos en principio Google dice que no
salen del espacio que toca.
[Orador 4]: Lo único que pasa es que el problema no es dónde están los servidores, el problema es
si ellos han firmado y pueden garantizar porque...
El problema es que en el momento que pasen...
por el cable trasatlántico la NSA tiene una escucha muy simpática.
[Orador 5]: No, no, eso es cierto.
Es un tema, yo soy por ejemplo administrador del Google Educator Group,
con lo cual sé de este tema porque nos tocó muy de cerca.
Entonces en educación hay una cosa que se llama Google Suite for Education, donde tú
puedes dar de alta correos electrónicos de los alumnos, puedes tener un Google Drive.
Entonces estuvieron ahí con la cuerda floja
Porque había este acuerdo internacional y este acuerdo europeo de si la información
se podía utilizar o no.
Puedes estar tranquilo que esto sí se puede utilizar.
Si no, en España no tendríamos ningún Google Suite for Education y toda la
educación infantil, primaria, secundaria, está pasando por estos servidores.
Con lo cual es posible.
Es posible hacerlo.
¿Qué?
[Orador 4]: Por detrás.
Hay un documento realmente...
¿Que lo garantice?
Porque el mayor problema es que normalmente tú tienes que referirte a
algún sitio donde te garanticen que eso se está cumpliendo.
Simplemente, si existe es perfecto.
[Orador 5]: Existe.
Que luego lo hagan o no.
Luego se escribió que sí que estaban mirando información de los correos
electrónicos de Gmail.
Bueno, echa la ley, echa la trampa.
Al final hay documentación legal, luego, como dices, es la realidad.
Si está pasando por el cable transatlántico o no.
Pero sobre papel, sobre leyes, es posible.
Gracias.
[Orador 2]: Bueno, yo quería hacerte una pregunta sobre los eventos.
[Orador 5]: ¿Hasta qué nivel llegas en lo que nos has enseñado?
[Orador 2]: ¿Qué tipo de eventos capturas?
Es decir, ¿son eventos tuyos a medida para actividades concretas o estás capturando
además otros eventos, otros tipos de actividades de tu evento?
[Orador 5]: Los eventos no se pueden crear dentro de la plataforma, sino que tienes que
programarlos, incluirlos dentro de tu solución y puedes hacer lo que quieras.
Yo estoy capturando información de vídeos, de actividades, de artículos, de audios,
de lo que sea.
Es decir, cualquier material multimedia,
puedes llegar a crear eventos.
Y tú puedes crear eventos no solamente para ver cómo están generando esas
visualizaciones los alumnos, sino que eventos por si completan una actividad,
por si han completado un conjunto de actividades, si han llegado a un punto, tú
puedes con esos eventos incluso darles valor.
Y en el momento que tú das valor, puedes incluso gamificar la experiencia
de los alumnos.
Estos eventos te generan puntitos y tú estos puntos los puedes publicar y generar
esa tabla de ranking y motivar a los alumnos de una forma más dinámica.
Es el listado de la muerte de Moodle que no sea tan serio, sino darle puntitos.
[Orador 4]: Pero con eventos puedes motorizar lo que quieras.
[Orador 2]: Sí, me refería a si en el desarrollo que tienes ahora mismo en el script estás
enviando además ya eventos de actividades de Moodle.
[Orador 5]: Vale, el script no tiene el apartado de eventos.
El apartado de eventos está en un foro, en un artículo de edulíticas.com, porque el
código tiene...
No hay un código general que tú digas, mira, copio y pego, sino que tienes que
programar exactamente cómo quieres tú que se reciba esa información.
No es difícil, quien tenga el nivel de programación no es difícil, pero no hay un
código estándar.
Yo lo que comparto es para que la información de los alumnos, alumno a
alumno, puedas ya empezar a coger esa información y convertirla en información
accionable.
[Orador 2]: Gracias.
Gracias.
[Orador 3]: Bueno, gracias Daniel.
[Orador 4]: Vamos a dar un aplauso.