Recolha e análise de dados de formação. Até onde se pode ir?

A quantidade de dados produzidos pelos formandos durante a formação em linha é imensa. Qual foi o equipamento dos formandos? Quanto tempo permaneceram num recurso? Foram até ao fim? Clicaram nas hiperligações? Quais foram os seus resultados no final, etc.? Podemos descobrir tudo!

Mas o que é que vamos fazer com estes dados? Como é que os vamos absorver? Que organização do poder entre formandos, formadores, centros de formação e clientes é que eles põem em prática?

Uma verdadeira oportunidade

As plataformas de formação produzem dados continuamente. Cada ligação, cada clique é registado. Tudo o que os pedagogos sempre sonharam saber sobre os perfis de aprendizagem, os ritmos que favorecem a concentração, o tipo de avaliação adaptado a um determinado estilo de aprendizagem, está ao nosso alcance, desde que nos dediquemos a analisar esses dados... . Estes dados podem então ser utilizados para uma melhoria contínua.

No seu documento "The 5 C toolkit", a Elucidat sugere a recolha de informações antes, durante e após a formação. Os dados seleccionados respondem às seguintes questões:

• As pessoas contactadas vêm várias vezes ou apenas uma vez?
• Qual é a sua origem geográfica?
• Que equipamento utilizam para se ligarem?
• Concluem os recursos propostos?
• Qual é o tempo médio de ligação?
• Quais são as perguntas que os alunos têm mais dificuldade em responder? Quais são os pontos de debate?
• Que perguntas é que todos acertam? ?
• Qual é o conteúdo, a página, em que os alunos abandonam o curso em linha?

Outras plataformas também oferecemanálises de aprendizagem, que muitas vezes também são muito relevantes. E os cursos presenciais inspiram-se nelas. O Learning Catalytics, por exemplo, permite que os professores recebam feedback em tempo real sobre o seu ensino, de modo a poderem ajustar a sua abordagem.

Mas o que é que se pode fazer com estes dados?

Uma limitação económica

Temos então os meios para avaliar cada página do ecrã, cada pergunta do questionário, cada ação no jogo sério... Mas o que é que podemos fazer com isso? A tentação de continuar a melhorar o que já existe ou de continuar a aperfeiçoar esbarra na falta de tempo e no custo de produção ou de aperfeiçoamento.

A ideia de oferecer cursos diferenciados em função dos perfis que vão surgindo ou dos resultados obtidos é atractiva. Mas, a menos que se trate de formar dezenas de milhares de pessoas em grandes grupos, a viabilidade económica não é certa.

Por outro lado, os dados da plataforma podem dizer-nos se um evento de que nos orgulhamos, que exigiu muita energia e recursos, e de que o cliente gostou muito, é realmente apreciado pelo formando!

Questões pedagógicas

Outras questões se colocam. Imaginemos que, num curso de formação jurídica, a minha plataforma me mostra que certas categorias de formandos passam mais tempo com diagramas e vídeos do que com textos jurídicos ou jurisprudência. Devo oferecer-lhes mais vídeos, diagramas e animações? Ou devo incentivá-los a consultar os documentos de origem, mesmo que sejam mais áridos? Trata-se de uma escolha pedagógica. Também posso imaginar não escolher e disponibilizar vários recursos para o mesmo objetivo de formação. E, neste caso, confio no aprendente para determinar o que é melhor para ele! No primeiro caso, a aprendizagem adaptativa evita sobrecarregar a plasticidade do cérebro. Mas será bom que todos os sistemas de formação sejam sempre adaptativos?

Embora não se prestem bem ao tratamento estatístico, as perguntas abertas, os fóruns de discussão e mesmo a observação do aprendente são essenciais para compreender o que o aprendente percepciona e sente. Trata-se de um complemento essencial ao tratamento mais ou menos automatizado do fluxo de dados que as plataformas de e-learning podem produzir.

Há também o perigo de se produzirem receitas que uniformizem os cursos de formação. O mesmo se aplica à conceção de guiões de filmes. Estudos estatísticos mostraram quando é melhor criar suspense e quando é melhor deixar espaço para a leveza. No entanto, se estas receitas forem aplicadas, se houver falta de risco, um toque de loucura, uma pequena discrepância, o filme não funciona...

A tentação de controlar tudo: um boomerang

Um desvio através do panopticon de Bentham, popularizado por Michel Foucault

Tornar a formação e os seus mecanismos transparentes, obter dados sobre o mais pequeno comportamento dos formandos parece servir um interesse comum que ninguém pode contestar. No seu artigo "Learning analytics and the Phantom Menace", Andrew Hope diz-nos que dificilmente nos atrevemos a questionar uma tecnologia que tem como objetivo aumentar a formação e o envolvimento.

E, no entanto, Andrew Hope mostra-nos que a avaliação contínua transforma a forma como professores e alunos se vêem a si próprios e as relações de poder entre eles. Baseia-se em Michel Foucault, um filósofo e historiador francês que morreu em 1984 e escreveu Surveiller et punir em 1975. Utiliza a imagem do panopticon, a invenção arquitetónica de Bentham do século XIX. Bentham imaginou uma torre no centro da prisão que permitia ver o interior de cada cela. A pessoa no centro pode chamar os guardas e provocar uma reação se um recluso se comportar de forma inadequada. Como o guarda não pode ser visto, ninguém sabe, num dado momento, se está a ser vigiado ou não. Assim, todos acabam por se comportar como se estivessem a ser vigiados a todo o momento e todos os reclusos são rápidos a explicar as regras aos recém-chegados. As regras do poder acabam por ser interiorizadas.

A transparência proporcionada pelas plataformas de e-learning sobre as actividades dos formandos, dos formadores e dos centros de formação não é neutra. Permite um controlo preciso e, por isso, tem necessariamente um impacto nos comportamentos. Andrew Hope recorda-nos que Michel Foucault sempre associou a noção de poder à de saber.

Pouco a pouco, por razões de objetividade estatística, os formadores correm o risco de se rodearem de numerosos painéis de controlo e de dados de todos os tipos. Mesmo que os esforços feitos para simplificar os dados, facilitar a sua leitura e destacar os factos mais importantes sejam consideráveis, continuam a ser demorados.

Mas este trabalho de análise não deve substituir as discussões com os alunos. Pelo contrário, pode ser muito útil para preparar uma entrevista pedagógica. Perguntar a um aprendente sobre a sua estratégia, o seu ambiente de aprendizagem, as suas dificuldades ou as suas preferências continua a ser uma etapa essencial.

O aspersor diluído

O formador que tem um certo prazer e, convenhamos, um sentimento de controlo na recolha de dados sobre os seus formandos ou alunos, não tarda a descobrir que o seu superior hierárquico ou cliente também tem o seu próprio painel de controlo e que também monitoriza a sua atividade. No panopticon, o guarda tem um poder considerável sobre centenas de reclusos... Mas também ele é controlado pelas intervenções que provoca. Uma atividade que produz dados parece mais objetiva e tranquilizadora do que uma atividade baseada na intuição e na improvisação. Mas quando os painéis de controlo proliferam, congelam os métodos e limitam as possibilidades de inovação.

As promessas da analítica da aprendizagem são sedutoras e vão certamente mudar o trabalho dos formadores e dos professores. Mas a sensação de controlo que proporcionam não deve pôr de lado a relação de ensino. Em vez de fazer do formador uma figura omnipotente que sabe tudo graças aos seus painéis de controlo, estes dados devem ajudar o formando a situar-se no seu progresso e a compreender melhor as suas preferências de aprendizagem.

Constituirão, sem dúvida, a base de estudos que ajudarão a distinguir os métodos de ensino e serão, por conseguinte, muito úteis para os formadores. No entanto, podemos ter a certeza de que eles manterão uma distância saudável de qualquer tentativa de sugerir receitas, e que continuarão a inventar e a inovar!

Ilustração: Frédéric Duriez

Recursos :

Vigiar e punir. Naissance de la prison, Paris, Gallimard, 1975, 328 p.

Andrew Hope Learning analytics: Foucault and the phantom menace - acedido em 25 de fevereiro de 2018
http://newmediaresearch.educ.monash.edu.au/lnm/learning-analytics-foucault-and-phantom-menace/