Para onde conduz a revisão pelos pares?

Avaliação pelos pares

Há vários anos que utilizo a plataforma moodle para os meus cursos universitários, porque não só me poupa a impressão de muitos documentos em papel e permite que os alunos ausentes se mantenham a par do conteúdo de uma sessão, como também posso utilizar aplicações como "l'atelier", que permite que os alunos se avaliem uns aos outros. É a chamada "avaliação pelos pares".

Os exames decorrem em duas fases. Uma primeira sessão em que os alunos têm de analisar e comparar vários documentos de diferentes fontes mediáticas sobre um tema idêntico. A partir dessa análise, têm de elaborar um resumo de uma a duas páginas que submetem à plataforma.

Na sessão seguinte, os alunos recebem trabalhos para corrigir e, utilizando uma ficha de avaliação que preparei previamente, mudam de chapéu e tornam-se professores!

Não só fazem um exame que conclui todo um curso, como também dão um passo atrás e são responsáveis pela avaliação. Gosto desta forma de fazer as coisas, porque nos tempos "tradicionais", quando se avalia uma disciplina, os alunos tendem a não prestar muita atenção e só estão interessados na sua nota!

A máquina substitui o ser humano... e o seu espírito crítico?

Assim, elaborei um dossier documental utilizando diferentes suportes, mas sobre o mesmo tema e, de preferência, com pontos em comum (ligações de sentido, contexto, autores, etc.).

Os alunos são convidados a :

• analisar o documento "visualmente" e materialmente, a sua apresentação, a disposição, eventuais ilustrações, o contrato de leitura, a legitimidade do(s) autor(es), a fonte;
• descrever o conteúdo;
• identificar as formas de discurso.

Faço-o porque os alunos do primeiro ano têm frequentemente o "preconceito académico" de se limitarem ao conteúdo sem se distanciarem dele. Um segundo "preconceito académico" que observei é a forma como os alunos parecem estar prontos a aceitar qualquer conteúdo, desde que seja transmitido por uma "autoridade professoral". Sem querer, verifiquei esta hipótese durante um exercício do mesmo tipo que o mencionado acima, envolvendo análise documental.

Há alguns anos, concebi uma disciplina de exame sobre o tema da música em África. A ideia surgiu-me quando um amigo músico me mostrou uma velha "enciclopédia da civilização africana" que tinha encontrado numa venda de garagem. Mostrou-me a enciclopédia porque estava muito chocado com as afirmações etnocêntricas que lá se encontravam.

Então, fotocopiei um artigo desta enciclopédia: a entrada para 'música', que inseri numa pasta com outro artigo muito mais recente de uma revista de ciência popular (Pour la Science) escrito por um etnomusicólogo que usa a matemática para compreender a música da África Central.

No primeiro ano de utilização do ficheiro, fiquei um pouco surpreendido com os resultados: uma grande minoria de alunos (estudantes do 3º ano) não se apercebeu de qualquer indício de etnocentrismo no artigo de 68! E, no entanto, conseguiam ler frases como: "Quaisquer que sejam os defeitos que atribuímos aos negros (...)".

Repeti a experiência alguns anos mais tarde com alunos do primeiro ano de uma outra universidade. Os resultados foram os mesmos!

A única explicação que me pareceu plausível - os meus alunos não podem ser todos "racistas" - foi uma forma de submissão à autoridade, nomeadamente por parte do pessoal docente. Não é necessariamente tranquilizadora, mas é a explicação mais provável que encontrei até agora.

Desde então, o dossier sobre a música em África, que reforcei com um vídeo do YouTube do etnomusicólogo Marc Chemillier, serviu de "modelo de matéria de treino" para preparar o exame.

A postura do professor, vamos falar sobre isso?

No caso da avaliação entre pares no moodle, os alunos recebem uma nota dupla: como aluno e como avaliador. E funciona, desde que as correcções sejam anónimas. Com uma plataforma como o Moodle, isto é perfeitamente possível. Basta ir às definições das "funções" e ajustar os direitos por tipo de utilizador.

Mais do que um ajuste técnico, a avaliação por pares requer uma postura diferente, tanto para os alunos como para o professor.

Não sei como funcionam as coisas no seu país, mas aqui em França, os alunos do ensino superior pedem autorização para ir à casa de banho. Pessoalmente, pergunto-me... Podem simplesmente dizer que vão sair, não é? A posição de professor é diferente, não é o mesmo trabalho, mas é trabalho!

A maior parte do trabalho reside na preparação e pode dar a impressão de que "os alunos fazem tudo, o professor não faz nada". Para usar uma expressão da"sala de aula invertida" de Jean-Charles Cailliez. No entanto, tudo é feito antecipadamente, desde a matéria até à avaliação, incluindo o planeamento das matérias, a sua avaliação, uma sala adequada e computadores de reserva. No tempo do Covid, eu até conseguia fazer tudo à distância!

A coisa mais stressante para mim, enquanto geração X, é a "prática" tecnológica. Por exemplo, este ano tinha preparado tudo e pensei em fazer a chave de respostas e o respetivo formulário enquanto os alunos estavam a compor nas suas "cópias".

Só que a plataforma tinha 'decidido' 'berrar', impedindo-me de aceder ao formulário! Felizmente, os alunos conseguiram fazer a sua parte do trabalho sem qualquer problema. Depois, tive de passar uma hora ao telefone com o técnico de informática para retificar a programação, apenas para perceber que, muitas vezes, não se sabe porque é que não funciona. E quando funciona, ficamos tão contentes que deixamos de tentar perceber...

"A teoria é quando se sabe tudo e nada funciona. A prática é quando tudo funciona e ninguém sabe porquê" Albert Einstein

Reacções

Inspirei-me no trabalho de Jean-Charles Cailliez para obter feedback dos alunos. No final, pedi-lhes simplesmente que pegassem numa folha de papel e escrevessem um ponto positivo e um ponto negativo, sem darem os seus nomes.

Como eu esperava, eles acharam a correção dos trabalhos aborrecida.

Gostaram bastante do aspeto de "fazer as coisas de forma diferente", que surgiu muitas vezes nos seus comentários, assim como o facto de estarem a analisar diferentes tipos de cópias, o que lhes mostrou diferentes formas de fazer as coisas, diferentes ideias e diferentes formatos. Também os torna conscientes dos seus erros.

A classificação é uma atividade complexa, não tão óbvia como pode parecer, e que nos leva a fazer muitas perguntas. Avaliar é acima de tudo "repetitivo, procurando sempre os mesmos elementos".

"Uma experiência muito boa para variar. No entanto, na minha opinião, o método de avaliação não foi muito estimulante, talvez demasiado para corrigir". - Aluno da licenciatura1

Tinham 5 trabalhos para corrigir!

Assim, na situação de autoavaliação, os alunos encontram-se numa situação de avaliação "real" que pode ser descrita como uma"atividade de ensino real". Isto muda a sua atitude enquanto estudantes, tornando-os mais activos e envolvidos na sua aprendizagem.

A avaliação interpares leva também a uma mudança de postura do professor, entre a confiança e o desprendimento e, a cereja no topo do bolo, a uma redução considerável da tarefa de copiar! Qualquer pessoa envolvida no ensino sabe do que estou a falar! Agora os alunos sabem...

Já estou a ouvir as reacções dos colegas. No Moodle, basta olhar para os resultados e detetar eventuais "anomalias", para depois os verificar. E se quiser mesmo corrigi-los, não se preocupe, a plataforma permite-lhe fazê-lo!

Fontes

L'hadi Bouzidi, Alain Jaillet (2007) "L'évaluation par les pairs pourra-t-elle faire de l'examen une vraie activité pédagogique" EIAM https://hal.science/hal-00161484v1/document

Burguete, E., Picard, N., Andrieux, N., Fourcade, F., & Perrochon, A. (2020). Évaluation par
des pairs à distance lors d'un enseignement de lecture critique d'articles pour des étudiants paramédicaux. Évaluer.
Journal international de recherche en éducation et formation, Numéro Hors-série, 1, 41-51
https://www.academia.edu/109529021/%C3%89valuation_Par_Les_Pairs_%C3%80_Distance_Lors_D_Un_Enseignement_De_Lecture_Critique_D_Articles_Pour_Des_%C3%89tudiants_Param%C3%A9dicaux?uc-sb-sw=113799232

Jean Charles Caillliez (2016) "La classe renversée" TedX Lille
https://www.youtube.com/watch?v=KMAONv3BPhs

Marc Chemillier (2005) "Musique et rythme en Afrique centrale" Pour la science dossier "Mathématiques exotiques" abril-junho de 2005. disponível em linha https://www.pourlascience.fr/sd/histoire-sciences/musique-et-rythmes-en-afrique-centrale-5708.php

Georges Balandier, ed (1968) Dictionnaire des civilisations africaines Paris: Fernand Hazan éditeur.
https://www.abebooks.fr/servlet/BookDetailsPL?bi=31686189936&searchurl=sortby%3D17%26tn%3Ddictionnaire%2Bdes%2Bcivilisations%2Bafricaines&cm_sp=snippet-_-srp1-_-title2