segunda-feira, 16 de novembro de 2026

ModA: medir para melhorar exige informação em tempo útil

As provas de monitorização das aprendizagens (ModA) representam uma oportunidade importante para conhecer melhor as aprendizagens dos alunos portugueses. Pela primeira vez, dispomos de uma iniciativa que procura produzir informação sistemática sobre o que os alunos sabem e conseguem fazer em diferentes anos de escolaridade. Mas há uma questão essencial: como transformar os resultados destas provas em informação verdadeiramente útil para professores, escolas e famílias?

Publicar resultados não é o mesmo que produzir conhecimento. E medir não é, por si só, melhorar as aprendizagens.

Uma classificação ou uma média pode dizer-nos alguma coisa do desempenho de um aluno ou de uma escola. No entanto, para um professor, o que realmente importa é perceber o que os alunos aprenderam, onde persistem as dificuldades e o que precisa de ser ensinado de outra maneira. Para uma escola, importa identificar fragilidades comuns, acompanhar a evolução das aprendizagens e avaliar se as medidas pedagógicas adotadas estão a produzir resultados. Para uma família, importa compreender o que os seus filhos já dominam e em que matérias precisam de apoio.

É esta passagem dos números à informação pedagógica que deve estar no centro da avaliação.

Uma prova não é apenas um conjunto de perguntas

As ModA recorrem à teoria de resposta ao item (TRI), um conjunto de métodos estatísticos usado em avaliações educativas em todo o mundo. A TRI estima os conhecimentos dos alunos considerando as respostas e as características das perguntas. Uma pergunta difícil não é, por si só, mais informativa: a informação que fornece depende também do nível do aluno. Por exemplo, um item difícil pode ajudar a distinguir alunos com níveis de proficiência elevados, enquanto um item fácil pode ser mais informativo para alunos com níveis mais baixos.

Neste contexto, a pontuação das ModA não é uma simples contagem de respostas certas e erradas: é uma estimativa da proficiência do aluno, isto é, do nível de domínio que demonstra numa área, calculada a partir do padrão de respostas e das características das perguntas. As literacias avaliadas correspondem à capacidade de compreender e mobilizar conhecimentos e competências para realizar tarefas concretas, como interpretar um texto ou resolver um problema matemático.

A documentação técnica das ModA, publicada pelo Instituto de Educação, Qualidade e Avaliação (EduQA), identifica o modelo de Rasch. Este modelo admite perguntas com diferentes níveis de dificuldade, mas assume que todas ajudam igualmente a separar alunos com diferentes níveis de conhecimentos. Ou seja, uma pergunta mais difícil exige mais conhecimentos, mas não é considerada melhor do que outra a distinguir alunos com níveis de conhecimentos próximos.

Há outros modelos. O modelo logístico de dois parâmetros (dificuldade e discriminação), conhecido por 2PL, permite que as perguntas também difiram no modo como separam alunos com níveis de conhecimentos diferentes. O modelo logístico de três parâmetros (dificuldade, discriminação e pseudoacerto), ou 3PL, acrescenta a possibilidade de acertar ao acaso, por exemplo, escolhendo uma opção ao acaso numa pergunta de escolha múltipla. O modelo generalizado de crédito parcial (uma curva de probabilidade para cada cotação da resposta aberta), ou GPCM, aplica-se a perguntas com várias pontuações possíveis, por exemplo, uma resposta que recebe crédito parcial. A figura seguinte ilustra o processo das pontuações das ModA.

Professores e famílias não precisam de dominar estes modelos. Mas a escolha entre eles importa: um modelo mais complexo não é necessariamente melhor. O essencial é verificar se as suas hipóteses correspondem às perguntas e às respostas dos alunos. Se o modelo de Rasch assume que todas as perguntas separam os alunos com a mesma eficácia, por exemplo, é preciso verificar se as respostas reais confirmam essa ideia.

A questão não é contestar a utilização do modelo de Rasch, mas pedir evidência de que se adequa às provas em causa. O relatório de 2025 apresenta valores de fiabilidade elevada para as provas incluídas na publicação.

O indicador usado, o alfa de Cronbach, informa da consistência interna das provas. No entanto, não basta para avaliar a precisão das pontuações em diferentes níveis da escala. Seria desejável que o EduQA disponibilizasse também informação sobre a qualidade dos itens, o ajustamento do modelo e dos itens aos dados e a estabilidade dos resultados.

Pode parecer uma discussão demasiado técnica, mas esta informação ajuda a perceber se as pontuações são suficientemente precisas para os diferentes níveis de proficiência e que conclusões podemos tirar delas.

Mostrar o que se avalia

A transparência exige também que se divulguem exemplos representativos de perguntas utilizadas nas provas, acompanhados das respostas esperadas e dos critérios de classificação.

O Programa Internacional de Avaliação de Alunos (em inglês, PISA) e o Trends in International Mathematics and Science Study (TIMSS), duas avaliações internacionais nas quais o Governo se inspirou para adotar provas não públicas, disponibilizam itens de avaliações anteriores. Mantêm, naturalmente, um conjunto de perguntas reservadas para assegurar a comparabilidade entre ciclos. Esta prática permite que professores, alunos, famílias e investigadores compreendam o que está efetivamente a ser avaliado e como são classificadas as respostas.

Nas ModA, seria importante mostrar não apenas algumas perguntas, mas também exemplos de respostas que recebem pontuações diferentes e explicar porquê. O que distingue uma resposta completa de uma resposta parcialmente correta? Que conhecimentos e raciocínios são valorizados? Que erros revelam dificuldades de aprendizagem?

Esta informação permitiria aos professores compreender melhor os resultados, às famílias perceber o que se espera dos alunos e aos investigadores escrutinar a qualidade dos instrumentos. Não se trata de revelar todas as perguntas nem de ensinar os alunos a responder a um modelo de prova (aquilo a que se chama «ensinar para o exame»). Trata-se de tornar visível o que se mede e como se chega à classificação.

Da pontuação ao diagnóstico pedagógico

A escala dos pontos das ModA, de 0 a 100, e os seis níveis de desempenho — Inicial, Básico 1, Básico 2, Proficiente 1, Proficiente 2 e Avançado — permitem organizar e comunicar os resultados. Mas uma pontuação ou um nível não constituem, por si só, um diagnóstico pedagógico.

Dois alunos com a mesma pontuação podem apresentar dificuldades diferentes. Além disso, uma pontuação global pode ocultar diferenças entre dimensões: um aluno pode revelar facilidade na compreensão de conceitos e dificuldade em aplicá-los a situações novas. Por isso, os resultados por dimensão são úteis, mas não constituem, por si só, um diagnóstico pedagógico individual.

Os resultados individuais e por dimensão já são disponibilizados. Ainda assim, uma pontuação ou um nível não identificam necessariamente as competências concretas demonstradas nem as dificuldades específicas de cada aluno. Uma informação mais diagnóstica deveria ajudar a responder à pergunta: o que deve trabalhar-se a seguir?

O relatório individual como apoio à ação pedagógica

Os relatórios individuais dos alunos das ModA estão disponíveis em formato digital na Plataforma de Relatórios do EduQA. O relatório acrescenta detalhes da pontuação individual e dos resultados por dimensão: apresenta o desempenho por domínio e competência e situa-o face à turma, à escola, ao agrupamento, ao município e ao país. Esta leitura ajuda a reconhecer pontos fortes e áreas ainda por consolidar, contextualizando a pontuação global.

Para os professores, esta informação pode orientar a planificação das aulas e a diferenciação do apoio. Para as escolas, ajuda a identificar necessidades comuns e a acompanhar medidas pedagógicas. Para as famílias, torna mais concreta a conversa com a escola e permite apoiar em casa as áreas que precisam de atenção.

Diretores e professores acedem à plataforma através da extranet, com credenciais institucionais; os encarregados de educação e os alunos recebem os relatórios através das escolas. Os resultados são um ponto de partida para o diálogo e a ação: não explicam, por si só, as causas do desempenho nem medem isoladamente a qualidade de uma escola.

Os relatórios por escola das ModA, como o exemplo de 2025 analisado, apresentam resultados globais por prova e dimensão, comparados com os do concelho, da região e do país. São úteis para identificar padrões gerais.

A sua utilidade pedagógica depende também do momento em que chegam. Se os resultados só forem disponibilizados seis ou mais meses depois da avaliação, os alunos do 4.º ano podem já ter transitado para o 2.º ciclo e, em muitos casos, mudado de escola.

Esse atraso dificulta o uso dos resultados pelos professores que acompanharam esses alunos e pode comprometer a continuidade do apoio na escola de destino. Por isso, a informação deve chegar em tempo útil e acompanhar a transição dos alunos entre ciclos e escolas.

Comparar com rigor, acompanhar no tempo

A divulgação pública dos resultados é importante, mas deve ser acompanhada de informação que permita interpretá-los corretamente.

Comparar médias entre escolas exige considerar diferenças na composição dos alunos e nos contextos em que aprendem. O relatório de 2025 apresenta resultados por idade, sexo, apoio da ação social escolar e natureza do estabelecimento. Estas desagregações ajudam a descrever diferenças, mas não isolam o contributo da escola ou dos professores. Os recursos familiares, a motivação e as condições de aprendizagem também podem influenciar os resultados. Por isso, as médias mais altas não demonstram, por si só, que uma escola ensina melhor.

Isto não significa esconder diferenças ou evitar comparações. Significa reconhecer que os resultados mostram desempenhos observados, mas não medem diretamente a qualidade das escolas nem isolam o contributo causal dos professores. Para avaliar esse contributo, é necessário considerar também as condições de partida dos alunos e outros fatores contextuais relevantes.

É igualmente indispensável acompanhar a evolução ao longo do tempo. Um resultado isolado não permite identificar uma tendência. São necessários vários anos de aplicação, instrumentos suficientemente transparentes, comparáveis e informação sobre a incerteza das estimativas que os modelos TRI produzem para perceber se as aprendizagens estão efetivamente a melhorar ou a piorar.

Por fim, os resultados devem permitir avaliar as medidas pedagógicas adotadas. Se uma escola identifica dificuldades na compreensão da leitura ou na resolução de problemas matemáticos e implementa medidas para as ultrapassar, deve poder verificar, em avaliações posteriores, se essas dificuldades diminuíram.

Medir para agir

As ModA não devem ser vistas como um fim em si mesmas, nem como mais um instrumento para ordenar escolas. O seu maior potencial está na possibilidade de fornecer informação que ajude professores, escolas e famílias a melhorar as aprendizagens.

Para concretizar esse potencial, são necessárias três condições: rigor na construção e validação das medidas, transparência na divulgação dos resultados e utilidade pedagógica da informação produzida.

Não precisamos de transformar professores e famílias em especialistas em estatística ou psicometria. Precisamos, isso sim, de exigir a quem avalia que explique, de forma transparente e compreensível, o que mediu, como mediu e o que os resultados permitem concluir.

É necessário medir. É indispensável demonstrar a qualidade da medição. Mas transformar os resultados em melhores aprendizagens é o que verdadeiramente importa.

João Marôco

Sem comentários: