aula do dia 20-04-10
Foi trabalhado com Slids
Avaliação na
Educação Básica
Avaliação na Educação Básica: Funções do
Governo Federal
Avaliação Diagnóstica: Apenas oferecendo
instrumentos (ex: provinha Brasil).
Avaliação Somativa:
Grandes Exames (SAEB, Prova Brasil, Enem e Encceja)
Indicadores de Fluxo (aprovação, reprovação e abandono)
IDEB
Não há indicadores de valor adicionado para a educação
básica
Avaliação Formativa: Não há
Avaliação na Educação Básica: Funções do
Governo Federal
Avaliação Diagnóstica (de estudantes) e
Avaliação Formativa devem ser de
responsabilidade das redes (Estados e
Municípios) : Governo Federal deve dar apoio
(ex: provinha Brasil).
Avaliação Somativa deve ser o principal papel
do GF.
Accountability nas escolas
Um sistema de accountability envolve:
Exames padronizados em caráter universal
Ampla divulgação dos resultados
Pode ter, ou não, recompensas e sanções atreladas
aos resultados.
Diversos estudos apontam que tal sistema
aumenta o aprendizado, mas é preciso tomar
alguns cuidados (ex: exclusão de alunos)
Algumas Questões sobre
Avaliação Somativa na
Educação Básica
Avaliação de Final de Ciclo
Em um sistema de Accountability as escolas são avaliadas
com base no desempenhos de seus alunos nos exames
externos.
Dado que o desempenho nesses exames produz conseqüências
para escolas e estudantes, eles acabam por influenciar o currículo
e o programa de ensino.
Avaliação de Final de Ciclo
Exames de final de ciclo deveriam ser baseados em um
currículo padrão ou nos conhecimentos e habilidades
consideradas desejáveis ao final do ciclo?
Num sistema descentralizado - como o do Brasil, onde não
há um currículo único – centrar o exame em conhecimentos
e habilidade consideradas desejáveis ao final do ciclo parece
ser a saída.
Como definir tais conhecimentos e habilidades
Avaliação Educacional versus Programa de
Ensino
O fato de algo não ser cobrado nos exames não significa
que ele não seja importante.
Exemplo: Língua Portuguesa
Se o objetivo é proporcionar aos estudantes autonomia em leitura e
escrita, o papel da avaliação seria medir diretamente tais
habilidades. Portanto, questões especificas de gramática, como
análise sintática, não são incluídas.
Isso não significa dizer, evidentemente, que gramática não é
importante e que as escolas não devam ensiná-la
Indicadores Mais Usados para Avaliar a
Qualidade da Escola
1. Média da pontuação dos estudantes em exames
padronizados → reflete também o status
socioeconômico dos estudantes, além da qualidade da
escola.
2. Nota ajustada pelo status socioeconômico como uma
medida de valor adicionado → Gera ruído e produz
ordenações instavéis
3. Variação da pontuação média entre dois períodos como
uma medida de progresso → O mesmo problema do
item 2.
O problema do status socioeconômico em um
sistema de Accountability
- O fato do desempenho dos estudantes não refletir
apenas a qualidade da escola, mas também as
condições socioeconômicas dos estudantes, não é
grave em sistemas de accountability baseados apenas
na publicação de resultados.
- O público interessado pode “extrair o sinal de
qualidade” de uma escola, por exemplo, por compará-la
com escolas próximas e/ou que possuem público
similar.
O problema do status socioeconômico em um
sistema de Accountability
- Esse não é o caso, no entanto, para os programas de
“accountability forte”. Para esses, a questão da medida
de desempenho é um elemento sensível, já que as
premiações e/ou punições são automaticamente
atreladas a ela.
- Premiar ou penalizar escolas com base no perfil dos
alunos que elas recebem, além de ser injusto, pode
trazer conseqüências indesejáveis à estrutura de
incentivos implícita nos programas.
3
Avaliação de Final de Ciclo
Exames de final de ciclo deveriam ser baseados em um
currículo padrão ou nos conhecimentos e habilidades
consideradas desejáveis ao final do ciclo?
Num sistema descentralizado - como o do Brasil, onde não
há um currículo único – centrar o exame em conhecimentos
e habilidade consideradas desejáveis ao final do ciclo parece
ser a saída.
Como definir tais conhecimentos e habilidades?
Avaliação Educacional versus Programa de
Ensino
O fato de algo não ser cobrado nos exames não significa
que ele não seja importante.
Exemplo: Língua Portuguesa
Se o objetivo é proporcionar aos estudantes autonomia em leitura e
escrita, o papel da avaliação seria medir diretamente tais
habilidades. Portanto, questões especificas de gramática, como
análise sintática, não são incluídas.
Isso não significa dizer, evidentemente, que gramática não é
importante e que as escolas não devam ensiná-la
Indicadores Mais Usados para Avaliar a
Qualidade da Escola
1. Média da pontuação dos estudantes em exames
padronizados → reflete também o status
socioeconômico dos estudantes, além da qualidade da
escola.
2. Nota ajustada pelo status socioeconômico como uma
medida de valor adicionado → Gera ruído e produz
ordenações instavéis
3. Variação da pontuação média entre dois períodos como
uma medida de progresso → O mesmo problema do
item 2.
O problema do status socioeconômico em um
sistema de Accountability
- O fato do desempenho dos estudantes não refletir
apenas a qualidade da escola, mas também as
condições socioeconômicas dos estudantes, não é
grave em sistemas de accountability baseados apenas
na publicação de resultados.
- O público interessado pode “extrair o sinal de
qualidade” de uma escola, por exemplo, por compará-la
com escolas próximas e/ou que possuem público
similar.
O problema do status socioeconômico em um
sistema de Accountability
- Esse não é o caso, no entanto, para os programas de
“accountability forte”. Para esses, a questão da medida
de desempenho é um elemento sensível, já que as
premiações e/ou punições são automaticamente
atreladas a ela.
- Premiar ou penalizar escolas com base no perfil dos
alunos que elas recebem, além de ser injusto, pode
trazer conseqüências indesejáveis à estrutura de
incentivos implícita nos programas.
O problema do status socioeconômico em um
sistema de Accountability
- Existe certo consenso na literatura que programas de
“accountability forte” deveriam utilizar alguma medida
de valor adicionado
- Entretanto, não há consenso sobre a melhor forma de
fazer isso
- Nova Iorque apresenta uma saída interessante.
Comparar apenas escolas “próximas”, com base em
um indicador socioeconômico das escolas
O Problema do Fluxo e o IDEB
Indicador sintético que combina informações de
desempenho - N (proficiência média dos alunos na Prova
Brasil / SAEB) e de rendimento escolar - P (taxa média de
aprovação na etapa de ensino)
Avaliação na Educação
Superior
SINAES – Sistema Nacional de Avaliação da
Educação Superior
Avaliação de Cursos
Avaliação de IES
Principais Indicadores
Enade: avaliação da qualidade do egresso (somativa)
IDD e CPC (valor adicionado)
Conceito do Curso – avaliação in loco (insumos e
processos)
IGC - média dos cursos da IES (cpc e capes)
Conceito de Instituição – avaliação in loco
Avaliação de Cursos e de IES
Avaliação de Cursos – apenas somativa
(seleção, accountability e regulação)
O SINAES não prevê avaliação formativa para
cursos
Avaliação formativa – só para instituições