dados e informações sobre determinada realidade coletar produzir algum julgamento sobre a...
TRANSCRIPT
AVALIAÇÃO EDUCACIONAL EM LARGA ESCALA
CONTRIBUIÇÕES E POSSIBILIDADES
HIGOR PIFANOAna l i s ta de Ins t rumentos de Ava l iação
h igo r@caed .u f j f . b reaecap@caed .u f j f . b r
Avaliar é...
• Dados e informações sobre determinada realidade
COLETAR
• Produzir algum julgamento sobre a realidade.
DIAGNOSTICAR • Tomar decisão em função de um objetivo que se deseja alcançar.
DECIDIR
• Traçar estratégias de uma ação sobre o objeto avaliado.
AGIR
Diagnóstica Formativa Somativa
InternaEscola
ExternaSistemas
Interna Escola
ExternaSistemas
InternaEscola
ExternaSistemas
Pequena escala
Avaliação
Larga escala
Tipos de avaliação
Linha do tempo da avaliação externa no Brasil
SEAPE
SADEAM
SAEPI
SARESP
SIMAVE
SAERJ
SAERO
PAEBESSAEMS
SAEGO
AREAL
AVALIE
SISPAE
SALTO
SPAECE
SAEPESAEMI
SAERS
SAEP
SISTEMA DE AV. DA EDUC. DA PARAÍBA
AVALIA BH
ALFABETIZA RIO
Sistemas próprios de avaliação
Características dos sistemas próprios de avaliação
Vantagens dos sistemas próprios de avaliação
•Desenho próprio, adequado às necessidades da rede.
•Alinhamento entre currículo, ensino e avaliação.
•Definição da série e áreas do conhecimento.
•Menor periodicidade entre os ciclos avaliados.
•Determinação da população a ser avaliada.
1
•Elaboração da Matriz ou utilização da Matriz de Referência do SAEB.
•Construção de itens.
•Pré-testagem dos itens.
•Análise estatística e pedagógica dos itens.
2
•Montagem dos cadernos de testes (BIB).
•Elaboração dos testes padronizados.
•Elaboração dos questionários contextuais.
3
•Aplicação dos instrumentos.
•Processamento e constituição da base de dados da avaliação.
4
•Análise dos resultados: utilização da TCT e da TRI.
•Produção dos resultados.
•Construção e interpretação das Escalas de Proficiência.
•Divulgação dos resultados.
5
Etapas básicas de um programa de avaliação
POSSIBILIDADES DOS SISTEMAS PRÓPRIOS DE AVALIAÇÃO
Monitoramento a qualidade da educação pública ofertada e a promoção da equidade.
O que a avaliação externa possibilita?
Monitoramento da qualidade da educação pública ofertada e a promoção da equidade.
Diagnóstico do efeito das polít icas públicas implementadas.
Util ização dos resultados com foco na identidade escolar.
Estabelecimento de Padrões de Desempenho estudantis e metas educacionais.
POSSIBILIDADES DOS SISTEMAS PRÓPRIOS DE AVALIAÇÃO
Monitoramento a qualidade da educação pública ofertada e a promoção da equidade.
O que a avaliação externa possibilita?
Monitoramento da qualidade da educação pública ofertada e a promoção da equidade.
Diagnóstico do efeito das polít icas públicas implementadas.
Util ização dos resultados com foco na identidade escolar.
Estabelecimento de Padrões de Desempenho estudantis e metas educacionais.
2006 2007 2008 2009 2010175.0
200.0
225.0
250.0
275.0
300.0
196.5205.2
218.2226.2
235.1246.3250.9 255.8
261.4
268.9274.7 282.4 282.2284.0
290.6
5º ano EF 9º ano EF 3º ano EM
EVOLUÇÃO DA PROFICIÊNCIA MÉDIA EM MATEMÁTICA – REDE ESTADUAL – MINAS GERAIS
Fonte: Proeb 2006/2010
2012
2011
2010
2012
2011
2010
2012
2011
2010
5EF
9EF
3EM
13.1%
14.1%
11.8%
17.5%
19.1%
17.3%
59.5%
60.2%
54.8%
27.0%
28.8%
28.8%
59.4%
59.7%
56.9%
36.7%
36.2%
41.1%
60.0%
57.1%
59.4%
23.2%
21.2%
25.8%
3.8%
3.7%
4.1%
Baixo Intermediário Recomendado
EVOLUÇÃO DA DISTRIBUIÇÃO POR PADRÕES DE DESEMPENHO EM MATEMÁTICA - REDE ESTADUAL - MG
Fonte: Proeb 2010/2012
POSSIBILIDADES DOS SISTEMAS PRÓPRIOS DE AVALIAÇÃO
Monitoramento a qualidade da educação pública ofertada e a promoção da equidade.
O que a avaliação externa possibilita?
Monitoramento da qualidade da educação pública ofertada e a promoção da equidade.
Diagnóstico do efeito das polít icas públicas implementadas.
Util ização dos resultados com foco na identidade escolar.
Estabelecimento de Padrões de Desempenho estudantis e metas educacionais.
MAPA DA ALFABETIZAÇÃO DO ESTADO DO CEARÁSPAECE-ALFA 2007
Fonte: Spaece-Alfa 2007
Fonte: Spaece-Alfa 2008
MAPA DA ALFABETIZAÇÃO DO ESTADO DO CEARÁSPAECE-ALFA 2008
Fonte: Spaece-Alfa 2009
MAPA DA ALFABETIZAÇÃO DO ESTADO DO CEARÁSPAECE-ALFA 2009
Fonte: Spaece-Alfa 2010
MAPA DA ALFABETIZAÇÃO DO ESTADO DO CEARÁSPAECE-ALFA 2010
Fonte: Spaece-Alfa 2011
MAPA DA ALFABETIZAÇÃO DO ESTADO DO CEARÁSPAECE-ALFA 2011
POSSIBILIDADES DOS SISTEMAS PRÓPRIOS DE AVALIAÇÃO
Monitoramento a qualidade da educação pública ofertada e a promoção da equidade.
O que a avaliação externa possibilita?
Monitoramento da qualidade da educação pública ofertada e a promoção da equidade.
Diagnóstico do efeito das polít icas públicas implementadas.
Util ização dos resultados com foco na identidade escolar.
Estabelecimento de Padrões de Desempenho estudantis e metas educacionais.
RESULTADOS TRANSVERSAIS OU LONGITUDINAIS
Estado
Aluno
da Rede Planejamento e execução de políticas públicas. Criação de metas de qualidade e equidade educacionais. Implementação de medidas de responsabilização. Políticas de incentivos diretos ou indiretos. Ações de formação continuada de professores.
da Escola Elaboração do projeto da escola. Monitoramento da qualidade de ensino. Subsídio para avaliação institucional.
Uso dos resultados pelos Gestores
Projetos de intervenção pedagógica. Elaboração de projetos especiais.
Foco nos alunos com dificuldades. Ações de reforço escolar. Planejamento das ações de sala de aula.
Visão proativa quanto ao desenvolvimento de habilidades e competências ao longo da educação básica.
Uso dos resultados pelos Professores
Acompanhamento individual do desempenho escolar pelos alunos e seus familiares.
Informações sobre a qualidade dos serviços educacionais oferecidos.
Uso dos resultados pelo Estudantes e suas famílias
POSSIBILIDADES DOS SISTEMAS PRÓPRIOS DE AVALIAÇÃO
Monitoramento a qualidade da educação pública ofertada e a promoção da equidade.
O que a avaliação externa possibilita?
Monitoramento da qualidade da educação pública ofertada e a promoção da equidade.
Diagnóstico do efeito das polít icas públicas implementadas.
Util ização dos resultados com foco na identidade escolar.
Estabelecimento de Padrões de Desempenho estudantis e metas educacionais.
Padrões de desempenho
estudantil
Descrição geral dos Padrões de Desempenho
Padrões Descrição
MUITO CRÍTICO
Os alunos que apresentam este padrão de desempenho revelam ter desenvolvido competências e habilidades muito aquém do que seria esperado para o período de
escolarização em que se encontram. Por isso, esse grupo de alunos necessita de uma intervenção focada de modo a progredirem
com sucesso em seu processo de escolarização.
CRÍTICO
Os alunos que apresentam este padrão de desempenho demonstram já terem começado um processo de sistematização e domínio das habilidades consideradas básicas e
essenciais ao período de escolarização em que se encontram. Para esse grupo de alunos, é importante o investimento de esforços para que possam desenvolver habilidades mais
elaboradas.
INTERMEDIÁRIOOs alunos que apresentam este padrão de desempenho demonstram ter ampliado o leque
de habilidades tanto no que diz respeito à quantidade quanto no que se refere à complexidade dessas habilidades, as quais exigem um maior refinamento dos processos
cognitivos nelas envolvidos.
ADEQUADOOs alunos que apresentam este padrão de desempenho revelam ser capazes de realizar tarefas que exigem habilidades mais sofisticadas. Eles desenvolveram habilidades que
superam aquelas esperadas para o período de escolaridade em que se encontram.
Muito crítico Recuperação
Crítico Reforço
Intermediário Aprofundamento
Adequado Desafio
Projetos de intervenção pedagógica a partir dos Padrões de Desempenho
@@@@@INSERIR CÓPIA DA ESCALA
@@@@@
Escala de ProficiênciaA nossa “régua” para o desempenho
Avaliação em larga escala:avanços e desafios
Avanços
•Maior transparência no processo de avaliação e divulgação dos resultados.
•Ampliação das oportunidades educacionais e o reconhecimento do direito de aprender.
•Debate sobre as responsabilidades.
•Atenção especial aos alunos de baixo desempenho.
Avanços
•Discussão sobre os fatores que interferem no desempenho escolar, eficácia de práticas, programas e políticas educacionais.
•Discussão sobre a construção de propostas curriculares inovadoras, bem desenhadas e de fácil compreensão por diferentes públicos.
•Participação dos acadêmicos e pesquisadores das universidades, gestores e professores da educação básica no debate sobre o direito à educação.
• Revista do Sistema.• Revista do Gestor.• Revista Pedagógica.• Revista Contextual.• Caderno de Gestão.• Caderno de Pesquisa.
Material Impresso
• Oficinas.• Vídeos.• Kits instrucionais.
Ações de formação
• Integração dos dados.• Resultados das escolas.• Mídias sociais.
Portal da Avaliação
• Cursos a distância.• Curso presencial.• Acompanhamento técnico/pedagógico.
Transferência de tecnologia
Canais de divulgação da avaliação externa
Fatores socioeconômicos
Fatores famil iares
Fatores individuais
Gestão e administração
Prática pedagógica
Condições de infraestrutura
Qualif icação dos profissionais
Fatores Extraescolares Fatores Intraescolares
Fatores associados ao desempenho
Em que consiste considerar os fatores associados ao desempenho?
•Investigação de fatores intra e extraescolares específicos de cada sistema.
•Avaliação do impacto dos programas implementados pelas Secretarias.
•Estudo de casos de sucesso (escolas eficazes).
•Correlações entre fatores de desigualdade educacionais.
Desafios
•Maior participação dos gestores e professores nas discussões sobre apropriação e utilização dos resultados pelas escolas.
•Melhor alinhamento entre as propostas curriculares e avaliação e participação dos professores na definição dos Padrões de Desempenho.
•Canais de comunicação efetivos e constantes com gestores, professores, pais, alunos e sociedade sobre a qualidade da educação e responsabilidade de todos.