Download - Oficina de Apropriação de Resultados
Oficina de Apropriação de Resultados
IDEPB 2013
Oficina de Apropriação de Resultados de MATEMÁTICA
por Gabriela Leãoe-mail: [email protected]
Avaliando IDEPB
• Conhecendo o outro... Formação do grupo!
Avaliando IDEPB
Avaliando IDEPB
O Centro de Políticas Públicas e Avaliação da Educação (CAEd), da Universidade Federal de Juiz de Fora, é uma instituição que operacionaliza (elabora e desenvolve) programas estaduais e municipais destinados a mensurar o rendimento de estudantes das escolas públicas.
A instituição também cria e promove cursos de formação, qualificação e aprimoramento aos profissionais da Educação de diversos estados do Brasil. O CAEd oferece, ainda, apoio para o desenvolvimento de projetos educacionais promovidos por iniciativas privadas, a exemplo de algumas ações da Fundação Roberto Marinho, Instituto Unibanco e Fundação Oi Futuro.
Avaliando IDEPB
O CAEd está organizado em cinco unidades:
Pesquisa, Avaliação, Formação, Sistemas de Gestão e Administração.
O CAEd atua junto ao Governo Federal, Estados, Municípios, instituições e fundações na realização de avaliações de larga escala com a produção
de medidas de desempenho e na investigação de fatores intra e extraescolares associados ao desempenho.
O objetivo principal é oferecer dados e informações úteis capazes de subsidiar as ações de melhoria da qualidade da educação e
equidade nas oportunidades educacionais.
Avaliando IDEPB
OBJETIVOS DA OFICINAObjetivo geral
Analisar e interpretar resultados do IDEPB para (re)planejamento das ações pedagógicas implementadas em sala de aula, a serem definidas pelas unidades escolares envolvidas no processo de avaliação.
Avaliando IDEPB
Objetivos específicos
Apresentar a Matriz de Referência, analisando os descritores que norteiam a elaboração dos itens presentes nos testes de Matemática;
Apresentar e interpretar a Escala de Proficiência, considerando os agrupamentos de seus intervalos (Padrões de Desempenho Estudantil);
Analisar e interpretar pedagogicamente os resultados da avaliação de Matemática.
Avaliando IDEPB
O que é avaliar?
É refletir sobre uma determinada realidade a partir de dados e informações, e emitir um
julgamento que possibilite uma ação.
Em outras palavras a avaliação escolar é um componente do processo de ensino que visa, através da
verificação e qualificação dos resultados obtidos, determinar a correspondência destes com os objetivos
propostos e, daí, orientar a tomada de decisões em relação às atividades didáticas seguintes.
AVALIAÇÃO EDUCACIONAL EM LARGA ESCALA
• As avaliações em larga escala desempenham o importante papel de assegurar que o acesso à educação de qualidade seja acompanhado da garantia do direito a uma efetiva aprendizagem por parte dos estudantes de todos os níveis de ensino.
• As avaliações em larga escala usam, como instrumentos, testes de proficiência e questionários, que permitem avaliar o desempenho escolar e os fatores intra e extraescolares associados a esse desempenho.
Avaliando IDEPB
Avaliando IDEPB
Testes de Proficiência
Questionários Contextuais
Oferecer uma medida Desempenho Escolar
AVALIAÇÃO INTERNA E EXTERNAAvaliando IDEPB
Provas abertasProvas objetivas
Observação/RegistroPortfólio
TEORIA CLÁSSICA TEORIA DA RESPOSTAAO ITEM
Avaliação Interna/Escola
Processo da aprendizagem
AVALIAÇÃO EDUCACIONAL
Avaliação Externa/Sistemas
Testes de proficiência Questionários contextuais
Desempenho dos alunos
Fatores associados ao desempenho escolar
Avaliando IDEPB
Fatores Extraescolares
Fatores socioeconômicos
Fatores familiares
Fatores Intraescolares
Gestão e administração
Prática pedagógica
Condições de infraestrutura
Qualificação dos profissionaisFatores individuais
Sistema de Avaliação da Educação da Paraíba
• Edições:– 2012 e 2013
• Etapas avaliadas: – 5º e 9º do Ensino Fundamental– 3ª série do Ensino Médio
• Disciplinas avaliadas– Língua Portuguesa– Matemática
Avaliando IDEPB
MATRIZ DE REFERÊNCIA
Avaliando IDEPB
Características da Matriz de ReferênciaAvaliando IDEPB
Apresenta as habilidades definidas para serem avaliadas nos testes utilizados no IDEPB;
Garante legitimidade e transparência à avaliação;
A Matriz não esgota o conteúdo a ser trabalhado em sala de aula e, portanto, não pode ser confundida com o currículo, propostas curriculares, estratégias de ensino ou diretrizes pedagógicas;
Apresenta habilidades possíveis de aferir em um teste de múltipla escolha;
Avaliando IDEPB
É formada por um conjunto de tópicos ou temas;
Cada tema apresenta um conjunto de habilidades;
Cada habilidade é descrita por um descritor;
Os descritores apresentam as habilidades consideradas básicas e possíveis de serem aferidas por meio do instrumento utilizado em avaliações em larga escala.
Avaliando IDEPB
•Descreve cada uma
das habilidades
da Matriz
• Avalia apenas uma única habilidade
• Representa uma
subdivisão de acordo com o
conteúdo, competências
de área e habilidades.
• Agrupa as habilidades passíveis de avaliação em um teste de proficiência.
Matriz Tema Tópico
Descritor
Item
Da Matriz aos itens dos testes de proficiência
Avaliando IDEPB
Objetivos dos testes de proficiênciaAvaliando IDEPB
Os testes de proficiência têm como objetivo aferir habilidades que são esperadas dos alunos em diferentes
etapas de escolarização.
Os testes são compostos por itens.
Cada item avalia apenas uma habilidade da Matriz.
Essas habilidades são descritas por descritores.
ItemAvaliando IDEPB
Avalia uma única habilidade, portanto o item é unidimensional.
Obtêm um resultado por estudante, que permite avaliar as hipóteses levantadas por ele.
Na formulação de um item, deve-se considerar:
GRAU DE DIFICULDADE(diz respeito à adequação entre a formulação do item e a
capacidade de resposta do estudante)
DISCRIMINAÇÃO(capacidade de o item de distinguir estudantes com diferentes níveis de
habilidade)
ItemAvaliando IDEPB
DistratoresGabarito
Comando
Suporte
É o estímulo para que o aluno mobilize recursos para solucionar o problema apresentado.
Dado sob a forma de complementação ou de interrogação, deve estar atrelado à habilidade que se pretende avaliar
Devem ser plausíveis referindo-se a raciocínios possíveis
ObservaçãoAvaliando IDEPB
A Matriz de Referência não esgota o conteúdo a ser trabalhado em sala de aula e, portanto, não pode ser confundida com as diretrizes curriculares, estratégias de ensino ou diretrizes pedagógicas, pois um recorte é feito com base naquilo que pode ser aferido.
Referenciais Curriculares
Avaliando IDEPB
Matriz de Referência
Avaliando IDEPB
Diferenças Avaliando IDEPB
• A Matriz Curricular direciona o currículo de uma instituição de ensino, leva em conta as concepções de ensino e aprendizagem da área e apresenta: objetivos, conteúdos, metodologias e processos de avaliação.
• A Matriz de Referência de Avaliação também leva em conta as concepções de ensino e aprendizagem da área, mas é composta apenas por um conjunto delimitado de conhecimentos definidos em unidades denominadas de Descritores que, no caso da Matemática, estão agrupados por blocos de conteúdos.
Diferenças Avaliando IDEPB
• A Matriz Curricular é um documento prescritivo, que direciona o ensino, insere-se no Projeto Pedagógico da instituição e é construído coletivamente pela comunidade escolar, com base em orientações curriculares da área indicadas por órgãos oficiais e na realidade escolar.
• Matriz de Referência de Avaliação é um documento descritivo, no geral escrito por técnicos, e que leva em consideração documentos curriculares oficiais. É um “recorte” de uma Matriz Curricular que não direciona o ensino, mas que delimita o que vai ser avaliado na prova a ser realizada em um programa de avaliação em larga escala.
Matriz de Referência de Avaliação de MatemáticaTópicos/Tema
• I Geometria• II Grandezas e Medidas• III Números e Operações/ Álgebra e Funções• IV Estatística, Probabilidade e Combinatória
Avaliando IDEPB
Atividade – Matriz de Referência• Formação de grupos com 4 pessoas;• Atividade de cada grupo:
– descrever e distinguir os conteúdos trabalhados em cada um dos tópicos da disciplina (o grupo poderá relacionar conteúdos de modo geral, para todas as etapas de escolaridade, ou limitar apenas uma etapa avaliada pelo sistema);
• Discutir com os participantes da turma, os conteúdos apontados;
Avaliando IDEPB
Atividade – Matriz de Referência• Cada grupo ficará responsável por um tópico da disciplina
• dividir os tópicos entre os grupos, sendo que pelo número de grupos, possivelmente, os tópicos serão repetidos);
• Atividade de cada grupo:• discutir os conteúdos matemáticos do tópico selecionado;• desenvolver uma atividade para sala de aula, com base em
um dos conteúdos apresentados;• Entregar a Matriz de Referência;
Avaliando IDEPB
Atividade – Matriz de Referência• Atividade de cada grupo:
• Associar os conteúdos das atividades com os descritores da matriz;
• Quais os conteúdos abordados na atividade?• Quais deles estão presentes na matriz?• Quais desses conteúdos não estão presentes na matriz?
Apresente possíveis motivos para esses conteúdos não serem avaliados pelo sistema.
• Cada grupo apresentará sua atividade, apontando os conteúdos trabalhados e associando com o currículo e os descritores da matriz;
Avaliando IDEPB
Atividades e ItensAvaliando IDEPB
Avaliando IDEPB
Avaliando IDEPB
Atividades e ItensAvaliando IDEPB
Atividades e ItensAvaliando IDEPB
Atividades e ItensAvaliando IDEPB
Atividades e ItensAvaliando IDEPB
Atividades e ItensAvaliando IDEPB
Atividades e ItensAvaliando IDEPB
Atividades e ItensAvaliando IDEPB
Atividades e ItensAvaliando IDEPB
• Atividades podem apresentar o desenvolvimento de diversas habilidades;
• O item avalia apenas uma habilidade;• Atividades são desenvolvidas com base em
diversos instrumentos e recursos didáticos;• O item é, geralmente, desenvolvido por meio
de questões de múltipla escolha;
Matriz de Referência• Apresenta habilidades que estão no currículo;• Podem apresentar descrições de habilidades
diferentes do que está apresentado no currículo, mas relacionado ao mesmo conteúdo;
• Apresenta habilidades possíveis de aferir em um teste de múltipla escolha;
Avaliando IDEPB
Resultado• Apresentaremos, a seguir, o percentual de
acerto por descritor para cada etapa de escolaridade:– Para cada descritor, temos o percentual de itens
que os alunos responderam corretamente no teste;
• Este resultado representa os dados gerais do projeto no 5º EF, 9º EF e 3º EM;
Avaliando IDEPB
5º EF - 2013Avaliando IDEPB
9º EF - 2013Avaliando IDEPB
3º EM - 2013Avaliando IDEPB
3º EM - 2013Avaliando IDEPB
EXEMPLOS DE ITENS POR DESCRITOR
5º ANO
Avaliando IDEPB
Avaliando IDEPBI. GeometriaD1 – Identificar a localização/movimentação de objetos em mapas,croquis e outras representações gráficas
Avaliando IDEPBII. Grandezas e MedidasD8 – Resolver problemas significativos utilizando unidades de medidaspadronizadas como km/m/cm/mm, kg/g/mg, L/ml.
Avaliando IDEPBII. Grandezas e MedidasD11 – Resolver problema envolvendo o cálculo do perímetro de figuras planas, desenhadas em malhas quadriculadas ou não.
Avaliando IDEPBIII. Números e Operações/ Álgebra e FunçõesD15 – Reconhecer a decomposição de números naturais na retanumérica
Avaliando IDEPBIII. Números e Operações/Álgebra e FunçõesD20 – Identificar diferentes representações de um mesmo número racional
Avaliando IDEPB
III. Números e Operações/Álgebra e FunçõesD24 – Resolver problema envolvendo noções de porcentagem (25%,50% e 100%)
Avaliando IDEPBIV. Estatística, Probabilidade e CombinatóriaD26 – Ler informações e dados apresentados em gráficos (particularmente em gráficos de colunas)
EXEMPLOS DE ITENS POR DESCRITOR
9º ANO
Avaliando IDEPB
Avaliando IDEPBI. GeometriaD10 – Reconhecer problemas utilizando razões trigonométricas no triângulo retângulo
Avaliando IDEPBII. Grandezas e medidasD12 – Resolver problema envolvendo o perímetro de figuras planas
Avaliando IDEPBIII. Números e Operações/ Álgebra e FunçõesD23 – Resolver problemas utilizando frações equivalentes
Avaliando IDEPBIV. Estatística, Probabilidade e CombinatóriaD37 – Resolver problema envolvendo informações apresentadas em
tabelas e/ou gráficos
EXEMPLOS DE ITENS POR DESCRITOR
3º ANO
Avaliando IDEPB
Avaliando IDEPBI. GeometriaD7 – Interpretar geometricamente os coeficientes da equação de umareta
Avaliando IDEPB
II. Grandezas e Medidas D11 – Resolver problema envolvendo perímetro de figuras planas
Avaliando IDEPBIII. Números e Operações/Álgebra e Funções D23 – Reconhecer a representação algébrica de uma função do 1º graudado o seu gráfico ou vice-versa
Avaliando IDEPBIV. Estatística, Probabilidade e Combinatória D32 – Resolver problema que envolva probabilidade de um evento
ESCALA DE PROFICIÊNCIA
Avaliando IDEPB
Escala de ProficiênciaFoi desenvolvida com o objetivo de traduzir medidas em diagnósticos qualitativos do desempenho escolar. Ela orienta, por exemplo, o trabalho do professor com relação as competências que seus estudantes desenvolveram, apresentando os resultados em uma espécie de régua na qual os valores obtidos são ordenados e categorizados em intervalos ou faixas que indicam o grau de desenvolvimento das habilidades para os estudantes que alcançaram determinado nível de desempenho.
Avaliando IDEPB
Escala de ProficiênciaOs estudantes que alcançaram um nível mais alto daEscala, por exemplo, mostram que possuem o domíniodas habilidades presentes nos níveis anteriores. Isso significa que o estudante da última série do Ensino Médio deve, naturalmente ser capaz de dominar habilidades em um nível mais complexo do que as de um estudante do 5º ano do Ensino Fundamental.
Avaliando IDEPB
Escala de Proficiência• Principais elementos da Escala de Proficiência
– Domínio– Competências– Régua numerada: proficiência– Níveis de proficiência– Gradação de cores: graus de dificuldade da
competência
Avaliando IDEPB
Atividade – Escala de Proficiência• Dividir a turma em grupos com 4 pessoas;• Entregar cada bloco de competências para os grupos;• Atividade de cada grupo:
– Discutir e associar o desenvolvimento de cada competência;
• Apresentar o gabarito e esclarecer possíveis dúvidas;• Entregar a escala de proficiência;
Avaliando IDEPB
Avaliando IDEPB
Avaliando IDEPB
Na primeira coluna são apresentados os grandes
domínios do conhecimento. Esses
domínios por sua vez são agrupamentos de
competências que, por sua vez, agregam as habilidades
presentes na Matriz de Referência de Matemática.
Avaliando IDEPB
Avaliando IDEPB
Avaliando IDEPB
Avaliando IDEPBIdentificam a
movimentação de objetos e pessoas
em mapas e croquis.
Identificam objeto localizado
dentro/fora, na frente/atrás
Dada uma trajetória entre duas localidades
no mapa, identifica a descrição textual que
representa esse deslocamento.
Realiza atividade de localização utilizando
sistema de coordenadas em um
plano cartesiano.
Localizam figuras geométricas por meio das coordenadas cartesianas de seus vértices utilizando
nomenclatura abscissa/ordenada..
Os alunos ainda não desenvolveram as
habilidades relacionadas a essa
competência.
Leitura na Escala de ProficiênciaAvaliando IBEPB
Leitura Horizontal: podemos ver os níveis de consolidação de cada competência avaliada, diferenciados pela gradação de cores.
Leitura Vertical: conseguimos através de uma determinada proficiência, identificar em que nível de consolidação se encontra cada uma das competências avaliadas, bem como a qual padrão de desempenho equivalente àquela proficiência.
PADRÕES DE DESEMPENHO
Avaliando IDEPB
Padrões de DesempenhoAvaliando IDEPB
Indicam o grau de cumprimento dos objetivos educacionais considerados essenciais e expressos na MATRIZ DE REFERÊNCIA para avaliação, bem como as metas de desempenho a serem alcançadas.
Os testes feitos pelos estudantes trazem uma medida de seu desempenho nas HABILIDADES avaliadas que é denominada PROFICIÊNCIA e organizada em uma Escala para fins de análise. Os Padrões apresentam uma caracterização das COMPETÊNCIAS e HABILIDADES cognitivas desenvolvidas pelos estudantes em importantes pontos da ESCALA DE PROFICIÊNCIA.
Padrões de DesempenhoAvaliando IDEPB
São categorias definidas a partir de cortes numéricos que agrupam os níveis da Escala de Proficiência, com base nas metas educacionais
estabelecidas pelo IDEPB. Esses cortes dão origem a quatro Padrões de Desempenho – Abaixo do básico, Básico, Adequado e Avançado,
os quais apresentam o perfil de desempenho dos estudantes.
Padrões de DesempenhoAvaliando IDEPB
Padrões de DesempenhoAvaliando IDEPB
Cortes dos Padrões de Desempenho de Matemática
• 5º ano do Ensino Fundamental– ABAIXO DO BÁSICO - Até 150 – BÁSICO - 150 a 200 – ADEQUADO - 200 a 250 – AVANÇADO - Acima de 250
Avaliando IDEPB
Marcar os pontos de corte na escala
Cortes dos Padrões de Desempenho de Matemática
• 9º ano do Ensino Fundamental– ABAIXO DO BÁSICO - Até 225 – BÁSICO - 225 a 275 – ADEQUADO - 275 a 325 – AVANÇADO - Acima de 325
Avaliando IDEPB
Marcar os pontos de corte na escala
Cortes dos Padrões de Desempenho de Matemática
• 3ª série do Ensino Médio– ABAIXO DO BÁSICO - Até 250 – BÁSICO - 250 a 300 – ADEQUADO - 300 a 350 – AVANÇADO - Acima de 350
Avaliando IDEPB
Marcar os pontos de corte na escala
Abaixo do Básico – 9º anoAvaliando IDEPB
Exemplos de itens por padrão de desempenho
Avaliando IDEPB
Abaixo do Básico
Avaliando IDEPB
5º anoAvaliando IDEPB
9º anoAvaliando IDEPB
3º anoAvaliando IDEPB
Básico
Avaliando IDEPB
5º anoAvaliando IDEPB
9º anoAvaliando IDEPB
3º anoAvaliando IDEPB
Adequado
Avaliando IDEPB
5º anoAvaliando IDEPB
9º anoAvaliando IDEPB
3º anoAvaliando IDEPB
Avançado
Avaliando IDEPB
5º anoAvaliando IDEPB
9º anoAvaliando IDEPB
3º anoAvaliando IDEPB
RESULTADOS
Avaliando IDEPB
Resultados• PROFICIÊNCIA MÉDIA Apresenta a proficiência média da escola. Você pode comparar a proficiência com as médias da Paraíba, da sua Gerência Regional de Educação (GRE) e do seu município. O objetivo é proporcionar uma visão dasproficiências médias e posicionar sua escola em relação a essas médias.
Avaliando IDEPB
Resultados• PARTICIPAÇÃOInforma o número estimado de estudantes para a realização do teste e quantos, efetivamente, participaram da avaliação no estado, na sua GRE, noseu município e na sua escola.
Avaliando IDEPB
Resultados• PERCENTUAL DE ESTUDANTES POR PADRÃO DE
DESEMPENHOPermite que você acompanhe o percentual de estudantes distribuídos por Padrões de Desempenhona avaliação realizada pelo estado.
Avaliando IDEPB
Resultados• PERCENTUAL DE ESTUDANTES POR NÍVEL DEPROFICIÊNCIA E PADRÃO DE DESEMPENHOApresenta a distribuição dos estudantes ao longo dos intervalos de proficiência no estado, na GRE e na suaescola. Os gráficos permitem que você identifique o percentual de estudantes para cada nível de proficiência em cada um dos Padrões de Desempenho.Isso será fundamental para planejar intervenções pedagógicas, voltadas à melhoria do processo deensino e promoção da equidade escolar.
Avaliando IDEPB
Resultados
Avaliando IDEPB
Resultados disponíveis no Portal da Avaliação
• Percentual de acerto por descritor• Resultados por estudante
Avaliando IDEPB
Resultados
Avaliando IDEPB
Resultados• Entregar resultados para os grupos;Comparar os resultados de 2012 e 2013 em uma mesma escola. • O que podemos notar ao observar a proficiência
média dos estudantes nas avaliações desses dois ciclos?
• E em relação ao percentual de alunos em cada padrão de desempenho nesses dois ciclos? Encontramos diferenças? Quais seriam?
Avaliando IDEPB
Avaliando IBEPBEscola 5º anoParaíba 5º ano
ResultadosObserve a participação dos estudantes na escola.• Qual seria o percentual de participação na avaliação aplicada
na escola? Este percentual é significativo?• Em relação à participação, o número de alunos avaliados
corresponde ao número de alunos que frequentam a escola?• Quem são os alunos que não fizeram a avaliação?
• Como possibilitar a participação desses alunos nas próximas avaliações?
• Como melhorar a frequência desses alunos na escola?
Avaliando IDEPB
ResultadosObserve a proficiência média da sua escola em cada etapa de escolaridade• O que podemos observar ao associar a proficiência média aos
padrões de desempenho em cada etapa?• Quais são as habilidades desenvolvidas pelos alunos em cada
etapa de escolaridade, considerando o resultado da proficiência média?
• Quais seriam os conhecimentos mínimos esperados em cada etapa de escolaridade? (quais as habilidades que os alunos ainda não desenvolveram?)
Avaliando IDEPB
Utilização dos resultadosAvaliando IDEPB
Gestores Professores Estudantes
Utilização dos resultadosAvaliando IDEPB
Gestores
REDE
ESCOLA
Planejamento e execução de políticas públicas.
Criação de metas de qualidade e equidade educacionais.
Implementação de medidas de responsabilização.
Políticas de incentivos diretos ou indiretos. Ações de formação continuada de
professores .
Elaboração do projeto da escola. Monitoramento da qualidade de ensino . Subsídio para avaliação institucional.
Utilização dos resultadosAvaliando IDEPB
Professores Intervenção pedagógica. Elaboração de projetos especiais. Foco nos estudantes com dificuldades. Ações de recuperação escolar. Planejamento das ações de sala de aula. Visão proativa quanto ao desenvolvimento
de habilidades e competências ao longo da educação básica.
Utilização dos resultadosAvaliando IDEPB
Estudantes Acompanhamento individual do desempenho
escolar pelos estudantes e seus familiares.
Informações sobre a qualidade dos serviços educacionais oferecidos .
OBRIGADA PELA ATENÇÃO!
Gabriela Leão
Avaliando IDEPB