oficina de apropriação de resultados ... - spaece · • com o objetivo de enriquecer a reflexão...
TRANSCRIPT
Oficina de Apropriação de Resultados Professores
SPAECE 2014
SPAECE 2014
2
Momentos de formação
1º Momento: Avaliação e Fatores Contextuais
2º Momento: Resultados Gerais - o trabalho da equipe
pedagógica
SPAECE 2014
3
2º Momento: Resultados Gerais - o trabalho da equipe pedagógica
SPAECE 2014
4
O Acesso aos Resultados
• Fazer a leitura dos resultados do SPAECE, apropriar-se desses dados, além disso, compreendê-los e elaborar planos de ação/intervenção na escola/rede é uma tarefa que exige o conhecimento dos instrumentos da Avaliação Externa e em Larga Escala.
SPAECE 2014
5
O Acesso aos ResultadosBoletim do Sistema de Avaliação
• Tem como objetivo fornecer aos gestores de rede e das unidades regionais informações condensadas, referentes aos resultados da avaliação em larga escala do SPAECE e do SPAECE-Alfa, que possam balizar as políticas a serem implementadas para a rede de ensino.
• Apresenta a trajetória do SPAECE e do SPAECE-Alfa, bem como textos que abordam os fundamentos da avaliação em larga escala e artigos sobre temas educacionais, voltados para a gestão e o uso da avaliação.
• São apresentados os resultados alcançados na avaliação, organizados por rede de ensino, CREDE e escola, indicando a evolução da proficiência média dos alunos ao longo do tempo, por meio de mapas e tabelas.
SPAECE 2014
6
O Acesso aos ResultadosBoletins do Sistema de Avaliação
AlfaDisponível em:
http://www.spaece.caedufjf.net/wp-content/uploads/2015/03/SPAECE-ALFA-RS-MR-WEB.pdf
Regular Disponível em:
http://www.spaece.caedufjf.net/wp-content/uploads/2015/03/SPAECE-2013-RS-MR-WEB.pdf
SPAECE 2014
7
O Acesso aos ResultadosBoletim da Gestão Escolar
• Destinado ao gestor escolar e, neste exemplar, são informados o resultado da escola em todas as disciplinas e etapas avaliadas, possibilitando o acesso, de forma objetiva, ao desempenho da escola na avaliação, assim como apresenta o resultado das informações contextuais da unidade escolar.
• Para cada disciplina e etapa, os resultados da escola são exibidos da seguinte forma: ano da edição da avaliação, proficiência média e desvio padrão, número previsto de estudantes para a avaliação, número efetivo de estudantes avaliados, percentual de participação e percentual de estudantes por padrão de desempenho.
• Este boletim traz, ainda, textos que levam a refletir sobre as práticas e desafios do diretor na busca por um ensino de qualidade e equânime.
SPAECE 2014
8
O Acesso aos ResultadosBoletim da Gestão Escolar
AlfaDisponível em:
http://www.spaece.caedufjf.net/wp-content/uploads/2015/03/SPAECE-ALFA-RG-MR-WEB.pdf
RegularDisponível em:
http://www.spaece.caedufjf.net/wp-content/uploads/2015/03/SPAECE-2013-RG-MR-WEB.pdf
SPAECE 2014
9
O Acesso aos Resultados
Boletim Pedagógico
• Veicula o resultado da escola, em cada disciplina, por etapa de escolaridade avaliada, e tem como público-alvo o professor dessas etapas e a equipe pedagógica da unidade escolar.
• Apresenta informações pedagógicas sobre a avaliação, as Matrizes de Referência, o desenho do teste, as metodologias utilizadas na avaliação – Teoria da Resposta ao Item (TRI) e Teoria Clássica dos Testes (TCT) –, a Escala de Proficiência e os Padrões de Desempenho, acompanhados por análises pedagógicas de itens.
• Com o objetivo de enriquecer a reflexão pedagógica sobre a avaliação em larga escala, são apresentados artigos que tratam de temas da área avaliada.
SPAECE 2014
10
O Acesso aos ResultadosBoletim Pedagógico
• Os resultados são apresentados e interpretados, com base em uma escala de proficiência, por meio do detalhamento dos níveis e padrões de desempenho. Os resultados da escola –participação, proficiência e percentual de estudantes por padrão de desempenho – quando avaliados de modo censitário, são divulgados, estabelecendo um comparativo com os resultados do estado e da CREDE.
• O principal objetivo dessa publicação é contribuir para que a escola, com base na interpretação e análise dos seus resultados, possa estabelecer um planejamento pedagógico voltado à sua realidade.
SPAECE 2014
11
O Acesso aos ResultadosBoletim Pedagógico
5º ano EFDisponível em:
http://www.spaece.caedufjf.net/wp-content/uploads/2015/03/SPAECE-RP-MT-5EF-WEB.pdf
9 º ano EF e EJA – 2º segmentoDisponível em:
http://www.spaece.caedufjf.net/wp-content/uploads/2015/03/SPAECE-2013-RP-MT-EJA-AF-WEB.pdf
Ensino Médio e EJA – 1º e 2º períodosDisponível em:
http://www.spaece.caedufjf.net/wp-content/uploads/2015/03/SPAECE-2013-RP-MT-EM-WEB.pdf
SPAECE 2014
12
O Acesso aos Resultados
Boletim Pedagógico
• É importante compreender a diferença entre Teoria da Resposta ao Item (TRI) e Teoria Clássica dos Testes (TCT):– resultado de proficiência, dada pela TRI;
é diferente do
– resultado de percentual de acerto, dada pela TCT;
SPAECE 2014
13
O Acesso aos Resultados
• As escolas (equipe gestora e pedagógica) têm
acesso aos seus resultados gerais (proficiência), por turma e aluno (percentual de acerto por descritor) que são encaminhados por meio dos boletins e dos resultados divulgados;
SPAECE 2014
14
O Acesso aos Resultados
• Nos boletins
– boletim pedagógica
• No site
– http://www.spaece.caedufjf.net
SPAECE 2014
15
SPAECE 2014
16
SPAECE 2014
17
SPAECE 2014
18
SPAECE 2014
19
Resultado por escola:
SPAECE 2014
20
SPAECE 2014
21
O Uso dos Resultados
Equipe gestora
• Conhecer os resultados gerais da escola;
• Orientar a equipe pedagógica para acesso e uso dos resultados.
SPAECE 2014
22
O Uso dos Resultados
Equipe pedagógica
• Conhecer os resultados gerais da escola, os resultados das turmas e dos estudantes;
• Relacionar os resultados com habilidades e competências desenvolvidas pelos estudantes (TRI e TCT);
• Reformular e implementar, sempre que preciso, metodologias e práticas pedagógicas para o melhor desenvolvimento dos estudantes.
SPAECE 2014
Maior participação de gestores e professores nas discussõessobre apropriação e utilização dos resultados pelas escolas.
Melhor alinhamento entre as propostas curriculares e a avaliaçãoe participação dos professores na definição dos Padrões deDesempenho.
Canais de comunicação efetivos e constantes com gestores,professores, pais, alunos e sociedade sobre a qualidade daeducação e responsabilidade de todos.
Os Desafios da Avaliação Externa na Escola
23
SPAECE 2014
24
Conhecendo os resultados
Equipe Pedagógica
• Os resultados gerais da escola:1. Todas as etapas avaliadas e o percentual de
participação;
2. Todas as etapas avaliadas e a proficiência médiaem cada disciplina;
3. Todas as etapas avaliadas, a proficiência média e a distribuição por padrão de desempenho em cada disciplina.
SPAECE 2014
25
Conhecendo os resultados
• É importante que os professores saibam identificar o que representa cada um dos dados divulgados pelo sistema:
– As tabelas de leitura auxiliam nesse processo.
SPAECE 2014
26
Conhecendo os resultados
1 2 3 4 5 6 7 8 9
REVISTA PEDAGÓGICA1 – Preencher com etapa avaliada (p. ex. 8º EF) - CAPA2 – Preencher com disciplina avaliada (p. ex. Matemática) - CAPA3 – Preencher com número de alunos efetivo – PÁGINA DE RESULTADOS (FINAL)4 – Preencher com % de participação - PÁGINA DE RESULTADOS (FINAL)5 – Preencher com Proficiência Média - PÁGINA DE RESULTADOS (FINAL)6 – Preencher com Padrão de Desempenho Médio - VERSO DA PÁGINA DE RESULTADOS (FINAL)/RÉGUA PRETA PONTILHADA APONTA PADRÃO MÉDIO7 – Identificar principais habilidades desenvolvidas de acordo com Padrão Médio (n.6) - SEÇÃO PADRÕES DE DESEMPENHO
SPAECE 2014
27
Conhecendo os resultados
REVISTA PEDAGÓGICA8 – Identificar principais habilidades a serem desenvolvidas de acordo com Padrão seguinte ao Padrão Médio (n.6) - SEÇÃO PADRÕES DE DESEMPENHO9 – Verificar se o Padrão de Desempenho com maior percentual de alunos - PÁGINA DE RESULTADOS (FINAL) corresponde ao Padrão de Desempenho Médio (n.6)
1 2 3 4 5 6 7 8 9
SPAECE 2014
28
Conhecendo os resultadosEtapas avaliadas e percentual de participação
• Refletir sobre o percentual de participação (acima ou abaixo de 80%);
• Pensar em intervenções que podem ser feitas pela equipe de docente da escola:– Apresentar o sistema aos alunos;
– Inserir o sistema no contexto escolar;
– Conhecer os resultados;
– [Outras possibilidades].
SPAECE 2014
29
Conhecendo os resultadosEtapas avaliadas e proficiência média em cada disciplina
• Observar a proficiência média;
• Alocar esse dado na escala de proficiência/níveis de proficiência.
SPAECE 2014
30
Escala de Proficiência - Matemática
SPAECE 2014
31
Escala de Proficiência – Matemática
DOMÍNIOS
Espaço e Forma
Grandezas e Medidas
Números, Operações e Álgebra
Tratamento de Informação
SPAECE 2014
32
Escala de Proficiência – Matemática
COMPETÊNCIAS
Localizar objetos em representações do espaço
Identificar figuras geométricas e suas propriedades
Reconhecer transformações no plano
Aplicação relações e propriedades
SPAECE 2014
33
Escala de Proficiência – Matemática
SPAECE 2014
34
Escala de Proficiência – Matemática
SPAECE 2014
35
Escala de Proficiência
São os que descrevem caminhosdesenhados em mapas e identificam objeto localizado dentro/fora, na frente/atrás ou em cima/embaixo.
SPAECE 2014
36
Escala de Proficiência
São os que descrevem caminhosdesenhados em mapas e identificam objeto localizado dentro/fora, na frente/atrás ou em cima/embaixo.
Realizam atividades que envolvem referenciais diferentes da própria posição, como, por exemplo, localizar qual objeto está situado entre outros dois. Também localizam e identificam a movimentação de objetos e pessoas em mapas e croquis.
SPAECE 2014
37
Escala de Proficiência
São os que descrevem caminhosdesenhados em mapas e identificam objeto localizado dentro/fora, na frente/atrás ou em cima/embaixo.
Realizam atividades que envolvem referenciais diferentes da própria posição, como, por exemplo, localizar qual objeto está situado entre outros dois. Também localizam e identificam a movimentação de objetos e pessoas em mapas e croquis.
Associam uma trajetória representada em um mapa à sua descrição textual. P.E.: dada uma trajetória entre duas localidades, no mapa, o estudante verifica qual a descrição textual que representa esse deslocamento e vice-versa.
SPAECE 2014
38
Escala de Proficiência
São os que descrevem caminhosdesenhados em mapas e identificam objeto localizado dentro/fora, na frente/atrás ou em cima/embaixo.
Realizam atividades que envolvem referenciais diferentes da própria posição, como, por exemplo, localizar qual objeto está situado entre outros dois. Também localizam e identificam a movimentação de objetos e pessoas em mapas e croquis.
Associam uma trajetória representada em um mapa à sua descrição textual. P.E.: dada uma trajetória entre duas localidades, no mapa, o estudante verifica qual a descrição textual que representa esse deslocamento e vice-versa.
Conseguem realizar atividade de localização utilizando sistema de coordenadas em um plano cartesiano. P.E.: dado um objeto no plano cartesiano, o estudante identifica o seu par ordenado e vice-versa.
SPAECE 2014
39
Escala de Proficiência
São os que descrevem caminhosdesenhados em mapas e identificam objeto localizado dentro/fora, na frente/atrás ou em cima/embaixo.
Realizam atividades que envolvem referenciais diferentes da própria posição, como, por exemplo, localizar qual objeto está situado entre outros dois. Também localizam e identificam a movimentação de objetos e pessoas em mapas e croquis.
Associam uma trajetória representada em um mapa à sua descrição textual. P.E.: dada uma trajetória entre duas localidades, no mapa, o estudante verifica qual a descrição textual que representa esse deslocamento e vice-versa.
Conseguem realizar atividade de localização utilizando sistema de coordenadas em um plano cartesiano. P.E.: dado um objeto no plano cartesiano, o estudante identifica o seu par ordenado e vice-versa.
Localizam figuras geométricas por meio das coordenadas cartesianas de seus vértices, utilizando a nomenclatura abscissa e ordenada.
SPAECE 2014
40
Os Padrões de Desempenho
Padrões de Desempenho em Matemática (SAEB)
Etapa de Escolaridade N° Muito Crítico Crítico Intermediário Adequado
5º Ano EF 4 até 150 150 a 200 200 a 250 acima de 250
9º Ano EF 4 até 225 225 a 275 275 a 325 acima de 325
1ª Série EM 0 - - - -2ª Série EM 0 - - - -
3ª Série EM 4 até 250 250 a 300 300 a 350 acima de 350
EJA EF - 2º Segmento 4 até 225 225 a 275 275 a 325 acima de 325
EJA EM - 1º Período 0 - - - -
EJA EM - 2º Período 4 até 250 250 a 300 300 a 350 acima de 350
SPAECE 2014
41
Conhecendo os resultadosEtapas avaliadas e proficiência média em cada disciplina
• Observar a proficiência média;
• Relacionar a proficiência média com o padrão desempenho;
• Identificar habilidades e competências desenvolvidas (com base nesse padrão de desempenho).
SPAECE 2014
42
Conhecendo os resultadosEtapas avaliadas e proficiência média em cada disciplina
• Refletir sobre o desempenho alcançado no teste e o resultado esperado pela escola:
– Qual o desempenho alcançado pelos estudantes em relação ao esperado?
– Quais habilidades e competências devem ser trabalhadas com o objetivo de alcançar o desenvolvimento esperado dos estudantes?
SPAECE 2014
43
Conhecendo os resultadosEtapas avaliadas e proficiência média em cada disciplina
• Relacionar o resultado alcançado com as ações/intervenções de gestão e pedagógicas implementadas na escola:
– O que escola tem feito?
– O que foi modificado e o que foi mantido no trabalho da equipe pedagógica?
– O resultado alcançado representa o trabalho da escola?
SPAECE 2014
44
Conhecendo os resultadosEtapas avaliadas e proficiência média em cada disciplina
• Compreender o desenvolvimento dos estudantes de uma etapa de escolaridade para outra:
– Qual a proficiência média e o padrão de desempenho (continua o mesmo de uma etapa para outra)?
– Como está a distribuição dos estudantes em cada padrão? Os padrões de desempenho mais baixos tem recebido mais estudantes em etapas de escolaridade mais avançadas?
SPAECE 2014
45
Conhecendo os resultados
• Com base nesse resultado, podemos fazer as seguintes inferências:– Como possibilitar que os estudantes, os quais
chegarão a esta etapa, desenvolvam as habilidades esperadas?
– Como recuperar os estudantes que já passaram pela etapa avaliada para que, ao final da Educação Básica, tenham desenvolvido habilidades e competências esperadas?
SPAECE 2014
46
Conhecendo os resultados
1 2 3 4
5
67
8
REVISTA PEDAGÓGICA1 – Preencher com etapa avaliada (p. ex. 8º EF) - CAPA2 – Preencher com disciplina avaliada (p. ex. Matemática) - CAPA3 – Preencher com Proficiência Média - PÁGINA DE RESULTADOS4 – Preencher com Padrão de Desempenho Médio - VERSO DA PÁGINA DE RESULTADOS (FINAL)/RÉGUA PRETA PONTILHADA APONTA PADRÃO MÉDIO5 – Preencher com nome de cada Padrão - SEÇÃO PADRÕES DE DESEMPENHO6 – Preencher com Percentual de estudantes para cada Padrão de Desempenho Médio - PÁGINA DE RESULTADOS (FINAL)
SPAECE 2014
47
Conhecendo os resultados
REVISTA PEDAGÓGICA7 – Calcular para cada Padrão de Desempenho. Fórmula: (Número de Estudantes Efetivo x Percentual de alunos no Padrão) ÷ 100 - PÁGINA DE RESULTADOS (FINAL)8 – Discriminar as principais habilidades desenvolvidas para cada Padrão de Desempenho - SEÇÃO PADRÕES DE DESEMPENHO.
1 2 3 4
5
67
8
SPAECE 2014
48
Conhecendo os resultados
Etapas avaliadas, proficiência média e distribuição por padrão de desempenho em cada disciplina;
• Identifique o percentual de estudantes em cada padrão de desempenho;
• A(s) turma(s) dessa escola é(são) homogênea(s) e todos desenvolveram as habilidades no mesmo grau de complexidade?
SPAECE 2014
49
Conhecendo os resultados
Etapas avaliadas, proficiência média e distribuição por padrão de desempenho em cada disciplina;
• O padrão de desempenho com maior percentual de estudantes é o mesmo padrão representado pela proficiência média alcançada pela escola?
SPAECE 2014
50
Conhecendo os resultados
Etapas avaliadas, proficiência média e distribuição por padrão de desempenho em cada disciplina;
• Calcule o número de estudantes em cada padrão de desempenho;
– Conseguimos identificar quem são os estudantes alocados em cada padrão, na escola?
SPAECE 2014
51
Conhecendo os resultados
Etapas avaliadas, proficiência média e distribuição por padrão de desempenho em cada disciplina;
• Apresente as habilidades e as competências desenvolvidas por cada grupo de estudantes (observar, em relação às habilidades e às competências, o desempenho alcançado por alunos que estão alocados em padrões de desempenho diferentes).
SPAECE 2014
52
Conhecendo os resultadosAlunos de uma turma
SPAECE 2014
53
Conhecendo os resultadosTurmas de uma escola
SPAECE 2014
54
Conhecendo os resultados
RESULTADOS NO SITEVerificar descritores (p. ex D1) mais e menos acertados com seu respectivo percentual, indicar tema/domínio/tópico a que se refere (SEÇÃO MATRIZ DE REFERÊNCIA – BOLETIM PEDAGÓGICA) e detectar principais conteúdos relacionados a esse descritor.
SPAECE 2014
55
Conhecendo os resultados
Etapa de escolaridade e percentual de acerto por descritor
• Observe o percentual de acerto geral da escola em cada disciplina e etapa de escolaridade;
SPAECE 2014
56
Conhecendo os resultados
Etapa de escolaridade e percentual de acerto por descritor
• Relacione cada habilidade (descritor) com o percentual de acerto;
• Observe a relação existente entre descritores (habilidades de uma mesma competência ou habilidades trabalhadas no desenvolvimento de um determinado conteúdo);
SPAECE 2014
57
Conhecendo os resultados
Etapa de escolaridade e percentual de acerto por descritor
• Observe descritores menos acertados:
– Estão relacionados a um mesmo tema/domínio/tópico?
– Estão relacionados às habilidades com grau de complexidade mais alto para aquela etapa de escolaridade?
SPAECE 2014
58
Conhecendo os resultados
Etapa de escolaridade e percentual de acerto por descritor
• Observe descritores menos acertados :– São habilidades desenvolvidas naquela etapa
avaliada ou são desenvolvidas ao longo do Ensino Fundamental?
– Qual a relação de cada habilidade com os conteúdos trabalhados em sala de aula? Quais as práticas pedagógicas adotadas pelos professores da escola em relação a cada um desses conteúdos?
SPAECE 2014
59
Conhecendo os resultados
Etapa de escolaridade e percentual de acerto por descritor
• Observe descritores menos acertados:– Como possibilitar a compreensão dos
estudantes em relação a cada uma dessas habilidades: Modificar por outras ações pedagógicas? Pesquisar/estudar outras formas de abordagem do conteúdo? Utilizar outros recursos pedagógicos? Outros...
SPAECE 2014
60
Conhecendo os resultadosEtapa de escolaridade e percentual de acerto por descritor
• Observe os descritores mais acertados: – Estão relacionados a um mesmo
tema/domínio/tópico?– Estão relacionados às habilidades com grau de
complexidade menor para essa etapa de escolaridade?
– Podem auxiliar no desenvolvimento de descritores menos acertados? Como?
SPAECE 2014
61
Conhecendo os resultados
Etapa de escolaridade e percentual de acerto por descritor
• Dentre os temas apresentados, quais são aqueles com os menores percentuais de acerto por descritor?
• Qual a relação desse resultado com o trabalho feito pelo professores em sala de aula?
• Este trabalho é adequado e suficiente para alcançar os resultados esperados? O que pode ser modificado? O que deve continuar?
SPAECE 2014
62
Conhecendo os resultadosAvaliação externa e interna
• Os resultados da avaliação interna são comparáveis àqueles extraídos da avaliação externa:– As habilidades avaliadas pelos professores são as
mesmas avaliadas pelo programa de avaliação externa?
– Os conteúdos desenvolvidos pelos professores da escola, com base no currículo, estão relacionados com as habilidades da matriz de referência?
SPAECE 2014