oficina de apropriação de resultados seape 2014. 2 momentos de formação 1º momento: o projeto...
TRANSCRIPT
Oficina de Apropriação de
Resultados
SEAPE 2014
SEAPE 2014
2
Momentos de formação1º Momento: O projeto SEAPE; principais conceitos e instrumentos; material de acesso e dados disponibilizados.
2º Momento: Fatores contextuais (o primeiro olhar para escola e a comunidade escolar).
3º Momento: Análise geral e pedagógica dos resultados: os diferentes olhares para os dados.
4º Momento: Como trabalhar os dados na escola: construção de uma proposta de trabalho com diretores e coordenadores.
SEAPE 2014
3
3º Momento
SEAPE 2014
4
Os resultados
SEAPE 2014
5
Resultados divulgados pela sistema de avaliação
• Planilhão (planilhas excel) com resultados gerais do programa, das regionais e das escolas:
• TRI (proficiência) e;• TCT (percentual de acerto).
• Resultados no site documento em pdf e publicação html e em mídia digital.
• TRI (proficiência) e;• TCT (percentual de acerto).
SEAPE 2014
6
Resultados divulgados pela sistema de avaliação
• A equipe técnica tem acesso ao planilhão (excel), com resultados gerais do projeto, regional e escola.• As escolas (equipe gestora e pedagógica) têm acesso somente aos seus resultados, que são divulgados no site e disponibilizados em mídia digital (CD). Os resultados no site também podem ser acessados pela equipe técnica.
SEAPE 2014
7
Acesso ao site: www.seape.caedufjf.net
SEAPE 2014
8
SEAPE 2014
Resultados por Escola TRI
9
SEAPE 2014
10
SEAPE 2014
11
SEAPE 2014
Resultados por Aluno TCT
12
SEAPE 2014
Resultados por Aluno TCT
13
SEAPE 2014
14
SEAPE 2014
15
SEAPE 2014
16
SEAPE 2014
17
Como começar?
SEAPE 2014
18
Equipe técnica
• Um dos trabalhos realizados após a divulgação dos resultados é aquele referente às atividades da equipe técnica.• Esta equipe recebe os dados gerais da rede, de suas subdivisões e de suas escolas, o que permite estudar os resultados alcançados e desenvolver ações e intervenções para melhoria da qualidade educacional.
SEAPE 2014
19
Equipe técnica
• O foco de trabalho da equipe técnica é compreender a qualidade da educação dos estudantes da rede e observar como cada escola pode evoluir e alcançar melhores resultados nas próximas edições do sistema.
SEAPE 2014
20
Equipe técnica
• Sabemos que o trabalho de intervenção pedagógica é de responsabilidade da equipe pedagógica, mas cabe aos técnicos identificar as escolas que não apresentam resultados satisfatórios, buscar compreender o(s) motivo(s) pelos quais esses resultados não são suficientes e desenvolver ações para melhoria dos resultados.
SEAPE 2014
21
Equipe técnica
• Se os resultados alcançados não são satisfatórios, que motivo(s) pode(m) ser esse(s)?
Vamos pensar?
SEAPE 2014
22
Equipe técnica
• Necessidade de cursos de capacitação e formação de professores;• Modificações nas ações de gestão escolar;• Aquisição de elementos relacionados à infraestrutura;• Influências sociais e econômicas;• e tantos outros...
Podemos ter um ou mais motivos!
SEAPE 2014
23
Equipe técnica
• Para isso, primeiro vamos conhecer os resultados alcançados pelas escolas e, a partir desses resultados, observar características de uma ou mais escolas...
Vamos iniciar nosso trabalho?
SEAPE 2014
24
Resultados Gerais
• Equipe Técnica• Iniciaremos nosso trabalho com o estudo do Planilhão TRI: apresentação dos dados nas planilhas Excel
SEAPE 2014
25
Resultados Gerais
SEAPE 2014
26
Resultados Gerais
Nesta planilha é possível observar os resultados de cada município, por etapa: a proficiência média, o desvio padrão, o padrão de desempenho, e o percentual de alunos em cada padrão, bem como o quantitativo de alunos previstos e efetivos, e o percentual de participação
SEAPE 2014
27
Resultados Gerais
SEAPE 2014
28
Resultados Gerais
Nesta planilha é possível observar os resultados de cada escola, por etapa: a proficiência média, o desvio padrão, o padrão de desempenho, e o percentual de alunos em cada padrão, bem como o quantitativo de alunos previstos e efetivos, e o percentual de participação.
SEAPE 2014
29
Resultados Gerais
Vamos observar os dados na planilha entregue a vocês?
SEAPE 2014
30
Proposta
• Para ler, analisar e compreender os dados dessa planilha, vamos apresentar dois slides com a “Atividade”.• Em seguida, para desenvolvimento desta atividade, vamos sugerir algumas reflexões, que estão presentes nos slides intitulados “Algumas considerações...”. Entretanto, ressaltamos que além destas, outras questões podem ser pensadas pela equipe técnica da Secretaria!
SEAPE 2014
31
Atividade
• Observar os resultados das diferentes escolas e pensar na organização, das escolas, em grupos, considerando:• participação (diferenciar por disciplina);• proficiência (diferenciar por disciplina):
• proficiência média;• desvio padrão;• percentual de estudantes por padrão de desempenho
SEAPE 2014
32
Atividade
• Organize esses grupos de escola, considerando:• Como os dados podem ser organizados, “classificados” (grupos de escolas) para possíveis intervenções da equipe técnica?• Quais são os possíveis intervenções realizadas pela equipe técnica?• Quais intervenções podem ser realizadas em cada grupo de escolas?
SEAPE 2014
33
Algumas orientações...
• Identifique as escolas com menores percentuais de participação:• Busque compreender problemas pontuais, tais
como escolas de regiões específicas, condições sociais, entre outros;
• Ações que podem ser implementadas (pense, em um primeiro momento, em algumas questões, tais como: professores e comunidade conhecem e compreendem a importância do programa de avaliação? Professores e alunos são informados quando a avaliação acontece e têm retorno sobre resultados?)
SEAPE 2014
34
Algumas orientações...
•Observe a proficiência média pelas escolas em cada disciplina e etapa de escolaridade:• A proficiência média alcançada pelas escolas é
adequada (você pode tecer considerações com base no padrão de desempenho)?• A proficiência média das escolas se difere umas
das outras? Algumas escolas apresentam proficiência muito abaixo da proficiência média esperada? (identifique essas escolas).
SEAPE 2014
35
Algumas orientações...
•Observe a proficiência média pelas escolas em cada disciplina e etapa de escolaridade:• Observe o desvio padrão para identificar se os
alunos apresentam resultados muito diferentes uns dos outros;
SEAPE 2014
36
Algumas orientações...
•Observe a proficiência média pelas escolas em cada disciplina e etapa de escolaridade:• Observe a distribuição dos estudantes por
padrão de desempenho e identifique aquelas com muitos alunos nos padrões mais baixos.
SEAPE 2014
37
Algumas orientações...
•Em meio a estas questões, reflita sobre:• Proficiência média associada a desempenho
baixo, com maioria dos alunos com desempenho baixo;• Proficiência média associada a desempenho
alto, com número significativo de alunos no padrão de desempenho mais baixos.
SEAPE 2014
38
Algumas orientações...
•Você pode refletir, também, sobre os diferentes resultados de uma mesma escola:• Para uma mesma disciplina, observe a diferença no
desenvolvimento dos estudantes à medida em que avançam para diferentes etapas de escolaridade. Para isso, observe se há mudança no padrão de desempenho para diferentes etapas, apresentado pela proficiência média. Fique atento, também, à distribuição dos estudantes nos padrões de desempenho. Observamos diferenças?
SEAPE 2014
39
Algumas orientações...
•Você pode refletir, também, sobre os diferentes resultados de uma mesma escola:• Para uma mesma etapa, observe se o
desenvolvimento das disciplinas ocorre de forma diferente. Isso representa observar se os estudantes estão desenvolvendo habilidades, por exemplo, em Língua Portuguesa, mas não estão desenvolvendo habilidades em Matemática.
SEAPE 2014
40
Resultados Gerais
• Equipe Técnica• Após o estudo dos dados do Planilhão TRI (proficiência), vamos conhecer os dados que são apresentados no Planilhão TCT: apresentação dos dados nas planilhas Excel;• Os dados de TCT complementam essa primeira análise dos dados.
SEAPE 2014
41
Resultados Gerais
Nesta planilha é possível observar os resultados obtidos em cada descritor, por município, escola e turma: o percentual de acerto em cada descritor, bem como percentual total de acertos
SEAPE 2014
42
Atividade
• Quais são os dados apresentados nessa planilha?• Como se diferem dos dados (planilha TRI) discutidos anteriormente?• Como esses dados mostram-se importantes para uma intervenção dos gestores.• Como esses dados mostram-se importantes para uma intervenção pedagógica.
SEAPE 2014
43
Atividade
• Considerando a classificação das escolas em grupos distintos (TRI), podemos notar:• Escolas de um mesmo grupo possuem resultados de TCT semelhantes (os resultados podem ser classificados por: descritor mais e menos acertado; ou por temas/tópicos)• Escolas de um mesmo grupo possuem resultados de TCT bem diferentes. Como se diferem?
SEAPE 2014
44
Algumas orientações...
•Observar o percentual de acerto das escolas em cada grupo;•Observar descritores menos acertados:• São os mesmos para todas as escolas do grupo?• Identificar se esses resultados são semelhantes
ou se diferem: Se forem semelhantes, podemos pensar em problemas e ações gerais para cada grupo. Se forem diferentes, temos que pensar em problemas e ações para cada escola.
SEAPE 2014
45
Resumindo:
• Como organizar o trabalho de intervenção nas escolas?• Observar os resultados de cada escola;• Observar aspectos que as assemelham/diferem;• Elaborar e indicar possíveis classificações (grupos de escolas);• Elaborar modos de apresentação dos resultados e contato/intervenção, elaborados de modo distinto para cada grupo (ou, se necessário, para cada escola).
SEAPE 2014
46
4º Momento
SEAPE 2014
47
Como o trabalho da equipe técnica pode ser desenvolvido em cada escola?
SEAPE 2014
48
Como trabalhar os resultados na escola
• O trabalho de intervenção realizado em cada escola deve ser desenvolvido pensando criticamente na prática de hoje ou anteriores e nos resultados alcançados.• Conhecendo esses elementos, pode-se pensar em estratégias para melhorar a prática que será aplicada.
SEAPE 2014
49
Os grupos de trabalho e o modo de contato/intervenção para cada grupo
• A equipe técnica pode fazer intervenções na escola pensando no trabalho realizado pela equipe gestora e pela equipe pedagógica, os quais são diferentes. • Qual o trabalho desenvolvido com a equipe gestora (direção e coordenação)?• Qual o trabalho desenvolvido com equipe pedagógica (coordenadores e professores)?
SEAPE 2014
50
Equipe Gestora
• Conhecer os resultados gerais da escola:1. Etapas avaliadas e percentual de
participação;2. Etapas avaliadas e proficiência média em
cada disciplina;3. Etapas avaliadas, proficiência média e
distribuição por padrão de desempenho em cada disciplina;
SEAPE 2014
51
Organize os dados na tabela...
SEAPE 2014
52
Equipe Gestora1. Etapas avaliadas e percentual de participação
•Observe o número de estudantes e o percentual de participação (acima ou abaixo de 80%?);•Analise os resultados de participação (por que este resultado está acima ou abaixo de 80%?);•Quais intervenções podem ser feitas pela equipe de gestores e professores da escola?
SEAPE 2014
53
Equipe Gestora2. Etapas avaliadas e proficiência média em cada disciplina
•Observe a proficiência média;•Relacione a proficiência média com o padrão desempenho;•Identifique habilidades e competências desenvolvidas (com base nesse padrão de desempenho);
SEAPE 2014
54
Equipe Gestora2. Etapas avaliadas e proficiência média em cada disciplina
•Reflita sobre o desempenho alcançado no teste e o resultado esperado pela escola ou pela rede: qual o desempenho alcançado pelos estudantes em relação ao esperado? Quais habilidades e competências devem ser desenvolvidas para alcançar o resultado esperado?
SEAPE 2014
55
Equipe Gestora2. Etapas avaliadas e proficiência média em cada disciplina
•Relacione o resultado alcançado com as políticas públicas e ações/intervenções pedagógicas implementadas na escola (o que podemos perceber/identificar?);
SEAPE 2014
56
Equipe Gestora2. Etapas avaliadas e proficiência média em cada disciplina
•Observe, na escola, os resultados alcançados em diferentes etapas de escolaridade;•Com base nesses resultados, elabore possíveis ações de intervenção para cada etapa, com o objetivo de recuperar alunos com desempenho abaixo do esperado, de acordo com as possibilidades da escola.
SEAPE 2014
57
Equipe Gestora2. Etapas avaliadas e proficiência média em cada disciplina
•Com base nesse resultado, podemos fazer as seguintes inferências:• Como possibilitar que os estudantes que
chegaram ou chegarão a esta etapa desenvolvam as habilidades esperadas?• Como recuperar os estudantes que já passaram
pela etapa avaliada para que, ao final da Educação Básica, tenham desenvolvido habilidades e competências esperadas?
SEAPE 2014
58
Organize os dados na tabela...
SEAPE 2014
59
Equipe Gestora3. Etapas avaliadas, proficiência média e distribuição por padrão de desempenho em cada disciplina;
•Identifique o percentual de estudantes em cada padrão de desempenho;•A(s) turma(s) dessa escola é(são) homogênea(s) e todos desenvolveram as habilidades no mesmo grau de complexidade?
SEAPE 2014
60
Equipe Gestora3. Etapas avaliadas, proficiência média e distribuição por padrão de desempenho em cada disciplina;
•Calcule o número de estudantes em cada padrão de desempenho;•Conseguimos identificar quem são os estudantes alocados em cada padrão na escola? Considerar, em um primeiro momento, apenas o resultado por escola.
SEAPE 2014
61
Equipe Gestora3. Etapas avaliadas, proficiência média e distribuição por padrão de desempenho em cada disciplina;
•Apresente as habilidades e competências desenvolvidas por cada grupo de estudantes (observar, em relação às habilidades e às competências, o desempenho alcançado por alunos que estão alocados em padrões de desempenho diferentes).
SEAPE 2014
62
Equipe Pedagógica
• Conhecer os resultados de desempenho e habilidades desenvolvidos pelos estudantes:
1. Proficiência média e padrões de desempenho;2. Etapa de escolaridade e percentual de acerto
por descritor;3. Avaliação externa e interna.
SEAPE 2014
63
Equipe Pedagógica1. Proficiência média e padrões de desempenho
•Observe a proficiência média;•Relacione proficiência média com o padrão desempenho;•Identifique habilidades e competências desenvolvidas (com base nesse padrão de desempenho);
SEAPE 2014
64
Equipe Pedagógica1. Proficiência média e padrões de desempenho
•Qual o desempenho alcançado pelos estudantes em relação ao esperado? Quais habilidades e competências devem ser desenvolvidas para alcançar o resultado esperado? •Relacione o resultado alcançado com as ações/intervenções pedagógicas implementadas na turma (o que podemos perceber/identificar?);
SEAPE 2014
65
Organize os dados na tabela...
SEAPE 2014
66
Equipe Pedagógica2. Etapa de escolaridade e percentual de acerto por descritor
•Observe o percentual de acerto geral da escola em cada disciplina e etapa de escolaridade;
SEAPE 2014
67
Equipe Pedagógica2. Etapa de escolaridade e percentual de acerto por descritor
•Relacione cada habilidade (descritor) com o percentual de acerto;•Observe a relação existente entre descritores (são habilidades de uma mesma competência ou conteúdo comum?);
SEAPE 2014
68
Equipe Pedagógica2. Etapa de escolaridade e percentual de acerto por descritor
•Observe descritores menos acertados (relacionar às habilidades/descritor):•Estão relacionados a um mesmo tema/domínio/tópico?•Estão relacionados às habilidades com grau de complexidade maior que as demais habilidades do teste?•São habilidades desenvolvidas naquela etapa avaliada ou são desenvolvidas ao longo do Ensino Fundamental?
SEAPE 2014
69
Equipe Pedagógica2. Etapa de escolaridade e percentual de acerto por descritor
•Observe descritores menos acertados (relacionar às habilidades/descritor):•Qual a relação de cada habilidade com os conteúdos trabalhados em sala de aula? Quais as práticas pedagógicas adotadas pelos professores da escola em relação a cada um desses conteúdos? •Como possibilitar a compreensão dos estudantes em relação a cada uma dessas habilidades: ações pedagógicas? Formação dos professores? Utilização de recursos pedagógicos?
SEAPE 2014
70
Equipe Pedagógica2. Etapa de escolaridade e percentual de acerto por descritor
•Observe os descritores mais acertados (relacionar às habilidades/descritor): •Estão relacionados a um mesmo tema/domínio/tópico?•Estão relacionados às habilidades com grau de complexidade menor que as demais habilidades do teste?•Podem auxiliar no desenvolvimento de descritores menos acertados? Como?
SEAPE 2014
71
Equipe Pedagógica2. Etapa de escolaridade e percentual de acerto por descritor
•Dentre os temas apresentados, quais são aqueles com os menores percentuais de acerto por descritor?•Qual a relação desse resultado com o trabalho feito pelo professores em sala de aula?•Este trabalho é adequado e suficiente para alcançar os resultados esperados? O que pode ser modificado? O que deve continuar?
SEAPE 2014
72
Equipe Pedagógica3. Avaliação externa e interna
•Os resultados da avaliação interna são comparáveis àqueles extraídos da avaliação externa:•As habilidades avaliadas pelos professores são as mesmas avaliadas pelo programa de avaliação externa?•Os conteúdos desenvolvidos pelos professores da escola, com base no currículo, estão relacionados com as habilidades da matriz de referência?