resultados da avaliação trienal da pós-graduação na capes e … · • enquanto que em outras...
TRANSCRIPT
![Page 1: Resultados da Avaliação Trienal da Pós-Graduação na CAPES e … · • Enquanto que em outras áreas o FI dos periódicos pode ser relativamente mais baixo, – São características](https://reader031.vdocuments.pub/reader031/viewer/2022022717/5c35058709d3f217298c5b6b/html5/thumbnails/1.jpg)
Resultados da Avaliação Trienal da Pós-Graduação na CAPES e
a Evolução da Engenharia IIIENEGEP 2010
Coordenador: Nei Yoshihiro Soma – ITAAdjunto: Adiel Teixeira de Almeida – UFPE
![Page 2: Resultados da Avaliação Trienal da Pós-Graduação na CAPES e … · • Enquanto que em outras áreas o FI dos periódicos pode ser relativamente mais baixo, – São características](https://reader031.vdocuments.pub/reader031/viewer/2022022717/5c35058709d3f217298c5b6b/html5/thumbnails/2.jpg)
ENEGEP2010-Avaliação
Tópicos
• Metodologia e procedimentos –destaques
• Resultado da Avaliação• Tendências
–triênio 2010-2012
![Page 3: Resultados da Avaliação Trienal da Pós-Graduação na CAPES e … · • Enquanto que em outras áreas o FI dos periódicos pode ser relativamente mais baixo, – São características](https://reader031.vdocuments.pub/reader031/viewer/2022022717/5c35058709d3f217298c5b6b/html5/thumbnails/3.jpg)
ENEGEP2010-Avaliação
Metodologia de avaliação
• Modelo aditivo para agregação dos critérios (itens)– Grande quantidade de itens
• Quesitos e itens– Agregação aditiva em dois níveis
• Dos itens para cada quesito• Dos quesitos para avaliação global
– Conversão de indicadores de desempenho (escala contínua) em conceitos (escala discreta) de 1 a 5 (muito bom)
![Page 4: Resultados da Avaliação Trienal da Pós-Graduação na CAPES e … · • Enquanto que em outras áreas o FI dos periódicos pode ser relativamente mais baixo, – São características](https://reader031.vdocuments.pub/reader031/viewer/2022022717/5c35058709d3f217298c5b6b/html5/thumbnails/4.jpg)
ENEGEP2010-Avaliação
Metodologia de avaliação
• Modelo aditivo para agregação dos critérios (itens)– Grande quantidade de itens
• Modelo compensatório– Exemplo, Produção Intelectual:– Quesito IV = 0,5 PQD + 0,3 DPD + 0,2 PTC– PQD = Publicações Qualificadas do
Programa
![Page 5: Resultados da Avaliação Trienal da Pós-Graduação na CAPES e … · • Enquanto que em outras áreas o FI dos periódicos pode ser relativamente mais baixo, – São características](https://reader031.vdocuments.pub/reader031/viewer/2022022717/5c35058709d3f217298c5b6b/html5/thumbnails/5.jpg)
ENEGEP2010-Avaliação
Publicações Qualificadas do Programa
• Não mistura congressos com periódicos– Evita compensação direta entre periódicos e
congressos– Destacar congressos em outro item
• Separa livros científicos e livros técnicos (e didáticos).
![Page 6: Resultados da Avaliação Trienal da Pós-Graduação na CAPES e … · • Enquanto que em outras áreas o FI dos periódicos pode ser relativamente mais baixo, – São características](https://reader031.vdocuments.pub/reader031/viewer/2022022717/5c35058709d3f217298c5b6b/html5/thumbnails/6.jpg)
ENEGEP2010-Avaliação
Congressos• Triênio 2001-2003
– Item específico que incluía congressos e outras produções científicas
– Item específico para produção qualificada• Triênio 2004-2006
– Item apenas para produção qualificada– Congressos incluídos no item anterior; dificuldades para
discriminar; problemas na avaliação• Triênio 2007-2009
– Item apenas para produção qualificada– Congressos incluídos em Produção Técnica– Produção Técnica em fase preliminar– Bases de dados científicas intensificam a indexação de
congressos
![Page 7: Resultados da Avaliação Trienal da Pós-Graduação na CAPES e … · • Enquanto que em outras áreas o FI dos periódicos pode ser relativamente mais baixo, – São características](https://reader031.vdocuments.pub/reader031/viewer/2022022717/5c35058709d3f217298c5b6b/html5/thumbnails/7.jpg)
ENEGEP2010-Avaliação
Publicações Qualificadas do Programa = docentes permanentes• PQD – apenas docentes permanentes
– Não considera publicações de docentes colaboradores• Todas as publicações dos Docentes Permanentes
devem ser contabilizadas para todos os Programas aos quais esteja vinculado (máximo dois):
Se um DP participa de dois Programas A e B:• Este docente terá as mesmas características em cada
um destes Programas; não há sentido em dividir as publicações neste caso, para cada Programa.
• Se é bolsista PQ, levará esta característica para os dois Programas.
![Page 8: Resultados da Avaliação Trienal da Pós-Graduação na CAPES e … · • Enquanto que em outras áreas o FI dos periódicos pode ser relativamente mais baixo, – São características](https://reader031.vdocuments.pub/reader031/viewer/2022022717/5c35058709d3f217298c5b6b/html5/thumbnails/8.jpg)
ENEGEP2010-Avaliação
Publicações Qualificadas do Programa = docentes permanentes• PQD – apenas docentes permanentes• Publicações de colaboradores não pertencem ao
Programa– Um docente pode ser colaborador de vários Programas (não há
limites).– Quando a publicação pertencer ao Programa, terá como autor
um DP ou um aluno• No passado:
– O PQD contabilizava a publicação dos colaboradores– Provocava prejuízo na comparação entre Programas– Criou uma preocupação em avaliar que publicação pertencia ao
Programa; • Processo confuso, incluindo a produção do DP.• Processo de rastreamento subjetivo, com muitas dificuldades.
![Page 9: Resultados da Avaliação Trienal da Pós-Graduação na CAPES e … · • Enquanto que em outras áreas o FI dos periódicos pode ser relativamente mais baixo, – São características](https://reader031.vdocuments.pub/reader031/viewer/2022022717/5c35058709d3f217298c5b6b/html5/thumbnails/9.jpg)
ENEGEP2010-Avaliação
Publicações do Corpo Discente
• Limiares distintos para – Programas com doutorado e – Programas apenas com Mestrado
• Considera periódicos, congressos, livros e produção técnica– Agregação aditiva
![Page 10: Resultados da Avaliação Trienal da Pós-Graduação na CAPES e … · • Enquanto que em outras áreas o FI dos periódicos pode ser relativamente mais baixo, – São características](https://reader031.vdocuments.pub/reader031/viewer/2022022717/5c35058709d3f217298c5b6b/html5/thumbnails/10.jpg)
QUALIS
Periódicos
![Page 11: Resultados da Avaliação Trienal da Pós-Graduação na CAPES e … · • Enquanto que em outras áreas o FI dos periódicos pode ser relativamente mais baixo, – São características](https://reader031.vdocuments.pub/reader031/viewer/2022022717/5c35058709d3f217298c5b6b/html5/thumbnails/11.jpg)
ENEGEP2010-Avaliação
Destaque sobre o QUALIS• Não se deve usar o Qualis como referência para
desempenho dos periódicos• Instrumento para avaliar Programas de Pós-Graduação,
numa dada área (alocação de recursos)• O Qualis pode não ser adequado para:
– avaliação direta de pesquisadores– avaliação direta de periódicos:
• Orientação para os alunos, quando quiserem avaliar ou comparar periódicos:– Não usar o QUALIS– Usar as bases de dados de periódicos
• JCR• SCOPUS
![Page 12: Resultados da Avaliação Trienal da Pós-Graduação na CAPES e … · • Enquanto que em outras áreas o FI dos periódicos pode ser relativamente mais baixo, – São características](https://reader031.vdocuments.pub/reader031/viewer/2022022717/5c35058709d3f217298c5b6b/html5/thumbnails/12.jpg)
ENEGEP2010-Avaliação
QUALIS• Os títulos são classificados em 8 estratos:
– A1, A2, B1, B2, B3, B4, B5 e C.– Numerador de PQD =
– A1+A2x0,85+B1x0,7+B2x0,5 + B3x0,2+B4x0,10 + B5x0,05 + L
• A regra considera:– a quantidade de títulos que cada área publicou em
cada ano.• As Engenharias III avaliam o Qualis com base
no – JCR (A1, A2, B1) – e em outras bases, tal como SCOPUS (B2, B3).
![Page 13: Resultados da Avaliação Trienal da Pós-Graduação na CAPES e … · • Enquanto que em outras áreas o FI dos periódicos pode ser relativamente mais baixo, – São características](https://reader031.vdocuments.pub/reader031/viewer/2022022717/5c35058709d3f217298c5b6b/html5/thumbnails/13.jpg)
ENEGEP2010-Avaliação
A atribuição de um periódico aos estratos (especialmente A1, A2, B1), considera:•Qualidade do periódico•Limite de quantidade
Regras do CTC :|A1| < |A2||A1| + |A2| 25%
![Page 14: Resultados da Avaliação Trienal da Pós-Graduação na CAPES e … · • Enquanto que em outras áreas o FI dos periódicos pode ser relativamente mais baixo, – São características](https://reader031.vdocuments.pub/reader031/viewer/2022022717/5c35058709d3f217298c5b6b/html5/thumbnails/14.jpg)
ENEGEP2010-Avaliação
Regras para o Qualis
• Minimizar interpretações dos membros da comissão – temporária– Mudam com o tempo; dependem de quem
está na comissão.• Procurar, sempre que possível, Regras
mais objetivas• Sustentável • A1, A2, B1 – Indicadores JCR• B2 – Indicadores SCOPUS
![Page 15: Resultados da Avaliação Trienal da Pós-Graduação na CAPES e … · • Enquanto que em outras áreas o FI dos periódicos pode ser relativamente mais baixo, – São características](https://reader031.vdocuments.pub/reader031/viewer/2022022717/5c35058709d3f217298c5b6b/html5/thumbnails/15.jpg)
ENEGEP2010-Avaliação
Base de dados do JCR (JournalCitation Reports)
• Vários indicadores– Fator de impacto - 2 anos – mais conhecido– Fator de impacto - 5 anos – recente– Meia Vida – mediana dos tempos de citação– Índice de imediatez– Outros novos
![Page 16: Resultados da Avaliação Trienal da Pós-Graduação na CAPES e … · • Enquanto que em outras áreas o FI dos periódicos pode ser relativamente mais baixo, – São características](https://reader031.vdocuments.pub/reader031/viewer/2022022717/5c35058709d3f217298c5b6b/html5/thumbnails/16.jpg)
ENEGEP2010-Avaliação
Base de dados do JCR (JournalCitation Reports)
Dois Problemas:• Recomendação (JCR) - Não se deve usar estes
índices para comparar diferentes categorias(terminologia do JCR para áreas e sub-áreas)
• O uso de apenas um dos indicadores pode não ser suficiente para avaliar os periódicos– Motivo pelo qual o próprio JCR tem vários
indicadores.
![Page 17: Resultados da Avaliação Trienal da Pós-Graduação na CAPES e … · • Enquanto que em outras áreas o FI dos periódicos pode ser relativamente mais baixo, – São características](https://reader031.vdocuments.pub/reader031/viewer/2022022717/5c35058709d3f217298c5b6b/html5/thumbnails/17.jpg)
ENEGEP2010-Avaliação
Base de dados do JCR (JournalCitation Reports)
Análise do Primeiro Problema• Não usar fator de impacto (FI) para
comparar diferentes categorias(terminologia do JCR para áreas e sub-áreas)
![Page 18: Resultados da Avaliação Trienal da Pós-Graduação na CAPES e … · • Enquanto que em outras áreas o FI dos periódicos pode ser relativamente mais baixo, – São características](https://reader031.vdocuments.pub/reader031/viewer/2022022717/5c35058709d3f217298c5b6b/html5/thumbnails/18.jpg)
ENEGEP2010-Avaliação
Mediana de FI por área• MATERIALS SCIENCE, BIOMATERIALS: 1.963• CHEMISTRY, MEDICINAL: 1,866• ENGINEERING, BIOMEDICAL 1.755• ENGINEERING, MECHANICAL: 0,724• ENGINEERING, INDUSTRIAL: 0.923• ENGINEERING, MANUFACTURING: 0.851• OPERATIONS RESEARCH &
MANAGEMENT SCIENCE 0.880• ENGINEERING, AEROSPACE 0.467• ERGONOMICS (Social Sciences) 1.009• MANAGEMENT (Social Sciences) 1.165
![Page 19: Resultados da Avaliação Trienal da Pós-Graduação na CAPES e … · • Enquanto que em outras áreas o FI dos periódicos pode ser relativamente mais baixo, – São características](https://reader031.vdocuments.pub/reader031/viewer/2022022717/5c35058709d3f217298c5b6b/html5/thumbnails/19.jpg)
ENEGEP2010-Avaliação
Fator de Impacto • Observa-se que periódicos de uma determinada área
podem ter elevado fator de impacto (FI) pela natureza da área,
• Enquanto que em outras áreas o FI dos periódicos pode ser relativamente mais baixo, – São características da própria área, não implicando assim em
menor qualidade deste periódico ou da área. • Isto implica que a comparação entre periódicos de áreas
diferentes não poderia ser efetuado por meio (apenas) da comparação entre seus respectivos FI’s.
• Por este motivo propõe-se o Fator de Impacto Relativizado
![Page 20: Resultados da Avaliação Trienal da Pós-Graduação na CAPES e … · • Enquanto que em outras áreas o FI dos periódicos pode ser relativamente mais baixo, – São características](https://reader031.vdocuments.pub/reader031/viewer/2022022717/5c35058709d3f217298c5b6b/html5/thumbnails/20.jpg)
ENEGEP2010-Avaliação
Fator de Impacto relativizado
• Várias propostas foram analisadas para transformar o fator de impacto numa base comum
• Fator de Impacto relativizado ou normalizado
![Page 21: Resultados da Avaliação Trienal da Pós-Graduação na CAPES e … · • Enquanto que em outras áreas o FI dos periódicos pode ser relativamente mais baixo, – São características](https://reader031.vdocuments.pub/reader031/viewer/2022022717/5c35058709d3f217298c5b6b/html5/thumbnails/21.jpg)
ENEGEP2010-Avaliação
Fator de Impacto relativizado• O Fator de Impacto Relativizado (FIR) por
área tem o papel de indicar:– o impacto do periódico dentro de sua área
específica de conhecimento. • Este indicador é calculado a partir de
– estatísticas fornecidas pela base de dados ISI/JCR.
• O propósito do FIR é fornecer uma mensuração – que permita uma comparação entre periódicos de
áreas diferentes.
![Page 22: Resultados da Avaliação Trienal da Pós-Graduação na CAPES e … · • Enquanto que em outras áreas o FI dos periódicos pode ser relativamente mais baixo, – São características](https://reader031.vdocuments.pub/reader031/viewer/2022022717/5c35058709d3f217298c5b6b/html5/thumbnails/22.jpg)
ENEGEP2010-Avaliação
Fator de Impacto relativizado
• O Fator de Impacto Relativizado (FIR) por área:FIR = FI/MFIOnde:FIR = Fator de impacto relativizado por áreaFI = Fator de impacto do periódicoMFI = mediana do Fator de impacto da área– Este indicador terá valores em torno de um.
![Page 23: Resultados da Avaliação Trienal da Pós-Graduação na CAPES e … · • Enquanto que em outras áreas o FI dos periódicos pode ser relativamente mais baixo, – São características](https://reader031.vdocuments.pub/reader031/viewer/2022022717/5c35058709d3f217298c5b6b/html5/thumbnails/23.jpg)
ENEGEP2010-Avaliação
Base de dados do JCR (JournalCitation Reports)
Análise do Segundo Problema• Distorções nas Engenharias III, com o uso
isolado do fator de impacto• Apenas um dos indicadores pode não ser
suficiente para avaliar os periódicos– Motivo pelo qual o próprio JCR tem vários
índices
![Page 24: Resultados da Avaliação Trienal da Pós-Graduação na CAPES e … · • Enquanto que em outras áreas o FI dos periódicos pode ser relativamente mais baixo, – São características](https://reader031.vdocuments.pub/reader031/viewer/2022022717/5c35058709d3f217298c5b6b/html5/thumbnails/24.jpg)
ENEGEP2010-Avaliação
Base de dados do JCR (JournalCitation Reports)
O que é o fator de Impacto?• Citações em 2008 para os itens publicados em:
– 2007 =674; – 2006 =841; Soma: 1515
• Número de itens publicados em – 2007 =229; – 2006 =205; Soma: 434
• Cálculo do FI:– Citações de itens recentes / Número de itens recentes – FI = 1515 / 434 = 3.491
• Utiliza apenas amostra dos DOIS ÚLTIMOS ANOS; inadequado para Engenharias III
• Novo indicador fator de impacto de 5 anos (a partir de 2009)
![Page 25: Resultados da Avaliação Trienal da Pós-Graduação na CAPES e … · • Enquanto que em outras áreas o FI dos periódicos pode ser relativamente mais baixo, – São características](https://reader031.vdocuments.pub/reader031/viewer/2022022717/5c35058709d3f217298c5b6b/html5/thumbnails/25.jpg)
ENEGEP2010-Avaliação
• Há outro indicador proposto na literatura que se propõe a corrigir este problema.
• Chama-se fator de impacto R (R-Impact: Reliability-Based Citation Impact Factor,
• R = FI.MV• publicado na revista IEEE Transactions on
Reliability), DOI: 10.1109/TR.2007.902789• Este indicador apresenta o problema de
penalizar (na comparação relativa) periódicos que tenham alto fator de impacto e baixo valor de MV.
![Page 26: Resultados da Avaliação Trienal da Pós-Graduação na CAPES e … · • Enquanto que em outras áreas o FI dos periódicos pode ser relativamente mais baixo, – São características](https://reader031.vdocuments.pub/reader031/viewer/2022022717/5c35058709d3f217298c5b6b/html5/thumbnails/26.jpg)
ENEGEP2010-Avaliação
PRODUCTION AND OPERATIONS MANAGEMENT
• FI = 1.933; MV = 8.8 anos; FI(5 anos): 2.361
![Page 27: Resultados da Avaliação Trienal da Pós-Graduação na CAPES e … · • Enquanto que em outras áreas o FI dos periódicos pode ser relativamente mais baixo, – São características](https://reader031.vdocuments.pub/reader031/viewer/2022022717/5c35058709d3f217298c5b6b/html5/thumbnails/27.jpg)
ENEGEP2010-Avaliação
ANNALS OF OPERATIONS RESEARCH
• FI = 0.619; MV = 9.5 anos; FI(5 anos): 1.163
![Page 28: Resultados da Avaliação Trienal da Pós-Graduação na CAPES e … · • Enquanto que em outras áreas o FI dos periódicos pode ser relativamente mais baixo, – São características](https://reader031.vdocuments.pub/reader031/viewer/2022022717/5c35058709d3f217298c5b6b/html5/thumbnails/28.jpg)
ENEGEP2010-Avaliação
COMPUTERS & OPERATIONS RESEARCH
• FI = 1.366; MV = 6.1 anos; FI(5 anos): 1.789
![Page 29: Resultados da Avaliação Trienal da Pós-Graduação na CAPES e … · • Enquanto que em outras áreas o FI dos periódicos pode ser relativamente mais baixo, – São características](https://reader031.vdocuments.pub/reader031/viewer/2022022717/5c35058709d3f217298c5b6b/html5/thumbnails/29.jpg)
ENEGEP2010-Avaliação
• A figura a seguir mostra como se comportam todos os periódicos (de forma agregada) na categoria classificada no JCR como “OPERATIONS RESEARCH & MANAGEMENT SCIENCE”.
• O FI agregado da área é 1.291. • Já a mediana do FI de todos os periódicos
na categoria é 0.880.• A MV agregada na área é 9.1 anos.
![Page 30: Resultados da Avaliação Trienal da Pós-Graduação na CAPES e … · • Enquanto que em outras áreas o FI dos periódicos pode ser relativamente mais baixo, – São características](https://reader031.vdocuments.pub/reader031/viewer/2022022717/5c35058709d3f217298c5b6b/html5/thumbnails/30.jpg)
ENEGEP2010-Avaliação
![Page 31: Resultados da Avaliação Trienal da Pós-Graduação na CAPES e … · • Enquanto que em outras áreas o FI dos periódicos pode ser relativamente mais baixo, – São características](https://reader031.vdocuments.pub/reader031/viewer/2022022717/5c35058709d3f217298c5b6b/html5/thumbnails/31.jpg)
ENEGEP2010-Avaliação
Indicador proposto• Combinar o FI com MV?• O propósito é fornecer uma mensuração
que permita uma comparação entre periódicos que possuam variados valores de MV.
• É efetuada uma compensação para os periódicos com alto valor de MV.
• Ao valor de FI é acrescentado um valor proporcional ao valor da MV.
![Page 32: Resultados da Avaliação Trienal da Pós-Graduação na CAPES e … · • Enquanto que em outras áreas o FI dos periódicos pode ser relativamente mais baixo, – São características](https://reader031.vdocuments.pub/reader031/viewer/2022022717/5c35058709d3f217298c5b6b/html5/thumbnails/32.jpg)
ENEGEP2010-Avaliação
Indicador proposto• FIR’ é dado por:
Onde:FIR’ = Fator de impacto AjustadoFIR = Fator de impacto do periódico relativizadoMV = meia vida do periódico, fornecido na base de dados do
ISI/JCR; corresponde a mediana do tempo de citação do periódico. Este valor é truncado a partir de 9,99 anos.
max1'
MVMVFIRFIR
![Page 33: Resultados da Avaliação Trienal da Pós-Graduação na CAPES e … · • Enquanto que em outras áreas o FI dos periódicos pode ser relativamente mais baixo, – São características](https://reader031.vdocuments.pub/reader031/viewer/2022022717/5c35058709d3f217298c5b6b/html5/thumbnails/33.jpg)
ENEGEP2010-Avaliação
Indicador proposto• Este indicador tem como característica acrescentar ao
fator de impacto um valor que será uma compensação pelo seu pequeno período de amostragem de citações (dois anos). Este acréscimo terá as seguintes características: – FIR’ varia numa faixa que vai entre:
• o valor de FIR (ligeiramente acima, devido ao mínimo valor de MV, que fica ligeiramente acima de zero)
• e o dobro de FIR.– O FIR terá valor dobrado se o periódico tiver MV igual ao valor
máximo de MV.– O FI terá valor um acréscimo de 50% se o periódico tiver MV
igual ao valor da mediana da MV na área.
![Page 34: Resultados da Avaliação Trienal da Pós-Graduação na CAPES e … · • Enquanto que em outras áreas o FI dos periódicos pode ser relativamente mais baixo, – São características](https://reader031.vdocuments.pub/reader031/viewer/2022022717/5c35058709d3f217298c5b6b/html5/thumbnails/34.jpg)
ENEGEP2010-Avaliação
max1'
MVMVFIRFIR
Se MV metade do máximoFIR+50%
Se MV = MVmaxFIR dobra
Se MV = mínimoFIR aumenta pouco
![Page 35: Resultados da Avaliação Trienal da Pós-Graduação na CAPES e … · • Enquanto que em outras áreas o FI dos periódicos pode ser relativamente mais baixo, – São características](https://reader031.vdocuments.pub/reader031/viewer/2022022717/5c35058709d3f217298c5b6b/html5/thumbnails/35.jpg)
ENEGEP2010-Avaliação
Indicador proposto• MVm = máximo valor de meia vida do periódico
dos periódicos na área. • Uma vez que há um truncamento em valores
acima de 9,9 anos, este valor não se encontra disponível.
• Para efeito de simplificação no procedimento de cálculo foi arbitrado usar o valor igual ao dobro da mediana de tempos de MV na área. Assim, sendo como MVm = 12,2.
• Tem-se, então• FIR’ = FIR{1+MV/12,2}
![Page 36: Resultados da Avaliação Trienal da Pós-Graduação na CAPES e … · • Enquanto que em outras áreas o FI dos periódicos pode ser relativamente mais baixo, – São características](https://reader031.vdocuments.pub/reader031/viewer/2022022717/5c35058709d3f217298c5b6b/html5/thumbnails/36.jpg)
ENEGEP2010-Avaliação
Proposta Final• Para cada um dos periódicos que tiveram publicações nas EngIII
será calculado:
Processo• A partir da base do JCR, para os estratos A1, A2 e B1, foi elaborada
a lista das áreas declaradas pelos periódicos e as ponderações relativas dos mesmos.
• Esta base servirá para gerar as listas Qualis
max1'
MVMV
MFIFIFIR
![Page 37: Resultados da Avaliação Trienal da Pós-Graduação na CAPES e … · • Enquanto que em outras áreas o FI dos periódicos pode ser relativamente mais baixo, – São características](https://reader031.vdocuments.pub/reader031/viewer/2022022717/5c35058709d3f217298c5b6b/html5/thumbnails/37.jpg)
ENEGEP2010-Avaliação
Qualis - Instrumento para avaliação de Programas de Pós-Graduação
• Lembrando que um periódico só entra na lista Qualis se algum programa publicar nele.
• O Qualis é um recurso construído com o propósito de avaliar Programas de Pós-Graduação, numa dada área.
O Qualis pode não ser adequado para:• Avaliação direta de pesquisadores• Avaliação direta de periódicos:
– Exemplo: Fronteira entre A1 e A2; varia conforme amostragem anual de indicadores do JCR.
![Page 38: Resultados da Avaliação Trienal da Pós-Graduação na CAPES e … · • Enquanto que em outras áreas o FI dos periódicos pode ser relativamente mais baixo, – São características](https://reader031.vdocuments.pub/reader031/viewer/2022022717/5c35058709d3f217298c5b6b/html5/thumbnails/38.jpg)
ENEGEP2010-Avaliação
Qualis - Instrumento para avaliação de Programas de Pós-Graduação
• Não se deve usar o Qualiscomo referência para desempenho dos periódicos
• Para avaliar desempenho dos periódicos deve-se usar o JCR, SCOPUS , etc (avisar alunos),–Considerando suas restrições
![Page 39: Resultados da Avaliação Trienal da Pós-Graduação na CAPES e … · • Enquanto que em outras áreas o FI dos periódicos pode ser relativamente mais baixo, – São características](https://reader031.vdocuments.pub/reader031/viewer/2022022717/5c35058709d3f217298c5b6b/html5/thumbnails/39.jpg)
ENEGEP2010-Avaliação
A atribuição de um periódico aos estratos (especialmente A1, A2, B1), considera:•Qualidade do periódico•Limite de quantidade
•contexto de alocação de recursos
|A1| < |A2||A1| + |A2| 25%
![Page 40: Resultados da Avaliação Trienal da Pós-Graduação na CAPES e … · • Enquanto que em outras áreas o FI dos periódicos pode ser relativamente mais baixo, – São características](https://reader031.vdocuments.pub/reader031/viewer/2022022717/5c35058709d3f217298c5b6b/html5/thumbnails/40.jpg)
Resultadosda Avaliação
![Page 41: Resultados da Avaliação Trienal da Pós-Graduação na CAPES e … · • Enquanto que em outras áreas o FI dos periódicos pode ser relativamente mais baixo, – São características](https://reader031.vdocuments.pub/reader031/viewer/2022022717/5c35058709d3f217298c5b6b/html5/thumbnails/41.jpg)
ENEGEP2010-Avaliação
Comissões• Comissão de área
– 46 áreas - Engenharias III– Reporta Indicadores
• CTC – Conselho Técnico Científico– Decisão sobre Avaliação Trienal
• Avaliação Trienal - Etapas 2010– Maio/2010 – avaliação horizontal – Quesitos e itens– Julho/2010 – Definição de Faixas– Agosto/2010 – Avaliação Vertical – Programas– 30/Ago-3/Set/2010 - Avaliação Final pelo CTC
![Page 42: Resultados da Avaliação Trienal da Pós-Graduação na CAPES e … · • Enquanto que em outras áreas o FI dos periódicos pode ser relativamente mais baixo, – São características](https://reader031.vdocuments.pub/reader031/viewer/2022022717/5c35058709d3f217298c5b6b/html5/thumbnails/42.jpg)
ENEGEP2010-Avaliação
![Page 43: Resultados da Avaliação Trienal da Pós-Graduação na CAPES e … · • Enquanto que em outras áreas o FI dos periódicos pode ser relativamente mais baixo, – São características](https://reader031.vdocuments.pub/reader031/viewer/2022022717/5c35058709d3f217298c5b6b/html5/thumbnails/43.jpg)
ENEGEP2010-Avaliação
![Page 44: Resultados da Avaliação Trienal da Pós-Graduação na CAPES e … · • Enquanto que em outras áreas o FI dos periódicos pode ser relativamente mais baixo, – São características](https://reader031.vdocuments.pub/reader031/viewer/2022022717/5c35058709d3f217298c5b6b/html5/thumbnails/44.jpg)
ENEGEP2010-Avaliação
Engenharias Citações por Publicações
![Page 45: Resultados da Avaliação Trienal da Pós-Graduação na CAPES e … · • Enquanto que em outras áreas o FI dos periódicos pode ser relativamente mais baixo, – São características](https://reader031.vdocuments.pub/reader031/viewer/2022022717/5c35058709d3f217298c5b6b/html5/thumbnails/45.jpg)
ENEGEP2010-Avaliação
![Page 46: Resultados da Avaliação Trienal da Pós-Graduação na CAPES e … · • Enquanto que em outras áreas o FI dos periódicos pode ser relativamente mais baixo, – São características](https://reader031.vdocuments.pub/reader031/viewer/2022022717/5c35058709d3f217298c5b6b/html5/thumbnails/46.jpg)
ENEGEP2010-Avaliação
![Page 47: Resultados da Avaliação Trienal da Pós-Graduação na CAPES e … · • Enquanto que em outras áreas o FI dos periódicos pode ser relativamente mais baixo, – São características](https://reader031.vdocuments.pub/reader031/viewer/2022022717/5c35058709d3f217298c5b6b/html5/thumbnails/47.jpg)
ENEGEP2010-Avaliação
![Page 48: Resultados da Avaliação Trienal da Pós-Graduação na CAPES e … · • Enquanto que em outras áreas o FI dos periódicos pode ser relativamente mais baixo, – São características](https://reader031.vdocuments.pub/reader031/viewer/2022022717/5c35058709d3f217298c5b6b/html5/thumbnails/48.jpg)
ENEGEP2010-Avaliação
Evolução da Área
Periódicos A1 - B2
0
500
1000
1500
2000
2500
3000
3500
2004-2006 2007-2009
![Page 49: Resultados da Avaliação Trienal da Pós-Graduação na CAPES e … · • Enquanto que em outras áreas o FI dos periódicos pode ser relativamente mais baixo, – São características](https://reader031.vdocuments.pub/reader031/viewer/2022022717/5c35058709d3f217298c5b6b/html5/thumbnails/49.jpg)
ENEGEP2010-Avaliação
Evolução da Área
Teses
0
200
400
600
800
1000
1200
2004-2006 2007-2009
![Page 50: Resultados da Avaliação Trienal da Pós-Graduação na CAPES e … · • Enquanto que em outras áreas o FI dos periódicos pode ser relativamente mais baixo, – São características](https://reader031.vdocuments.pub/reader031/viewer/2022022717/5c35058709d3f217298c5b6b/html5/thumbnails/50.jpg)
ENEGEP2010-Avaliação
Evolução da Área
Dissertações
0
1000
2000
3000
4000
5000
6000
2004-2006 2007-2009
![Page 51: Resultados da Avaliação Trienal da Pós-Graduação na CAPES e … · • Enquanto que em outras áreas o FI dos periódicos pode ser relativamente mais baixo, – São características](https://reader031.vdocuments.pub/reader031/viewer/2022022717/5c35058709d3f217298c5b6b/html5/thumbnails/51.jpg)
ENEGEP2010-Avaliação
Evolução da Área
Participação em Congressos
0
2000
4000
6000
8000
10000
12000
14000
16000
18000
20000
2004-2006 2007-2009
![Page 52: Resultados da Avaliação Trienal da Pós-Graduação na CAPES e … · • Enquanto que em outras áreas o FI dos periódicos pode ser relativamente mais baixo, – São características](https://reader031.vdocuments.pub/reader031/viewer/2022022717/5c35058709d3f217298c5b6b/html5/thumbnails/52.jpg)
ENEGEP2010-Avaliação
Distribuição na Área
![Page 53: Resultados da Avaliação Trienal da Pós-Graduação na CAPES e … · • Enquanto que em outras áreas o FI dos periódicos pode ser relativamente mais baixo, – São características](https://reader031.vdocuments.pub/reader031/viewer/2022022717/5c35058709d3f217298c5b6b/html5/thumbnails/53.jpg)
ENEGEP2010-Avaliação
Quantidade de Programas: distribuição temporal
![Page 54: Resultados da Avaliação Trienal da Pós-Graduação na CAPES e … · • Enquanto que em outras áreas o FI dos periódicos pode ser relativamente mais baixo, – São características](https://reader031.vdocuments.pub/reader031/viewer/2022022717/5c35058709d3f217298c5b6b/html5/thumbnails/54.jpg)
ENEGEP2010-Avaliação
Resultado da Avaliação
0
5
10
15
20
25
30
35
3 4 5 6 7
2004-062007-9
![Page 55: Resultados da Avaliação Trienal da Pós-Graduação na CAPES e … · • Enquanto que em outras áreas o FI dos periódicos pode ser relativamente mais baixo, – São características](https://reader031.vdocuments.pub/reader031/viewer/2022022717/5c35058709d3f217298c5b6b/html5/thumbnails/55.jpg)
ENEGEP2010-Avaliação
PQD
00,10,20,30,40,50,60,70,80,9
11,11,21,31,41,51,61,71,8
0 10 20 30 40 50 60 70 80
PQD
PQD
7 primeiros Programas: acima de 1,0 (equivale a 1 artigo A1 por docente;
Primeiro: 1,7; segundo: 1,3
![Page 56: Resultados da Avaliação Trienal da Pós-Graduação na CAPES e … · • Enquanto que em outras áreas o FI dos periódicos pode ser relativamente mais baixo, – São características](https://reader031.vdocuments.pub/reader031/viewer/2022022717/5c35058709d3f217298c5b6b/html5/thumbnails/56.jpg)
ENEGEP2010-Avaliação
PQD
00,10,20,30,40,50,60,70,80,9
11,11,2
0 10 20 30 40 50 60 70 80
PQD
PQD: primeiros 40 Programas acima de 0,5
![Page 57: Resultados da Avaliação Trienal da Pós-Graduação na CAPES e … · • Enquanto que em outras áreas o FI dos periódicos pode ser relativamente mais baixo, – São características](https://reader031.vdocuments.pub/reader031/viewer/2022022717/5c35058709d3f217298c5b6b/html5/thumbnails/57.jpg)
ENEGEP2010-Avaliação
DPD: distribuição da produção A1-B2
20 primeiros Programas acima de 0,5
DPD
0
0,1
0,2
0,3
0,4
0,5
0,6
0,7
0,8
0 10 20 30 40 50 60 70 80
DPD
![Page 58: Resultados da Avaliação Trienal da Pós-Graduação na CAPES e … · • Enquanto que em outras áreas o FI dos periódicos pode ser relativamente mais baixo, – São características](https://reader031.vdocuments.pub/reader031/viewer/2022022717/5c35058709d3f217298c5b6b/html5/thumbnails/58.jpg)
ENEGEP2010-Avaliação
![Page 59: Resultados da Avaliação Trienal da Pós-Graduação na CAPES e … · • Enquanto que em outras áreas o FI dos periódicos pode ser relativamente mais baixo, – São características](https://reader031.vdocuments.pub/reader031/viewer/2022022717/5c35058709d3f217298c5b6b/html5/thumbnails/59.jpg)
Tendências e Desafios
![Page 60: Resultados da Avaliação Trienal da Pós-Graduação na CAPES e … · • Enquanto que em outras áreas o FI dos periódicos pode ser relativamente mais baixo, – São características](https://reader031.vdocuments.pub/reader031/viewer/2022022717/5c35058709d3f217298c5b6b/html5/thumbnails/60.jpg)
ENEGEP2010-Avaliação
Destaques• Qualis:
– Instrumento para avaliação de Programa e alocação de recursos– fator de impacto modificado para o QUALIS
• Retirar artigos de colaboradores do numerador (tornando mais justo o processo e eliminando a necessidade de avaliar produções que não são do Programa);
• Separar congressos de periódicos – Ainda falta buscar um outro item mais adequado para os eventos;
específico • Separar livros científicos de técnicos e didáticos; • Tratamento mais adequado para produção técnica; evoluir nas
próximas etapas; e • Avaliação discente diferenciada para Programas que não têm
doutorado.
![Page 61: Resultados da Avaliação Trienal da Pós-Graduação na CAPES e … · • Enquanto que em outras áreas o FI dos periódicos pode ser relativamente mais baixo, – São características](https://reader031.vdocuments.pub/reader031/viewer/2022022717/5c35058709d3f217298c5b6b/html5/thumbnails/61.jpg)
ENEGEP2010-Avaliação
Tendências
• Inclusão dos melhores periódicos nacionais na base ISI-JCR;
• Aumentar o fator de impacto de nossos periódicos
• Aumentar nossas publicações ainda é um dos desafios?– Processo comparativo
![Page 62: Resultados da Avaliação Trienal da Pós-Graduação na CAPES e … · • Enquanto que em outras áreas o FI dos periódicos pode ser relativamente mais baixo, – São características](https://reader031.vdocuments.pub/reader031/viewer/2022022717/5c35058709d3f217298c5b6b/html5/thumbnails/62.jpg)
ENEGEP2010-Avaliação
Tendências
• Produção Técnica• Patentes
– Depositada, Concedida, Licenciada• Outras Produções Técnicas
– Discussão na área• Item específico para avaliação de
congressos– QUALIS congressos; como viabilizar?
![Page 63: Resultados da Avaliação Trienal da Pós-Graduação na CAPES e … · • Enquanto que em outras áreas o FI dos periódicos pode ser relativamente mais baixo, – São características](https://reader031.vdocuments.pub/reader031/viewer/2022022717/5c35058709d3f217298c5b6b/html5/thumbnails/63.jpg)
ENEGEP2010-Avaliação
Próximas etapas
• Avaliação de Recursos• Conclusão de APCN• Organização para atividades do novo
triênio
![Page 64: Resultados da Avaliação Trienal da Pós-Graduação na CAPES e … · • Enquanto que em outras áreas o FI dos periódicos pode ser relativamente mais baixo, – São características](https://reader031.vdocuments.pub/reader031/viewer/2022022717/5c35058709d3f217298c5b6b/html5/thumbnails/64.jpg)
ENEGEP2010-Avaliação
MUITO OBRIGADO!
QUESTÕES?