IRIS a supporto della valutazione
Federico Ferrario
Valutazione della ricerca Overview
La valutazione dei prodotti della ricerca può avvenire secondo criteri/metriche:
• Quantitative
Tramite indicatori (es: Impact factor, citation count, percentili, h-index, etc.)
• Qualitative Tramite campagne di valutazione della produzione scientifica dell’ente a cura di revisori.
Valutazione della ricerca Quantitativa e qualitativa
Valutazione quantitativa dei prodotti della ricerca
Indicatori
Valutazione della ricerca IRIS: strumenti a supporto della valutazione quantitativa
Indicatori sulla rivista ImpactFactor, FiveYearImpactFactor, EigenFactor, Percentile, CitesJcrYear0/1/2/3/4/5, CitesTotal, SJR, SNIP, IPP, Categorie scientifiche Scopus, etc. Indicatori sul prodotto Numero di citazioni per anno, posizionamento percentile rispetto agli articoli medesima categoria,etc. Indicatori sull’autore Numero autori totali, Numero autori interni, Numero autori area, Numero afferenti, CorrespondingAuthor, prima posizione, ultima posizione, posizionene nella stringa autori, H-Index Wos, H-Index Scopus, etc.
Valutazione della ricerca IRIS: strumenti a supporto della valutazione quantitativa
MISURA DESCRIZIONE FONTE
Numero pubblicazioni Numero pubblicazioni IRIS
Numero autori totali Numero degli autori calcolato in base alla stringa autori IRIS
Numero autori interni Numero autori riconosciuti come afferenti all'ateneo IRIS
Numero autori area Numero autori riconosciuti appartenenti a un'area scientifica (es. CUN, VQR, mappature specifiche su base SSD/SC)
IRIS
Numero afferenti Numero autori afferenti a un'unità organizzativa interna all'ateneo IRIS
CorrespondingAuthor Ruolo di Corresponding Author IRIS/eventualmente fonte esterna
PrimaPosizione Autore in prima posizione nella stringa autori IRIS/eventualmente fonte esterna
UltimaPosizione Autore in ultima posizione nella stringa autori IRIS/eventualmente fonte esterna
PosizioneInStringaAutori Posizione assoluta rispetto alla stringa autori IRIS/eventualmente fonte esterna
Categoria ANVUR elenchi riviste dei GEV per la VQR ANVUR
Categoria ANVUR elenchi ASN scientifiche ANVUR
Categoria ANVUR elenchi ASN categoria A ANVUR
Subject Category Categorie scientifche JCR JCR (file CRUI)
HIndexWos H-Index calcolato in Wos (identificativo ORCID) Wos (verificare disponib. In fonte)
ArticleInfluence Article Influence Wos
CitesTotal Numero di citazioni totali Wos
PercentileThreshold Distribuzione in percentili di tutti i valori di citazione esistenti per categoria/anno. Informazione derivata per UniBo da un file fornito da Thompson R. ogni trimestre
WoS (file per UniBO)
Category Expected Citations numero atteso di citazioni al livello della categoria Wos
Journal Expected Citations numero atteso di citazioni al livello della rivista Wos
Affiliazioni coautori stranieri Affiliazione dei coautori 'stranieri' (ente, nazione non italiani) Wos
Affiliazioni autori dei citing articles Affiliazione degli autori che citano il contributo (ente, nazione) Wos
ImpactFactor IF del periodico Wos/JCR (file CRUI)
Impact Factor without Journal Self Cites IF del periodico privo delle autocitazioni Wos/JCR (file CRUI)
FiveYearImpactFactor IF del periodico sugli ultimi 5 anni Wos/JCR (file CRUI)
EigenFactor Eigenfactor EigenFactor/JCR
Percentile NUOVA PROPOSTA: massimo percentile per una specifica categoria/anno in cui si colloca la rivista X
Wos/JCR (file CRUI)
CitesJcrYear0 Numero di citazioni anno di pubblicazione Wos (file CRUI?)
CitesJcrYear1 Numero di citazioni ad 1 anno dalla pubblicazione Wos (file CRUI?)
CitesJcrYear2 Numero di citazioni a 2 anni dalla pubblicazione Wos (file CRUI?)
CitesJcrYear3 Numero di citazioni a 3 anni dalla pubblicazione Wos (file CRUI?)
CitesJcrYear4 Numero di citazioni a 4 anni dalla pubblicazione Wos (file CRUI?)
CitesJcrYear5 Numero di citazioni a 5 anni dalla pubblicazione Wos (file CRUI?)
CitesTotal Numero di citazioni totali Wos (file CRUI?)
ASJC Categorie scientifiche Scopus (All Science. Journals Classification), gestibili in reportistica sia con denominazione sia con codice
Scopus (msapi-scivalanalytics)
HIndexScopus H-Index calcolato in Scopus (identificativo ORCID) Scopus (verificare disponib. In fonte)
CitesTotal Numero di citazioni totali (citationCount in Matching Service API) Scopus (msapi-scivalanalytics)
Cites by year Numero di citazioni per anno (conteggio effettivo per anno della pubblicazione citante)
Scopus (msapi-scivalanalytics)
CitationThreshold valore di soglia del percentile per la collocazione di un articolo in una specifica categoria/anno (percentiles thresholds value per year and document type in Matching Service API)
Scopus (msapi-scivalanalytics)
PercentileThreshold massimo percentile per una specifica categoria/anno in cui si colloca l'articolo X (percentiles thresholds per year and document type in Matching Service API)
Scopus (msapi-scivalanalytics)
bestMatchedPercentile il miglior percentile in cui si colloca l'articolo X tra tutte le categorie/anno (bestMatchedPercentile in Matching Service API)
Scopus (msapi-scivalanalytics)
SJR Indicatore SJR (SCImago Journal Rank) [http://www.journalmetrics.com/sjr.php] Scopus (msapi-scivalanalytics)
SNIP SNIP (Source Normalized Impact per Paper) [http://www.journalmetrics.com/snip.php]
Scopus (msapi-scivalanalytics)
IPP IPP (Impact per Publication) [http://www.journalmetrics.com/ipp.php] Scopus (msapi-scivalanalytics)
maxPercentileCategories massimo percentile per una specifica categoria/anno in cui si colloca la rivista X (API in corso di implementazione da parte del produttore)
Scopus (msapi-scivalanalytics)
maxPercentileValue valore di soglia del percentile per la collocazione di una rivista in una specifica categoria/anno (API in corso di implementazione da parte del produttore)
Scopus (msapi-scivalanalytics)
CitesTotal Numero di citazioni totali Scopus (msapi-scivalanalytics)
Il GDL di IRIS ha definito un insieme di indicatori che IRIS deve mettere a disposizione
Attualmente è già disponibile il 70% di tali indicatori (in totale sono 47) Per il rimanente 30%: • sono stati avviati contatti con gli
editori per la loro acquisizione • sono in via di sviluppo le
procedure per acquisirli
Valutazione della ricerca IRIS: strumenti a supporto della valutazione quantitativa
Acquisizione del numero di citazioni per anno e posizionamento percentile di SCOPUS
Valutazione della ricerca IRIS: strumenti a supporto della valutazione quantitativa
Associazione automatica degli indicatori ai prodotti dell’archivio istituzionale per consentire le necessarie elaborazioni nel modulo ER di IRIS
Valutazione della ricerca IRIS: Campagna VQR 2011-2014
ER: Valutazione qualitativa dei prodotti della ricerca
Preview VQR 2011-2014
Valutazione della ricerca IRIS: Campagna VQR 2011-2014
In accordo con il GDL di IRIS stiamo realizzando la procedura a supporto della selezione dei prodotti per la campagna VQR 2011/14 basandosi sulla precedente esperienza In particolare: - Selezione prodotti da parte dei soggetti valutati; - Risoluzione dei conflitti di assegnazione a più docenti del medesimo prodotto da parte
di responsabili di contesto e/o governance di Ateneo. - Integrazione dei metadati dei prodotti a fini VQR - Spedizione selezioni al MIUR
Valutazione della ricerca IRIS: Campagna VQR 2011-2014 - Selezione delle pubblicazioni
Valutazione della ricerca IRIS: Campagna VQR 2011-2014 - Selezione delle pubblicazioni
Strumenti a supporto della selezione delle pubblicazioni
Cliccando sul bottone aggiungi i dati bibliometrici della pubblicazione selezionata vengono visualizzati in un pannello dedicato al confronto
Valutazione della ricerca IRIS: Campagna VQR 2011-2014 - Selezione delle pubblicazioni
Strumenti a supporto della selezione delle pubblicazioni
Solo alcuni esempi: - andamento annuale e cumulativo delle citazioni negli anni - posizionamento percentile della pubblicazione rispetto alle pubblicazioni
della medesima Subject category
Valutazione della ricerca IRIS: Campagna VQR 2011-2014 – Risoluzione dei conflitti
Strumenti a supporto della risoluzione dei conflitti
Valutazione della ricerca IRIS: Campagna VQR 2011-2014 – Risoluzione dei conflitti
Strumenti a supporto della risoluzione dei conflitti
Valutazione della ricerca IRIS: Campagna SUA-RD
Valutazione qualitativa della ricerca
Preview SUA-RD
Valutazione della ricerca IRIS: Campagna SUA-RD
In accordo con il GDL di IRIS stiamo realizzando le procedure di raccolta dati per la SUA-RD Sono in corso di finalizzazione nel modulo RM le schede di raccolta dati delle entità: • Laboratori • Attrezzature • Gruppi di ricerca • Biblioteche • Mobilità internazionale Sono invece in corso di finalizzazione l’analisi delle ulteriori entità quali, ad esempio, il CV del docente/ricercatore. Le precedenti campagne verranno importate automaticamente dal sito Ministeriale in IRIS.