17
IRIS a supporto della valutazione Federico Ferrario

IRIS a supporto della valutazionestreaming.cineca.it/IRIS260515/slides/ferrario.pdf · Numero afferenti Numero autori afferenti a un'unità organizzativa interna all'ateneo IRIS CorrespondingAuthor

  • Upload
    others

  • View
    4

  • Download
    0

Embed Size (px)

Citation preview

Page 1: IRIS a supporto della valutazionestreaming.cineca.it/IRIS260515/slides/ferrario.pdf · Numero afferenti Numero autori afferenti a un'unità organizzativa interna all'ateneo IRIS CorrespondingAuthor

IRIS a supporto della valutazione

Federico Ferrario

Page 2: IRIS a supporto della valutazionestreaming.cineca.it/IRIS260515/slides/ferrario.pdf · Numero afferenti Numero autori afferenti a un'unità organizzativa interna all'ateneo IRIS CorrespondingAuthor

Valutazione della ricerca Overview

La valutazione dei prodotti della ricerca può avvenire secondo criteri/metriche:

• Quantitative

Tramite indicatori (es: Impact factor, citation count, percentili, h-index, etc.)

• Qualitative Tramite campagne di valutazione della produzione scientifica dell’ente a cura di revisori.

Page 3: IRIS a supporto della valutazionestreaming.cineca.it/IRIS260515/slides/ferrario.pdf · Numero afferenti Numero autori afferenti a un'unità organizzativa interna all'ateneo IRIS CorrespondingAuthor

Valutazione della ricerca Quantitativa e qualitativa

Valutazione quantitativa dei prodotti della ricerca

Indicatori

Page 4: IRIS a supporto della valutazionestreaming.cineca.it/IRIS260515/slides/ferrario.pdf · Numero afferenti Numero autori afferenti a un'unità organizzativa interna all'ateneo IRIS CorrespondingAuthor

Valutazione della ricerca IRIS: strumenti a supporto della valutazione quantitativa

Indicatori sulla rivista ImpactFactor, FiveYearImpactFactor, EigenFactor, Percentile, CitesJcrYear0/1/2/3/4/5, CitesTotal, SJR, SNIP, IPP, Categorie scientifiche Scopus, etc. Indicatori sul prodotto Numero di citazioni per anno, posizionamento percentile rispetto agli articoli medesima categoria,etc. Indicatori sull’autore Numero autori totali, Numero autori interni, Numero autori area, Numero afferenti, CorrespondingAuthor, prima posizione, ultima posizione, posizionene nella stringa autori, H-Index Wos, H-Index Scopus, etc.

Page 5: IRIS a supporto della valutazionestreaming.cineca.it/IRIS260515/slides/ferrario.pdf · Numero afferenti Numero autori afferenti a un'unità organizzativa interna all'ateneo IRIS CorrespondingAuthor

Valutazione della ricerca IRIS: strumenti a supporto della valutazione quantitativa

MISURA DESCRIZIONE FONTE

Numero pubblicazioni Numero pubblicazioni IRIS

Numero autori totali Numero degli autori calcolato in base alla stringa autori IRIS

Numero autori interni Numero autori riconosciuti come afferenti all'ateneo IRIS

Numero autori area Numero autori riconosciuti appartenenti a un'area scientifica (es. CUN, VQR, mappature specifiche su base SSD/SC)

IRIS

Numero afferenti Numero autori afferenti a un'unità organizzativa interna all'ateneo IRIS

CorrespondingAuthor Ruolo di Corresponding Author IRIS/eventualmente fonte esterna

PrimaPosizione Autore in prima posizione nella stringa autori IRIS/eventualmente fonte esterna

UltimaPosizione Autore in ultima posizione nella stringa autori IRIS/eventualmente fonte esterna

PosizioneInStringaAutori Posizione assoluta rispetto alla stringa autori IRIS/eventualmente fonte esterna

Categoria ANVUR elenchi riviste dei GEV per la VQR ANVUR

Categoria ANVUR elenchi ASN scientifiche ANVUR

Categoria ANVUR elenchi ASN categoria A ANVUR

Subject Category Categorie scientifche JCR JCR (file CRUI)

HIndexWos H-Index calcolato in Wos (identificativo ORCID) Wos (verificare disponib. In fonte)

ArticleInfluence Article Influence Wos

CitesTotal Numero di citazioni totali Wos

PercentileThreshold Distribuzione in percentili di tutti i valori di citazione esistenti per categoria/anno. Informazione derivata per UniBo da un file fornito da Thompson R. ogni trimestre

WoS (file per UniBO)

Category Expected Citations numero atteso di citazioni al livello della categoria Wos

Journal Expected Citations numero atteso di citazioni al livello della rivista Wos

Affiliazioni coautori stranieri Affiliazione dei coautori 'stranieri' (ente, nazione non italiani) Wos

Affiliazioni autori dei citing articles Affiliazione degli autori che citano il contributo (ente, nazione) Wos

ImpactFactor IF del periodico Wos/JCR (file CRUI)

Impact Factor without Journal Self Cites IF del periodico privo delle autocitazioni Wos/JCR (file CRUI)

FiveYearImpactFactor IF del periodico sugli ultimi 5 anni Wos/JCR (file CRUI)

EigenFactor Eigenfactor EigenFactor/JCR

Percentile NUOVA PROPOSTA: massimo percentile per una specifica categoria/anno in cui si colloca la rivista X

Wos/JCR (file CRUI)

CitesJcrYear0 Numero di citazioni anno di pubblicazione Wos (file CRUI?)

CitesJcrYear1 Numero di citazioni ad 1 anno dalla pubblicazione Wos (file CRUI?)

CitesJcrYear2 Numero di citazioni a 2 anni dalla pubblicazione Wos (file CRUI?)

CitesJcrYear3 Numero di citazioni a 3 anni dalla pubblicazione Wos (file CRUI?)

CitesJcrYear4 Numero di citazioni a 4 anni dalla pubblicazione Wos (file CRUI?)

CitesJcrYear5 Numero di citazioni a 5 anni dalla pubblicazione Wos (file CRUI?)

CitesTotal Numero di citazioni totali Wos (file CRUI?)

ASJC Categorie scientifiche Scopus (All Science. Journals Classification), gestibili in reportistica sia con denominazione sia con codice

Scopus (msapi-scivalanalytics)

HIndexScopus H-Index calcolato in Scopus (identificativo ORCID) Scopus (verificare disponib. In fonte)

CitesTotal Numero di citazioni totali (citationCount in Matching Service API) Scopus (msapi-scivalanalytics)

Cites by year Numero di citazioni per anno (conteggio effettivo per anno della pubblicazione citante)

Scopus (msapi-scivalanalytics)

CitationThreshold valore di soglia del percentile per la collocazione di un articolo in una specifica categoria/anno (percentiles thresholds value per year and document type in Matching Service API)

Scopus (msapi-scivalanalytics)

PercentileThreshold massimo percentile per una specifica categoria/anno in cui si colloca l'articolo X (percentiles thresholds per year and document type in Matching Service API)

Scopus (msapi-scivalanalytics)

bestMatchedPercentile il miglior percentile in cui si colloca l'articolo X tra tutte le categorie/anno (bestMatchedPercentile in Matching Service API)

Scopus (msapi-scivalanalytics)

SJR Indicatore SJR (SCImago Journal Rank) [http://www.journalmetrics.com/sjr.php] Scopus (msapi-scivalanalytics)

SNIP SNIP (Source Normalized Impact per Paper) [http://www.journalmetrics.com/snip.php]

Scopus (msapi-scivalanalytics)

IPP IPP (Impact per Publication) [http://www.journalmetrics.com/ipp.php] Scopus (msapi-scivalanalytics)

maxPercentileCategories massimo percentile per una specifica categoria/anno in cui si colloca la rivista X (API in corso di implementazione da parte del produttore)

Scopus (msapi-scivalanalytics)

maxPercentileValue valore di soglia del percentile per la collocazione di una rivista in una specifica categoria/anno (API in corso di implementazione da parte del produttore)

Scopus (msapi-scivalanalytics)

CitesTotal Numero di citazioni totali Scopus (msapi-scivalanalytics)

Il GDL di IRIS ha definito un insieme di indicatori che IRIS deve mettere a disposizione

Attualmente è già disponibile il 70% di tali indicatori (in totale sono 47) Per il rimanente 30%: • sono stati avviati contatti con gli

editori per la loro acquisizione • sono in via di sviluppo le

procedure per acquisirli

Page 6: IRIS a supporto della valutazionestreaming.cineca.it/IRIS260515/slides/ferrario.pdf · Numero afferenti Numero autori afferenti a un'unità organizzativa interna all'ateneo IRIS CorrespondingAuthor

Valutazione della ricerca IRIS: strumenti a supporto della valutazione quantitativa

Acquisizione del numero di citazioni per anno e posizionamento percentile di SCOPUS

Page 7: IRIS a supporto della valutazionestreaming.cineca.it/IRIS260515/slides/ferrario.pdf · Numero afferenti Numero autori afferenti a un'unità organizzativa interna all'ateneo IRIS CorrespondingAuthor

Valutazione della ricerca IRIS: strumenti a supporto della valutazione quantitativa

Associazione automatica degli indicatori ai prodotti dell’archivio istituzionale per consentire le necessarie elaborazioni nel modulo ER di IRIS

Page 8: IRIS a supporto della valutazionestreaming.cineca.it/IRIS260515/slides/ferrario.pdf · Numero afferenti Numero autori afferenti a un'unità organizzativa interna all'ateneo IRIS CorrespondingAuthor

Valutazione della ricerca IRIS: Campagna VQR 2011-2014

ER: Valutazione qualitativa dei prodotti della ricerca

Preview VQR 2011-2014

Page 9: IRIS a supporto della valutazionestreaming.cineca.it/IRIS260515/slides/ferrario.pdf · Numero afferenti Numero autori afferenti a un'unità organizzativa interna all'ateneo IRIS CorrespondingAuthor

Valutazione della ricerca IRIS: Campagna VQR 2011-2014

In accordo con il GDL di IRIS stiamo realizzando la procedura a supporto della selezione dei prodotti per la campagna VQR 2011/14 basandosi sulla precedente esperienza In particolare: - Selezione prodotti da parte dei soggetti valutati; - Risoluzione dei conflitti di assegnazione a più docenti del medesimo prodotto da parte

di responsabili di contesto e/o governance di Ateneo. - Integrazione dei metadati dei prodotti a fini VQR - Spedizione selezioni al MIUR

Page 10: IRIS a supporto della valutazionestreaming.cineca.it/IRIS260515/slides/ferrario.pdf · Numero afferenti Numero autori afferenti a un'unità organizzativa interna all'ateneo IRIS CorrespondingAuthor

Valutazione della ricerca IRIS: Campagna VQR 2011-2014 - Selezione delle pubblicazioni

Page 11: IRIS a supporto della valutazionestreaming.cineca.it/IRIS260515/slides/ferrario.pdf · Numero afferenti Numero autori afferenti a un'unità organizzativa interna all'ateneo IRIS CorrespondingAuthor

Valutazione della ricerca IRIS: Campagna VQR 2011-2014 - Selezione delle pubblicazioni

Strumenti a supporto della selezione delle pubblicazioni

Cliccando sul bottone aggiungi i dati bibliometrici della pubblicazione selezionata vengono visualizzati in un pannello dedicato al confronto

Page 12: IRIS a supporto della valutazionestreaming.cineca.it/IRIS260515/slides/ferrario.pdf · Numero afferenti Numero autori afferenti a un'unità organizzativa interna all'ateneo IRIS CorrespondingAuthor

Valutazione della ricerca IRIS: Campagna VQR 2011-2014 - Selezione delle pubblicazioni

Strumenti a supporto della selezione delle pubblicazioni

Solo alcuni esempi: - andamento annuale e cumulativo delle citazioni negli anni - posizionamento percentile della pubblicazione rispetto alle pubblicazioni

della medesima Subject category

Page 13: IRIS a supporto della valutazionestreaming.cineca.it/IRIS260515/slides/ferrario.pdf · Numero afferenti Numero autori afferenti a un'unità organizzativa interna all'ateneo IRIS CorrespondingAuthor

Valutazione della ricerca IRIS: Campagna VQR 2011-2014 – Risoluzione dei conflitti

Strumenti a supporto della risoluzione dei conflitti

Page 14: IRIS a supporto della valutazionestreaming.cineca.it/IRIS260515/slides/ferrario.pdf · Numero afferenti Numero autori afferenti a un'unità organizzativa interna all'ateneo IRIS CorrespondingAuthor

Valutazione della ricerca IRIS: Campagna VQR 2011-2014 – Risoluzione dei conflitti

Strumenti a supporto della risoluzione dei conflitti

Page 15: IRIS a supporto della valutazionestreaming.cineca.it/IRIS260515/slides/ferrario.pdf · Numero afferenti Numero autori afferenti a un'unità organizzativa interna all'ateneo IRIS CorrespondingAuthor

Valutazione della ricerca IRIS: Campagna SUA-RD

Valutazione qualitativa della ricerca

Preview SUA-RD

Page 16: IRIS a supporto della valutazionestreaming.cineca.it/IRIS260515/slides/ferrario.pdf · Numero afferenti Numero autori afferenti a un'unità organizzativa interna all'ateneo IRIS CorrespondingAuthor

Valutazione della ricerca IRIS: Campagna SUA-RD

In accordo con il GDL di IRIS stiamo realizzando le procedure di raccolta dati per la SUA-RD Sono in corso di finalizzazione nel modulo RM le schede di raccolta dati delle entità: • Laboratori • Attrezzature • Gruppi di ricerca • Biblioteche • Mobilità internazionale Sono invece in corso di finalizzazione l’analisi delle ulteriori entità quali, ad esempio, il CV del docente/ricercatore. Le precedenti campagne verranno importate automaticamente dal sito Ministeriale in IRIS.