Poročila o kakovosti statističnih raziskovanj

Mag. Tina OstrežSektor za splošno metodologijo in standarde

Spremljanje kakovosti na SURS

• Poročanje o kakovosti statističnih raziskovanj je del aktivnosti na širšem področju spremljanja kakovosti na SURS

• Kodeks ravnanja evropske statistike (2005, 2011): 15 načel

– Institucionalno okolje – Statistični procesi– Statistični rezultati

http://www.stat.si/drz_stat_kakovost_kodeks.asp

Razvoj merjenja kakovosti v statistiki

• Dolgo časa se je kakovost statističnih produktov presojala samo skozi prizmo natančnosti

– Natančnost: v kolikšni meri se statistični rezultati ujemajo s pravo vrednostjo v realnem prostoru

• Drugačen pristop k ocenjevanju kakovosti sta kot prvi začeli uvajati kanadska in švedska statistika.

• Kakovost rezultatov se presoja skozi več dimenzij in natančnost je samo ena od teh dimenzij.

• Eurostat je pričel (v sodelovanju z nacionalnimi statističnimi uradi) svoj koncept merjenja kakovosti razvijati leta 1994.

• Ključni metodološki dokumenti, ki opredeljujejo načine merjenja in poročanja o kakovosti v statistiki, so nastali v letih 2000-2002.

Merjenje kakovosti na SURS

• Na SURS smo se sistematično s spremljanjem kakovosti rezultatov začeli ukvarjati v letu 2002

• V okviru posebne delovne skupine je bila na podlagi Eurostatovih dokumentov pripravljena standardna struktura poročila o kakovosti, pripravljen pa je bil tudi seznam standardnih kazalnikov kakovosti.

• Med leti 2003 in 2005 so se pripravljala interno poročila o kakovosti ter poročila za Eurostat

• V letu 2006 so bila pripravljena prva poročila za javno objavo (na spletni strani). Od takrat naprej je priprava javno objavljenih poročil redna naloga na SURS.

Poročila o kakovosti na SURS

• Pripravljata se dve vrsti poročil o kakovosti: standardno in letno poročilo o kakovosti.

• Standardno poročilo o kakovosti se pripravlja vsakih pet let. To poročilo je izčrpno (20-30 strani) in vsebuje vse podatke, ki vplivajo na različne komponente kakovosti.

http://www.stat.si/metodologija_porocila-standardna.asp

• Letno poročilo o kakovosti se pripravlja vsako leto in je precej krajše od standardnega (pribl. 10 strani). To poročilo je kratko in osredotočeno predvsem na prikaz kazalnikov kakovosti.

http://www.stat.si/metodologija_porocila-letna.asp

Poročila o kakovosti na SURS

• Vsebujejo pregled vseh dimenzij kakovosti

• Izračunani so kazalniki kakovosti

• Javno objavljena in dostopna uporabnikom

Dimenzije kakovosti (1)

1. Ustreznost (Relevance) Lastnost statistik, s katero ugotavljamo:

• ali izkazani rezultati zadovoljujejo zahteve uporabnikov• ali so vse potrebe uporabnikov izpolnjene

2. Natančnost (Accuracy) (Ne)ujemanje med izkazano in pravo, toda neznano

populacijsko vrednostjo. Neujemanje imenujemo tudi statistična napaka.

Dimenzije kakovosti (2)

3. Pravočasnost in točnost objave (Timeliness and Punctuality)

Pravočasnost objave meri časovni razmik med referenčnim obdobjem in datumom objave.

Točnost objave označuje skladnost med dejanskim in predhodno najavljenim datumom objave.

4. Dostopnost in jasnost (Accessibility and Clarity) Dostopnost se nanaša na fizične okoliščine, v katerih so

podatki dostopni uporabniku (možnost naročanja, urnik objav,…)

Jasnost opisuje podatkovno okolje, preko katerega uporabnik dostopa do informacij.

Dimenzije kakovosti (3)

5. Primerljivost (Comparability) Primerljivost opisuje v kolikšni meri so izkazani podatki

primerljivi v času in prostoru. 6. Skladnost (Coherence) Skladnost pri statistikah ugotavlja njihovo primernost za

zanesljivo povezovanje na različne načine in za različne uporabnike.

Dodatna komponenta Stroški in obremenitve (Costs and Burden)

Kazalniki kakovosti

• Kazalniki kakovosti so številske količine, ki skozi svoje vrednosti izkazujejo različne vidike nivoja kakovosti.

• Eurostat je seznam standardnih kazalnikov kakovosti dokončno definiral v letu 2004.

• Za namen priprave poročil o kakovosti na SURS smo pripravili prilagojen seznam kazalnikov, kjer so nekateri Eurostatovi kazalniki izpuščeni, nekateri kazalniki pa so dodani.

• Seznam iz leta 2004 je bil letos nekoliko revidiran, skladno z razvojem na tem področju. Pripravljen je bil tudi Metodološki priročnik: Kazalniki kakovosti

http://www.stat.si/doc/pub/Kazalniki%20kakovosti.pdf

Kazalniki kakovostiKomponenta Oznaka Kazalnik

U1 Delež manjkajočih statistik Ustreznost U2 Skladnost referenčnih datumov T1 Vzorčna napaka

T1_1 Pristranskost zaradi zajema T2 Stopnja neodgovora enote T3 Stopnja neodgovora spremenljivke

T3_1 Stopnja neuspešnega povezovanja spremenljivke

T4 Stopnja nadpokritja

T5 Delež vstavljenih (imputiranih) podatkov

T6 Delež urejanja podatkov

Točnost ocen

T7 Stopnja skladnosti virov PT1 Pravočasnost prve objave

PT2 Pravočasnost objave končnih rezultatov

Pravočasnost in točnost objave

PT3 Točnost prve objave

Dostopnost in jasnost DJ1 Uporabljeni načini izkazovanja rezultatov

Primerljivost P1 Dolžina primerljivih časovnih vrst

S1 Skladnost med začasnimi in končnimi rezultati Skladnost

S2 Skladnost z rezultati referenčnega vira

Poročila o kakovosti na področju statistike naravnih virov in okolja (1)

VOD-V Letno statistično raziskovanje o javnem vodovoduVOD-K Letno statistično raziskovanje o javni kanalizacijiVOD-UVI Letno statistično raziskovanje o izkoriščanju voda in varstvu voda pred onesnaževanjemVOD-N Letno statistično raziskovanje o namakalnih sistemih

ODP Letno statistično raziskovanje o nastajanju odpadkov v proizvodnih in storitvenih dejavnostihODP-P Letno statistično raziskovanje o predelavi/odstranjevanju odpadkovODP-Z Letno statistično raziskovanje o zbiranju odpadkov iz proizvodnih in storitvenih dejavnosti

Poročila o kakovosti na področju statistike naravnih virov in okolja (2)

KO-Z Letno statistično raziskovanje o zbranih komunalnih odpadkih v preteklem letuKO-U Letno raziskovanje o količinah odpadkov pripeljanih na odlagališča v preteklem letu

OKI Letno statistično raziskovanje o izdatkih za varstvo okoljaOKI-S Letno statistično raziskovanje o izdatkih za varstvo okolja pri izvajalcih javnih služb varstva okolja

NAMEA Okoljski računi - NAMEA emisije v zrak

http://www.stat.si/metodologija_porocila-kakovost.asp

Smernice za zagotavljanje kakovosti • Publikacija vsebuje sistematičen opis

posameznih delov procesa izvedbe statističnega raziskovanja in smernice za njihovo ustrezno izvajanje.

• Opis posameznih statističnih postopkov je pripravljen na podlagi splošnega procesnega modela SURS, ki je prilagojena različica mednarodno sprejetega splošnega statističnega poslovnega procesnega modela.

http://www.stat.si/doc/pub/Smernice.pdf

Hvala za pozornost!