Zprávy pro účastníky EHK


V nabídce kontrolních cyklů najdete pro každý typ cyklu stručný výčet zpráv, které obdržíte jako vyhodnocení daného kontrolního cyklu. V následující tabulce je uveden stručný přehled nejběžnějších dokumentů včetně jejich stručného popisu a pro každý dokument je připojena i ukázka.

Obvyklé statistické vyhodnocení doplňuje v případě potřeby supervizor komentářem. Součástí komentáře mohou být i další tabulky, grafy, obrázky apod.

 

Obsah

Certifikát

Histogramy

Osvědčení o účasti

Komplexní statistika

Výsledkový list (kvantitativní výsledky)

Výsledkový list (kvantitativní výsledky) s hodnocením srovnatelnosti i návaznosti

Výsledkový list (kvalitativní výsledky)

Výsledky s odhady nejistot


Certifikát
Pokud chcete obrázek zvětšit, klepněte na něj.
 
Přesné podmínky, vymezující pravidla přidělování certifikátů jsou uvedeny v nabídce kontrolních cyklů.
Certifikát je vydáván pouze pro některé zkoušky některých kontrolních cyklů - podrobné informace naleznete v nabídce kontrolních cyklů. Každý účastník v něm nalezne výčet svých úspěšných zkoušek. Certifikát se tedy vydává pouze za správné výsledky a laboratořím slouží především při kontaktu s jejich partnery při řešení výzkumných úkolů, grantů apod.
Na každém řádku je uvedena jedna zkouška.
Přehled zkoušek, pro které dané pracoviště získalo certifikát srovnatelnosti, je uveden v levém sloupci (sloupec Certifikace srovnatelnosti).
Jestliže některé zkoušky disponují cílovými hodnotami s návazností na vyšší metrologické standardy, je ve druhém sloupci uveden seznam zkoušek, pro které pracoviště splnilo kritéria certifikace návaznosti (sloupec Certifikace návaznosti).
Pokud pro některou zkoušku není srovnatelnost/návaznost certifikována, je tato skutečnost v dokumentu uvedena v závorce.
Kritéria stanovená pro certifikaci srovnatelnosti a návaznosti se mohou lišit i v rámci jedné zkoušky a jsou vždy pro aktuální rok popsána v dokumentu Certifikace xxxx (kde xxxx je rok platnosti, aktuální verzi naleznete v oddílu Infoservis).

 

Histogramy
Pokud chcete obrázek zvětšit, klepněte na něj.
 
Histogramy jsou určeny pro přehledné zobrazení rozložení kvantitativních výsledků v případech, kdy není možné použít Youdenovy grafy. Jedná se zejména o následující situace:
  • V kontrolním cyklu je použit jiný počet kontrolních vzorků než 2.
  • Výsledky pro některý z kontrolních vzorků se pohybují v oblasti nuly.
  • Výsledky jsou vydávány v titrech.
Každý sloupec představuje počet výsledků, které se nacházely v intervalu popsaném na ose x.
Bílé sloupce popisují soubor všech výsledků.
Červené sloupce popisují výsledky vlastní skupiny (skupiny, do které patří i výsledek účastníka). Vlastní skupina je popsána vpravo nahoře.
Pokud se nějaké výsledky nacházejí mimo rozsah osy x grafu (vlevo nebo vpravo), je jejich počet uveden v levém, resp. pravém dolním rohu.
Poloha vlastního výsledku účastníka je označena červeným puntíkem v horní části grafu. Pokud se výsledek účastníka nachází mimo rozsah osy x grafu, změní se puntík na šipku, která ukazuje, kterým směrem výsledek účastníka leží.
 
Poznámka: Účastníci mohou histogramy dostávat vytištěné barevně (viz ukázka vlevo) nebo ve stupních šedé (pak je červená barva reprezentována tmavě šedým odstínem). Každý účastník dostává histogramy pouze pro vzorky a zkoušky, jejichž výsledky uvedl.

 

Osvědčení o účasti
Pokud chcete obrázek zvětšit, klepněte na něj.
 
Přesné podmínky, vymezující pravidla přidělování osvědčení o účasti jsou uvedeny v nabídce kontrolních cyklů.
Osvědčení o účasti obsahuje výčet všech zkoušek, jejichž výsledky dané pracoviště v kontrolním cyklu uvedlo, a to bez ohledu na správnost těchto výsledků. Tento dokument slouží jako doklad účasti v příslušném kontrolním cyklu.

 

Komplexní statistika
Pokud chcete obrázek zvětšit, klepněte na něj.
 
Každý účastník obdrží komplexní statistiku pouze pro ty zkoušky, jejichž výsledky uvedl.
Na prvním řádku sestavy je uvedena identifikace kontrolního cyklu a kód vašeho pracoviště. Na druhém řádku je vytištěn název zkoušky.
V levé horní části (nad Youdenovým grafem) jsou vytištěny výsledky účastníka a dále identifikace skupiny (číslo i název), ke které výsledky účastníka náleží (např. stejnorodá metodická skupina, skupina identifikovaná použitím stejné metody a testovací soupravy jednoho výrobce apod.).
Zbývající část listu můžeme rozdělit na 3 relativně nezávislé části, jejichž obsah je popsán na následujících řádcích:
  1. Youdenův graf (vlevo nahoře)
    Zobrazuje všechny výsledky všech účastníků cyklu - osa x představuje výsledky pro vzorek A, osa y pro vzorek B. Je-li uvnitř grafu obdélníček, pak tento vymezuje oblast správných výsledků. Body, které zobrazují výsledky účastníků, kteří patří do stejné skupiny jako vaše výsledky, jsou vytištěny černě. Ostatní body jsou vytištěny šedě. Vlastní bod (výsledky) účastníka je vyznačen přerušovanou čarou.
  2. Historie P-skóre za poslední 2 roky (vpravo nahoře)
    V grafu je vynesena velikost vašeho P-skóre za poslední dva roky. Použitá symbolika je vysvětlena v legendě grafu.
    Interpretace vlastního P-skóre je velmi snadná:
        | P | < 1   výborný výsledek (uvnitř tolerančního rozpětí), bez připomínek
        | P | > 1   chybný výsledek, důvod k prověření
    Popis výpočtu P-skóre naleznete na naší internetové stránce zde.
  3. Souhrnná statistika (spodní polovina stránky)
    Spočtené statistické parametry jsou uvedeny jednak pro všechny výsledky a zároveň i pro jednotlivé skupiny. Skupiny mohou přitom být vymezeny různě - např. stejnou metodou nebo stejnou metodou a výrobcem použité testovací soupravy nebo stejnou metodou a výrobcem analyzátoru apod. - tento údaj je vždy uveden nad legendou. Směrodatná odchylka, variační koeficient a krajní kvantily (16. a 84.) jsou uvedeny pouze pro skupiny, jejichž četnost je alespoň 5. Na pravém okraji je graficky znázorněna vzájemná poloha vybraných statistických parametrů - použitá symbolika je vysvětlena v legendě.
    V záhlaví druhého sloupce naleznete typ cílové hodnoty, která byla pro příslušný analyt použita (např. RMP, ALTM apod.).
    U kontrolních cyklů E1, E2 a TM, které realizujeme ve spolupráci s DGKL a u kterých jsou všechny statistické výpočty prováděny nad společnou databází SEKK+DGKL, bývá někdy počet skupin (řádků ve statistice) poměrně vysoký a nepřehledný. Tento nepříznivý jev jsme eliminovali tím, že pro uvedené kontrolní cykly tiskneme do statistiky pouze ty skupiny, ve kterých se nachází alespoň jedna naše laboratoř. Úplný přehled (tedy úplná statistika) je pro případné zájemce k dispozici na naší internetové stránce.

 

Výsledkový list (kvantitativní výsledky)
Pokud chcete obrázek zvětšit, klepněte na něj.
 
Výsledkový list pro kvantitativní výsledky podává přehlednou informaci o vlastních výsledcích a porovnává je s určenými cílovými hodnotami. Veškerá symbolika je dostatečně vysvětlena v legendě.
Dlouhodobá úspěšnost za 2 roky (jak pro jednotlivé zkoušky tak pro celý cyklus) je spočtena z údajů ve sloupci C (celkové hodnocení). Řádky, obsahující ve sloupci C "+" jsou započteny jako úspěšné, řádky obsahující "-" jako neúspěšné a řádky obsahující "±" nejsou do dlouhodobé statistiky úspěšnosti započteny vůbec.
Důležitá poznámka: Pokud jsou pro danou zkoušku požadovány jak kvantitativní tak kvalitativní výsledky, jsou do dlouhodobého hodnocení účastníka vždy zahrnuty pouze kvalitativní výsledky (na kvantitativní není brán ohled).

 

Výsledkový list (kvantitativní výsledky) s hodnocením srovnatelnosti i návaznosti
Pokud chcete obrázek zvětšit, klepněte na něj.
 
V ojedinělých případech (kontrolní cyklus Endokrinologie 1) je pro výsledky některých zkoušek hodnocena jak srovnatelnost tak návaznost a navíc jsou pro hodnocení srovnatelnosti a návaznosti nastavena různá kritéria.
Srovnatelnost lze obecně hodnotit vždy, když je k dispozici dostatek výsledků.
Návaznost lze však hodnotit pouze u těch výsledků zkoušek, pro které existuje cílová hodnota s návazností na vyšší metrologický standard.
V tomto typu výsledkového listu je proto pro každou zkoušku uvedeno dvojí hodnocení výsledků - hodnocení srovnatelnosti (srovnání výsledků s konsenzuálními cílovými hodnotami) a návaznosti (srovnání výsledků s referenčními hodnotami).
Veškerá symbolika je dostatečně vysvětlena v legendě.

 

Výsledkový list (kvalitativní výsledky)
Pokud chcete obrázek zvětšit, klepněte na něj.
 
Výsledkový list pro kvalitativní výsledky shrnuje do jediného dokumentu vlastní výsledky účastníka a souhrnnou statistiku všech výsledků (četnostní tabulka) s vyznačenými cílovými hodnotami. Použitá symbolika je vysvětlena v legendě.
Dlouhodobá úspěšnost za 2 roky (jak pro jednotlivé zkoušky tak pro celý cyklus) je spočtena dle obvyklých pravidel - standardně je tedy za úspěšnou považována taková zkouška, pro kterou účastník uvedl správný (očekávaný) nebo alespoň akceptovatelný (podmíněně správný) výsledek ve všech kontrolních vzorcích.
Důležitá poznámka: Pokud jsou pro danou zkoušku požadovány jak kvantitativní tak kvalitativní výsledky, jsou do dlouhodobého hodnocení účastníka vždy zahrnuty pouze kvalitativní výsledky (na kvantitativní není brán ohled).

 

Výsledky s odhady nejistot
Pokud chcete obrázek zvětšit, klepněte na něj.
 

 
Tento dokument dostávají pouze ti účastníci, kteří kromě vlastních výsledků uvedli i odhady jejich nejistot. Pokud účastníci své odhady nejistot výsledků uvádějí, pak ve formě standardní (nerozšířené!) nejistoty uc (obvykle získané z dat VKK jako 1 SD).
Pro každou zkoušku a vzorek je uveden jeden graf.
V záhlaví grafu je uveden název zkoušky a označení vzorku. Dále je zde uveden počet výsledků zobrazených v grafu a počet výsledků, které svou velikostí přesahují rozsah osy y grafu (jsou mimo graf). Prostřední vodorovná přímka zobrazuje polohu cílové hodnoty. Přerušované vodorovné čáry po obou stranách této přímky zobrazují udanou rozšířenou nejistotu této cílové hodnoty (pro statisticky určené cílové hodnoty je jako odhad této nejistoty použit 2 SD). Horní a dolní plné přímky pak vymezují oblast tolerančního rozpětí.
Výsledky jednotlivých účastníků jsou zobrazeny jako vzestupně seřazené body, přičemž ke každému bodu je po obou stranách zkonstruována úsečka, představující účastníkem udaný odhad nejistoty výsledku měření. V pravém dolním rohu grafu je uveden výsledek účastníka a v grafu je vlastní výsledek označen tučně.
Základní interpretaci polohy vlastního výsledku a velikosti nejistoty uvádíme na modelovém příkladu dle obrázku níže:

  • Laboratoře 1, 2, 10 a 11 uvedly výsledky stanovení mimo toleranční rozpětí.
  • Laboratoře 3 a 9 uvedly výsledky uvnitř tolerančního rozpětí avšak odhad nejistoty jejich stanovení (vymezující oblast pravděpodobné skutečné hodnoty) z pásu tolerančního rozpětí vybočuje (i když pouze jednostranně). K jejich správnému výsledku měření tak kromě jejich dobré práce přispěla v tomto případě i trocha štěstí (pravděpodobnost, že jejich výsledek mohl padnout mimo toleranční pás, není zcela zanedbatelná).
  • Extrémní hodnotu odhadu vlastní standardní nejistoty udala laboratoř 5: výsledek měření je v téměř ideální shodě s cílovou hodnotou, avšak odhad jeho nejistoty je tak vysoký, že naměřená hodnota může se značnou pravděpodobností ležet i mimo toleranční pás. Uvážíme-li, že interval ±1 SD odpovídá v Gaussově rozložení přibližně 70% pravděpodobnosti, pak by tato laboratoř pravděpodobně uspěla jen v 7 měřeních z 10, což vskutku není mnoho.
  • Za extrémní lze považovat i výsledek laboratoře 6, která udala odhad nejistoty vlastního výsledku měření významně nižší než ostatní účastníci i než je udaná nejistota cílové hodnoty (přerušované přímky). Je vidět, že i zdánlivě vynikající výsledek může být podezřelý.
Osa y grafu může být kalibrována 2 různými způsoby:
  1. Existuje-li pro danou zkoušku a vzorek jediná cílová hodnota, je osa y kalibrována v jednotkách dané zkoušky. Příklad naleznete v první ukázce vlevo.
  2. Jsou-li výsledky dané zkoušky a vzorku hodnoceny ve skupinách s individuálními cílovými hodnotami, jsou cílové hodnoty i výsledky všech účastníků přepočteny na % a zobrazeny v jediném grafu. Přepočet v rámci každé skupiny se provádí tak, že cílová hodnota je rovna 100 % a následně je pomocí této hodnoty přepočten na % jak odhad nejistoty cílové hodnoty, tak výsledky všech účastníků této skupiny. Takto přepočtená data jsou pak zobrazena v jediném grafu, jehož osa y je kalibrována v %. Příklad naleznete ve druhé ukázce vlevo (MCV je zde přepočten na %, protože různé metodické skupiny měly různé cílové hodnoty). Díky tomuto přístupu není nutné konstruovat velké množství grafů (pro každou stejnorodou skupinu zvlášť).