Validation des Méthodes en Métrologie
Validation des Méthodes en Métrologie
VALIDATION DE MÉTHODES
MÉTROLOGIE CHIMIQUE
& NUCLÉAIRE DATE
Dr BÉATRICE LALÈRE
D ÉPARTEMENT E NVIRONNEMENT ET C HANGEMENT C LIMATIQUE
D IRECTION M ÉTROLOGIE S CIENTIFIQUE ET I NDUSTRIELLE
VALIDATION DE 1. EXIGENCES NORMATIVES
MÉTHODES 2. ECHANTILLONNAGE
Présenté par Béatrice LALERE 3. CARACTÉRISTIQUES D’UNE MÉTHODE
D ÉPARTEMENT E NVIRONNEMENT ET
C HANGEMENT C LIMATIQUE 4. PROFIL D’EXACTITUDE
D IRECTION M ÉTROLOGIE S CIENTIFIQUE
ET I NDUSTRIELLE
2
▬ LES EXIGENCES
— 5
NORMATIVES
3
EXIGENCES DE LA NF EN ISO/IEC 17025
4
CE QUE DOIT FAIRE LE LABORATOIRE
5
3 ÉTAPES POUR RÉPONDRE
7
PROCESSUS DE MESURE
Prélèvement
sur site
Application de
Préparation de Calcul du
la méthode de
l’échantillon résultat
mesure
8
EXIGENCES DE LA 17025
9
VALIDATION
10
VALIDATION : DIFFÉRENTES ÉTAPES
11
INCERTITUDES : LES EXIGENCES DE LA NORME ISO/CEI
17025 §7.6
12
FAUT-IL VALIDER UNE MÉTHODE RECONNUE ?
Avant-propos de la NF T90-210
14
DIFFÉRENTS RÉFÉRENTIELS
15
DIFFÉRENCES DE PHILOSOPHIE
Guide Sanco
+ NF V 03-110
NF T 90-210
Approche
Sélectivité globale
Linéarité
Fidélités
Limite de Quantification…
…..
16
▬ ECHANTILLONNAGE
17
DÉFINITIONS
ECHANTILLONNAGE
Procédure définie par laquelle une partie d’une substance, matériau ou
produit, est prélevée pour fournir, à des fins d’essais ou d’étalonnage, un
échantillon représentatif de la totalité
PRELEVEMENT
Action de prélever une quantité de matière (en une seule fois) en vue de
son analyse
ECHANTILLON
Ensemble d’un ou de plusieurs individus prélevés dans un lot et destinés
à fournir des informations sur ce lot.
18
PRÉLÈVEMENT
Où? ?
Quand?
?
Comment?
Représentativité de l’échantillon
19
ÉCHANTILLONNAGE : DÉFINIR LE PLAN
Echantillonneur
Statistiques et planification
d’expériences
Connaissance du terrain et
Préleveur gestion des échantillons
Analyste
Analyse des
échantillons,
métrologie
20
MÉTHODE D’ÉCHANTILLONNAGE (1/2)
21
ECHANTILLONNAGE AU LABORATOIRE
CONSERVATION
Echantillon brut ou primaire
S – type de flaconnage (plastique, verre) = évite
o
u pertes par adsorption, diffusion,
s – température (ambiante, réfrigération,
-
é congélation),
c
h – protection lumière = évite la photo
a dégradation de certaine molécules
n organiques,
t
i – ajout de stabilisant,
l Echantillon de Laboratoire
l ou de travail
– humidité,
o
n – contaminations croisées.
s TAILLE ET QUANTITE DEPENDENT DE
– concentration de l’analyte,
Intégrité de l’échantillon : Nécessité
de bien maîtriser la « propreté » des – sensibilité de la méthode,
matériels utilisés pour la préparation des – performances de l’équipement
échantillons analytique.
22
CONCLUSION
23
▬ CARACTÉRISTIQUES
NF T 90-210
24
Sélectivité
25
DÉFINITIONS
VIM
Propriété d'un système de mesure, utilisant une procédure de mesure spécifiée, selon laquelle le
système fournit des valeurs mesurées pour un ou plusieurs mesurandes, telles que les valeurs de
chaque mesurande sont indépendantes des autres mesurandes ou d'autres grandeurs dans le
phénomène, le corps ou la substance en cours d'examen
NOTE On obtient la spécificité par différents moyens. Elle peut être inhérente à la technique (par exemple : identification par
spectrométrie infrarouge ou spectrométrie de masse), elle peut être obtenue par séparation préalable (par exemple :
chromatographie), de façon mathématique (par exemple : résolution d’équations simultanées) ou de façon biochimique (réactions à
l’aide d’enzymes).
26
CE QUI DIT LA NORME NF T90-210
27
Fidélité
28
RÉPÉTABILITÉ, FIDÉLITÉ, REPRODUCTIBILITÉ
SR Sr2 SLab
2
0 1 2 n Plusieurs
Jour ou Jour et Sources laboratoires
Opérateur Opérateur
Reproductibilité SR
Répétabilité Sr Fidélité intermédiaire SFI
Fidélité de mesure
29
RÉPÉTABILITÉ
30
FIDÉLITÉ INTERMÉDIAIRE
Méthodes
Équipements d’essais et
d’étalonnage
Moyens Méthode
Fidélité
intermédiaire
Milieu Matière Main-d’œuvre
32
REPRODUCTIBILITÉ
33
FONCTION D’ÉTALONNAGE
34
CE QUE DOIT FAIRE LE LABORATOIRE
X
CALIBRATION
Note 1 : Un étalonnage peut être exprimé sous la forme d'un énoncé, d'une fonction d'étalonnage, d'un diagramme
d'étalonnage, d'une courbe d'étalonnage ou d'une table d'étalonnage. Dans certains cas, il peut consister en une
correction additive ou multiplicative de l'indication avec une incertitude de mesure associée.
Note 2 : Il convient de ne pas confondre l'étalonnage avec l'ajustage d'un système de mesure, souvent appelé
improprement « auto-étalonnage », ni avec la vérification de l'étalonnage.
Note 3 : La seule première étape dans la définition est souvent perçue comme étant l'étalonnage.
35
DIFFÉRENTES FONCTIONS D’ÉTALONNAGE
350
10
y = 46984.51480e -0.03464x
300
R2 = 0.99992
8
250
Concentration (mg/L)
Déformation
6 200
150
4
100
2
50
DEA 0
0 1 2 3 4 5 6 7 8
0
100 120 140 160 180 200 220 240
-2
Force E (mV)
36
ÉTALONNAGE : QUE FAIRE ?
37
DIFFÉRENTS TABLEAUX
38
ETUDE DE LA FONCTION D’ÉTALONNAGE : §5.1.
Objectifs
Evaluation de la fonction soit par comparaison :
1. Des différences observées sur chaque étalon à des EMAétalonnage
2. De l’erreur de modèle observée à l’erreur expérimentale observée
1 2
39
COMMENT FIXER L’EMA ?
40
CE QUI DIT LA NORME NF T90-210
Avertissement
Ne pas confondre le test d’adéquation au modèle et le test de signification
de la régression
Actions ultérieures
Si fonction non acceptée :
• Réalisation d’un nouveau test en réduisant le domaine
• Le domaine peut être segmenté en plusieurs domaines
• Une autre fonction d’étalonnage est envisagée s’appliquant mieux à la
méthode, réalisation à nouveau du processus.
41
TRAÇABILITÉ DES ÉTALONS
42
TRAÇABILITÉ
43
EXACTITUDE
44
EXACTITUDE/JUSTESSE
Exactitude (VIM §2.13)
Étroitesse de l’accord entre une valeur
≠ Justesse (VIM §2.14)
Étroitesse de l’accord entre la valeur moyenne d’un
mesurée et une valeur vraie d’un mesurande nombre infini de valeurs mesurées répétées et une valeur
Notes de référence
1. L’exactitude de mesure n’est pas une grandeur et ne s’exprime Notes
pas numériquement. Un mesurage est quelquefois dit plus exact
s’il fournit une plus petite erreur de mesure. 1. La justesse de mesure n’est pas une grandeur et ne peut donc pas
s’exprimer numériquement, mais l’ISO 5725 donne des
2. Il convient de ne pas utiliser le terme « exactitude de mesure »
caractéristiques pour l’étroitesse de l’accord.
pour la justesse de mesure et le terme « fidélité de mesure »
pour l’exactitude de mesure. Celle ci est toutefois liée aux 2. La justesse de mesure varie en sens inverse de l’erreur
concepts de justesse et de fidélité. systématique mais n’est pas liée à l’erreur aléatoire.
3. L’exactitude de mesure est quelquefois interprétée comme 3. Il convient de ne pas utiliser le terme « exactitude de mesure »
l’étroitesse de l’accord entre les valeurs mesurées qui sont pour la justesse de mesure et vice versa.
attribuées au mesurande.
45
EXACTITUDE/JUSTESSE
NF T90-210 : OBJECTIFS
Pour chaque niveau, étude menée sur
des échantillons jugés représentatifs
46
NF T90-210 : ORGANISATION DE L’ÉTUDE D’EXACTITUDE
Définir k≥3 niveaux de concentration :
• Niveau bas : soit limite basse , soit la limite de quantification présupposée
• Niveau moyen
• Niveau haut
Pour chaque niveau :
• EMA imposé : issu d’une exigence réglementaire ou normative, guide technique, exigence client
• EMA fixé par la NF T90-210 : 60 % d’exactitude à la LQ
• EMA défini par le laboratoire à partir :
1. de la reproductibilité interlaboratoires d’une méthode normalisée
2. des essais d’aptitude : écart-type
3. du modèle développé par Horwitz et modifié par Thompson
4. De son expérience, sa connaissance
Sélection des échantillons
• Pour chaque niveau, 6 échantillons représentatifs avec même valeur de référence
Pour estimer l’exactitude d’une méthode = valeur de référence assignée à un échantillon de validation :
• Matériau de référence certifié (COMAR : [Link]
• Méthode de référence
• Ajouts / Rendements
• Essais inter laboratoires (EPTIS : [Link]
47
LES DIFFÉRENTS TYPES DE MATÉRIAUX DE RÉFÉRENCE
48
MR / MRC : QUELLE DIFFÉRENCE?
Matériau de référence, MR (VIM, 5,13) matériau Matériau de référence certifié, MRC (VIM, 5,14)
suffisamment homogène et stable en ce qui concerne matériau de référence, accompagné d'une documentation délivrée par un
des propriétés spécifiées, qui a été préparé pour être organisme faisant autorité et fournissant une ou plusieurs valeurs de
adapté à son utilisation prévue pour un mesurage ou propriétés spécifiées avec les incertitudes et les traçabilités associées, en
pour l'examen de propriétés qualitatives utilisant des procédures valables
NOTE 2 Des matériaux de référence avec ou sans valeurs NOTE 2 Des procédures pour la production et la certification de matériaux de référence
assignées peuvent servir à contrôler la fidélité de mesure, certifiés sont données, par exemple, dans les Guide ISO 34 et Guide ISO 35.
tandis que seuls des matériaux à valeurs assignées peuvent
NOTE 4 Les valeurs de grandeurs spécifiées des matériaux de référence certifiés exigent une
servir à l'étalonnage ou au contrôle de la justesse de mesure. traçabilité métrologique avec une incertitude de mesure associée (voir Accred. Qual.
Assur.:2006).
49
COMMENT RECONNAÎTRE UN MRC?
50
AJOUT CONNU OU RENDEMENT
51
COMPARAISONS INTER LABORATOIRES
3 objectifs possibles:
Méthode Laboratoires
Estimer l’exactitude (justesse et Evaluation des performances des
fidélité) d’une méthode en cours laboratoires - essais d’aptitude
de validation
NF EN ISO/CEI 17043 (2010)
NF ISO 5725 (1994 et 2006)
52
NF T90-210 : RÉALISATION DES ESSAIS
Analyse pour chaque niveau des échantillons avec p≥ 6 séries d’analyses dans
des conditions de fidélité intermédiaire. Dans chaque série, n≥2 répétitions dans
des conditions de répétabilité du processus
NF T90-210 :
ESTIMATION DES
PARAMÈTRES
53
NF T90-210 : INTERPRÉTATION
Représentation graphique :
54
LIMITE DE QUANTIFICATION
55
LIMITE DE DÉTECTION, LIMITE DE QUANTIFICATION
-----------------------I---------------------------------------I-----------------------------------------------------------
0 xLD xLQ
limite de limite de concentration x
x < xLD détection x < xLQ quantification
56
VALIDATION
57
MÉTHODES D'ESTIMATION DE LA LQ
58
EXEMPLE DES DIFFÉRENTES APPROCHES
59
DIFFÉRENTES LIMITE DE DÉTECTION, LIMITE DE
QUANTIFICATION
REPRESENTATIVITE DE L’ECHANTILLON
ANALYTE EN ANALYTE EN
ANALYTE EN MATRICE MATRICE
SOLUTION LABORATOIRE NATURELLE
PREPARATION PREPARATION
INSTRUMENT DE MESURE ECHANTILLON ECHANTILLON
60
NF T90-210 : ETUDE DES RENDEMENTS
Acceptabilité ? Correction ?
61
▬ PROFIL
D’EXACTITUDE
62
PROFIL D’EXACTITUDE : POURQUOI ?
Méthode A Méthode B
Petite incertitude Grande incertitude
Valeur vraie
Limite d’acceptatibilité
Sans limite d’acceptatibilité : risque de déclarer une méthode non valide
63
PROFIL D’EXACTITUDE - NF V 03 110
Définitions
Procédure
Profil d’exactitude:
1.Définition de la quantité mesurée
Combinaison sous une forme
2.Définition des objectifs
graphique d’un ou plusieurs intervalles de 3.Sélection des échantillons de validation
tolérance d’espérance b calculés à différents [Link] de validation
niveaux de concentration et d’un ou plusieurs [Link] d’étalonnage
intervalles d’acceptabilité 6.Réalisation des essais
Intervalle de tolérance d’espérance b : [Link] des critères de validation
Intervalle qui contient en moyenne une [Link] du profil
proportion b% définie de futurs mesurages [Link] des concentrations retrouvées
obtenus selon un mode opératoire donné pour [Link]étation du profil
une concentration donnée
Intervalle d’acceptabilité :
Spécification de la performance
exigée de la méthode, exprimée comme un
écart acceptable autour de la valeur de
référence
64
PROFIL D’EXACTITUDE : OBJECTIFS
65
PROFIL D’EXACTITUDE : PRODUCTION DE PREUVES
3. Sélection des échantillons de validation
- choix de la matrice : stabilité et homogénéité
- choix des valeurs de référence :
MRC, MRE, MRI
échantillons dopés
méthode de référence
Sinon : valeur moyenne ou médiane mais alors pas d’estimation du biais de justesse
4. Plan de validation
Organisation des essais selon le mode utilisé en routine
La norme s’appuie sur la NF ISO 5725-2
5. Plan d’étalonnage
Le plan doit refléter au mieux la pratique de routine
Construction du plan très semblable à NF T 90-210
6. Réalisation des essais
Calcul des critères de performances pour construire le profil
Respecter les conditions de fidélité intermédiaire
Couvrir le domaine d’application
Synchroniser les plans d’étalonnage et de caractérisation
66
PROFIL D’EXACTITUDE : CONSTRUCTION DU PROFIL
7. Calculs des concentrations prédites inverses
Calcul des modèles d’étalonnage : le modèle est calculé pour chaque série, il prend en compte
les variations inter-séries
Calcul des concentrations retrouvées à partir de la fonction inverse : la synchronisation des
plans d’étalonnage et de validation est fondamentale pour cette étape
8. Calcul des intervalles de validation par niveau
Calcul des critères de justesse par série : exprimés par des biais
Calcul des critères de justesse et fidélité par niveau
Calcul des intervalles de tolérance
9. Construction du profil d’exactitude
Le profil peut être construit de différentes façon suivant les données disponibles
10. Interprétation
La méthode s’appuie sur 2 concepts complémentaires :
• La limite d’acceptabilité qui sert à chiffrer les objectifs de la méthode, le plus souvent issue
de la réglementation
• L’intervalle de tolérance qui délimite un intervalle dans lequel se trouvera en moyenne une
67
proportion de futures mesures ; il caractérise les mesurages et non pas une statistique
PROFIL D’EXACTITUDE : EXEMPLE 1
68
PROFIL D’EXACTITUDE : EXEMPLE 2
Composé B
Validation entre
100 et 130 ?
69
PROFIL D’EXACTITUDE : POINTS À RETENIR
70
PROFIL D’EXACTITUDE : LIMITE DE QUANTIFICATION
71
LIMITE DE QUANTIFICATION
Principe du profil d'exactitude :
Définition ( Pr NF V 03 – 110, § 3.2 – 28) :
a) intervalle de tolérance qui contient une proportion
b de futurs résultats "Plus petite et/ou plus grande concentration de
l'analyte pouvant être quantifiée dans des conditions
intervalle calculé via l'estimation de l'erreur totale expérimentales décrites de la méthode.
(biais + fidélité ) de la méthode
Elle correspond à la concentration la plus petite
b) intervalle d'acceptabilité et/ou la plus grande du domaine de validité. Voir
c) méthode validée dans le domaine où l'intervalle Annexe E.
de tolérance est compris dans les limites d'acceptabilité. Annexe E : " .. il existe une concentration à partir
Quid des définitions et du calcul des limites ? de laquelle au-moins une des bornes de l'intervalle de
1) Limite de quantification tolérance coupe une des limites d'acceptabilité. .. Tout
. définition de la LQ compatible naturellement, on peut proposer de définir ce seuil
comme la limite de quantification (LQ) de la méthode."
. exemple de la LQ
Commentaires
. conclusion sur la LQ
-> définition proche
2) Limite de détection
Domaine de validité : les futurs résultats fournis par
. la LD serait en dehors de ce contexte basé sur la
la méthode sont jugés valides
quantification
En pratique, la limite de quantification est
. néanmoins, définition et informations sur le
déterminée par l'intersection entre la limite
calcul pas toujours cohérentes
d'acceptabilité et la limite de tolérance (qu'il s'agisse
des limites supérieures ou des limites inférieures).
72
Profil d'exactitude en échelle absolue
EXEMPLE 4.5
3.5
2.5
1.5 Série1
1 Série2
Profil d'exactitude en échelle relative Série3
0.5
Limite Série4
115 acceptabilité 0 Série5
basse
0.2 0.4 0.6 0.8 1 1.2 1.4 1.6 1.8 2 2.2 2.4 2.6 2.8 3 3.2 3.4 3.6 3.8 4 4.2
concentration de référence (mg/l)
110
Limite
acceptabilité
haute
105
Recouvrement (%)
Recouvrement
100
0 0.5 1 1.5 2 2.5 3 3.5 4 4.5
95 Limite
tolérance
haute
90
Limite
tolérance
85 basse
Concentration (mg/l)
73
LIMITE DE QUANTIFICATION
. Méthode d'estimation
a) examen visuel du profil d'exactitude
b) calcul de l'intersection des 2 limites (effectué sur le profil d'exactitude représenté en échelle absolue)
. Formules de calcul
1) limite d'acceptabilité supérieure : équation : Z = (1 + l) X
pente : (1+ l)
2) limite de tolérance supérieure : équation : Z = t0 + t1 X
3) l'intersection des 2 droites :
(1 + l) X = t0 + t1 X
ou 1') limite d'acceptabilité inférieure a pour équation : Z = (1 - l) X
2') limite de tolérance supérieure a pour équation : Z = u0 + u1 X
3') l'intersection des 2 droites est :
(1 - l) X = u0 + u1 X
Soit : X = - t0 / (t1 - (1 + l))
Exemple de la norme
Dans cette approche, la limite de quantification est estimée, elle n'est pas vérifiée comme dans la norme NF T
90-210.
Par contre, une méthode d'estimation très complète et très précise est proposée.
74
PILOTAGE DE LA MÉTROLOGIE FRANÇAISE
75
▬ ÉVALUATION DES
INCERTITUDES
76
GÉNÉRALITÉS
77
RÉSULTAT DE MESURE
Probabilité
Incertitude
79
Incertitude de mesure selon la NF ISO 11352
80
PRINCIPES
• Incertitude déterminée pour un ensemble
de résultats de mesures similaires
• Conditions contrôlées
• Mesurande
• Mode opératoire de mesure
• Domaine d’application de la méthode
analytique (matrices, plages de
concentration
• Estimation de l’incertitude basée sur les
résultats du contrôle analytique et les
données de validation qui permettent
d’estimer la fidélité intermédiaire et le biais
Avec :
• uRw : incertitude liée à la fidélité intermédiaire
• ub : incertitude liée au biais
81
EVALUATION DES DONNÉES DE FIDÉLITÉ INTERMÉDIAIRE
ET DU BIAIS
DONNÉES REPRÉSENTATIVES DU :
• Mode opératoire : prise en compte de la totalité du processus
• Fidélité : toutes les conditions de réalisation (opérateurs, appareils…)
• Type de mesure : toutes matrices et interférences
82
EVALUATION DE LA FIDÉLITÉ INTERMÉDIAIRE
83
EVALUATION DU BIAIS
DONNÉES DISPONIBLES
• Matériaux analysés dans au • uCréf : incertitude moyenne des valeurs de • b : différence entre la valeur moyenne
moins six séries d’analyses référence mesurée et une valeur consensuelle dé
• brms : moyenne quadratique des valeurs
• Estimation fiable : plusieurs individuelles du biais
référence
• sb : écart-type des valeurs mesurées pour le
matériaux de référence • bi : différence entre la valeur moyenne matériau de référence
couvrant le domaine mesurée et la valeur consensuelle de • nM : nombre de mesurages du biais sur le
d’application référence du ième matériau de référence matériau de référence
• nr : nombre de matériaux de référence • uCréf : incertitude sur la valeur de référence
84
EVALUATION DU BIAIS
85
EVALUATION DU BIAIS
RENDEMENTS
86
L’INCERTITUDE DE MESURE
• Estimation doit être la plus représentative possible
• Plusieurs valeurs pour l’incertitude dans le domaine d’application
La valeur du facteur d'élargissement est choisie sur la base du niveau de confiance requis pour
l'intervalle [y - U, y + U], en général k = 2 (95%)
Pour la valeur numérique du résultat, le dernier chiffre à retenir est celui qui à la même
position que le deuxième chiffre significatif dans l’expression de l’incertitude
87
RÈGLES D’ARRONDISSAGE
88
EN RÉSUMÉ
2) Très souvent k = 2
89
▬ DOSSIER DE
VALIDATION
90
LES EXIGENCES DE LA NORME ISO / CEI 17025 (§ [Link])
Ainsi qu’une
Le laboratoire doit consigner
déclaration sur
Caractérisation Les résultats obtenus
l’aptitude de la Validation
Le mode opératoire utilisé
méthode à l’emploi
prévu
91
PERSONNEL (§ 6.2.6 NF EN ISO/IEC 17025)
92
FORMALISATION
Méthode :
•Une définition claire et non ambiguë du domaine d ’application
Dossier :
•La liste des caractéristiques utilisées pour définir les
performances (caractéristiques de la méthode)
•Le ou les modes opératoires utilisés pour valider la méthode
•Les résultats techniques des opérations de validationUn dossier
par méthode
Validation :
•Adéquation, déclaration de l’aptitude
93
94