Évaluation d`un processus mesure

Transcription

Évaluation d`un processus mesure
Évaluation d’un processus mesure
§
Lexique anglais – français
§ 2 processus inséparables
§ Terminologie
§ Méthodologie de l'évaluation
§ Méthodes d'analyse statistique
§ Indices de capacité
§ Exemple
Évaluation processus mesure
1
Bernard CLÉMENT, PhD
Lexique anglais - français
Precise ……………………………… précise
Acuracy …………………………….. juste
Bias …………………………………. biais
Repeatability ……………………….. répétitivité
Reproductibility …………………….. reproductibilité
Measurement system evaluation …. évaluation système mesurage
(évaluation : précision et justesse)
Gage R&R ……………...............étude Répétitivité et Reproductibilité
d’un instrument de mesure (jauge)
( évaluation : précision )
Bernard CLÉMENT, PhD
Évaluation processus mesure
2
2 processus inséparables : fabrication et mesurage
rôle 2
rôle 1
pièce
Fabrication
Mesurage
donnée : Y
rôle 3
Bernouilli
Binomiale
Poisson
TYPE
Classement : Y = 0 ou 1
Comptage : Y = 0, 1, 2, …
gaussienne
Mesure : Y continue
rôle des données
rôle 1
Analyser le processus de mesurage : répétitivité ? reproductibilité ?
rôle 2
Classer la pièce : conforme ? non conforme ?
rôle 3
Analyser le processus de fabrication : stable ? capable ?
Évaluation processus mesure
Bernard CLÉMENT, PhD
3
TERMINOLOGIE
JUSTESSE ( ou exactitude) : écart entre la mesure obtenue et la «vraie» valeur
(erreur systématique)
PRÉCISION : écart d'un ensemble de mesures par rapport à la valeur moyenne des mesures
(erreur aléatoire)
x xxx
x x x
x x
x x
x
x x x
x
x
x x
xx
x x
juste
oui
non
oui
non
précis
oui
oui
non
non
RÉPÉTABILITÉ :
(équipement)
variabilité mesurée par un écart-type ou un indice dans des conditions où
tous les facteurs sont maintenus "constants"
• 1 opérateur - 1 pièce
• court laps de temps (court terme)
• plusieurs répétitions (relectures)
REPRODUCTIBILITÉ : variabilité mesurée par un écart-type ou un indice dans des conditions
(opérateur)
où un ou plusieurs facteurs contrôlables sont variés
• plusieurs opérateurs
• plusieurs pièces
remarque : opérateur peut être remplacé par un autre facteur comme
méthode ou périodes temps
FIDÉLITÉ : étroitesse de l'accord entre les résultats dans des conditions de
RÉPÉTABILITÉ et de REPRODUCTIBILITÉ
Bernard CLÉMENT, PhD
Évaluation processus mesure
4
TERMINOLOGIE
STABILITÉ
processus libre de toute source de variabilité spéciale (hors contrôle statistique
BIAIS
présence ou influence d’un facteur qui fait paraître les données
différentes de ce qu’elles sont par l’ajout d’un écart systématique;
méthode de détection d’un biais : utiliser des pièces déjà calibrées
CALIBRATION processus par lequel l’appareil est employé avec de pièces calibrées
dont les valeurs sont connues ; le résultat observé permet un
ajustement normatif de l’appareil (calibrage) ; cette opération doit se
faire périodiquement
LINÉARITÉ
la précision ou la justesse varient à l’intérieur de l’espace de mesure;
l’absence de linéarité est désirable : la précision et la justesse sont constantes
FACTEURS pouvant contribuer à la variabilité (non qualité ) d’une mesure Y
écart type
1.
variabilité humaine : opérateur à opérateur ……………………………………………. σo
2.
variabilité unités mesurées : pièce à pièce / lot-à-lot ……………………………….. σp
3.
variabilité répétition = erreur de mesure de l’appareil = précision appareil……….. σe
variabilité temporelle : heure à heure, jour à jour, semaine à semaine, mois à mois …
4.
OBJECTIFS DE L’ÉVALUATION DU PROCESSUS DE MESURAGE
- quantifier contribution (absolue, relative) de chaque facteur avec des écarts types / indices
- détecter la variabilité entre les produits
- décider si le processus de mesurage doit être amélioré
Évaluation processus mesure
Bernard CLÉMENT, PhD
5
DONNÉES : modèle - plan - objectifs
Facteurs retenus dans une étude Répétitivité et
O : Opérateur
MODÈLE
Yijk
P : Pièce
Reproductibilité
R : Répétition
= μ + β + Oi + Pj + (OP)i j + E i j k
Y i j k : mesure obtenue / pièce j / opérateur i / répétition k
où
μ : «vraie valeur »
β : biais
O i : effet opérateur
P j : effet pièce
OP i j : interaction O x P
E k : effet répétition
β=0
Hypothèses
simplificatrices
σop2 = 0
~ N ( 0, σo2 )
~ N ( 0, σp2 )
~ N ( 0, σop2 )
~ N ( 0, σ e2 )
i = 1, .. , I
j = 1, .. , J
k = 1, .. , K
on suppose que l’appareil est calibré
aucun effet d’interaction entre opérateur et la pièce
( sinon il y a un « problème » )
PLAN de collecte des données souvent employé :
I : 2 ou 3
J : au moins 10
K : 2 ou 3
Important : les pièces doivent provenir d’un plan d’échantillonnage reflétant
les sources de variabilité potentielles de la production
OBJECTIF : estimation des écarts types
Bernard CLÉMENT, PhD
σe / σo
/ σp
/ indices
Évaluation processus mesure
6
MÉTHODOLOGIE DE L’ÉVALUATION DU PROCESSUS MESURAGE
PLAN DE COLLECTE DE DONNÉES
- pièces : échantillonnage d’au moins 10 provenant la production
important : faire un échantillonnage représentatif de la variabilité de la production
- opérateurs : 2 ou 3
- répétitions : chaque opérateur mesure chaque pièce 2 ou 3 fois
EXEMPLE: Y = épaisseur ( Angstoms = 10 - 8 mm )
Opérateur
1
Répétition
Pièce 1
2
3
4
5
6
7
8
9
10
2
1
2
3
15,641
18,056
16,857
16,382
24,772
16,928
24,659
16,991
16,415
17,016
15,641
18,056
16,857
16,365
24,772
16,910
24,585
17,016
16,432
17,016
15,625
18,056
16,875
16,382
24,772
16,928
24,585
16,999
16,432
17,016
1
3
2
3
15,625 15,656
18,056 18,056
16,840 16,875
16,365 16,348
24,735 24,772
16,910 16,910
24,585 24,622
16,963 16,981
16,415
16,415
17,016 17,016
15,625
18,036
16,857
16,348
24,735
16,910
24,548
16,999
16,415
17,016
1
2
3
15,686 15,701 15,701
18,096 18,096 18,096
16,893 16,910 16,983
16,382 16,398 16,398
24,772 24,772 24,772
16,945 16,945 16,945
24,657 24,597 24,578
17,016 17,016 17,016
16,481 16,498 16,498
17,016 17,088 17,016
Évaluation processus mesure
Bernard CLÉMENT, PhD
ANALYSE
MÉTHODE
STATISTIQUE
Cartes de Shewhart Xbar & R
AVANTAGE
7
graphique /calculs faciles /conviviale
INCONVÉNIENT interaction Opérateur x Pièce = 0
Analyse de la variance (ANOVA)
plus générale
plus difficile à comprendre
EXEMPLE : carte R - utilisation du module PROCESS ANALYSIS de Statistica
Ranges (variable: Y_EPAIS)
CombinedRangeChart
Operators by Parts
AverageRange: 21.7000
Sigma(Range):11.3895
No. of Trials: 3
Remarque
pièce # 7 hors contrôle
90
et pièce # 10 erreur
80
d’entrée de données
70
17088 est erronée
60
55.8686
valeur corrigée 18018
50
40
nouvelle carte R
30
sans la pièce # 7
21.7000
20
et valeur corrigée
10
0
1
2
3
Operators (variable: OPER)
Bernard CLÉMENT, PhD
Évaluation processus mesure
8
EXEMPLE : suite
Opérateur 2 : hors contrôle
Combined Range Chart
Operators by Parts
Average Range: 13.1111
Sigma (Range): 6.88155
No. of Trials: 3
données de l’opérateur 2
ne sont pas employées
dans la suite de l’étude R&R
45
40
Ranges (variable: Y-CORRCT)
35
33.7558
30
25
20
15
13.1111
10
5
0
1
2
3
Operators (variable: OPER)
9
Évaluation processus mesure
Bernard CLÉMENT, PhD
EXEMPLE : suite
Combined Range Chart
Operators by Parts
Average Range: 9.88889
RÉPÉTITIVITÉ
l’ erreur de mesure de l’appareil
Sigma (Range): 5.19032
No. of Trials: 3
σe
30
25.4598
Ranges (variable: Y-CORRCT)
25
Estimation de σe
avec les étendues R
20
sur les répétitions
+ carte R en contrôle
15
10
9.88889
σ e 2 = ( R / d 2 * )2
d2* ≈ d2 ( 1+ 0.25 ν )
5
ν = - 2 + 2 ( 1 + 2 (d3 /d2 )2/ k )0.5
0
1
3
k : nombre d’échant. de taille n
Operators (variable: OPER)
- valeurs de d 2* : table D page 528 OTHM
- raison du d 2* : obtenir une estimation sans biais de σe2
- - influent si k ≤ 5 ( cas assez rare )
- - si k ≥ 6 on peut employer
Bernard CLÉMENT, PhD
σ e 2 = ( R / d 2 )2
Exemple : n = 3 k = 18 = 2 x 9
R = 9.89
d 2* ≈ 1.69 = d2
σe2 = ( 9.89 / 1.69)2 = 5.852
Évaluation processus mesure
10
DÉFINITIONS
EV = 5.15*σe
: variation due à l’appareil ( « equipment variation » )
%EVtolérance = 100 * EV / ( LTS – LTI ) :
tolérance = LTS - LTI
% variabilité de la tolérance
occupée par l’instrument
- grandeur de variation due à l’équipement
- couvre 99% de la variabilité due à l’équipement
- convention qui diffère de celle employée dans les études
de capacité des processus de fabrication ( 99.73% )
remarque :
5.15 = 2 x z 0.995 = 2 x 2.575
z 0.995 : quantile d’ordre 99.5 loi gaussienne
Exemple ( suite) : EV = 5.15 x 5.85 = 30.14
tol = LTS - LTI =1000
- 2.575
LTS = T + 500
0
2.575
LTI = T – 500
%EVtolérance = 100*EV / tol =100*30.14 / 1000 = 3.1 %
Estimation de la reproductibilité
σY2 =
où
R
Y
: étendues
( R Y / d2* )2
entre les J valeurs moyennes opérateurs ( sur i et k ) Y j
d2* : table D avec 1 ( valeur de N dans la table ) échantillon de taille n = J
Évaluation processus mesure
Bernard CLÉMENT, PhD
Exemple ( suite) :
Y 1 = 17674.4 ,
d 2* = 1.41
,
Y 3 = 17702.8
,
11
R y = 17702.8 – 17674.4 = 28.4
σ Y 2 = ( 28.4 / 1.41 )2 = 20.12
angstroms 2
Estimation de σ o
σ o2 = σ Y 2
=0
- ( σe2 / JK )
K = nombre répétitions
si la différence est négative
σ Y 2 = 20.12
Exemple ( suite) :
J = nombre pièces
σ e2 = 5.852
J=9
K=3
σo2 = 20.12 - ( 5.852 / 27 ) = 20.12
Analyse de tolérance reproductibilité
AV = 5.15 σo
:
variation due à l’opérateur ( «appraiser variation »)
%AVtolérance = 100 * AV / ( LTS – LTI ) :
Exemple ( suite) :
% variabilité de la tolérance
occupée par l’opérateur
AV = 5.15 x 20.1 = 103.5
%AVtolérance = 100 * 103.5 / 1000 = 10.4 %
Bernard CLÉMENT, PhD
Évaluation processus mesure
12
Analyse de tolérance globale
σ M2
=
σ o2
σM2
= σ o2
+ σ e2
+ σ e2
:
Répétitivité et Reproductibilité
:
variabilité répétitivité et reproductibilité ( R & R )
:
estimation
:
R&R = 5.15 σ M
variabilité du système de mesurage
= ( AV 2 + EV 2)0.5
%R&R tolérance = 100 * R&R / ( LTS – LTI ) : % variabilité de la tolérance
occupée par système
Exemple ( suite ) :
AV = 103.5
EV = 30.14
R&R = ( 103.5 2 + 30.14 2 ) 0.5 = 107.8
%R&R tolérance = 100 * 107.8 / 1000 = 10.8 %
CRITÈRES : qualification du processus de mesurage en fonction des tolérances
%R&R tolérance
moins de 10 % …..
10% à 20 % …….
20% à 30% ………
plus de 30 % .......
décision
excellent
bon
marginal
inacceptable
Exemple ( suite ) : bon / amélioration : meilleure formation des opérateurs
Évaluation processus mesure
Bernard CLÉMENT, PhD
13
ESTIMATION DE LA VARIABILITÉ DE PRODUCTION
σ P = écart type de l’ensemble des J valeurs moyennes Y j
sur opérateur et répétitions ( sur i et sur k )
autre possibilité : avec les étendues
σ p = R moyenne pièce
/ d 2*
: 1 échantillon de J valeurs
Exemple ( suite)
pièce
1
2
3
4
5
6
-
8
moyenne 15665.8 18076.0 16880.8 16384.5 24772.0 16933.5 - 17009.0
σ p = 9016.2 / 3.08 = 2956.6
ANALYSE :
9
16459.3
10
17016.3
PV = 5.15 σ p : variabilité due aux pièces
variabilité système mesure
VS
variabilité totale
σ Y 2 = σ p2 + σ o2 + σ e2 : variabilité totale
TV = 5.15* σ Y2 = ( PV 2 + R&R 2 ) 0.5 : grandeur de la variabilité totale
% R&R totale = 100 * R&R / TV
CRITÈRES : mêmes que ceux employés avec les intervalles de tolérance
Exemple ( suite ) : PV = 5.15* 2956.6 = 15226.49
R&R = 107.8
TV = 15226.9
%R&R totale = 100* 107.8 / 15226.9 = 0.7%
Bernard CLÉMENT, PhD
Évaluation processus mesure
14
UTILISATION de STATISTICA
les résultats présentés proviennent de la version 6 de Statistica;
il y a de légères différences si on utilise une version antérieure
recommandation : commencer avec une carte Xbar et R ( module CONTROL CHART )
groupes = opérateur x pièce
but : visualiser les données +
module
critère de qualité de l’étude
PROCESS ANALYSIS
analyse de capacité des procédés de fabrication ( process capability analysis )
l’analyse de capacité des processus de mesure ( gage repeatability & reproductibility)
fabrication
mesure
Évaluation processus mesure
Bernard CLÉMENT, PhD
15
UTILISATION de STATISTICA
Exemple :
3 opérateurs 10 pièces 3 répétitions – données page 7
Carte de contrôle Xbar et R
X-bar and R Chart; variable: Y-EPAIS2
Histogram of Means
INTERPRÉTATION
Carte Xbar
X-bar: 18372. (18372.); Sigma: 11.442 (11.442); n: 3.
26000
25000
24000
23000
22000
21000
20000
19000
18000
17000
16000
15000
14000
- c’est un bon signe si la
carte est hors contrôle :
pièces sont discriminées
18392.
18372.
18352.
0
4
2
8
6
12
10
16
5
10
15
20
25
- estimation σe = 11.44
il faut que la carte R
soit en contrôle ….
30
14
Histogram of Ranges
Range: 19.367 (19.367); Sigma: 10.165 (10.165); n: 3.
90
Carte R
80
70
- doit être en contrôle
60
50
49.861
40
30
- cet exemple : NON
pièce 7 pose problème
20
19.367
aux 3 opérateurs
10
0
0.0000
-10
0
2
4
6
8 10 12 14
5
10
15
20
25
- solution : retirer cette
30
pièce de l’étude
opérateur 1
Bernard CLÉMENT, PhD
opérateur 2
opérateur 3
Évaluation processus mesure
16
UTILISATION de STATISTICA
Exemple :
3 opérateurs 10 pièces 3 répétitions – données page 7
Carte de contrôle Xbar et R sans la pièce 7
X-bar and R Chart; variable: Y-EPAIS2
Histogram of Means
INTERPRÉTATION
Carte Xbar
X-bar: 17680. (17680.); Sigma: 7.7463 (7.7463); n: 3.
26000
25000
24000
23000
22000
21000
20000
19000
18000
17000
16000
15000
14000
- c’est un bon signe si la
carte est hors contrôle :
pièces sont discriminées
17693.
17680.
17667.
0
4
2
8
12
6
10
16
5
10
15
20
- estimation σe = 7.75
mais il faut que la carte R
soit en contrôle ….
25
14
Histogram of Ranges
Range: 13.111 (13.111); Sigma: 6.8815 (6.8815); n: 3.
45
Carte R
40
35
33.756
- doit être en contrôle
30
25
20
- ce cas : NON
15
13.111
10
opérateur 2 pose
5
0
0.0000
-5
0
2
1
4
3
6
5
8
10
7
9
5
10
15
20
25
problème
- solution : retirer les
11
données de opérateur 2
opérateur 1
opérateur 2
opérateur 3
Évaluation processus mesure
Bernard CLÉMENT, PhD
17
UTILISATION de STATISTICA
Exemple :
3 opérateurs 10 pièces 3 répétitions – données page 7
Carte de contrôle Xbar et R sans la pièce 7 et l’opérateur 2
X-bar and R Chart; variable: Y-EPAIS2
Histogram of Means
INTERPRÉTATION
Carte Xbar
X-bar: 17689. (17689.); Sigma: 5.8425 (5.8425); n: 3.
26000
25000
24000
23000
22000
21000
20000
19000
18000
17000
16000
15000
14000
- c’est un bon signe si la
carte est hors contrôle :
pièces sont discriminées
17699.
17689.
17678.
0 1 2 3 4 5 6 7 8 9
2
Histogram of Ranges
4
6
8
10
12
14
16
- estimation σe = 5.84
mais il faut que la carte R
soit en contrôle ….
18
Range: 9.8889 (9.8889); Sigma: 5.1903 (5.1903); n: 3.
30
25.460
25
Carte R
20
- doit être en contrôle
15
10
9.8889
- ce cas : OUI
5
0
0.0000
-5
0 1 2 3 4 5 6 7 8 9
2
4
opérateur 1
Bernard CLÉMENT, PhD
6
8
10
12
14
16
opérateur 3
18
Évaluation processus mesure
18
UTILISATION de STATISTICA :
module
PROCESS ANALYSIS
Exemple :
3 opérateurs
10 pièces
3 répétitions
Évaluation processus mesure
Bernard CLÉMENT, PhD
19
Repeatability & Reproducibility Summary Plot
No. of Operators: 3 (variable: OPER)
No. of
Parts: 10 (variable: WAFER)
No. of Trials: 3 (variable: REP)
100
80
Deviation from Average
60
40
20
0
Opérateur 2
-20
Exemple :
-40
Semble obtenir
3 opérateurs
-60
des valeurs
10 pièces
-80
1
2
plus petites
3
Operators (variable: OPER)
3 répétitions
que
Plot of Average Measurements by Operator and Part
No. of Operators: 3 (variable: OPER)
No. of
Parts: 10 (variable: WAFER)
No. of Trials: 3 (variable: REP)
opérateur 1
opérateur 3
26000
25000
24000
Average Measure
23000
22000
21000
20000
19000
18000
17000
16000
15000
14000
1
2
3
4
5
6
7
8
9
10
1
2
3
Parts (variable: WAFER)
Bernard CLÉMENT, PhD
Évaluation processus mesure
20
Combined Range Chart
Operators by Parts
Average Range: 21.7000
Sigma (Range): 11.3895
No. of Trials: 3
90
Ranges (variable: Y_EPAIS)
80
70
60
55.8686
50
40
30
21.7000
20
10
Exemple :
pièce 7
0
1
2
3
pose
Operators (variable: OPER)
3 opérateurs
problème
Combined Range Chart
10 pièces
Parts by Operators
Average Range: 21.7000
3 répétitions
Sigma (Range): 11.3895
No. of Trials: 3
90
Ranges (variable: Y_EPAIS)
80
70
60
55.8686
50
40
30
21.7000
20
10
0
1
2
3
4
5
6
7
8
9
10
Parts (variable: WAFER)
Évaluation processus mesure
Bernard CLÉMENT, PhD
21
Exemple ( suite ) : données / opérateur ( 1 et 3 ) / pièces ( 1 à 10 sauf 7 )
tolerance = 1000
Estimatd
sigma
Estimatd
variance
% of
tolerance
% of
total
estimation
σe
Repeatability
5.851
34
7.7827
0.0004
Reproducibility
20.142
406
92.2173
0.0046
Part-to-Part
2956.548
8741174
Combined R & R
20.975
440
Total
2956.622
8741614
σo
σp
Bernard CLÉMENT, PhD
99.9950
100.0000
0.0050
100.0000
Évaluation processus mesure
22
Exemple : suite
Percent Tolerance Analysis
Y-EPAIS2 Sigma intervals :5.15 Mean =17688.6 R-bar = 9.88889
R(xbar)=28.4444 R(parts)=9106.17 Operators: 2 Parts: 9
Trials: 3
Measrmnt
units
% Proc.
variation
% Total
Contribut.
% of
tolerance
Repeatability (Equipment Var).
30.13
0.1979
0.0004
3.013
Reproducibility (Appraiser Var.)
103.73
0.6812
0.0046
10.373
15226.22
99.9975
99.9950
1522.622
108.02
0.7094
0.0050
10.802
Total Process Variation
15226.60
100.0000
100.0000
1522.660
Tolerance
1000.00
Part Variation
Combined R & R
100.000
Conclusion
- la variabilité pièce-à-pièce est la plus grande source de variation : OK
- la variabilité opérateur-à-opérateur est négligeable : OK
- la variabilité de l’appareil est faible : OK
remarque : ces résultats sont confirmés par la méthode ANOVA – voir page 24
Évaluation processus mesure
Bernard CLÉMENT, PhD
Méthode:
Estimatd
sigma
.90 Lowr
.90 Uppr
Estimatd
variance
% of
R&R
% of
total
Repeatability
14.215
12.124
17.276
202
33.7262
0.0027
Reproducibility
19.926
9.598
318.915
397
66.2738
0.0053
2733.226
1860.923
4759.780
7470523
24.477
17.317
321.054
599
Interaction (OP)
analyse
Part-to-Part
de la
Combined R & R
variance
23
Total
2733.335
99.9920
100.0000
7471122
0.0080
100.0000
ANOVA
Measrmnt
units
.90
Lowr
.90 Uppr
% Proc.
variation
% Total
% of
tolerance
Repeatability
(Equipment Var).
73.21
62.440
88.97
0.5201
0.0027
7.321
Reproducibility
(Appraiser Var.)
102.62
49.428
1642.41
0.7290
0.0053
10.262
14076.11
9583.75
24512.87
99.9960
99.9920
1407.611
126.06
89.184
1653.43
0.8955
0.0080
12.606
100.00
100.00
1407.668
Interaction (Operator
x Part)
Part Variation
Combined R & R
Total Process
Variation
Tolerance
14076.68
1000.00
100.000
Évaluation processus mesure
Bernard CLÉMENT, PhD
Évaluation processus mesure
24