R

1
Répétitions des tests statistiques
2
Répétition des tests

• Plusieurs tests réalisés pour répondre à une même
  question
• par exemple plusieurs critère de jugement
• Conclusion à un effet à partir du moment où il
  existe au moins un test significatif
• Le risque a de la conclusion est bien supérieure
  à 5
• Inflation du risque alpha
• Rappel, avec un ttt. sans effet,
• sur 100 tests, il y en aura 5 significatifs (en
  moyenne)

3
Contrôle parfait du risque alpha (5)
Conclusion
1 test
(seuil de 5)
Le risque de conclure à tort est gt à 5
Conclusion
A partir du moment où au moins 1 test est
significatif
4
Comparaisons multiples
Aux dés, la probabilité d obtenir un six est
plus forte avec 3 dés qu avec un seul
Globalement, le risque de conclure à tort à une
différence lors de ces 4 comparaisons est bien
plus important que 5.
5
Comparaisons multiples

• Avec un traitement sans efficacité
• en faisant 10 tests statistiques (p.e. 10 essais)
• nous avons 40 de risque de faire au moins une
  conclusion (à tort)

6
Critères de jugement

• Aspirine pour la prévention des événements
  cardiovasculaires
• Critères de jugement
• mortalité totale
• Événements cardiovasculaires mortels ou non
  mortels
• DC cardiovasculaires
• Mort subite
• Infarctus
• Accident vasculaire cérébraux
• Interventions de revascularisation
• Risque alpha de conclure à tort à l'efficacité ?

7
Critère de jugement principal

• Critère principal
• Décès de toute cause
• Critères secondaires
• Décès cardiovasculaire
• Mort subite
• Infarctus
• Accident vasculaire cérébraux
• Chirurgie

• Décès de toute cause
• Décès cardiovasculaire
• Mort subite
• Infarctus
• Accident vasculaire cérébraux
• Chirurgie

8
Critère principal

• Conclusion que si le critère principal est
  significatif
• Critères secondaires explicatifs

9
Multiplicité des critères de jugement - Exemple
In women, however (Table 2), a positive effect on
BMD was observed at several sites (mostly
trabecular bone zones), namely the femoral neck
and the Wards triangle in the 6069 y group, and
upper and total radius in the 7079 y group.
10
Autres situations de répétition des tests

• mesures répétées au cours du temps

11
Analyse en sous-groupes - Essai non concluant
Essai 0.92 NS 1 Agelt75 0.92 NS 2 Agegt75 0.95 NS
3 Hommes 0.92 NS 4 Femmes 0.99 NS 5 Antécédents
d'infarctus 0.87 NS 6 Pas d'antécédents
d'infarctus 1.03 NS 7 Prise d'aspirine 0.78 plt0.0
5 8 Pas d'aspirine 1.09 NS
12
Limites- Multiplicité des tests
1 Agelt75 test 1 risque erreur 5 2 Agegt75 test
2 risque erreur 5 3 Hommes test 3 risque
erreur 5 4 Femmes test 4 risque erreur
5 5 Antécédents d'infarctus test 5 risque
erreur 5 6 Pas d'ATCD d'infarctus test 6 risque
erreur 5 7 Prise d'aspirine test 7 risque
erreur 5 8 Pas d'aspirine test 8 risque erreur
5
13
Analyses en sous groupes - Essai concluant
Essai 0.78 plt0.05 1 Agelt75 0.65 plt0.01 2 Agegt75
0.90 NS 3 Hommes 0.76 plt0.05 4 Femmes 0.78 plt0.05
5 Antécédent d'infarctus 0.97 NS 6 Pas
d'antécédent d'infarctus 0.70 plt0.01 7 Diabétique
0.50 plt0.001 8 Non diabétique 0.91 plt0.05
14
(No Transcript)
15
Analyses intermédiaires

• en cours dessai, avant que tous les patients
  prévus aient été recrutés
• et/ou avant la fin de la période de suivi
  initialement prévue
• But arrêter prématurément
• pour efficacité
• pour toxicité
• pour futilité

16
Ajustement du seuil de signification

• Méthode de Bonferroni
• Pour k comparaisons, le seuil ajusté est 
• Pour k3, saj 5 / 3 1.67
• Quand ? est petit,
• Donc pour conserver un risque alpha global de
  5 
• Inconvénient  fait lhypothèse dune stricte
  indépendance des variables testées ? méthode
  conservatrice

17
Ajustement du seuil de signification - 2

• Méthode de Tukey
• Pour k3, saj 5 / 1.73 2.89

18
Cas 1

• 3 analyses intermédiaires 1 analyse finale 4
  comparaisons
• Arrêt prématuré de lessai

19
Cas 2

• Pas darrêt prématuré mais conclusion à
  lefficacité

20
Cas 3

• Pas darrêt prématuré et résultat non
  significatif (p4gtsaj)

21
Cas 4

• Résultat non significatif

22

• Conclusion essai 1
• pas de démonstration de l'efficacité
• Conclusion essai 2
• démonstration de l'efficacité de manière
  statistiquement significative (plt0.05)
• sur les 3 premiers critères de jugement

23
Catalogue des tests statistiques
24
Taille de léchantillon

• Avec les échantillons de grandes tailles
• les distributions des
• moyennes
• proportions
• différence de moyenne
• différence de proportions
• sont des distributions normales
• --gt calcul simple de p et des IC
• Avec les échantillons de petites tailles (nlt30)
• ces distributions ne sont pas normales (en
  général)
• (en général inconnues)
• techniques spéciales dites "non paramétriques"

25

• Variable continue
• Données distribution normale
• moyenne distribution normale qq soit n
• Données distribution quelconque symétrique
• moyenne distribution normale qq ngt30
• Données distribution quelconque
• moyenne distribution normale qq ngt100
• Variable binaire
• proportion distribution normale qd ngt30

26
Séries statistiques appariées

• 2 séries statistiques provenant de l'observation
  des mêmes sujets (unités statistiques)
• 2 méthodes de dosage de la glycémie A et B
• les 2 méthodes sont appliquées aux mêmes sujets
• pour chaque patient 2 valeurs, une avec chaque
  méthode
• 2 séries appariées
• 2 groupes de patients différents
• méthode A utilisée avec le 1er grp
• méthode B utilisée avec le 2e grp
• 2 séries non appariées

27
Catalogue des tests statistiques

• Le test utilisé doit être précisé avec le
  résultat
• Un test pour chaque situation définie par
• type de la variable (continue, binaire)
• petit ou grand effectif
• séries appariées ou non

28

• Var. continues (comparaison des moyennes)
• Séries non appariées
• grand effectif
• test t (test de Student), Test z
• test non paramétrique
• Test de Wilcoxon (Mann-Whitney)
• Séries appariées
• grand effectif
• test t pour séries appariées (Student pour séries
  appariées)
• test non paramétrique
• Test de Wilcoxon pour séries appariées

29

• Var. binaires (comparaison des proportions)
• Séries non appariées
• grand effectif
• Chi 2 ( )
• test non paramétrique
• Test exact de Fisher
• Séries appariées
• test de McNemar
• Var. qualitative à plusieurs modalités
• idem var. binaires