Validation et Critres de qualit des Outils dAide la Dcision OAD

1
Validation et Critères de qualitédes Outils
dAide à la Décision(OAD)

• Introduction

2
La Validation

• Essentielle pour les OAD
• Etape longue,  critique  et non bornée dans
  lélaboration des OAD
• Une notion souvent floue
• Rarement valorisée, peu valorisante

3
PLAN

• Processus de validation
• Les différents types dOAD et leur validation

4
Validation définitions

• Vérification
• le formalisme du modèle est correct
• mécanique (bugs programmation)
• logique
• Calibration
• estimation des paramètres du modèle
• limites
• Validation
• le modèle possède, dans son domaine
  dacceptabilité, une précision suffisante par
  rapport aux objectifs qui lui sont assignés
• Validation vs évaluation

Rykiel, 1996 Hodges,1990Sinclair et Séligman,
2000
5
Validation différentes étapes
Problème objectifs etbesoins
Validationopérationnelle
Validitéconceptuelle
simulation
Analyse etmodélisation
Validitédes données
paramétrisation
Modèleconceptuel
Modèleinformatisé
informatisation
Vérification du modèle informatisé
Sargent, 1984
6
Procédures de validation

• Test de Turing (différence système - modèle?)
• Techniques visuelles
• Comparaison à dautres modèles
• Validité interne
• Validation sur données anciennes
• Test des conditions limites
• Analyses de sensibilité
• Validation statistiques
• Validation prédictive

7
Validation et classes de problèmes
Nombre de données
Validation statistique
Validation quantitative
Validation conceptuelle
Validation qualitative
Degré d explicitation des processus
Rykiel, 1996
8
Les 2 types de Validation dOAD(Finley et Wilson
1991)

• Validation analytique
• validation de chaque partie de lOAD
• Validation synoptique
• Validation par lusage

9
Décisions optimisées
OPTIMISE
Données
10
Simulateurs dactions
Utilisateur décision
I.H.M
Informations
11
Simulateurs de stratégies (optimisées)
Utilisateur
I.H.M
Modèle de décision
OPTIMISE
Informations
12
Représentations dorganisation ou de conduite
Utilisateur
Propositions dActions
Informations
Représentations dorganisation ou de conduite
13
Quelles validations pour OAD ?
Validation analytique
statistiques
quantitative
Décisionsoptimisées
Simulateursde stratégies
Simulateursdactions
Systèmesexperts
représentationsconduite
conceptuelle
qualitative
Validation synoptique
14
La validation synoptique

• Pas de méthodes standardisées
• A faire en fonction de lutilisateur final ou
• commanditaires
• Recherche dindicateurs pertinents

15
La validation synoptique dOAD(Donnelly et Moore
1997)

• Vérification
• OAD permet-il de traiter question posée ?
• Confirmation
• Résultats des premiers tests indiquent-ils aux
  concepteurs que le modèle est utilisable ?
• Réactions des premiers utilisateurs
• Trouvent-ils lOAD intéressant ?
• Utilisateurs adoptent-ils le produit ?
• Loutil apporte-t-il un gain (indicateurs?)

Conception
Dévelop-pement
Utilisation