Dashboard des KPI : Évaluation et analyse impact/ROI de l’IA en santé
La structuration d’un cadre commun d’évaluation de l’IA en santé répond à un besoin largement partagé : établissements de santé (CHU, CH, ESPIC), payeurs, ARS, autorités et représentants d’usagers ont besoin d’outils permettant de mesurer objectivement la valeur réelle des projets d’IA au-delà des promesses marketing. Cette démarche s’articule autour de deux modèles de ROI complémentaires : un ROI « santé », basé sur les méthodes HTA, et un ROI « hors santé », centré sur la performance opérationnelle et financière. Elle intègre systématiquement trois types d’impact au-delà du financier : l’impact sur les professionnels et le travail, l’impact environnemental, et l’impact éthique et de souveraineté numérique.
L’objectif est de permettre la montée en puissance d’un modèle commun France, testé en vie réelle dans un panel de sites pilotes (CHU, CH, ESPIC), en lien avec les payeurs, les ARS et les représentants d’usagers.
Usages concrets par type d’acteur
|
Acteur |
Usage principal du dashboard |
|
Hôpitaux / établissements |
Aide à la décision d’achat, pilotage des déploiements, reporting institutionnel |
|
ARS |
Suivi du déploiement territorial, allocation des financements, comparaison inter-établissements |
|
Payeurs (Assurance maladie) |
Instruction des demandes de remboursement, évaluation de l’impact budgétaire |
|
HAS |
Alimentation des évaluations médico-économiques, développement des méthodes HTA IA |
|
Représentants d’usagers |
Contrôle de l’équité d’accès, suivi de l’impact patient |
|
Industriels |
Benchmarking concurrentiel, documentation de la valeur pour les acheteurs |
Socle transversal — Cadre commun à tout projet d’IA
Le socle transversal constitue le noyau commun que tout site pilote s’engage à appliquer à chaque projet d’IA, quel que soit son type (clinique, administratif, logistique, recherche, IA générative). Il repose sur quatre dimensions systématiques :
Dimension 1 — Impact économique et santé (ROI santé et ROI hors santé)
ROI Santé (approche HTA) :
Le ROI santé s’appuie sur les méthodologies d’évaluation des technologies de santé, qui intègrent l’efficacité clinique, le rapport coût-efficacité et les impacts organisationnels.
- Réduction de la morbi-mortalité (vies sauvées, hospitalisations évitées, complications évitées)
- Amélioration du diagnostic (sensibilité, spécificité, délai diagnostique)
- Optimisation du parcours (fluidité, continuité, prévention des ruptures)
- Coût par QALY (Quality-Adjusted Life Year) évité
- Budget Impact Analysis sur 3 et 5 ans
ROI Hors Santé (performance opérationnelle) :
Ce modèle s’applique aux IA administratives, logistiques et de recherche, dont l’impact sur les résultats de santé est indirect :
- Heures économisées ou réaffectées (documentation, codage, planification)
- Réduction des coûts opérationnels (économies réalisées vs. dépenses évitées)
- Amélioration du taux de valorisation des séjours (codage PMSI)
- Délai de retour sur investissement (payback period)
Dimension 2 — Impact travail / QVCT / relation de soins
L’impact sur les professionnels de santé est une dimension à part entière, non réductible à un indicateur économique :
- Satisfaction professionnelle : échelles validées (NPS professionnel, score MBI pour le burnout)
- Charge cognitive et mentale : mesure avant / après par questionnaires spécifiques
- Absentéisme et turnover : indicateurs de stabilité des équipes
- Autonomie professionnelle : perception du contrôle sur les décisions assistées
- Qualité de la relation de soins : temps de présence auprès du patient, satisfaction relationnelle déclarée
- Formation et montée en compétences : heures de formation dédiées, sentiment de maîtrise des outils
Un professionnel en « technostress IA » est estimé 6 fois plus susceptible de s’absenter. L’IA pourrait permettre un gain moyen de 2 heures par jour si elle est correctement déployée.
Dimension 3 — Impact environnemental
Cette dimension, encore peu intégrée dans les évaluations hospitalières, devient incontournable dans un contexte de responsabilité sociétale des établissements :
- Consommation énergétique des infrastructures de calcul liées à l’IA (kWh/an, en équivalent CO₂)
- Consommation d’eau des serveurs et data centers
- Politique d’hébergement : infrastructure locale certifiée HDS vs. cloud externe (impact souveraineté + environnement)
- Efficacité computationnelle : optimisation des requêtes pour réduire l’empreinte du calcul
- Bilan Carbone des équipements : cycle de vie des GPU et serveurs dédiés
Les data centers d’IA consomment 4 à 5 fois plus que les data centers traditionnels. En France, le dispositif éco-énergie tertiaire impose aux data centers de plus de 1 000 m² une baisse de 40% de leur consommation à l’horizon 2030.
Dimension 4 — Impact éthique et gouvernance (souveraineté numérique)
La dimension éthique est transversale à toute évaluation d’IA en santé et constitue désormais une exigence réglementaire avec l’AI Act et le référentiel de certification HAS 2025 :
- Équité algorithmique : analyse systématique des performances différenciées par sous-groupes (genre, âge, origine, territoire)
- Transparence et explicabilité : pourcentage de professionnels comprenant le fonctionnement de l’outil, disponibilité d’explications sur les recommandations
- Chaîne de responsabilité : clarté du contrat de responsabilité en cas d’erreur médicale liée à l’IA
- Consentement des patients : taux de patients informés et ayant consenti à l’utilisation de l’IA dans leur prise en charge
- Souveraineté des données : localisation (France / Europe), hébergement HDS certifié, capacité d’audit indépendant, clauses contractuelles de portabilité et de réversibilité
- Dépendance fournisseur : score de lock-in, interopérabilité avec d’autres solutions
Modules spécifiques par type d’IA
Module IA clinique (diagnostic, triage, monitoring, thérapeutique)
Au-delà du socle transversal, les IA cliniques nécessitent des indicateurs spécifiques alignés sur les standards méthodologiques des essais cliniques et du HTA :
- AUC, sensibilité, spécificité, VPP, VPN (performance du modèle)
- Taux de détection vs taux de faux positifs actionnables (alerte fatigue)
- Délai diagnostique moyen avant/après
- Taux d’événements indésirables liés à l’IA (incidents de sécurité)
- Résultats patients (mortalité, réadmissions, durée de séjour)
- Niveau de supervision humaine maintenu (% de décisions validées vs automatiques)
Module IA organisationnelle / administrative / IA générative
- Taux de codage automatisé validé sans correction
- Heures de documentation économisées (ambient listening, IA générative)
- Amélioration du taux de valorisation des séjours (PMSI)
- Réduction des délais : facturation, admission, rendez-vous
- Taux d’adoption effectif et taux d’abandon
Module IA de recherche / découverte
- Gain de temps sur les étapes de recherche bibliographique et de criblage
- Taux d’éligibilité aux essais cliniques détectée plus rapidement
- Nombre de projets de recherche rendus possibles par la valorisation des données
- Qualité et complétude des données structurées disponibles pour la recherche
Des sites pilotes vers un modèle commun France
Le déploiement de ce cadre d’évaluation doit suivre une trajectoire progressive, fondée sur l’expérimentation en vie réelle avant la standardisation. La première phase consiste à sélectionner un panel de sites pilotes diversifiés (CHU, CH de taille moyenne, ESPIC), en lien avec les ARS, les payeurs et les représentants d’usagers. Chaque site pilote s’engage à documenter systématiquement les quatre dimensions du socle transversal pour chaque projet d’IA actif.
La deuxième phase vise à consolider et comparer les résultats entre sites, pour identifier les indicateurs les plus robustes, les méthodes de collecte les plus réalistes, et les facteurs contextuels modérant les résultats. Cette phase permettra de documenter les hypothèses de chaque modèle de ROI, en distinguant ce qui est observable directement (heures économisées, taux d’adoption) de ce qui nécessite des méthodes d’imputation ou de modélisation (vies sauvées, complications évitées).
La troisième phase consiste à converger vers un modèle commun France, potentiellement articulé avec les travaux européens en cours (EUnetHTA, EHDS, AI Act), et à produire un référentiel opposable ou fortement incitatif permettant aux établissements, aux payeurs et aux autorités de parler un même langage sur la valeur réelle de l’IA en santé.
Le projet Alliance Santé IA du CHU de Montpellier, avec son ambition de réplicabilité et sa rigueur d’évaluation documentée, constitue le prototype le plus avancé de cette trajectoire en France. Sa vocation est précisément de démontrer qu’il est possible de déployer une IA hospitalière souveraine, encadrée et évaluée en conditions réelles, au service de tous les acteurs du système de santé.





