L'INESSS a développé un cadre d'appréciation de la valeur spécifiquement adapté aux technologies numériques (Bulletin de veille no 19, janvier 2026), évaluant la sécurité, la fiabilité, la protection des renseignements personnels et l'intégration au flux de travail clinique.
Nuance clinique
Les cliniciens sont mal armés par leur formation pour évaluer les outils IA — ils n’ont pas appris à lire des études de validation algorithmique, à comprendre les métriques de performance (AUC, sensibilité/spécificité en sous-groupes) ou à identifier les biais de représentation. C’est un problème structurel de littératie numérique médicale, pas une déficience individuelle. La solution n’est pas que chaque médecin devienne expert en IA — mais que des processus d’évaluation structurés existent dans les établissements et que les associations professionnelles produisent des avis.
Points pratiques
Grille d’évaluation en 5 dimensions :
1. Validation clinique
- Publication indépendante (pas seulement les données marketing) ?
- Taille de l’échantillon de validation adéquate ?
- Population de validation similaire à la mienne (langue, contexte, pathologies) ?
- Analyse par sous-groupes disponible (âge, sexe, ethnie) ?
- Comparaison à un standard de référence (gold standard) ?
2. Conformité réglementaire
- Dispositif médical au sens de Santé Canada ? Si oui, homologation requise (classe I, II, III)
- Données hébergées conformément à la Loi 25 ?
- Entente de traitement des renseignements personnels signée ?
- Politique claire sur la durée de rétention et la suppression des données ?
3. Intégration pratique
- Intégration native avec mon DME ? Ou workflow supplémentaire ?
- Période d’essai disponible ?
- Support technique francophone ?
- Formation initiale incluse ? Par qui ?
4. Transparence et sécurité
- L’outil explique-t-il ses recommandations (explicabilité) ?
- Mécanisme de signalement des erreurs cliniques ?
- Processus de mise à jour du modèle (qui décide, quelle fréquence) ?
- Possibilité d’audit des décisions de l’outil ?
5. Modèle économique
- Coût mensuel / annuel / par utilisation ?
- Conditions de résiliation (préavis, frais) ?
- Qu’arrive-t-il à mes données si le fournisseur cesse ses activités ?
- Portabilité des données sortantes (format standard) ?
Drapeaux rouges :
- Validation uniquement interne au fournisseur
- Impossibilité d’accéder aux données de performance par sous-groupe
- Contrat sans clause explicite sur les données personnelles
- Aucun mécanisme de signalement d’erreurs
Preuves et contexte public
- Comment évaluer un scribe IA pour une pratique en médecine de famille ?
- Évaluation clinique de l’IA — pilier