Une évaluation se périme
Un outil continue de vivre après son évaluation. Il ajoute des fonctions, refait son interface, change de prix, modifie sa politique de confidentialité, cesse d'être mis à jour, ou disparaît du magasin.
Certains de ces changements rendent faux ce qui est écrit sur sa fiche. D'autres non.
Une collection à jour n'est donc pas une collection réévaluée en permanence — ce serait impossible. C'est une collection où chaque changement est détecté, puis trié selon ce qu'il touche vraiment.
Deux mécanismes s'en occupent : un robot qui détecte, et une règle qui tranche.
Ce que le robot surveille
Un logiciel repasse les outils affichés dans une collection et compare le magasin à la fiche :
la version publiée
la description du fournisseur
le prix
la politique de confidentialité, et son accessibilité
la présence de l'outil dans le magasin
Dès qu'un écart apparaît, une alerte part vers une personne qui vérifie. Aucune fiche ne se modifie toute seule. Le robot détecte, une personne tranche.
La règle qui tranche
Tout tient dans une phrase :
Si le changement touche une fonction qui a servi à établir un constat, l'outil est repris en main et réévalué. Sinon, il reste sous surveillance.
Une correction de bogue qui ne touche aucune fonction évaluée ne justifie pas de reprendre une évaluation. Une refonte complète de l'interface, en revanche, remet en cause plusieurs constats d'un coup : un évaluateur réinstalle l'outil et refait les tests concernés.
D'où une conséquence qui surprend : la plupart des mises à jour d'un outil ne changent rien à sa fiche. C'est le signe que la règle est appliquée, pas qu'elle est ignorée.
Les quatre traitements possibles
Le tableau ci-dessous montre ce que déclenche chaque type d'événement détecté sur un outil déjà en ligne.
Ce qui arrive à l'outil | Ce qui se passe |
Il disparaît du magasin, subit un incident de sécurité, ou fait l'objet d'un rappel réglementaire | Il est suspendu. Il sort de la diffusion, puis ses conditions d'admission et son volet cybersécurité sont réexaminés |
Il perd sa version française, sa politique de confidentialité devient inaccessible, ou il cesse d'être mis à jour | Il ne remplit plus les conditions d'admission. Un évaluateur recommande de le garder ou de le retirer, et cherche un outil de remplacement |
Il refait son interface, ajoute des fonctions cliniques, ajoute de l'intelligence artificielle, change de prix, ou demande de nouvelles permissions | Un évaluateur le reprend en main. Il réinstalle l'outil et refait les tests concernés : la classification si de nouvelles fonctions cliniques apparaissent, les preuves si les promesses changent, la cybersécurité si les permissions bougent |
Il modifie sa politique de confidentialité, partage des données avec un nouveau tiers, ou change l'hébergement des données | Un évaluateur refait la vérification documentaire. Le volet cybersécurité et confidentialité est réexaminé sans réinstaller l'outil |
Un cas mérite d'être isolé : le passage du gratuit au payant. Ce n'est pas qu'un chiffre à corriger. Un outil qui devient payant devient inaccessible à une partie des personnes à qui il était recommandé. Ce changement déclenche donc une revue de la pertinence de l'outil dans la collection, pas seulement une mise à jour du prix.
Les délais de chaque traitement sont fixés dans le contrat de chaque déploiement et varient selon la gravité.
Retirer un outil et le remplacer sont deux décisions
Retirer un outil devenu non conforme est urgent.
Lui trouver un remplaçant ne l'est pas : il faut identifier un candidat, l'évaluer, puis faire approuver son ajout par l'instance qui décide de la composition de la collection.
Une collection peut donc compter un outil de moins pendant un moment. C'est mieux que les deux autres options : laisser en ligne un outil non conforme, ou le remplacer par un outil non évalué.
Quand un critère s'ajoute à la grille
La grille d'évaluation change parfois — nouveau standard, nouvelle exigence réglementaire, angle mort découvert.
Un critère qui s'ajoute s'applique rétroactivement à tous les outils déjà évalués. Autrement, certains outils seraient jugés sur l'ancienne grille et d'autres sur la nouvelle, et plus rien ne serait comparable. Ce n'est donc pas un ajustement d'affichage, c'est un chantier de réévaluation. Un article distinct détaille ce fonctionnement.
Ce que la surveillance ne couvre pas
L'adéquation à une personne. Un outil conforme et bien évalué peut ne pas convenir à quelqu'un. L'évaluation informe le choix, elle ne le fait pas, et elle ne remplace pas le jugement clinique.
Une certification. Une évaluation n'est ni une certification ni une approbation réglementaire.
Signaler une information périmée
Une information qui paraît fausse ou périmée peut être signalée, comme un problème rencontré avec un outil de la collection. Les modalités et les délais changent d'un déploiement à l'autre : la page d'information de la collection indique le canal à utiliser.