Données
Provenance, cohorte, représentativité, données manquantes, doublons et fuites potentielles.
Évaluation indépendante
Audit technique et méthodologique des IA en santé
Avant un investissement, un partenariat ou une étape de validation, QSTOM-IT examine si les performances annoncées sont soutenues par les données, reproductibles dans le périmètre accessible et cohérentes avec le protocole présenté.
7 à 10 jours ouvrésPérimètre cibléSans décision d'investissement à votre placeRapport documenté
Déclencheurs
Quand faire intervenir QSTOM-IT ?
- Avant une levée de fonds ou un term sheet
- Avant un partenariat industriel ou hospitalier
- Lors de l'évaluation d'une HealthTech ou MedTech
- Avant d'engager une expérimentation plus coûteuse
- Lorsque les résultats sont élevés mais difficilement vérifiables
Périmètre
Ce que nous cherchons à vérifier
Protocole
Cible, séparation train/test, temporalité, comparateurs, sélection des métriques et reproductibilité.
Performances
Calcul des métriques, seuils, calibration, sous-populations, faux positifs et faux négatifs.
Conclusions
Écart entre les résultats réellement observés et les affirmations présentées aux décideurs.
Méthode
Un audit court doit rester ciblé
En 7 à 10 jours, l'objectif n'est pas de reproduire l'intégralité d'un produit. Nous identifions les affirmations les plus importantes pour la décision et cherchons les risques capables d'en modifier l'interprétation.
Éléments pouvant être examinés
- Data room technique
- Documentation des données
- Protocoles d'entraînement et de validation
- Résultats détaillés
- Notebooks ou extraits de code
- Journaux d'expérimentation
- Entretiens avec l'équipe technique ou scientifique
Livrables
- Synthèse des risques critiques pour décideurs
- QSTOM Evidence Report
- Liste des éléments vérifiés et non vérifiés
- Questions à poser à l'équipe
- Tests ou preuves complémentaires recommandés
Limites
Ce que l'audit ne fait pas
- Ne remplace pas une étude clinique
- Ne constitue pas une certification réglementaire
- Ne donne pas un avis juridique
- Ne décide pas d'investir ou non
- Ne conclut pas au-delà des éléments accessibles
FAQ
Questions fréquentes sur l'audit
Faut-il transférer les données patients ?+
Pas nécessairement. Une première revue peut être réalisée à partir de la documentation et de la data room. Lorsque des tests sont nécessaires, nous privilégions l'exécution dans un environnement contrôlé par le client.
Pouvez-vous auditer un modèle sans code ?+
Oui, mais le niveau de conclusion sera limité. Nous distinguons explicitement ce qui est documenté, ce qui est testé et ce qui n'a pas pu être vérifié.
Travaillez-vous pour la startup ou pour l'investisseur ?+
Les deux sont possibles, mais pas sous la même qualification. Une due diligence commandée par l'acheteur est séparée d'une mission de préparation commandée par l'entreprise évaluée.
QSTOM-IT
Vous devez vérifier un dossier avant une décision ?
Indiquez-nous les affirmations techniques prioritaires, le calendrier et le niveau d'accès disponible. Nous vous dirons ce qui peut raisonnablement être vérifié dans le délai.