Méthode
Taumin lit un site comme le ferait un enquêteur patient : il relève ce que le site affirme, cherche ce qui le confirme ou le contredit dans des sources publiques, et note chaque constat avec sa preuve et l’heure de l’observation.
Comment se déroule une analyse
- Lecture du site. Les pages principales, les mentions légales, les pages « à propos », d’équipe et de transparence, les avis affichés et la fenêtre de discussion quand il y en a une.
- Vérifications externes. Registres d’entreprises (en France, l’API Recherche d’entreprises ; au Royaume-Uni, Companies House), géocodage de l’adresse, date d’enregistrement du domaine, archives du site, recherche des photos d’équipe ailleurs sur le web.
- Relevé des signaux. Chaque signal trouvé est rangé dans une famille, avec sa fiabilité et sa preuve.
- Trois scores séparés. Usage de l’IA, transparence et risque, calculés chacun de leur côté.
- Rapport. Une fiche par signal, puis les éléments de confiance trouvés, les signaux qu’on n’a pas pu évaluer, et la méthode utilisée.
Les 25 signaux, en huit familles
Le référentiel de Taumin décrit 25 signaux. Pour chacun, il précise la méthode, la fiabilité, les règles potentiellement concernées et les cas où le signal peut tromper.
- Vérifiabilité (6) : âge du domaine, identité d’entreprise présente et retrouvée dans les registres, adresse vérifiable, historique du site cohérent.
- Provenance (2) : marqueurs « généré par IA » lus dans les fichiers (C2PA, IPTC), étiquettes visibles.
- Interaction avec une IA (2) : assistant de discussion présenté comme un humain, ou clairement identifié comme une IA.
- Identités (3) : photos d’équipe probablement synthétiques ou retrouvées ailleurs, dirigeants absents des registres.
- Avis (5) : avis au même gabarit, pics de publication, témoignages introuvables, avis d’initiés non signalés.
- Contenu généré (3) : textes, articles et images probablement générés, présentés comme rédigés ou photographiés.
- Transparence (2) : usage de l’IA constaté sans aucune mention, ou page qui explique l’usage de l’IA.
- Réseau (2) : gabarit réutilisé sur d’autres domaines, coordonnées partagées avec des sites déjà signalés par une autorité.
Fiabilité et règles de prudence
Chaque signal a une fiabilité haute, moyenne ou faible, fixée d’après nos mesures et ce que la méthode laisse passer. Quelques règles s’appliquent à tous les rapports :
- Aucun drapeau sérieux sans deux signaux indépendants, ou un signal de fiabilité haute.
- Un signal de fiabilité faible ne déclenche jamais un drapeau à lui seul.
- L’absence de marqueur de provenance ne prouve rien : la plupart des images générées n’en portent pas, et beaucoup de sites les retirent.
- Pour les visages, on cherche seulement si la photo est probablement synthétique ou publiée ailleurs. Taumin n’identifie jamais une personne.
- Un site protégé contre les robots n’est pas contourné. Le rapport le classe « non évaluable » et dit pourquoi.
Ce que nous avons mesuré
Nous publions nos taux d’erreur, parce qu’un outil qui ne dit pas où il se trompe ne mérite pas qu’on le croie.
| Essai | Résultat | Conséquence |
|---|---|---|
| Détecteur de texte en français, 900 textes humains et 55 textes générés | Au seuil qui n’accuse aucun texte humain d’au moins 100 jetons (un court paragraphe), 16 textes générés sur 43 relevés | Signal de fiabilité faible, jamais utilisé pour le risque |
| Détecteurs d’images, étalonnés sur 2 500 vraies images | Environ 1 vraie image sur 100 accusée ; 90 % des portraits Flux relevés, 10 % des photos de produits des générateurs les plus récents | Deux images relevées au moins avant tout signal ; une image non relevée ne prouve rien |
| Risque sur 64 sites d’entreprises labellisées par l’État | Risque élevé à tort : 34 % avant correction, 8 % après | Mentions légales incomplètes comptées pour un seul signal ; « identité incomplète » signalée à part |
Les règles citées
Un rapport peut citer une règle « potentiellement concernée », par exemple l’article 50 du règlement européen sur l’IA ou les règles sur les faux avis. Seules les règles dont nous avons vérifié le texte et la date d’application sont citées, avec ce statut. Une règle citée n’établit pas un manquement : seul un juriste ou une autorité peut le faire.
Droit de réponse
Chaque rapport d’audit prévoit un droit de réponse. Une entreprise qui conteste un constat peut nous écrire ; nous vérifions, corrigeons ce qui doit l’être et indiquons la date de la correction.