Chiffres clés
Détection des documents générés par IA : les chiffres
Ce que détectent les LLM de pointe, les détecteurs open source d'images IA et Holograin sur des bulletins de paie et relevés bancaires redessinés par un générateur d'images IA, à 1 % de faux positifs, par canal et sur des générateurs inédits. CSV inclus.
Par Holofin Research
Publié le Mis à jour le - des pages modifiées par IA détectées par Holograin à 1 % de faux positifs
- 89 %
- pour Gemini 4 Argon au même taux de faux positifs
- 69 %
- pages authentiques signalées comme modifiées par IA par Gemini 4 Argon
- 45 / 100
- détectées sur GPT-5.4 image, un générateur exclu de l'entraînement
- 95 %
Sur cette page
- Synthèse
- Quatre détecteurs sur les mêmes 200 pages téléversées (100 modifiées par IA, 100 authentiques)
- Pages modifiées par IA détectées à 1 % de faux positifs, selon le canal d'arrivée du document
- Générateurs d'images jamais vus à l'entraînement, détection après téléversement sur Holofin
- Méthodologie
- Sources
- Questions fréquentes
Synthèse
Sur les mêmes 200 pages, 100 modifiées par des générateurs d'images IA et 100 authentiques, toutes passées par le pipeline de téléversement de Holofin, Holograin détecte 89 % des pages modifiées par IA en signalant 1 page authentique sur 100. Au même taux de faux positifs, Gemini 4 Argon en détecte 69 %, GPT-6.1 Sol Pro 40 % et un détecteur open source d'images IA utilisé tel quel 22 %.
Les deux LLM échouent dans des directions opposées : Gemini 4 Argon a détecté 90 des 100 faux mais signalé 45 des 100 pages authentiques ; GPT-6.1 Sol Pro a signalé 2 pages authentiques et détecté 40 faux. Par canal, Holograin détecte 96 % sur le fichier d'origine, 97 % après une capture d'écran sur téléphone et 90 % après téléversement. Sur GPT-5.4 image, exclu de l'entraînement, il en détecte 95 %.
Données
Quatre détecteurs sur les mêmes 200 pages téléversées (100 modifiées par IA, 100 authentiques)
| Détecteur | Pages modifiées par IA détectées | Pages authentiques signalées | Détectées à 1 % de faux positifs |
|---|---|---|---|
| Gemini 4 Argon | 90 / 100 | 45 / 100 | 69 % |
| GPT-6.1 Sol Pro | 40 / 100 | 2 / 100 | 40 % |
| Détecteur open source d'images IA, tel quel | 8 à 21 / 100 | 0 à 2 / 100 | 22 % |
| Holograin | 84 / 100 | 1 / 100 | 89 % |
Les deux premières colonnes sont les verdicts propres à chaque détecteur. La dernière fixe le seuil pour que 1 page authentique sur 100 soit signalée et donne la part de pages modifiées par IA encore détectées. Les 100 pages modifiées par IA viennent de Nano Banana 2.1, Gemini 2.5 et 3.1 image, GPT-5 image mini et GPT-5.4 image ; aucune des 200 pages n'a servi à l'entraînement.
Télécharger le CSVPages modifiées par IA détectées à 1 % de faux positifs, selon le canal d'arrivée du document
| Canal | Détecteur | Pages modifiées par IA détectées |
|---|---|---|
| Fichier d'origine | Holograin | 96 % |
| Capture d'écran sur téléphone | Holograin | 97 % |
| Téléversé sur Holofin | Holograin | 90 % |
| Téléversé sur Holofin | Détecteur open source d'images IA, tuile par tuile en pleine résolution | 20 % |
Documents de test jamais vus à l'entraînement. Holograin a un seuil par canal, fixé sur des documents authentiques hors du jeu d'entraînement, si bien que 1 page authentique sur 100 est signalée quel que soit le canal d'arrivée. Mesuré sur un jeu de test plus large que le tableau des quatre détecteurs, environ 825 pages authentiques par canal.
Télécharger le CSVGénérateurs d'images jamais vus à l'entraînement, détection après téléversement sur Holofin
| Modèle d'image | Pages modifiées par IA détectées |
|---|---|
| GPT-5.4 image | 95 % |
| Nano Banana Pro | 84 % |
| Gemini 3.1 Flash-Lite Image | 82 % |
| GPT-5 Image | A refusé de modifier des documents financiers |
Une modification de la page entière par document de test, seuil de production. GPT-5.4 image a été entièrement exclu de l'entraînement. La couverture mesurée porte sur les modèles d'image de Google et d'OpenAI ; les autres familles n'ont pas été mesurées.
Télécharger le CSVMéthodologie
Jeu de test : 200 pages de documents financiers, 100 modifiées par cinq générateurs d'images IA et 100 authentiques, toutes converties par le pipeline de téléversement de Holofin. Aucune n'a servi à l'entraînement.
Chaque LLM a reçu la page avec la consigne d'un analyste fraude et rendu un verdict avec une probabilité. Les détecteurs open source d'images IA ont été utilisés tels quels, puis tuile par tuile en pleine résolution. Holograin est le modèle de production.
Chaque taux de détection est donné à un seul point de fonctionnement : le seuil auquel 1 page authentique sur 100 est signalée. Un taux de détection sans son taux de faux positifs ne décrit pas un détecteur, car les analystes cessent de lire les alertes d'un outil qui signale régulièrement des demandeurs honnêtes.
Holograin n'a été ni entraîné ni mesuré sur des pièces d'identité, et les résultats portent uniquement sur les modèles d'image de Google et d'OpenAI.
Une erreur ? Écrivez à [email protected] et nous corrigerons la ligne en notant la modification.
Sources
- Holofin, Holograin : détecter les documents redessinés par IA (article complet et exemples, en anglais)(consulté le 1er novembre 2026)
Licence : CC BY 4.0. Réutilisation libre avec attribution à Holofin.
Questions fréquentes
Un LLM peut-il dire si un document a été généré par IA ?
Pas de façon fiable. Dans ce test, Gemini 4 Argon a détecté 90 des 100 pages modifiées par IA mais signalé 45 des 100 authentiques, et GPT-6.1 Sol Pro a signalé 2 pages authentiques mais manqué 60 faux. Un LLM juge si un document est plausible, et un bulletin de paie modifié par IA est plausible par construction.
Pourquoi les détecteurs d'images IA prêts à l'emploi ratent-ils les documents ?
Ils sont entraînés sur des photographies. Un document scanné est surtout du blanc uniforme avec des caractères nets et des artefacts de compression, loin de ce qu'ils ont vu, et certains réduisent la page à quelques centaines de pixels avant de la noter. Utilisé tuile par tuile en pleine résolution, un des meilleurs détecteurs open source a détecté 20 % des pages modifiées par IA téléversées, à 1 % de faux positifs.
Une capture d'écran ou une recompression efface-t-elle les traces ?
Non. Holograin détecte 97 % des pages modifiées par IA après une capture d'écran sur téléphone et 90 % après téléversement et conversion, à 1 % de faux positifs.
La détection tient-elle sur des générateurs absents de l'entraînement ?
Sur ceux qui ont été mesurés, oui : 95 % sur GPT-5.4 image, exclu de l'entraînement, 84 % sur Nano Banana Pro et 82 % sur Gemini 3.1 Flash-Lite Image. Aucun résultat n'est revendiqué pour les familles non mesurées.
Puis-je réutiliser ces chiffres ?
Oui, sous licence CC BY 4.0 avec attribution à Holofin. Chaque tableau est téléchargeable en CSV ; le compte rendu complet se trouve dans l'article cité.
Testez Holofin sur vos propres documents.
Chaque valeur reliée à sa position sur la page, chaque PDF analysé pour détecter les falsifications, des règles appliquées à l'ensemble du dossier.