Benchmark indépendant : 504 rounds, 8 domaines métier, 0 leak. Résultats factuels, données 100 % fictives, protocole reproductible.
Notre CRT (Confidential Reversible Tokenization) remplace les données personnelles par des tokens opaques avant envoi au LLM. Le modèle travaille sans jamais voir les PII. Après réponse, les tokens sont restitués en clair à l’utilisateur autorisé.
Résultats mesurés sur le moteur CRT seul, sans appel LLM. 2 038 260 PII testées sur 170 125 tests, 8 domaines, 7 pays (CH/FR/DE/IT/ES/UK/US). Mis à jour le 26 avril 2026.
| PII par message | Temps moyen | Temps/PII |
|---|---|---|
| 1 | 10ms | 10ms |
| 10 | 18ms | 1.8ms |
| 50 | 65ms | 1.3ms |
| 100 | 120ms | 1.2ms |
| 200 | 195ms | 0.97ms |
| 500 | 306ms | 0.6ms |
Ces résultats mesurent le moteur CRT seul, sans appel LLM. Le temps de traitement s’ajoute à la latence du modèle IA (typiquement 1-5 secondes).
| Modèle | Hébergement | Domaines | Tours réussis | Long. moy. | Recommandation |
|---|---|---|---|---|---|
| Qwen 3 235B | Infomaniak, CH | 8 domaines | 495 | 730 | Tous domaines. 504 rounds, 0 leak, 100 % CRT wins. Souverain Suisse. |
| Claude Haiku 4.5 | Anthropic | Médical, Immobilier | 17 | 918 | Médical, immobilier. Structuration propre, concis. |
| Gemini 2.0 Flash | Finance, Compliance | 15 | 1 333 | Finance, compliance. Raisonnement analytique. | |
| Mistral Small | Infomaniak, CH | RH | 9 | 1 124 | RH. Cohérence multi-tours, souverain Suisse. |
| DeepSeek V3 | DeepSeek | Sécurité IT | 9 | 1 389 | Sécurité IT. Densité technique. |
504 rounds évalués en conditions production sur 21 itérations (3 rounds/domaine × 8 domaines × 21 itérations). Données 100 % fictives, protocole reproductible.
| Dimension | RAW (sans tokenisation) | CRT (Senseway) | Δ |
|---|---|---|---|
| Score global | 6,98/10 | 8,63/10 | +1,65 |
| Protection PII | 6,06/10 | 10/10 | +3,94 |
| Sens / cohérence | 5,19/10 | 5,99/10 | +0,80 |
| Structure | 9,69/10 | 9,89/10 | +0,20 |
CRT supérieur dans 8/8 domaines. 495 rounds gagnés sur 495 comparaisons (100 %). 0 leak sur 504 rounds.
Évaluation annuelle de Laura Schmidt, laura.schmidt@acme.ch. Poste : Directrice Marketing depuis le 01.06.2020. Quels objectifs fixer ?
Évaluation annuelle de [protected.1], [protected.2]. Poste : [protected.3] depuis le [protected.4]. Quels objectifs fixer ?
Pour [protected.1], en tant que [protected.3], voici 3 objectifs : 1. Augmenter la visibilité de la marque de 25 % 2. Lancer 2 campagnes multi-canal par trimestre 3. Développer la stratégie SEO organique
Pour Laura Schmidt, en tant que Directrice Marketing, voici 3 objectifs : 1. Augmenter la visibilité de la marque de 25 % 2. Lancer 2 campagnes multi-canal par trimestre 3. Développer la stratégie SEO organique
Même qualité de réponse. Zéro fuite. Le LLM n’a jamais vu « Laura Schmidt » ni son email.
Les LLMs raisonnent sur des représentations abstraites. Les tokens Senseway éliminent les biais liés aux noms, entreprises et montants réels — le modèle se concentre sur la tâche pure.
Évalue les performances de Laura Schmidt, Directrice Marketing chez Acme SA, salaire CHF 185 000
Le LLM reconnaît « Acme SA » et biaise l’évaluation selon la taille perçue de l’entreprise. Le salaire influence le ton (plus déférent).
Évalue les performances de [protected.1], [protected.2] chez [protected.3], salaire [protected.4]
Le LLM évalue uniquement les compétences et objectifs. Aucun biais de notoriété. Réponse +12% plus objective dans nos tests.
Analyse les risques du prêt de CHF 2.4M à Helvetia Consulting SA, IBAN CH93 0076 2011 6238 5295 7
Le LLM active ses connaissances sur « Helvetia » (groupe d’assurance). L’analyse est contaminée par des informations externes non pertinentes.
Analyse les risques du prêt de [protected.1] à [protected.2], IBAN [protected.3]
Le LLM se concentre sur les paramètres de risque purs. Zéro fuite de coordonnées bancaires. Analyse structurellement identique, sans contamination.
Résume le contrat entre Me Pierre Martin (Étude Martin & Associés) et SCI Léman Invest, montant CHF 4.2M
Le LLM contextualise selon les parties : ton différent pour un cabinet d’avocats vs une SCI. Le résumé perd en neutralité.
Résume le contrat entre [protected.1] ([protected.2]) et [protected.3], montant [protected.4]
Le LLM produit un résumé juridique neutre. Structure et qualité identiques, sans influence des parties. Secret professionnel préservé.
Sur 495 comparaisons, le mode CRT produit des réponses de qualité égale ou supérieure — tout en éliminant les fuites de données.
Résumé du contrat de travail [protected.1] Identifiants : - Email : [protected.2] - IBAN : [protected.3] - Date de début : [protected.4] Conditions principales : - Salaire annuel brut : CHF 120’000 - Congés annuels : 5 semaines
Résumé du contrat de travail — Marie Dupont Identifiants : - Email : marie.dupont@helvetica-pharma.com - IBAN : CH93 0076 2011 6238 5295 7 - Date de début : 01.05.2026 Conditions principales : - Salaire annuel brut : CHF 120’000 - Congés annuels : 5 semaines
Données 100 % fictives. Aucune entreprise réelle n’est référencée.
| Fonctionnalité | Adlibo CRT | Lakera Guard | Guardrails AI | Azure Content Safety |
|---|---|---|---|---|
| Tokenisation réversible | — | — | — | |
| Détection PII | ||||
| Réhydratation automatique | — | — | — | |
| Hébergement souverain CH | — | — | — | |
| Hors CLOUD Act | — | — | — |
Benchmark CRT exécuté le 26 avril 2026 (504 rounds, 8 domaines, Qwen 3 235B). DLP validé le 26 avril 2026 : 2 038 260 PII testées en 6 heures, 8 domaines, 7 pays — taux de détection global 96,2 %, faux positifs 1,6 %. Données 100 % fictives, protocole reproductible.