Dossier de validation
LIMEN13 0.10.1 : validation technique
Version du logiciel : 0.10.1. Vérifié le 14 novembre 2026 (heure de Toronto). Réalisé par le projet lui-même : ce n'est pas un audit indépendant.
En mots simples. Avant chaque version, nous lançons plus d'un millier de tests automatiques et une bibliothèque d'attaques simulées. Cette page donne les résultats exacts de la version 0.10.1, y compris les deux attaques qu'il n'arrête pas.
Résultats
Résultats de la vérification
| Étape | Résultat |
|---|---|
| Script de vérification complet | 1 086 contrôles réussis, 0 échec |
| Suites de tests Python | 29 suites |
| Contrôles JavaScript de la console | 7 réussis (compris dans le total) |
| Test d'acceptation de référence | 42 réussis sur 42 |
| Bibliothèque d'attaques | 73 blocages attendus sur 73 ; 2 limites documentées |
| Analyse de sécurité | Sans constat : Bandit, avis sur les dépendances, vérification de la chaîne d'approvisionnement, Gitleaks, Semgrep |
| SBOM | Régénéré à partir des dépendances verrouillées (CycloneDX) |
| Construction du conteneur et test de fumée | Construit ; le point d'accès de santé, la console et la vue simple ont répondu ; la vérification de santé de l'image a réussi |
| Durcissement à l'exécution | Utilisateur non privilégié, racine en lecture seule, toutes les capacités retirées, sans nouveaux privilèges |
Catégories
Ce que couvrent les contrôles
- Décisions du moteur et de la passerelle
- Console et contrôle d'accès, route par route
- Cas de menaces et durcissement
- Passerelle de modèles et budgets
- Livraison des alertes et reprise après redémarrage
- Découverte, collecteurs et sondes de contournement
- MCP, côté client et côté serveur
- Cryptographie et données au repos
- Isolation des clients avec deux moteurs
- Vérifications de la chaîne d'approvisionnement
- Coupe-circuit et confinement
- Couverture des preuves et rapports
Définitions
Comment les résultats sont définis
- Contrôle réussi
- Une assertion automatisée a produit le résultat attendu.
- Blocage attendu
- Un cas d'attaque que LIMEN13 a refusé, retenu ou confiné, comme le cas le définit.
- Limite documentée
- Un cas d'attaque que LIMEN13 n'arrête pas. Il est gardé volontairement dans la bibliothèque et décrit ci-dessous.
- Échec
- Une assertion qui n'a pas produit le résultat attendu. Nombre dans cette version : 0.
Limites
Les deux limites documentées, et les autres
- La réécriture d'un journal de laboratoire non signé. En mode laboratoire, sans clé de signature, un journal peut être réécrit. Ce n'est pas un contournement de la conception de production, signée et ancrée.
- Un agent qui fait une fausse promesse. Un agent peut dire quelque chose de faux à un client dans un message permis. LIMEN13 vérifie les actions, pas la véracité.
- Les appels déjà admis vers un service externe peuvent se terminer après le confinement.
- Une alerte acceptée juste avant une panne peut être livrée de nouveau.
- La comptabilité des budgets est estimée ; ce n'est pas un plafond de facturation du fournisseur.
- Ces tests établissent l'exactitude pour les cas testés, pas une capacité soutenue à fort volume.
Corrections
Problèmes trouvés et corrigés pendant cette revue
- Un état de budget ou de livraison invalide n'est plus remis à zéro en silence : le démarrage le refuse avec une erreur de reprise.
- Un confinement qui survient pendant une vérification d'outil lente ou une nouvelle vérification d'approbation refuse maintenant l'action avant son exécution.
- Les flux de modèles interrompus gardent une comptabilité d'usage prudente au lieu de compter la sortie manquante comme nulle.
- La progression de la livraison des alertes ne saute plus un événement antérieur dont l'enregistrement arrive en retard.
Mesures
Démonstration sur le vrai moteur et latence locale
Réalisé le 15 novembre 2026 avec le vrai moteur (version 0.10.1) et le client fictif de référence, sur un seul portable de développement. Ce n'est pas la simulation du navigateur, et ce n'est pas une mesure de production.
| Étape | Ce que le moteur a répondu |
|---|---|
Un agent d'essai demande un outil de son rôle (list_new_orders) | HTTP 200, décision : allow |
La même exécution demande un outil hors de son rôle (delete_customer) | HTTP 403, décision : deny, règle : role, motif : tool 'delete_customer' is not in this agent's role |
| Preuves écrites | Deux enregistrements signés pour l'exécution : un allow, un deny, chacun avec sa règle et son motif |
| Vérification de la chaîne | ok: true, signed: true |
| Charge | Requêtes | p50 | p95 | p99 | Débit |
|---|---|---|---|---|---|
| Appels autorisés, 1 client | 1 000 | 4,95 ms | 8,49 ms | 9,93 ms | 177 par seconde |
| Appels refusés, 1 client | 300 | 4,71 ms | 5,62 ms | 6,44 ms | non mesuré |
| Appels autorisés, 4 clients à la fois | 400 | 36,18 ms | 43,07 ms | 63,57 ms | 109 par seconde |
| Appels autorisés, 16 clients à la fois | 1 600 | 177,46 ms | 234,57 ms | 265,72 ms | 86 par seconde |
- Chiffres locaux de développement. Client et moteur sur un seul portable (AMD Ryzen 5 4600H, 12 fils d'exécution, 18 Go, Linux, Python 3.14), par l'interface de boucle locale, avec un outil d'essai qui répond à partir de fichiers locaux. Un vrai réseau et un vrai système d'affaires ajoutent leur propre délai.
- Un moteur traite les appels un à la fois. Le débit n'a pas augmenté avec plus de clients, et le temps d'attente a grandi. Prévoyez un moteur par espace de travail et mesurez avec votre propre charge.
- Non mesuré : l'usage de la mémoire et du processeur, le comportement lors d'une panne d'une dépendance, les longues exécutions et les appels de la passerelle de modèles.
- Reproduire
.venv/bin/python deploy/bench_gateway.py- Pièces justificatives
- Les résultats bruts sont remis aux participants à un pilote sur demande.
Reproduire
Comment reproduire
Le logiciel est livré sous forme de code source : les participants à un pilote peuvent donc lancer les mêmes scripts sur leur propre machine.
- Tous les contrôles
./deploy/verify.sh- Test d'acceptation et bibliothèque d'attaques
./deploy/verify_attacks.sh- Analyses de sécurité
./deploy/security_scan.sh- Pièces justificatives
- Le rapport de vérification et la liste SHA-256 des fichiers révisés sont remis aux participants à un pilote sur demande. Le dépôt de code source est privé.
À faire
Pas encore fait
- Un test d'intrusion indépendant.
- La validation avec l'authentification unique, le SIEM, le coffre et les serveurs MCP d'un client.
- Des tests de charge sur un déploiement.
- Des objectifs de sauvegarde et de restauration.
- Des engagements de soutien publiés.