LIMEN13

Dossier de validation

LIMEN13 0.10.1 : validation technique

Version du logiciel : 0.10.1. Vérifié le 14 novembre 2026 (heure de Toronto). Réalisé par le projet lui-même : ce n'est pas un audit indépendant.

En mots simples. Avant chaque version, nous lançons plus d'un millier de tests automatiques et une bibliothèque d'attaques simulées. Cette page donne les résultats exacts de la version 0.10.1, y compris les deux attaques qu'il n'arrête pas.

Résultats

Résultats de la vérification

Étapes de vérification et résultats de la version 0.10.1
ÉtapeRésultat
Script de vérification complet1 086 contrôles réussis, 0 échec
Suites de tests Python29 suites
Contrôles JavaScript de la console7 réussis (compris dans le total)
Test d'acceptation de référence42 réussis sur 42
Bibliothèque d'attaques73 blocages attendus sur 73 ; 2 limites documentées
Analyse de sécuritéSans constat : Bandit, avis sur les dépendances, vérification de la chaîne d'approvisionnement, Gitleaks, Semgrep
SBOMRégénéré à partir des dépendances verrouillées (CycloneDX)
Construction du conteneur et test de fuméeConstruit ; le point d'accès de santé, la console et la vue simple ont répondu ; la vérification de santé de l'image a réussi
Durcissement à l'exécutionUtilisateur non privilégié, racine en lecture seule, toutes les capacités retirées, sans nouveaux privilèges

Catégories

Ce que couvrent les contrôles

  • Décisions du moteur et de la passerelle
  • Console et contrôle d'accès, route par route
  • Cas de menaces et durcissement
  • Passerelle de modèles et budgets
  • Livraison des alertes et reprise après redémarrage
  • Découverte, collecteurs et sondes de contournement
  • MCP, côté client et côté serveur
  • Cryptographie et données au repos
  • Isolation des clients avec deux moteurs
  • Vérifications de la chaîne d'approvisionnement
  • Coupe-circuit et confinement
  • Couverture des preuves et rapports

Définitions

Comment les résultats sont définis

Contrôle réussi
Une assertion automatisée a produit le résultat attendu.
Blocage attendu
Un cas d'attaque que LIMEN13 a refusé, retenu ou confiné, comme le cas le définit.
Limite documentée
Un cas d'attaque que LIMEN13 n'arrête pas. Il est gardé volontairement dans la bibliothèque et décrit ci-dessous.
Échec
Une assertion qui n'a pas produit le résultat attendu. Nombre dans cette version : 0.

Limites

Les deux limites documentées, et les autres

  • La réécriture d'un journal de laboratoire non signé. En mode laboratoire, sans clé de signature, un journal peut être réécrit. Ce n'est pas un contournement de la conception de production, signée et ancrée.
  • Un agent qui fait une fausse promesse. Un agent peut dire quelque chose de faux à un client dans un message permis. LIMEN13 vérifie les actions, pas la véracité.
  • Les appels déjà admis vers un service externe peuvent se terminer après le confinement.
  • Une alerte acceptée juste avant une panne peut être livrée de nouveau.
  • La comptabilité des budgets est estimée ; ce n'est pas un plafond de facturation du fournisseur.
  • Ces tests établissent l'exactitude pour les cas testés, pas une capacité soutenue à fort volume.

Corrections

Problèmes trouvés et corrigés pendant cette revue

  • Un état de budget ou de livraison invalide n'est plus remis à zéro en silence : le démarrage le refuse avec une erreur de reprise.
  • Un confinement qui survient pendant une vérification d'outil lente ou une nouvelle vérification d'approbation refuse maintenant l'action avant son exécution.
  • Les flux de modèles interrompus gardent une comptabilité d'usage prudente au lieu de compter la sortie manquante comme nulle.
  • La progression de la livraison des alertes ne saute plus un événement antérieur dont l'enregistrement arrive en retard.

Mesures

Démonstration sur le vrai moteur et latence locale

Réalisé le 15 novembre 2026 avec le vrai moteur (version 0.10.1) et le client fictif de référence, sur un seul portable de développement. Ce n'est pas la simulation du navigateur, et ce n'est pas une mesure de production.

Une vraie exécution d'agent sur le vrai moteur
ÉtapeCe que le moteur a répondu
Un agent d'essai demande un outil de son rôle (list_new_orders)HTTP 200, décision : allow
La même exécution demande un outil hors de son rôle (delete_customer)HTTP 403, décision : deny, règle : role, motif : tool 'delete_customer' is not in this agent's role
Preuves écritesDeux enregistrements signés pour l'exécution : un allow, un deny, chacun avec sa règle et son motif
Vérification de la chaîneok: true, signed: true
Latence des appels d'outils, mesure locale de développement
ChargeRequêtesp50p95p99Débit
Appels autorisés, 1 client1 0004,95 ms8,49 ms9,93 ms177 par seconde
Appels refusés, 1 client3004,71 ms5,62 ms6,44 msnon mesuré
Appels autorisés, 4 clients à la fois40036,18 ms43,07 ms63,57 ms109 par seconde
Appels autorisés, 16 clients à la fois1 600177,46 ms234,57 ms265,72 ms86 par seconde
  • Chiffres locaux de développement. Client et moteur sur un seul portable (AMD Ryzen 5 4600H, 12 fils d'exécution, 18 Go, Linux, Python 3.14), par l'interface de boucle locale, avec un outil d'essai qui répond à partir de fichiers locaux. Un vrai réseau et un vrai système d'affaires ajoutent leur propre délai.
  • Un moteur traite les appels un à la fois. Le débit n'a pas augmenté avec plus de clients, et le temps d'attente a grandi. Prévoyez un moteur par espace de travail et mesurez avec votre propre charge.
  • Non mesuré : l'usage de la mémoire et du processeur, le comportement lors d'une panne d'une dépendance, les longues exécutions et les appels de la passerelle de modèles.
Reproduire
.venv/bin/python deploy/bench_gateway.py
Pièces justificatives
Les résultats bruts sont remis aux participants à un pilote sur demande.

Reproduire

Comment reproduire

Le logiciel est livré sous forme de code source : les participants à un pilote peuvent donc lancer les mêmes scripts sur leur propre machine.

Tous les contrôles
./deploy/verify.sh
Test d'acceptation et bibliothèque d'attaques
./deploy/verify_attacks.sh
Analyses de sécurité
./deploy/security_scan.sh
Pièces justificatives
Le rapport de vérification et la liste SHA-256 des fichiers révisés sont remis aux participants à un pilote sur demande. Le dépôt de code source est privé.

À faire

Pas encore fait

  • Un test d'intrusion indépendant.
  • La validation avec l'authentification unique, le SIEM, le coffre et les serveurs MCP d'un client.
  • Des tests de charge sur un déploiement.
  • Des objectifs de sauvegarde et de restauration.
  • Des engagements de soutien publiés.