HVAC-BENCH · CORPUS VÉRIFIÉ
On ne vous demande pas de nous croire.
HVAC-Bench mesure l'écart entre un LLM généraliste et un LLM branché sur le corpus AskMarcel. Des chiffres, une méthodologie, des sources constructeur — pas des promesses marketing.
HVAC-BENCH
LLM NU VS ASKMARCEL
Score de précision (%) par scénario CVC réel
| Scénario | LLM seul | Avec AskMarcel | Écart |
|---|---|---|---|
| Code erreur exact (lookup) | 34% | 97% | +63 pts |
| Diagnostic multi-étapes | 22% | 91% | +69 pts |
| Référence manuel (page/section) | 8% | 94% | +86 pts |
| Marque hors training LLM | 41% | 89% | +48 pts |
| Hallucination critique évitée | 52% | 96% | +44 pts |
LE CORPUS
400 000+ CODES. SOURCÉS CONSTRUCTEUR.
Un pipeline vivant : crawl, curation humaine, gates qualité.
0
marques
0
modèles
0+
codes erreur
~0 ms
latence moyenne
Crawl
Collecte continue des documentations constructeurs publiques et techniques.
Curation
Structuration humaine : marque, modèle, code, procédure, référence manuel.
Gates qualité
Vérification avant publication — pas de contenu généré sans source.
DÉTERMINISME
SUR UN DOMAINE À RISQUE, ON NE DEVINE PAS.
L'outil get_error_code effectue un lookup exact dans le corpus — pas une génération libre. Chaque réponse renvoie une référence manuel avec page et section. C'est la différence entre une réponse sourcée constructeur et une hallucination plausible.
- Lookup exact par marque, modèle et code erreur
- Référence manuel + page + section sur chaque réponse
- Pas de surface de rendu embarquée — votre stack affiche, nous sourçons
POST /tools/get_error_code
{
"brand": "Daikin",
"model": "Altherma 3",
"error_code": "7H"
}
→ lookup exact (pas de génération)
→ {
"diagnostic": "...",
"source": {
"manual": "Manuel installateur",
"page": 42,
"section": "4.1"
}
}