Contexte
Un assureur souhaitait identifier la meilleure solution d’OCR et d’analyse sémantique pour comparer automatiquement des documents PDF de contrats d’assurance issus de plusieurs fournisseurs.
Challenge
- Difficulté à extraire et structurer les données clés de contrats au format PDF.
- Besoin de benchmarker plusieurs LLM (Claude, Mistral, ChatGPT, NoNote, Dolphin) sur des critères de précision, clarté et exhaustivité.
- Nécessité d’avoir une interface simple pour visualiser les résultats, interagir avec les contenus et affiner l’analyse.
Solution StratBoard
- Déploiement d’une plateforme personnalisée pour charger les PDF, les visualiser et les comparer.
- Intégration de plusieurs LLM pour exécuter les mêmes requêtes sur les documents et évaluer la qualité des réponses.
- Système de classement des performances par critères métier (extraction de clauses, calculs, obligations, exclusions…).
- Fonctionnalité de chat avec les documents pour affiner l’analyse ou poser des questions spécifiques.
Résultats
✅ Comparaison multi-LLM structurée et contextualisée.
✅ Interface intuitive pour visualiser les contrats et leurs analyses.
✅ Aide à la décision sur le choix du meilleur LLM pour chaque cas d’usage (précision vs coût vs rapidité).
Conclusion
StratBoard facilite la sélection du meilleur LLM pour l’analyse documentaire en assurance, en combinant benchmark, visualisation métier et interaction intelligente avec les contenus.
