RAG eval harness starter · Python + Markdown
Az eval-keretrendszer sablonja, amit a RAG-projektek első hetében behúzunk. Giskard + promptfoo + saját metrikák.
Indulósablon RAG-rendszer eval-jához: 5 metrika-osztály (faithfulness, context precision, answer relevance, bias, injection resistance), CI-integráció, diff-riport. MIT licensz.
MIT TARTALMAZ
- ·5 metrika-osztály Python kóddal
- ·Giskard + promptfoo integráció
- ·Injection-resistance eval szett (80+ prompt)
- ·CI-step YAML (GitHub Actions + GitLab CI)
- ·Diff-riport-generátor a build-hez
Személyre szabott verzió?
A csapatodra szabott audit vagy template 2 héten belül kész · DField Solutions, Budapest.