Ragas提供了两种安装方式:
- Installation über PyPI: Umsetzung
pip install ragas
- Installation von der Quelle aus: Lauf
pip install git+https://github.com/explodinggradients/ragas
基本使用流程分为三步:
- Importmodul:需要导入评估指标和样本类
from ragas import SingleTurnSample
from ragas.metrics import AspectCritic
- Vorbereiten der Testdaten:包含用户输入和系统响应的字典
- Einrichten des Evaluators:基于LLM构建评估器实例
评估过程示例:
- 配置GPT-4等LLM作为评估器
- 定义具体的评估指标(如摘要准确性)
- passieren (eine Rechnung oder Inspektion etc.)
single_turn_ascore
方法执行评估
Diese Antwort stammt aus dem ArtikelRagas: Bewertung der RAG-Rückruf-QA-Genauigkeit und AntwortkorrelationDie