Ragas提供了两种安装方式:
- Instalação via PyPI: Implementação
pip install ragas
- Instalação a partir da fonte: Executar
pip install git+https://github.com/explodinggradients/ragas
基本使用流程分为三步:
- módulo de importação:需要导入评估指标和样本类
from ragas import SingleTurnSample
from ragas.metrics import AspectCritic
- Preparação de dados de teste:包含用户输入和系统响应的字典
- Configuração do Avaliador:基于LLM构建评估器实例
评估过程示例:
- 配置GPT-4等LLM作为评估器
- 定义具体的评估指标(如摘要准确性)
- aprovar (um projeto de lei ou inspeção etc.)
single_turn_ascore
方法执行评估
Essa resposta foi extraída do artigoRagas: avaliando a precisão do RAG recall QA e a correlação de respostasO