RAG面试内容整理-12. 检索质量评估指标(MRR, Recall@K, nDCG 等)

124 篇文章

在开发和优化RAG系统时,需要对检索组件的效果进行量化评估。信息检索领域有一系列经典指标可用于衡量检索质量,常见的包括Recall@KMRRnDCG等。

  • Recall@K(前K名召回率):衡量在每个查询的前K个检索结果中,包含了多少相关文档,占该查询所有相关文档的比例。通俗地说,就是对于一个查询,如果总共有R篇真正相关的文档,而我们的检索Top K中找到了r篇,那么Recall@K = r/R。在开放域问答中,通常R=1(只有包含答案的那篇文档算相关),此时Recall@K更简单地表示前K结果中有无命中答案。Recall@K非常重要,因为
在部署 RAG(Retrieval-Augmented Generation)应用时,Docker Compose 提供了一种便捷的方式来管理和启动多个依赖服务。以下是一个典型的 `docker-compose.yml` 文件示例,适用于部署支持 RAG 的服务,包括 PostgreSQL、pgvector、Redis、MinIO、Elasticsearch 和 FastGPT 应用本身。 ### 示例 docker-compose.yml 文件 ```yaml version: '3.8' services: postgres: image: postgres:15 container_name: rag-postgres environment: POSTGRES_USER: fastgpt POSTGRES_PASSWORD: fastgpt POSTGRES_DB: fastgpt volumes: - postgres_data:/var/lib/postgresql/data ports: - "5432:5432" restart: unless-stopped pgvector: image: zilliz/pgvector:v0.1.0 container_name: rag-pgvector depends_on: - postgres environment: POSTGRES_HOST: postgres POSTGRES_USER: fastgpt POSTGRES_PASSWORD: fastgpt POSTGRES_DB: fastgpt ports: - "54321:5432" restart: unless-stopped redis: image: redis:alpine container_name: rag-redis ports: - "6379:6379" volumes: - redis_data:/data restart: unless-stopped minio: image: minio/minio:latest container_name: rag-minio ports: - "9000:9000" - "9001:9001" environment: MINIO_ROOT_USER: minioadmin MINIO_ROOT_PASSWORD: minioadmin command: server /data --console-address :9001 volumes: - minio_data:/data restart: unless-stopped fastgpt: image: ghcr.io/labring/fastgpt:latest container_name: fastgpt-app depends_on: - postgres - pgvector - redis - minio ports: - "3000:3000" environment: DATABASE_URL: postgres://fastgpt:fastgpt@postgres:5432/fastgpt VECTOR_DATABASE_URL: postgres://fastgpt:fastgpt@pgvector:5432/pgvector REDIS_URL: redis://redis:6379 MINIO_ENDPOINT: minio:9000 MINIO_ACCESS_KEY: minioadmin MINIO_SECRET_KEY: minioadmin restart: unless-stopped ``` ### 配置说明 1. **PostgreSQL 与 pgvector**: PostgreSQL 是用于存储结构化数据的关系型数据库,而 pgvector 是其扩展,专门用于处理向量数据的存储和检索,是实现 RAG 检索模块的关键组件[^2]。 2. **Redis**: Redis 被用作缓存层,加速频繁访问的数据读取,减少数据库压力,提高整体系统响应速度[^1]。 3. **MinIO**: MinIO 提供对象存储功能,适合存储大文件如文档、图片等非结构化数据,常用于 RAG 中的原始数据输入。 4. **FastGPT 容器**: FastGPT 是基于 GPT 的本地化部署模型应用,集成了 RAG 功能,负责处理用户查询并生成答案。它通过环境变量连接到各个依赖服务[^2]。 5. **网络与依赖管理**: 所有服务通过 Docker Compose 内部网络自动发现彼此,`depends_on` 确保服务按顺序启动,避免初始化失败。 ### 启动服务 使用以下命令启动所有服务: ```bash docker-compose up -d ``` 这将以后台模式启动所有定义的服务,并根据配置自动拉取镜像、创建容器并设置网络和卷挂载。 ### 停止与清理 如果需要停止服务或进行清理,可以使用以下命令: ```bash docker-compose down ``` 该命令会停止并删除容器,但不会删除持久化卷(除非加上 `-v` 参数)。 ---
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

不务正业的猿

谢谢您的支持与鼓励!!!

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值