跳到主要内容
Open In ColabOpen on GitHub

Contextual AI 重排序器

Contextual AI 的指令遵循重排器是世界上第一个重排器,旨在根据最近更新时间、来源和元数据等特定标准,遵循自定义指令来确定文档优先级。它在 BEIR 基准测试中表现出色(得分 61.2,显著超越竞争对手),为企业 RAG 应用提供了前所未有的控制和准确性。

主要功能

  • 指令遵循:通过自然语言命令动态控制文档排序
  • 冲突解决:智能处理来自多个知识源的矛盾信息
  • 卓越的准确性:在行业基准测试中实现最先进的性能
  • 无缝集成:可替代现有 RAG 管道中的重排器

该重排器擅长解决企业知识库中的实际挑战,例如优先处理最新文档而非过时文档,或优先选择内部文档而非外部来源。

要了解更多关于我们的指令遵循重排器并查看其实际应用示例,请访问我们的产品概述

如需了解 Contextual AI 产品的完整文档,请访问我们的开发者门户

此集成需要 contextual-client Python SDK。在此了解更多信息

概述

此集成调用 Contextual AI 的基础语言模型。

集成详情

类别本地可序列化JS 支持包下载量最新包版本
ContextualReranklangchain-contextual测试版PyPI - DownloadsPyPI - Version

设置

要访问 Contextual 的重排器模型,您需要创建一个 Contextual AI 账户,获取一个 API 密钥,并安装 langchain-contextual 集成包。

凭证

前往 app.contextual.ai 注册 Contextual 并生成 API 密钥。完成此操作后,设置 CONTEXTUAL_AI_API_KEY 环境变量

import getpass
import os

if not os.getenv("CONTEXTUAL_AI_API_KEY"):
os.environ["CONTEXTUAL_AI_API_KEY"] = getpass.getpass(
"Enter your Contextual API key: "
)

安装

LangChain Contextual 集成位于 langchain-contextual 包中

%pip install -qU langchain-contextual

实例化

Contextual 重排器参数为

参数类型描述
documentslist[Document]要重排的文档序列。文档中包含的任何元数据也将用于重排。
querystr用于重排的查询。
modelstr要使用的重排器版本。当前,我们只有 "ctxl-rerank-en-v1-instruct"。
top_nOptional[int]要返回的结果数量。如果为 None,则返回所有结果。默认为 self.top_n。
instructionOptional[str]用于重排器的指令。
callbacksOptional[Callbacks]在压缩过程中运行的回调。
from langchain_contextual import ContextualRerank

api_key = ""
model = "ctxl-rerank-en-v1-instruct"

compressor = ContextualRerank(
model=model,
api_key=api_key,
)

使用

首先,我们将设置要使用的全局变量和示例,并实例化我们的重排器客户端。

from langchain_core.documents import Document

query = "What is the current enterprise pricing for the RTX 5090 GPU for bulk orders?"
instruction = "Prioritize internal sales documents over market analysis reports. More recent documents should be weighted higher. Enterprise portal content supersedes distributor communications."

document_contents = [
"Following detailed cost analysis and market research, we have implemented the following changes: AI training clusters will see a 15% uplift in raw compute performance, enterprise support packages are being restructured, and bulk procurement programs (100+ units) for the RTX 5090 Enterprise series will operate on a $2,899 baseline.",
"Enterprise pricing for the RTX 5090 GPU bulk orders (100+ units) is currently set at $3,100-$3,300 per unit. This pricing for RTX 5090 enterprise bulk orders has been confirmed across all major distribution channels.",
"RTX 5090 Enterprise GPU requires 450W TDP and 20% cooling overhead.",
]

metadata = [
{
"Date": "January 15, 2025",
"Source": "NVIDIA Enterprise Sales Portal",
"Classification": "Internal Use Only",
},
{"Date": "11/30/2023", "Source": "TechAnalytics Research Group"},
{
"Date": "January 25, 2025",
"Source": "NVIDIA Enterprise Sales Portal",
"Classification": "Internal Use Only",
},
]

documents = [
Document(page_content=content, metadata=metadata[i])
for i, content in enumerate(document_contents)
]
reranked_documents = compressor.compress_documents(
query=query,
instruction=instruction,
documents=documents,
)
API 参考:Document

在链中使用

示例即将推出。

API 参考

有关 ChatContextual 所有功能和配置的详细文档,请访问 Github 页面:https://github.com/ContextualAI//langchain-contextual