ModelScope

ModelScope 是模型和数据集的大型仓库。

本页介绍如何在 LangChain 中使用 modelscope 生态系统。它分为两个部分：安装和设置，然后是特定 modelscope 封装器的参考。

安装

pip install -U langchain-modelscope-integration

前往 ModelScope 注册 ModelScope 并生成 SDK 令牌。完成后，设置 MODELSCOPE_SDK_TOKEN 环境变量

export MODELSCOPE_SDK_TOKEN=<your_sdk_token>

聊天模型

ModelScopeChatEndpoint 类公开来自 ModelScope 的聊天模型。请参阅 此处 提供的模型。

from langchain_modelscope import ModelScopeChatEndpoint

llm = ModelScopeChatEndpoint(model="Qwen/Qwen2.5-Coder-32B-Instruct")
llm.invoke("Sing a ballad of LangChain.")

嵌入

ModelScopeEmbeddings 类公开来自 ModelScope 的嵌入。

from langchain_modelscope import ModelScopeEmbeddings

embeddings = ModelScopeEmbeddings(model_id="damo/nlp_corom_sentence-embedding_english-base")
embeddings.embed_query("What is the meaning of life?")

LLM

ModelScopeLLM 类公开来自 ModelScope 的 LLM。

from langchain_modelscope import ModelScopeLLM

llm = ModelScopeLLM(model="Qwen/Qwen2.5-Coder-32B-Instruct")
llm.invoke("The meaning of life is")