跳到主要内容
Open In ColabOpen on GitHub

腾讯 COS 目录

腾讯云对象存储(COS)是一种分布式存储服务,您可以通过HTTP/HTTPS协议从任何地方存储任意数量的数据。COS对数据结构和格式没有限制。它也没有存储桶大小限制和分区管理,因此几乎适用于任何用例,例如数据分发、数据处理和数据湖。COS提供基于Web的控制台、多语言SDK和API、命令行工具和图形工具。它与Amazon S3 API兼容性良好,让您可以快速访问社区工具和插件。

本文介绍如何从腾讯COS目录加载文档对象。

%pip install --upgrade --quiet  cos-python-sdk-v5
from langchain_community.document_loaders import TencentCOSDirectoryLoader
from qcloud_cos import CosConfig
conf = CosConfig(
Region="your cos region",
SecretId="your cos secret_id",
SecretKey="your cos secret_key",
)
loader = TencentCOSDirectoryLoader(conf=conf, bucket="you_cos_bucket")
loader.load()

指定前缀

您还可以指定前缀,以更精细地控制要加载的文件。

loader = TencentCOSDirectoryLoader(conf=conf, bucket="you_cos_bucket", prefix="fake")
loader.load()