跳到主要内容
Open on GitHub

Diffbot

Diffbot 是一套基于机器学习的产品,可以轻松地构建和整合网络数据。

安装与设置

获取免费的 Diffbot API 令牌按照这些说明 进行请求认证。

文档加载器

Diffbot 的 Extract API 是一项服务,用于从网页中结构化和规范化数据。

与传统的网页抓取工具不同,Diffbot Extract 无需任何规则即可读取页面内容。它使用计算机视觉模型将页面分类为 20 种可能的类型之一,然后将原始 HTML 标记转换为 JSON。生成的结构化 JSON 遵循一致的基于类型的本体,这使得从多个不同网络源以相同模式提取数据变得容易。

查看使用示例

from langchain_community.document_loaders import DiffbotLoader
API 参考:DiffbotLoader

图表

Diffbot 的 自然语言处理 API 允许从非结构化文本数据中提取实体、关系和语义含义。

查看使用示例

from langchain_experimental.graph_transformers.diffbot import DiffbotGraphTransformer