Microsoft SharePoint 是一个基于网站的协作系统,由 Microsoft 开发,它使用工作流应用程序、“列表”数据库以及其他 Web 部件和安全功能来赋能业务团队协同工作。本笔记本介绍如何从 SharePoint 文档库 加载文档。默认情况下,文档加载器会加载
pdf、doc、docx 和 txt 文件。您可以通过提供适当的解析器来加载其他文件类型(详见下文)。
先决条件
- 按照 Microsoft 身份平台 的说明注册一个应用程序。
- 注册完成后,Azure 门户会显示应用程序注册的“概述”窗格。您会看到应用程序(客户端)ID。此值也称为
client ID,它在 Microsoft 身份平台中唯一标识您的应用程序。 - 在遵循 第 1 项 的步骤时,您可以将重定向 URI 设置为
https://login.microsoftonline.com/common/oauth2/nativeclient。 - 在遵循 第 1 项 的步骤时,在“应用程序机密”部分下生成一个新的密码(
client_secret)。 - 按照此文档中的说明,向您的应用程序添加以下
SCOPES(offline_access和Sites.Read.All)。 - 要从您的文档库检索文件,您需要其 ID。为此,您需要
Tenant Name、Collection ID和Subsite ID的值。 - 要查找您的
Tenant Name,请按照此文档中的说明操作。获取后,只需从值中移除.onmicrosoft.com,并将剩余部分作为您的Tenant Name。 - 要获取您的
Collection ID和Subsite ID,您需要您的 SharePointsite-name。您的SharePoint站点 URL 格式如下:https://<tenant-name>.sharepoint.com/sites/<site-name>。此 URL 的最后一部分就是site-name。 - 要获取站点
Collection ID,请在浏览器中访问此 URL:https://<tenant>.sharepoint.com/sites/<site-name>/_api/site/id并复制Edm.Guid属性的值。 - 要获取
Subsite ID(或 Web ID),请使用:https://<tenant>.sharepoint.com/sites/<site-name>/_api/web/id并复制Edm.Guid属性的值。 SharePoint site ID的格式如下:<tenant-name>.sharepoint.com,<Collection ID>,<subsite ID>。您可以保存该值以供下一步使用。- 访问 Graph Explorer Playground 以获取您的
Document Library ID。第一步是确保您使用与 SharePoint 站点关联的帐户登录。然后,您需要向https://graph.microsoft.com/v1.0/sites/<SharePoint site ID>/drive发出请求,响应将返回一个包含id字段的有效负载,该字段保存了您的Document Library ID。
🧑 从 SharePoint 文档库摄取文档的说明
🔑 身份验证
默认情况下,SharePointLoader 期望 CLIENT_ID 和 CLIENT_SECRET 的值分别存储为名为 O365_CLIENT_ID 和 O365_CLIENT_SECRET 的环境变量。您可以通过应用程序根目录下的 .env 文件传递这些环境变量,或在脚本中使用以下命令。
~/.credentials/ 文件夹中存储一个令牌(o365_token.txt)。此令牌稍后可用于身份验证,而无需执行前面所述的复制/粘贴步骤。要使用此令牌进行身份验证,您需要在实例化加载器时将 auth_with_token 参数更改为 True。
🗂️ 文档加载器
📑 从文档库目录加载文档
SharePointLoader 可以从文档库内的特定文件夹加载文档。例如,您想加载文档库中 Documents/marketing 文件夹下存储的所有文档。
Resource not found for the segment,请尝试使用 folder_id 代替文件夹路径,该 ID 可从 Microsoft Graph API 获取。
folder_id、folder_path 和 documents_ids,加载器将加载根目录。
recursive=True,您可以简单地从整个 SharePoint 加载所有文档:
📑 从文档 ID 列表加载文档
另一种可能性是提供要加载的每个文档的object_id 列表。为此,您需要查询 Microsoft Graph API 以查找您感兴趣的所有文档 ID。此链接 提供了一个端点列表,有助于检索文档 ID。
例如,要检索存储在 data/finance/ 文件夹中的所有对象的信息,您需要向以下地址发出请求:https://graph.microsoft.com/v1.0/drives/<document-library-id>/root:/data/finance:/children。获取感兴趣的 ID 列表后,您可以使用以下参数实例化加载器。
📑 选择支持的文件类型和首选解析器
默认情况下,SharePointLoader 使用默认解析器(见下文)加载 document_loaders/parsers/registry 中定义的文件类型。
SharePointLoader 传递 handlers 参数来覆盖此行为。
传递一个字典,将文件扩展名(如 "doc"、"pdf" 等)
或 MIME 类型(如 "application/pdf"、"text/plain" 等)映射到解析器。
请注意,您必须仅使用文件扩展名或 MIME 类型,不能混合使用。
文件扩展名不要包含前导点。
连接这些文档 到 Claude、VSCode 等,通过 MCP 获取实时答案。

