LangChain 开发实战第7章 文档加载与文本分割
原创
LangChain 开发实战第7章 文档加载与文本分割
怕浪猫
发布于 2026-10-20 22:27:44
发布于 2026-10-20 22:27:44
概述
在LangChain开发中，我们常常需要处理外部文档——比如PDF格式的公司制度、Word格式的报告、HTML网页内容、Markdown文档等，再结合大模型实现问答、总结、检索等功能。但大模型存在“上下文窗口限制”（如GPT-3.5-turbo上下文窗口约4k tokens），无法直接处理长篇文档；同时，不同格式的文档解析方式不同，手动解析效率极低。
本章核心解决两个问题：如何高效加载不同格式的外
原创声明：本文系作者授权腾讯云开发者社区发表，未经许可，不得转载。
如有侵权，请联系 cloudcommunity@tencent.com 删除。
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号