logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

langchain父子分块实现

这里介绍langchain中的两种分块方式——语义分块和滑动窗口分块父块:将文章分为较大的块,保证足够多的上下文,例如父块大小为1000子块:在每个父块的基础上,将父块分为较小的子块,例如子块大小为500父子分块:即先将文章分为大块,再将大块分为小块,之后在检索的时候,先检索小块,再根据小块找到对应的大块,最后返回这些大块。

#人工智能#机器学习
到底了