#NLP
1 篇
✎
作者:
Tyron
◈
分类:
技术
≈
大约字数:
约 3,857 字
◷
阅读时间:
11 分钟
#
标签:
RAG
·
NLP
·
文本分块
文本分块:粒度、重叠与评估方法
搭 RAG 系统,数据加载搞定了,下一步就是把文档切成小块。分块策略选错了,后面检索怎么调都不对。本文介绍主流分块策略(固定大小、重叠、递归、语义分块等),并给出实战经验和参数建议。