热门

最新

红包

立Flag

投票

同城

我的

发布
techsavvyllamaindex
llama_index
2 年前
truetechsavvyllamaindex

构建RAG(Retrieval-Augmented Generation)时的一个大问题是,简单的块划分策略会造成许多“断裂”的上下文,导致检索性能下降。

解决方案💡 采用自动合并检索,动态创建更连贯的块 —— 如果检索到一系列邻近的上下文块,就将它们合并成一个更大的“块”,这样大型语言模型就能对更大的文档有一个整体的了解。

@那天我捡了只猫 写了一篇很棒的文章,概述了动机以及如何自己设置这一点。看看吧👉 https://generativeai.pub/advanced-rag-retrieval-strategies-auto-merging-retrieval-dc3f869654c4

这项技术是@Llamaespa的本土技术,并且在我们的@尔瓜课程中也有所涉及!

CSDN App 扫码分享
分享
5
313
  • 复制链接
  • 举报
下一条:
迈克尔·霍德尔刚刚开源了一个项目:ARC 1的400个训练任务中的每一个都被实现为程序形式,能够生成更多的任务实例。我预计这将对所有在ARC上工作的人非常有用。GitHub: https://github.com/michaelhodel/re-arcArXiv: https://arxiv.org/abs/2404.07353
立即登录