语义分块
在这个技术中，文本被划分为有意义的单位，比如句子或段落，然后这些单位被向量化。这些单位会根据它们嵌入向量之间的余弦距离被组合成块，每当检测到显著的上下文转换时，就会形成一个新的块。