需求:自动或批量重新向量化

升级到 MaxKB 1.4.0 之后,向量化的速度变得极慢。不知道是不是故意对社区版做的限制?
另外,会出现大批量的向量化失败,重新向量化只能一个个点。没有自动向量化失败文档的功能,也没法批量操作。

1.4.0 优化的向量化机制,之前版本是按照分段进行向量化,优化后逻辑是 分段后在进行分块,对分块进行向量化,一个分段可能会有N个分块,所以比之前版本处理时间要久,社区版和专业版处理机制一样。

在知识库面包列表中 有个 重新向量化的操作,可以对整个知识库中的文档进行重新向量化操作。

问题是,知识库的文档太多了,我没法全部重新向量化(太耗时),希望能只对选中的文档向量化,或只对失败的文档向量化。

可以到github上提个需求issue,后续迭代

我用血的教训提醒后来者:千万不要重新向量化,否则你后悔莫及