我有一个18000条数据的问答对,向量化老是失败,而且很慢,我看了一下向量化的时候cpu才占用了15%,这个需要怎么设置一下么?
可以查看/opt/maxkb/logs目录下的日志找找失败日志,单个文件分段数量太多是比较耗时的。
能否用gpu进行向量化呢,怎么操作
自己部署,嵌入模型部署的时候指定GPU运行就行了
我有一个18000条数据的问答对,向量化老是失败,而且很慢,我看了一下向量化的时候cpu才占用了15%,这个需要怎么设置一下么?
可以查看/opt/maxkb/logs目录下的日志找找失败日志,单个文件分段数量太多是比较耗时的。
能否用gpu进行向量化呢,怎么操作
自己部署,嵌入模型部署的时候指定GPU运行就行了