faiss是Facebook的一个快速计算向量距离的库,适合要求快速计算海量向量距离的场景
docker已经限制了内存限制cpu,但是还是直接爆满宿主的cpu
import faiss
PROCESS_COUNT = 8
faiss.omp_set_num_threads(PROCESS_COUNT) # 自己能用的有多少核就写多少,就不会把宿主都爆满了
faiss是Facebook的一个快速计算向量距离的库,适合要求快速计算海量向量距离的场景
docker已经限制了内存限制cpu,但是还是直接爆满宿主的cpu
import faiss
PROCESS_COUNT = 8
faiss.omp_set_num_threads(PROCESS_COUNT) # 自己能用的有多少核就写多少,就不会把宿主都爆满了