master

Ssuperlchf为hnsw检索添加mmap加载

02943fb8创建于 2025年6月6日历史提交

文件	最后提交记录	最后更新时间
CMakeLists.txt	add jieba_tokenizer (sourcecode,compile,package)	1 年前
Makefile	bm25 build forward list	1 年前
bitutils.cpp	支持DataVec向量数据库	1 年前
bm25.cpp	fix upgrade, testcase	1 年前
bm25build.cpp	merge optimize_bm25build into master [BM25性能优化] bm25索引构建性能优化 Created-by: wlff234 Commit-by: wlff234;Eurekaxun Merged-by: opengauss_bot Description: 【标题】(请简要描述下实现的内容) 【实现内容】: bm25构建索引性能优化。hashBuckets的页面在构建索引前初始化，查找bucketsBlkno的时候，直接使用页面的offno计算得到。 优化锁的使用(优先使用共享锁，需要修改元素的时候，改成独占锁)。 【根因分析】: 【实现方案】: 【关联需求或issue】:https://gitcode.com/opengauss/org-issue/issues/24 【开发自验报告】: 基本功能：   构建时间： 2500w测试集：30分钟  测试小数据量并发构建：  1. 请附上自验结果(内容或者截图) 2. 是否可以添加fastcheck测试用例，如是，请补充fastcheck用例 3. 是否涉及资料修改，如是，在docs仓库补充资料 4. 是否考虑升级场景(系统表修改、日志持久化以及修改执行态数据格式) 5. 是否考虑在线扩容等扩展场景 6. 是否考虑异常场景/并发场景/前向兼容/性能场景 7. 是否对其他模块产生影响 【其他说明】: See merge request: opengauss/openGauss-server!7764	1 年前
bm25scan.cpp	merge optimize_bm25build into master [BM25性能优化] bm25索引构建性能优化 Created-by: wlff234 Commit-by: wlff234;Eurekaxun Merged-by: opengauss_bot Description: 【标题】(请简要描述下实现的内容) 【实现内容】: bm25构建索引性能优化。hashBuckets的页面在构建索引前初始化，查找bucketsBlkno的时候，直接使用页面的offno计算得到。 优化锁的使用(优先使用共享锁，需要修改元素的时候，改成独占锁)。 【根因分析】: 【实现方案】: 【关联需求或issue】:https://gitcode.com/opengauss/org-issue/issues/24 【开发自验报告】: 基本功能：   构建时间： 2500w测试集：30分钟  测试小数据量并发构建：  1. 请附上自验结果(内容或者截图) 2. 是否可以添加fastcheck测试用例，如是，请补充fastcheck用例 3. 是否涉及资料修改，如是，在docs仓库补充资料 4. 是否考虑升级场景(系统表修改、日志持久化以及修改执行态数据格式) 5. 是否考虑在线扩容等扩展场景 6. 是否考虑异常场景/并发场景/前向兼容/性能场景 7. 是否对其他模块产生影响 【其他说明】: See merge request: opengauss/openGauss-server!7764	1 年前
bm25utils.cpp	optimize invertedlist build	1 年前
hnsw.cpp	datavec限制extreme rto场景	1 年前
hnswadaptor.cpp	支持ivfpq索引构建	1 年前
hnswbuild.cpp	统一PQ加速库内外subItemsize是否对齐的问题	1 年前
hnswdelete.cpp	支持DataVec向量数据库	1 年前
hnswinsert.cpp	为hnsw检索添加mmap加载	1 年前
hnswscan.cpp	为hnsw检索添加mmap加载	1 年前
hnswutils.cpp	为hnsw检索添加mmap加载	1 年前
hnswvacuum.cpp	support HNSWPQ	1 年前
ivfadaptor.cpp	支持ivfpq索引构建	1 年前
ivfbuild.cpp	统一PQ加速库内外subItemsize是否对齐的问题	1 年前
ivfflat.cpp	datavec限制extreme rto场景	1 年前
ivfinsert.cpp	修复创建IVFPQ索引后，enable_pq=off重启集群，修改表数据数据库异常的问题	1 年前
ivfkmeans.cpp	解决创建ivfflat索引时，lists较大导致内存分配不足创建失败的问题	1 年前
ivfscan.cpp	解决IVFPQ召回率问题	1 年前
ivfutils.cpp	datavec限制extreme rto场景	1 年前
ivfvacuum.cpp	解决IVFPQ召回率问题	1 年前
utils.cpp	为hnsw检索添加mmap加载	1 年前
vecindex.cpp	支持DataVec向量数据库	1 年前