Skip to content
体验新版
项目
组织
正在加载...
登录
切换导航
打开侧边栏
BaiXuePrincess
milvus
提交
3c072f31
milvus
项目概览
BaiXuePrincess
/
milvus
与 Fork 源项目一致
从无法访问的项目Fork
通知
7
Star
4
Fork
0
代码
文件
提交
分支
Tags
贡献者
分支图
Diff
Issue
0
列表
看板
标记
里程碑
合并请求
0
Wiki
0
Wiki
分析
仓库
DevOps
项目成员
Pages
milvus
项目概览
项目概览
详情
发布
仓库
仓库
文件
提交
分支
标签
贡献者
分支图
比较
Issue
0
Issue
0
列表
看板
标记
里程碑
合并请求
0
合并请求
0
Pages
分析
分析
仓库分析
DevOps
Wiki
0
Wiki
成员
成员
收起侧边栏
关闭侧边栏
动态
分支图
创建新Issue
提交
Issue看板
体验新版 GitCode,发现更多精彩内容 >>
提交
3c072f31
编写于
10月 10, 2019
作者:
Y
Yu Kun
浏览文件
操作
浏览文件
下载
电子邮件补丁
差异文件
clang tidy and clang format
Former-commit-id: a451b79ef4d43595d2a81b85e444eaa71da6c830
上级
360655d9
变更
3
隐藏空白更改
内联
并排
Showing
3 changed file
with
55 addition
and
54 deletion
+55
-54
cpp/src/cache/DataObj.h
cpp/src/cache/DataObj.h
+0
-2
cpp/src/db/engine/ExecutionEngineImpl.cpp
cpp/src/db/engine/ExecutionEngineImpl.cpp
+50
-50
cpp/src/wrapper/VecImpl.h
cpp/src/wrapper/VecImpl.h
+5
-2
未找到文件。
cpp/src/cache/DataObj.h
浏览文件 @
3c072f31
...
@@ -17,7 +17,6 @@
...
@@ -17,7 +17,6 @@
#pragma once
#pragma once
#include <memory>
#include <memory>
namespace
milvus
{
namespace
milvus
{
...
@@ -27,7 +26,6 @@ class DataObj {
...
@@ -27,7 +26,6 @@ class DataObj {
public:
public:
virtual
int64_t
virtual
int64_t
Size
()
=
0
;
Size
()
=
0
;
};
};
using
DataObjPtr
=
std
::
shared_ptr
<
DataObj
>
;
using
DataObjPtr
=
std
::
shared_ptr
<
DataObj
>
;
...
...
cpp/src/db/engine/ExecutionEngineImpl.cpp
浏览文件 @
3c072f31
...
@@ -93,56 +93,56 @@ ExecutionEngineImpl::CreatetVecIndex(EngineType type) {
...
@@ -93,56 +93,56 @@ ExecutionEngineImpl::CreatetVecIndex(EngineType type) {
void
void
ExecutionEngineImpl
::
HybridLoad
()
{
ExecutionEngineImpl
::
HybridLoad
()
{
// if (index_type_ != EngineType::FAISS_IVFSQ8Hybrid) {
// if (index_type_ != EngineType::FAISS_IVFSQ8Hybrid) {
// return;
// return;
// }
// }
//
//
// const std::string key = location_ + ".quantizer";
// const std::string key = location_ + ".quantizer";
// std::vector<uint64_t> gpus;
// std::vector<uint64_t> gpus;
//
//
// // cache hit
// // cache hit
// {
// {
// int64_t selected = -1;
// int64_t selected = -1;
// void* quantizer = nullptr;
// void* quantizer = nullptr;
// for (auto& gpu : gpus) {
// for (auto& gpu : gpus) {
// auto cache = cache::GpuCacheMgr::GetInstance(gpu);
// auto cache = cache::GpuCacheMgr::GetInstance(gpu);
// if (auto quan = cache->GetIndex(key)) {
// if (auto quan = cache->GetIndex(key)) {
// selected = gpu;
// selected = gpu;
// quantizer = quan;
// quantizer = quan;
// }
// }
// }
// }
//
//
// if (selected != -1) {
// if (selected != -1) {
// // set quantizer into index;
// // set quantizer into index;
// return;
// return;
// }
// }
// }
// }
//
//
// // cache miss
// // cache miss
// {
// {
// std::vector<int64_t> all_free_mem;
// std::vector<int64_t> all_free_mem;
// for (auto& gpu : gpus) {
// for (auto& gpu : gpus) {
// auto cache = cache::GpuCacheMgr::GetInstance(gpu);
// auto cache = cache::GpuCacheMgr::GetInstance(gpu);
// auto free_mem = cache->CacheCapacity() - cache->CacheUsage();
// auto free_mem = cache->CacheCapacity() - cache->CacheUsage();
// all_free_mem.push_back(free_mem);
// all_free_mem.push_back(free_mem);
// }
// }
//
//
// auto max_e = std::max_element(all_free_mem.begin(), all_free_mem.end());
// auto max_e = std::max_element(all_free_mem.begin(), all_free_mem.end());
// auto best = std::distance(all_free_mem.begin(), max_e);
// auto best = std::distance(all_free_mem.begin(), max_e);
//
//
// // load to best device;
// // load to best device;
// // cache quantizer
// // cache quantizer
// }
// }
//
//
// // if index_type == Hybrid
// // if index_type == Hybrid
//
//
// // 1. quantizer in which gpu
// // 1. quantizer in which gpu
//
//
// // 2.1 which gpu cache best
// // 2.1 which gpu cache best
//
//
// // 2.2 load to that gpu cache
// // 2.2 load to that gpu cache
//
//
// // set quantizer into index
// // set quantizer into index
}
}
Status
Status
...
...
cpp/src/wrapper/VecImpl.h
浏览文件 @
3c072f31
...
@@ -113,10 +113,13 @@ class BFIndex : public VecIndexImpl {
...
@@ -113,10 +113,13 @@ class BFIndex : public VecIndexImpl {
class
ToIndexData
:
public
cache
::
DataObj
{
class
ToIndexData
:
public
cache
::
DataObj
{
public:
public:
ToIndexData
(
int64_t
size
)
:
size_
(
size
)
{}
explicit
ToIndexData
(
int64_t
size
)
:
size_
(
size
)
{
}
int64_t
int64_t
Size
()
override
{
return
size_
;}
Size
()
override
{
return
size_
;
}
private:
private:
int64_t
size_
;
int64_t
size_
;
...
...
编辑
预览
Markdown
is supported
0%
请重试
或
添加新附件
.
添加附件
取消
You are about to add
0
people
to the discussion. Proceed with caution.
先完成此消息的编辑!
取消
想要评论请
注册
或
登录