Skip to content
体验新版
项目
组织
正在加载...
登录
切换导航
打开侧边栏
milvus
milvus
提交
d0510210
M
milvus
项目概览
milvus
/
milvus
9 个月 前同步成功
通知
260
Star
22476
Fork
2472
代码
文件
提交
分支
Tags
贡献者
分支图
Diff
Issue
0
列表
看板
标记
里程碑
合并请求
0
DevOps
流水线
流水线任务
计划
Wiki
0
Wiki
分析
仓库
DevOps
项目成员
Pages
M
milvus
项目概览
项目概览
详情
发布
仓库
仓库
文件
提交
分支
标签
贡献者
分支图
比较
Issue
0
Issue
0
列表
看板
标记
里程碑
合并请求
0
合并请求
0
Pages
DevOps
DevOps
流水线
流水线任务
计划
分析
分析
仓库分析
DevOps
Wiki
0
Wiki
成员
成员
收起侧边栏
关闭侧边栏
动态
分支图
创建新Issue
流水线任务
提交
Issue看板
前往新版Gitcode,体验更适合开发者的 AI 搜索 >>
未验证
提交
d0510210
编写于
3月 28, 2023
作者:
X
Xiaofan
提交者:
GitHub
3月 28, 2023
浏览文件
操作
浏览文件
下载
电子邮件补丁
差异文件
Add config for disable BF load (#22996)
Signed-off-by:
N
xiaofan-luan
<
xiaofan.luan@zilliz.com
>
上级
fc1545c4
变更
3
隐藏空白更改
内联
并排
Showing
3 changed file
with
22 addition
and
0 deletion
+22
-0
internal/querynode/segment.go
internal/querynode/segment.go
+6
-0
internal/querynode/segment_loader.go
internal/querynode/segment_loader.go
+5
-0
internal/util/paramtable/component_param.go
internal/util/paramtable/component_param.go
+11
-0
未找到文件。
internal/querynode/segment.go
浏览文件 @
d0510210
...
...
@@ -614,6 +614,12 @@ func (s *Segment) InitCurrentStat() {
func
(
s
*
Segment
)
isPKExist
(
pk
primaryKey
)
bool
{
s
.
statLock
.
Lock
()
defer
s
.
statLock
.
Unlock
()
if
Params
.
DataNodeCfg
.
SkipBFStatsLoad
.
GetAsBool
()
{
log
.
Warn
(
"processing delete while skip load BF, may affect performance"
,
zap
.
Any
(
"pk"
,
pk
),
zap
.
Int64
(
"segmentID"
,
s
.
segmentID
))
return
true
}
if
s
.
currentStat
!=
nil
&&
s
.
currentStat
.
PkExist
(
pk
)
{
return
true
}
...
...
internal/querynode/segment_loader.go
浏览文件 @
d0510210
...
...
@@ -642,6 +642,11 @@ func (loader *segmentLoader) loadSegmentBloomFilter(ctx context.Context, segment
return
nil
}
if
Params
.
DataNodeCfg
.
SkipBFStatsLoad
.
GetAsBool
()
{
log
.
Info
(
"skip load BF with config set "
,
zap
.
Int64
(
"segmentID"
,
segment
.
segmentID
))
return
nil
}
startTs
:=
time
.
Now
()
values
,
err
:=
loader
.
cm
.
MultiRead
(
ctx
,
binlogPaths
)
if
err
!=
nil
{
...
...
internal/util/paramtable/component_param.go
浏览文件 @
d0510210
...
...
@@ -2036,6 +2036,9 @@ type dataNodeConfig struct {
// DataNode send timetick interval per collection
DataNodeTimeTickInterval
ParamItem
`refreshable:"false"`
// Skip BF
SkipBFStatsLoad
ParamItem
`refreshable:"true"`
}
func
(
p
*
dataNodeConfig
)
init
(
base
*
BaseTable
)
{
...
...
@@ -2150,6 +2153,14 @@ func (p *dataNodeConfig) init(base *BaseTable) {
DefaultValue
:
"500"
,
}
p
.
DataNodeTimeTickInterval
.
Init
(
base
.
mgr
)
p
.
SkipBFStatsLoad
=
ParamItem
{
Key
:
"dataNode.skip.BFStats.Load"
,
Version
:
"2.2.5"
,
PanicIfEmpty
:
false
,
DefaultValue
:
"false"
,
}
p
.
SkipBFStatsLoad
.
Init
(
base
.
mgr
)
}
// /////////////////////////////////////////////////////////////////////////////
...
...
编辑
预览
Markdown
is supported
0%
请重试
或
添加新附件
.
添加附件
取消
You are about to add
0
people
to the discussion. Proceed with caution.
先完成此消息的编辑!
取消
想要评论请
注册
或
登录