Skip to content
体验新版
项目
组织
正在加载...
登录
切换导航
打开侧边栏
milvus
milvus
提交
3cc8ee29
M
milvus
项目概览
milvus
/
milvus
11 个月 前同步成功
通知
260
Star
22476
Fork
2472
代码
文件
提交
分支
Tags
贡献者
分支图
Diff
Issue
0
列表
看板
标记
里程碑
合并请求
0
DevOps
流水线
流水线任务
计划
Wiki
0
Wiki
分析
仓库
DevOps
项目成员
Pages
M
milvus
项目概览
项目概览
详情
发布
仓库
仓库
文件
提交
分支
标签
贡献者
分支图
比较
Issue
0
Issue
0
列表
看板
标记
里程碑
合并请求
0
合并请求
0
Pages
DevOps
DevOps
流水线
流水线任务
计划
分析
分析
仓库分析
DevOps
Wiki
0
Wiki
成员
成员
收起侧边栏
关闭侧边栏
动态
分支图
创建新Issue
流水线任务
提交
Issue看板
前往新版Gitcode,体验更适合开发者的 AI 搜索 >>
未验证
提交
3cc8ee29
编写于
7月 27, 2021
作者:
D
dragondriver
提交者:
GitHub
7月 27, 2021
浏览文件
操作
浏览文件
下载
电子邮件补丁
差异文件
Filter NaN when reducing search results (#6806)
Signed-off-by:
N
dragondriver
<
jiquan.long@zilliz.com
>
上级
93f0c9d8
变更
1
显示空白变更内容
内联
并排
Showing
1 changed file
with
10 addition
and
1 deletion
+10
-1
internal/proxy/task.go
internal/proxy/task.go
+10
-1
未找到文件。
internal/proxy/task.go
浏览文件 @
3cc8ee29
...
...
@@ -1698,6 +1698,10 @@ func reduceSearchResultDataParallel(searchResultData []*schemapb.SearchResultDat
continue
}
distance
:=
searchResultData
[
q
]
.
Scores
[
idx
*
topk
+
loc
]
// https://github.com/milvus-io/milvus/issues/6781
if
math
.
IsNaN
(
float64
(
distance
))
{
continue
}
if
distance
>
maxDistance
||
(
math
.
Abs
(
float64
(
distance
-
maxDistance
))
<
math
.
SmallestNonzeroFloat32
&&
choice
!=
q
)
{
choice
=
q
maxDistance
=
distance
...
...
@@ -1710,7 +1714,12 @@ func reduceSearchResultDataParallel(searchResultData []*schemapb.SearchResultDat
choiceOffset
:=
locs
[
choice
]
// check if distance is valid, `invalid` here means very very big,
// in this process, distance here is the smallest, so the rest of distance are all invalid
if
searchResultData
[
choice
]
.
Scores
[
idx
*
topk
+
choiceOffset
]
<=
minFloat32
{
// https://github.com/milvus-io/milvus/issues/6781
// tanimoto distance between two binary vectors maybe -inf, so -inf distance shouldn't be filtered,
// otherwise it will cause that the number of hit records is less than needed (topk).
// in the above process, we have already filtered NaN distance.
distance
:=
searchResultData
[
choice
]
.
Scores
[
idx
*
topk
+
choiceOffset
]
if
distance
<
minFloat32
{
break
}
curIdx
:=
idx
*
topk
+
choiceOffset
...
...
编辑
预览
Markdown
is supported
0%
请重试
或
添加新附件
.
添加附件
取消
You are about to add
0
people
to the discussion. Proceed with caution.
先完成此消息的编辑!
取消
想要评论请
注册
或
登录