Skip to content
体验新版
项目
组织
正在加载...
登录
切换导航
打开侧边栏
milvus
milvus
提交
d163b771
M
milvus
项目概览
milvus
/
milvus
10 个月 前同步成功
通知
260
Star
22476
Fork
2472
代码
文件
提交
分支
Tags
贡献者
分支图
Diff
Issue
0
列表
看板
标记
里程碑
合并请求
0
DevOps
流水线
流水线任务
计划
Wiki
0
Wiki
分析
仓库
DevOps
项目成员
Pages
M
milvus
项目概览
项目概览
详情
发布
仓库
仓库
文件
提交
分支
标签
贡献者
分支图
比较
Issue
0
Issue
0
列表
看板
标记
里程碑
合并请求
0
合并请求
0
Pages
DevOps
DevOps
流水线
流水线任务
计划
分析
分析
仓库分析
DevOps
Wiki
0
Wiki
成员
成员
收起侧边栏
关闭侧边栏
动态
分支图
创建新Issue
流水线任务
提交
Issue看板
前往新版Gitcode,体验更适合开发者的 AI 搜索 >>
未验证
提交
d163b771
编写于
5月 31, 2023
作者:
Y
yah01
提交者:
GitHub
5月 31, 2023
浏览文件
操作
浏览文件
下载
电子邮件补丁
差异文件
Fix panic while growing segment loads JSON data (#24567)
Signed-off-by:
N
yah01
<
yah2er0ne@outlook.com
>
上级
f11ad946
变更
1
隐藏空白更改
内联
并排
Showing
1 changed file
with
19 addition
and
1 deletion
+19
-1
internal/core/src/segcore/ConcurrentVector.h
internal/core/src/segcore/ConcurrentVector.h
+19
-1
未找到文件。
internal/core/src/segcore/ConcurrentVector.h
浏览文件 @
d163b771
...
...
@@ -11,6 +11,7 @@
#pragma once
#include <simdjson.h>
#include <tbb/concurrent_vector.h>
#include <atomic>
...
...
@@ -195,10 +196,27 @@ class ConcurrentVectorImpl : public VectorBase {
void
set_data_raw
(
ssize_t
element_offset
,
const
std
::
vector
<
storage
::
FieldDataPtr
>&
datas
)
override
{
// As the JSON data are stored as a string in FieldData,
// we need to cast it to milvus::Json here.
std
::
vector
<
milvus
::
Json
>
json_data
;
for
(
auto
&
field_data
:
datas
)
{
auto
num_rows
=
field_data
->
get_num_rows
();
set_data_raw
(
element_offset
,
field_data
->
Data
(),
num_rows
);
const
void
*
data
=
field_data
->
Data
();
if
constexpr
(
std
::
is_same_v
<
Type
,
milvus
::
Json
>
)
{
json_data
.
reserve
(
num_rows
);
for
(
int64_t
i
=
0
;
i
<
num_rows
;
++
i
)
{
auto
json_bytes
=
reinterpret_cast
<
const
std
::
string
*>
(
field_data
->
RawValue
(
i
));
json_data
.
emplace_back
(
simdjson
::
padded_string
(
*
json_bytes
));
}
data
=
json_data
.
data
();
}
set_data_raw
(
element_offset
,
data
,
num_rows
);
element_offset
+=
num_rows
;
json_data
.
clear
();
}
}
...
...
编辑
预览
Markdown
is supported
0%
请重试
或
添加新附件
.
添加附件
取消
You are about to add
0
people
to the discussion. Proceed with caution.
先完成此消息的编辑!
取消
想要评论请
注册
或
登录