Skip to content
体验新版
项目
组织
正在加载...
登录
切换导航
打开侧边栏
indiff7643
Terarkdb
提交
6d84bd9b
T
Terarkdb
项目概览
indiff7643
/
Terarkdb
通知
1
Star
0
Fork
0
代码
文件
提交
分支
Tags
贡献者
分支图
Diff
Issue
0
列表
看板
标记
里程碑
合并请求
0
DevOps
流水线
流水线任务
计划
Wiki
0
Wiki
分析
仓库
DevOps
项目成员
Pages
T
Terarkdb
项目概览
项目概览
详情
发布
仓库
仓库
文件
提交
分支
标签
贡献者
分支图
比较
Issue
0
Issue
0
列表
看板
标记
里程碑
合并请求
0
合并请求
0
Pages
DevOps
DevOps
流水线
流水线任务
计划
分析
分析
仓库分析
DevOps
Wiki
0
Wiki
成员
成员
收起侧边栏
关闭侧边栏
动态
分支图
创建新Issue
流水线任务
提交
Issue看板
体验新版 GitCode,发现更多精彩内容 >>
提交
6d84bd9b
编写于
11月 26, 2019
作者:
C
chenchanglong
浏览文件
操作
浏览文件
下载
电子邮件补丁
差异文件
fix compaction priority
上级
b1b72687
变更
1
隐藏空白更改
内联
并排
Showing
1 changed file
with
7 addition
and
14 deletion
+7
-14
db/compaction_job.cc
db/compaction_job.cc
+7
-14
未找到文件。
db/compaction_job.cc
浏览文件 @
6d84bd9b
...
...
@@ -97,7 +97,7 @@ void SetSelfThreadLowPriority() {
// Tunables to consider:
// /sys/block/<device_name>/queue/slice_idle
// /sys/block/<device_name>/queue/slice_sync
syscall
(
SYS_ioprio_set
,
1
,
// IOPRIO_WHO_PROCESS
syscall
(
SYS_ioprio_set
,
1
,
// IOPRIO_WHO_PROCESS
// Current thread.
0
,
IOPRIO_PRIO_VALUE
(
3
,
0
));
...
...
@@ -204,8 +204,6 @@ struct CompactionJob::SubcompactionState {
// The number of bytes overlapping between the current output and
// grandparent files used in ShouldStopBefore().
uint64_t
overlapped_bytes
=
0
;
//
bool
set_low_riority
=
false
;
// A flag determine whether the key has been seen in ShouldStopBefore()
bool
seen_key
=
false
;
std
::
string
compression_dict
;
...
...
@@ -866,7 +864,6 @@ Status CompactionJob::RunSelf() {
// map compact don't need multithreads
thread_pool
.
reserve
(
num_threads
-
1
);
for
(
size_t
i
=
1
;
i
<
compact_
->
sub_compact_states
.
size
();
i
++
)
{
compact_
->
sub_compact_states
[
i
].
set_low_riority
=
true
;
thread_pool
.
emplace_back
(
&
CompactionJob
::
ProcessCompaction
,
this
,
&
compact_
->
sub_compact_states
[
i
]);
}
...
...
@@ -932,10 +929,8 @@ Status CompactionJob::VerifyFiles() {
auto
prefix_extractor
=
compact_
->
compaction
->
mutable_cf_options
()
->
prefix_extractor
.
get
();
std
::
atomic
<
size_t
>
next_file_meta_idx
(
0
);
auto
verify_table
=
[
&
](
Status
&
output_status
,
bool
set_low_riority
)
{
if
(
set_low_riority
)
{
SetSelfThreadLowPriority
();
}
auto
verify_table
=
[
&
](
Status
&
output_status
)
{
SetSelfThreadLowPriority
();
while
(
true
)
{
size_t
file_idx
=
next_file_meta_idx
.
fetch_add
(
1
);
if
(
file_idx
>=
files_meta
.
size
())
{
...
...
@@ -977,10 +972,9 @@ Status CompactionJob::VerifyFiles() {
std
::
min
(
files_meta
.
size
(),
compact_
->
sub_compact_states
.
size
());
for
(
size_t
i
=
1
;
i
<
thread_count
;
i
++
)
{
thread_pool
.
emplace_back
(
verify_table
,
std
::
ref
(
compact_
->
sub_compact_states
[
i
].
status
),
true
);
std
::
ref
(
compact_
->
sub_compact_states
[
i
].
status
));
}
verify_table
(
compact_
->
sub_compact_states
[
0
].
status
,
false
);
verify_table
(
compact_
->
sub_compact_states
[
0
].
status
);
for
(
auto
&
thread
:
thread_pool
)
{
thread
.
join
();
}
...
...
@@ -1097,9 +1091,8 @@ Status CompactionJob::Install(const MutableCFOptions& mutable_cf_options) {
}
void
CompactionJob
::
ProcessCompaction
(
SubcompactionState
*
sub_compact
)
{
if
(
sub_compact
->
set_low_riority
)
{
SetSelfThreadLowPriority
();
}
SetSelfThreadLowPriority
();
fprintf
(
stderr
,
"pri : %d
\n
"
,
getpriority
(
PRIO_PROCESS
,
0
));
switch
(
sub_compact
->
compaction
->
compaction_type
())
{
case
kKeyValueCompaction
:
ProcessKeyValueCompaction
(
sub_compact
);
...
...
编辑
预览
Markdown
is supported
0%
请重试
或
添加新附件
.
添加附件
取消
You are about to add
0
people
to the discussion. Proceed with caution.
先完成此消息的编辑!
取消
想要评论请
注册
或
登录