Skip to content
体验新版
项目
组织
正在加载...
登录
切换导航
打开侧边栏
doodoocoder
prometheus
提交
eeb03e97
P
prometheus
项目概览
doodoocoder
/
prometheus
与 Fork 源项目一致
从无法访问的项目Fork
通知
2
Star
0
Fork
0
代码
文件
提交
分支
Tags
贡献者
分支图
Diff
Issue
0
列表
看板
标记
里程碑
合并请求
0
Wiki
0
Wiki
分析
仓库
DevOps
项目成员
Pages
P
prometheus
项目概览
项目概览
详情
发布
仓库
仓库
文件
提交
分支
标签
贡献者
分支图
比较
Issue
0
Issue
0
列表
看板
标记
里程碑
合并请求
0
合并请求
0
Pages
分析
分析
仓库分析
DevOps
Wiki
0
Wiki
成员
成员
收起侧边栏
关闭侧边栏
动态
分支图
创建新Issue
提交
Issue看板
体验新版 GitCode,发现更多精彩内容 >>
提交
eeb03e97
编写于
2月 14, 2017
作者:
F
Fabian Reinartz
浏览文件
操作
浏览文件
下载
电子邮件补丁
差异文件
Add headers and format flag for WAL segments
上级
79944a59
变更
1
隐藏空白更改
内联
并排
Showing
1 changed file
with
36 addition
and
5 deletion
+36
-5
wal.go
wal.go
+36
-5
未找到文件。
wal.go
浏览文件 @
eeb03e97
...
...
@@ -3,7 +3,6 @@ package tsdb
import
(
"bufio"
"encoding/binary"
"fmt"
"hash/crc32"
"io"
"math"
...
...
@@ -21,8 +20,13 @@ import (
// WALEntryType indicates what data a WAL entry contains.
type
WALEntryType
byte
// The valid WAL entry types.
const
(
WALMagic
=
0x43AF00EF
// Format versioning flag of a WAL segment file.
WALFormatDefault
byte
=
1
// Entry types in a segment file.
WALEntrySymbols
=
1
WALEntrySeries
=
2
WALEntrySamples
=
3
...
...
@@ -93,9 +97,7 @@ type walHandler struct {
// ReadAll consumes all entries in the WAL and triggers the registered handlers.
func
(
w
*
WAL
)
ReadAll
(
h
*
walHandler
)
error
{
fmt
.
Println
(
"readall"
,
w
.
files
)
for
_
,
f
:=
range
w
.
files
{
fmt
.
Println
(
" "
,
f
.
Name
())
dec
:=
newWALDecoder
(
f
,
h
)
for
{
...
...
@@ -151,6 +153,24 @@ func (w *WAL) initSegments() error {
}
w
.
files
=
append
(
w
.
files
,
lf
)
// Consume and validate meta headers.
for
_
,
f
:=
range
w
.
files
{
metab
:=
make
([]
byte
,
8
)
if
n
,
err
:=
f
.
Read
(
metab
);
err
!=
nil
{
return
errors
.
Wrapf
(
err
,
"validate meta %q"
,
f
.
Name
())
}
else
if
n
!=
8
{
return
errors
.
Errorf
(
"invalid header size %d in %q"
,
n
,
f
.
Name
())
}
if
m
:=
binary
.
BigEndian
.
Uint32
(
metab
[
:
4
]);
m
!=
WALMagic
{
return
errors
.
Errorf
(
"invalid magic header %x in %q"
,
m
,
f
.
Name
())
}
if
metab
[
4
]
!=
WALFormatDefault
{
return
errors
.
Errorf
(
"unknown WAL segment format %d in %q"
,
metab
[
4
],
f
.
Name
())
}
}
return
nil
}
...
...
@@ -190,9 +210,18 @@ func (w *WAL) cut() error {
return
err
}
// Write header metadata for new file.
metab
:=
make
([]
byte
,
8
)
binary
.
BigEndian
.
PutUint32
(
metab
[
:
4
],
WALMagic
)
metab
[
4
]
=
WALFormatDefault
if
_
,
err
:=
f
.
Write
(
metab
);
err
!=
nil
{
return
err
}
w
.
files
=
append
(
w
.
files
,
f
)
w
.
cur
=
bufio
.
NewWriterSize
(
f
,
4
*
1024
*
1024
)
w
.
curN
=
0
w
.
curN
=
len
(
metab
)
return
nil
}
...
...
@@ -391,6 +420,8 @@ type walDecoder struct {
buf
[]
byte
}
// newWALDecoder returns a new decoder for the default WAL format. The meta
// headers of a segment must already have been consumed.
func
newWALDecoder
(
r
io
.
Reader
,
h
*
walHandler
)
*
walDecoder
{
return
&
walDecoder
{
r
:
r
,
...
...
编辑
预览
Markdown
is supported
0%
请重试
或
添加新附件
.
添加附件
取消
You are about to add
0
people
to the discussion. Proceed with caution.
先完成此消息的编辑!
取消
想要评论请
注册
或
登录