Skip to content
体验新版
项目
组织
正在加载...
登录
切换导航
打开侧边栏
xxadev
tensorflow
提交
75ba8613
T
tensorflow
项目概览
xxadev
/
tensorflow
与 Fork 源项目一致
从无法访问的项目Fork
通知
3
Star
1
Fork
0
代码
文件
提交
分支
Tags
贡献者
分支图
Diff
Issue
0
列表
看板
标记
里程碑
合并请求
0
Wiki
0
Wiki
分析
仓库
DevOps
项目成员
Pages
T
tensorflow
项目概览
项目概览
详情
发布
仓库
仓库
文件
提交
分支
标签
贡献者
分支图
比较
Issue
0
Issue
0
列表
看板
标记
里程碑
合并请求
0
合并请求
0
Pages
分析
分析
仓库分析
DevOps
Wiki
0
Wiki
成员
成员
收起侧边栏
关闭侧边栏
动态
分支图
创建新Issue
提交
Issue看板
体验新版 GitCode,发现更多精彩内容 >>
提交
75ba8613
编写于
7月 11, 2019
作者:
R
Rohan Jain
提交者:
TensorFlower Gardener
7月 11, 2019
浏览文件
操作
浏览文件
下载
电子邮件补丁
差异文件
Adding cord support for ZlibOutputBuffer. This improves snapshot benchmark performance by ~2%.
PiperOrigin-RevId: 257679909
上级
36c1a292
变更
3
隐藏空白更改
内联
并排
Showing
3 changed file
with
16 addition
and
6 deletion
+16
-6
tensorflow/core/kernels/data/experimental/snapshot_dataset_op.cc
...low/core/kernels/data/experimental/snapshot_dataset_op.cc
+1
-6
tensorflow/core/lib/io/zlib_outputbuffer.cc
tensorflow/core/lib/io/zlib_outputbuffer.cc
+11
-0
tensorflow/core/lib/io/zlib_outputbuffer.h
tensorflow/core/lib/io/zlib_outputbuffer.h
+4
-0
未找到文件。
tensorflow/core/kernels/data/experimental/snapshot_dataset_op.cc
浏览文件 @
75ba8613
...
...
@@ -91,12 +91,7 @@ class SnapshotWriter {
TF_RETURN_IF_ERROR
(
dest_
->
Append
(
StringPiece
(
header
,
sizeof
(
header
))));
// TODO(frankchn): Remove after ZlibOutputBuffer Cord support is added.
if
(
compression_type_
.
empty
())
{
return
dest_
->
Append
(
data
);
}
else
{
return
dest_
->
Append
(
data
.
ToString
());
}
return
dest_
->
Append
(
data
);
}
#endif // PLATFORM_GOOGLE
...
...
tensorflow/core/lib/io/zlib_outputbuffer.cc
浏览文件 @
75ba8613
...
...
@@ -190,6 +190,17 @@ Status ZlibOutputBuffer::Append(StringPiece data) {
return
Status
::
OK
();
}
#if defined(PLATFORM_GOOGLE)
Status
ZlibOutputBuffer
::
Append
(
const
absl
::
Cord
&
cord
)
{
absl
::
CordReader
reader
(
cord
);
absl
::
string_view
fragment
;
while
(
reader
.
ReadFragment
(
&
fragment
))
{
TF_RETURN_IF_ERROR
(
Append
(
fragment
));
}
return
Status
::
OK
();
}
#endif
Status
ZlibOutputBuffer
::
Flush
()
{
TF_RETURN_IF_ERROR
(
DeflateBuffered
(
Z_PARTIAL_FLUSH
));
TF_RETURN_IF_ERROR
(
FlushOutputBufferToFile
());
...
...
tensorflow/core/lib/io/zlib_outputbuffer.h
浏览文件 @
75ba8613
...
...
@@ -65,6 +65,10 @@ class ZlibOutputBuffer : public WritableFile {
// To immediately write contents to file call `Flush()`.
Status
Append
(
StringPiece
data
)
override
;
#if defined(PLATFORM_GOOGLE)
Status
Append
(
const
absl
::
Cord
&
cord
)
override
;
#endif
// Deflates any cached input and writes all output to file.
Status
Flush
()
override
;
...
...
编辑
预览
Markdown
is supported
0%
请重试
或
添加新附件
.
添加附件
取消
You are about to add
0
people
to the discussion. Proceed with caution.
先完成此消息的编辑!
取消
想要评论请
注册
或
登录