Skip to content
体验新版
项目
组织
正在加载...
登录
切换导航
打开侧边栏
机器未来
Paddle
提交
9b67688b
P
Paddle
项目概览
机器未来
/
Paddle
与 Fork 源项目一致
Fork自
PaddlePaddle / Paddle
通知
1
Star
1
Fork
0
代码
文件
提交
分支
Tags
贡献者
分支图
Diff
Issue
1
列表
看板
标记
里程碑
合并请求
0
Wiki
0
Wiki
分析
仓库
DevOps
项目成员
Pages
P
Paddle
项目概览
项目概览
详情
发布
仓库
仓库
文件
提交
分支
标签
贡献者
分支图
比较
Issue
1
Issue
1
列表
看板
标记
里程碑
合并请求
0
合并请求
0
Pages
分析
分析
仓库分析
DevOps
Wiki
0
Wiki
成员
成员
收起侧边栏
关闭侧边栏
动态
分支图
创建新Issue
提交
Issue看板
体验新版 GitCode,发现更多精彩内容 >>
提交
9b67688b
编写于
12月 25, 2017
作者:
T
typhoonzero
浏览文件
操作
浏览文件
下载
电子邮件补丁
差异文件
follow comments
上级
fbd1d1cf
变更
2
隐藏空白更改
内联
并排
Showing
2 changed file
with
12 addition
and
14 deletion
+12
-14
python/paddle/v2/reader/decorator.py
python/paddle/v2/reader/decorator.py
+1
-1
python/paddle/v2/reader/tests/decorator_test.py
python/paddle/v2/reader/tests/decorator_test.py
+11
-13
未找到文件。
python/paddle/v2/reader/decorator.py
浏览文件 @
9b67688b
...
@@ -14,7 +14,7 @@
...
@@ -14,7 +14,7 @@
__all__
=
[
__all__
=
[
'map_readers'
,
'buffered'
,
'compose'
,
'chain'
,
'shuffle'
,
'map_readers'
,
'buffered'
,
'compose'
,
'chain'
,
'shuffle'
,
'ComposeNotAligned'
,
'firstn'
,
'xmap_readers'
,
'
pipe_r
eader'
'ComposeNotAligned'
,
'firstn'
,
'xmap_readers'
,
'
PipeR
eader'
]
]
from
threading
import
Thread
from
threading
import
Thread
...
...
python/paddle/v2/reader/tests/decorator_test.py
浏览文件 @
9b67688b
...
@@ -147,8 +147,11 @@ class TestXmap(unittest.TestCase):
...
@@ -147,8 +147,11 @@ class TestXmap(unittest.TestCase):
class
TestPipeReader
(
unittest
.
TestCase
):
class
TestPipeReader
(
unittest
.
TestCase
):
def
test_pipe_reader
(
self
):
def
test_pipe_reader
(
self
):
def
simple_parser
(
lines
):
def
example_reader
(
myfiles
):
return
lines
for
f
in
myfiles
:
pr
=
paddle
.
v2
.
reader
.
PipeReader
(
"cat %s"
%
f
,
bufsize
=
128
)
for
l
in
pr
.
get_line
():
yield
l
import
tempfile
import
tempfile
...
@@ -159,17 +162,12 @@ class TestPipeReader(unittest.TestCase):
...
@@ -159,17 +162,12 @@ class TestPipeReader(unittest.TestCase):
for
r
in
records
:
for
r
in
records
:
f
.
write
(
'%s
\n
'
%
r
)
f
.
write
(
'%s
\n
'
%
r
)
cmd
=
"cat %s"
%
temp
.
name
result
=
[]
reader
=
paddle
.
v2
.
reader
.
pipe_reader
(
for
r
in
example_reader
([
temp
.
name
]):
cmd
,
simple_parser
,
bufsize
=
128
)
result
.
append
(
r
)
for
i
in
xrange
(
4
):
result
=
[]
for
idx
,
e
in
enumerate
(
records
):
for
r
in
reader
():
self
.
assertEqual
(
e
,
result
[
idx
])
result
.
append
(
r
)
for
idx
,
e
in
enumerate
(
records
):
print
e
,
result
[
idx
]
self
.
assertEqual
(
e
,
result
[
idx
])
finally
:
finally
:
# delete the temporary file
# delete the temporary file
temp
.
close
()
temp
.
close
()
...
...
编辑
预览
Markdown
is supported
0%
请重试
或
添加新附件
.
添加附件
取消
You are about to add
0
people
to the discussion. Proceed with caution.
先完成此消息的编辑!
取消
想要评论请
注册
或
登录