Skip to content
体验新版
项目
组织
正在加载...
登录
切换导航
打开侧边栏
曾经的那一瞬间
Models
提交
68146271
M
Models
项目概览
曾经的那一瞬间
/
Models
大约 1 年 前同步成功
通知
1
Star
0
Fork
0
代码
文件
提交
分支
Tags
贡献者
分支图
Diff
Issue
0
列表
看板
标记
里程碑
合并请求
0
DevOps
流水线
流水线任务
计划
Wiki
0
Wiki
分析
仓库
DevOps
项目成员
Pages
M
Models
项目概览
项目概览
详情
发布
仓库
仓库
文件
提交
分支
标签
贡献者
分支图
比较
Issue
0
Issue
0
列表
看板
标记
里程碑
合并请求
0
合并请求
0
Pages
DevOps
DevOps
流水线
流水线任务
计划
分析
分析
仓库分析
DevOps
Wiki
0
Wiki
成员
成员
收起侧边栏
关闭侧边栏
动态
分支图
创建新Issue
流水线任务
提交
Issue看板
体验新版 GitCode,发现更多精彩内容 >>
提交
68146271
编写于
12月 17, 2019
作者:
D
David Chen
提交者:
A. Unique TensorFlower
12月 17, 2019
浏览文件
操作
浏览文件
下载
电子邮件补丁
差异文件
Internal change
PiperOrigin-RevId: 285991432
上级
7a69f962
变更
3
显示空白变更内容
内联
并排
Showing
3 changed file
with
21 addition
and
12 deletion
+21
-12
official/benchmark/bert_benchmark.py
official/benchmark/bert_benchmark.py
+2
-0
official/benchmark/bert_benchmark_utils.py
official/benchmark/bert_benchmark_utils.py
+18
-12
official/benchmark/bert_squad_benchmark.py
official/benchmark/bert_squad_benchmark.py
+1
-0
未找到文件。
official/benchmark/bert_benchmark.py
浏览文件 @
68146271
...
...
@@ -152,6 +152,8 @@ class BertClassifyBenchmarkReal(BertClassifyBenchmarkBase):
# Since we do not load from any pretrained checkpoints, we ignore all
# accuracy metrics.
summary
.
pop
(
'eval_metrics'
,
None
)
summary
[
'start_time_sec'
]
=
start_time_sec
super
(
BertClassifyBenchmarkReal
,
self
).
_report_benchmark
(
stats
=
summary
,
wall_time_sec
=
wall_time_sec
,
...
...
official/benchmark/bert_benchmark_utils.py
浏览文件 @
68146271
...
...
@@ -38,24 +38,25 @@ class BenchmarkTimerCallback(tf.keras.callbacks.Callback):
def
__init__
(
self
,
num_batches_to_skip
=
10
):
super
(
BenchmarkTimerCallback
,
self
).
__init__
()
self
.
num_batches_to_skip
=
num_batches_to_skip
self
.
timer_records
=
[]
self
.
start_time
=
None
self
.
batch_start_times
=
{}
self
.
batch_stop_times
=
{}
def
on_batch_begin
(
self
,
batch
,
logs
=
None
):
if
batch
<
self
.
num_batches_to_skip
:
return
self
.
start_time
=
time
.
time
()
self
.
batch_start_times
[
batch
]
=
time
.
time
()
def
on_batch_end
(
self
,
batch
,
logs
=
None
):
if
batch
<
self
.
num_batches_to_skip
:
return
self
.
batch_stop_times
[
batch
]
=
time
.
time
()
assert
self
.
start_time
self
.
timer_records
.
append
(
time
.
time
()
-
self
.
start_time
)
def
get_examples_per_sec
(
self
,
batch_size
,
num_batches_to_skip
=
10
):
batch_durations
=
[]
for
batch
in
self
.
batch_start_times
:
if
batch
in
self
.
batch_stop_times
and
batch
>=
num_batches_to_skip
:
batch_durations
.
append
(
self
.
batch_stop_times
[
batch
]
-
self
.
batch_start_times
[
batch
])
return
batch_size
/
np
.
mean
(
batch_durations
)
def
get_
examples_per_sec
(
self
,
batch_siz
e
):
return
batch_size
/
np
.
mean
(
self
.
timer_records
)
def
get_
startup_time
(
self
,
program_start_tim
e
):
return
self
.
batch_start_times
[
0
]
-
program_start_time
class
BertBenchmarkBase
(
tf
.
test
.
Benchmark
):
...
...
@@ -113,6 +114,11 @@ class BertBenchmarkBase(tf.test.Benchmark):
'name'
:
'exp_per_second'
,
'value'
:
0.0
,
})
if
self
.
timer_callback
and
'start_time_sec'
in
stats
:
metrics
.
append
({
'name'
:
'startup_time'
,
'value'
:
self
.
timer_callback
.
get_startup_time
(
stats
[
'start_time_sec'
])
})
if
'eval_metrics'
in
stats
:
metrics
.
append
({
...
...
official/benchmark/bert_squad_benchmark.py
浏览文件 @
68146271
...
...
@@ -144,6 +144,7 @@ class BertSquadBenchmarkReal(BertSquadBenchmarkBase):
wall_time_sec
=
time
.
time
()
-
start_time_sec
summary
=
self
.
_read_training_summary_from_file
()
summary
[
'start_time_sec'
]
=
start_time_sec
super
(
BertSquadBenchmarkReal
,
self
).
_report_benchmark
(
stats
=
summary
,
...
...
编辑
预览
Markdown
is supported
0%
请重试
或
添加新附件
.
添加附件
取消
You are about to add
0
people
to the discussion. Proceed with caution.
先完成此消息的编辑!
取消
想要评论请
注册
或
登录