Skip to content
体验新版
项目
组织
正在加载...
登录
切换导航
打开侧边栏
PaddlePaddle
PaddleX
提交
75596064
P
PaddleX
项目概览
PaddlePaddle
/
PaddleX
通知
138
Star
4
Fork
0
代码
文件
提交
分支
Tags
贡献者
分支图
Diff
Issue
43
列表
看板
标记
里程碑
合并请求
5
Wiki
0
Wiki
分析
仓库
DevOps
项目成员
Pages
P
PaddleX
项目概览
项目概览
详情
发布
仓库
仓库
文件
提交
分支
标签
贡献者
分支图
比较
Issue
43
Issue
43
列表
看板
标记
里程碑
合并请求
5
合并请求
5
Pages
分析
分析
仓库分析
DevOps
Wiki
0
Wiki
成员
成员
收起侧边栏
关闭侧边栏
动态
分支图
创建新Issue
提交
Issue看板
提交
75596064
编写于
7月 11, 2020
作者:
J
jiangjiajun
浏览文件
操作
浏览文件
下载
电子邮件补丁
差异文件
some details modify
上级
db86eefd
变更
6
隐藏空白更改
内联
并排
Showing
6 changed file
with
57 addition
and
11 deletion
+57
-11
docs/data/format/classification.md
docs/data/format/classification.md
+11
-2
docs/data/format/detection.md
docs/data/format/detection.md
+15
-2
docs/data/format/instance_segmentation.md
docs/data/format/instance_segmentation.md
+15
-2
docs/data/format/segmentation.md
docs/data/format/segmentation.md
+15
-3
docs/quick_start.md
docs/quick_start.md
+1
-1
tutorials/train/image_classification/alexnet.py
tutorials/train/image_classification/alexnet.py
+0
-1
未找到文件。
docs/data/format/classification.md
浏览文件 @
75596064
...
@@ -24,10 +24,13 @@ MyDataset/ # 图像分类数据集根目录
...
@@ -24,10 +24,13 @@ MyDataset/ # 图像分类数据集根目录
## 划分训练集验证集
## 划分训练集验证集
**为了用于训练,我们需要在`MyDataset`目录下准备`train_list.txt`, `val_list.txt`和`labels.txt`三个文件**
,分别用于表示训练集列表,验证集列表和类别标签列表。
[
点击下载图像分类示例数据集
](
https://bj.bcebos.com/paddlex/datasets/vegetables_cls.tar.gz
)
**为了用于训练,我们需要在`MyDataset`目录下准备`train_list.txt`, `val_list.txt`和`labels.txt`三个文件**
,分别用于表示训练集列表,验证集列表和类别标签列表。
[
点击下载图像分类示例数据集
](
https://bj.bcebos.com/paddlex/datasets/vegetables_cls.tar.gz
)
<!--
> 注:也可使用PaddleX自带工具,对数据集进行随机划分,**在数据集按照上面格式组织后**,使用如下命令即可快速完成数据集随机划分,其中split指标训练集的比例,剩余的比例用于验证集。
> 注:也可使用PaddleX自带工具,对数据集进行随机划分,**在数据集按照上面格式组织后**,使用如下命令即可快速完成数据集随机划分,其中split指标训练集的比例,剩余的比例用于验证集。
> ```
> ```
> paddlex --split_dataset --from ImageNet --split 0.8 --save_dir ./splited_dataset_dir
> paddlex --split_dataset --from ImageNet --split 0.8 --save_dir ./splited_dataset_dir
> ```
> ```
-->
**labels.txt**
**labels.txt**
...
@@ -60,8 +63,14 @@ val_list列出用于验证时的图片集成,与其对应的类别id,格式
...
@@ -60,8 +63,14 @@ val_list列出用于验证时的图片集成,与其对应的类别id,格式
```
```
import paddlex as pdx
import paddlex as pdx
from paddlex.cls import transforms
from paddlex.cls import transforms
train_transforms = transforms.ComposedClsTransforms(mode='train', crop_size=[224, 224])
train_transforms = transforms.Compose([
eval_transforms = transforms.ComposedClsTransforms(mode='eval', crop_size=[224, 224])
transforms.RandomCrop(crop_size=224), transforms.RandomHorizontalFlip(),
transforms.Normalize()
])
eval_transforms = transforms.Compose([
transforms.ResizeByShort(short_size=256),
transforms.CenterCrop(crop_size=224), transforms.Normalize()
])
train_dataset = pdx.datasets.ImageNet(
train_dataset = pdx.datasets.ImageNet(
data_dir='./MyDataset',
data_dir='./MyDataset',
file_list='./MyDataset/train_list.txt',
file_list='./MyDataset/train_list.txt',
...
...
docs/data/format/detection.md
浏览文件 @
75596064
...
@@ -21,10 +21,13 @@ MyDataset/ # 目标检测数据集根目录
...
@@ -21,10 +21,13 @@ MyDataset/ # 目标检测数据集根目录
## 划分训练集验证集
## 划分训练集验证集
**为了用于训练,我们需要在`MyDataset`目录下准备`train_list.txt`, `val_list.txt`和`labels.txt`三个文件**
,分别用于表示训练集列表,验证集列表和类别标签列表。
[
点击下载目标检测示例数据集
](
https://bj.bcebos.com/paddlex/datasets/insect_det.tar.gz
)
**为了用于训练,我们需要在`MyDataset`目录下准备`train_list.txt`, `val_list.txt`和`labels.txt`三个文件**
,分别用于表示训练集列表,验证集列表和类别标签列表。
[
点击下载目标检测示例数据集
](
https://bj.bcebos.com/paddlex/datasets/insect_det.tar.gz
)
<!--
> 注:也可使用PaddleX自带工具,对数据集进行随机划分,**在数据集按照上面格式组织后**,使用如下命令即可快速完成数据集随机划分,其中split指标训练集的比例,剩余的比例用于验证集。
> 注:也可使用PaddleX自带工具,对数据集进行随机划分,**在数据集按照上面格式组织后**,使用如下命令即可快速完成数据集随机划分,其中split指标训练集的比例,剩余的比例用于验证集。
> ```
> ```
> paddlex --split_dataset --from PascalVOC --pics ./JPEGImages --annotations ./Annotations --split 0.8 --save_dir ./splited_dataset_dir
> paddlex --split_dataset --from PascalVOC --pics ./JPEGImages --annotations ./Annotations --split 0.8 --save_dir ./splited_dataset_dir
> ```
> ```
-->
**labels.txt**
**labels.txt**
...
@@ -56,8 +59,18 @@ val_list列出用于验证时的图片集成,与其对应的标注文件,格
...
@@ -56,8 +59,18 @@ val_list列出用于验证时的图片集成,与其对应的标注文件,格
import paddlex as pdx
import paddlex as pdx
from paddlex.det import transforms
from paddlex.det import transforms
train_transforms = transforms.ComposedYOLOv3Transforms(mode='train', shape=[608, 608])
train_transforms = transforms.Compose([
eval_transforms = transforms.ComposedYOLOv3Transforms(mode='eval', shape=[608, 608])
transforms.RandomHorizontalFlip(),
transforms.Normalize(),
transforms.ResizeByShort(short_size=800, max_size=1333),
transforms.Padding(coarsest_stride=32)
])
eval_transforms = transforms.Compose([
transforms.Normalize(),
transforms.ResizeByShort(short_size=800, max_size=1333),
transforms.Padding(coarsest_stride=32),
])
train_dataset = pdx.datasets.VOCDetection(
train_dataset = pdx.datasets.VOCDetection(
data_dir='./MyDataset',
data_dir='./MyDataset',
...
...
docs/data/format/instance_segmentation.md
浏览文件 @
75596064
...
@@ -17,10 +17,13 @@ MyDataset/ # 实例分割数据集根目录
...
@@ -17,10 +17,13 @@ MyDataset/ # 实例分割数据集根目录
## 划分训练集验证集
## 划分训练集验证集
在PaddleX中,为了区分训练集和验证集,在
`MyDataset`
同级目录,使用不同的json表示数据的划分,例如
`train.json`
和
`val.json`
。
[
点击下载实例分割示例数据集
](
https://bj.bcebos.com/paddlex/datasets/garbage_ins_det.tar.gz
)
。
在PaddleX中,为了区分训练集和验证集,在
`MyDataset`
同级目录,使用不同的json表示数据的划分,例如
`train.json`
和
`val.json`
。
[
点击下载实例分割示例数据集
](
https://bj.bcebos.com/paddlex/datasets/garbage_ins_det.tar.gz
)
。
<!--
> 注:也可使用PaddleX自带工具,对数据集进行随机划分,在数据按照上述示例组织结构后,使用如下命令,即可快速完成数据集随机划分,其中split指定训练集的比例,剩余比例用于验证集。
> 注:也可使用PaddleX自带工具,对数据集进行随机划分,在数据按照上述示例组织结构后,使用如下命令,即可快速完成数据集随机划分,其中split指定训练集的比例,剩余比例用于验证集。
> ```
> ```
> paddlex --split_dataset --from MSCOCO --pics ./JPEGImages --annotations ./annotations.json --split 0.8 --save_dir ./splited_dataset_dir
> paddlex --split_dataset --from MSCOCO --pics ./JPEGImages --annotations ./annotations.json --split 0.8 --save_dir ./splited_dataset_dir
> ```
> ```
-->
MSCOCO数据的标注文件采用json格式,用户可使用Labelme, 精灵标注助手或EasyData等标注工具进行标注,参见
[
数据标注工具
](
../annotations.md
)
MSCOCO数据的标注文件采用json格式,用户可使用Labelme, 精灵标注助手或EasyData等标注工具进行标注,参见
[
数据标注工具
](
../annotations.md
)
...
@@ -30,8 +33,18 @@ MSCOCO数据的标注文件采用json格式,用户可使用Labelme, 精灵标
...
@@ -30,8 +33,18 @@ MSCOCO数据的标注文件采用json格式,用户可使用Labelme, 精灵标
import paddlex as pdx
import paddlex as pdx
from paddlex.det import transforms
from paddlex.det import transforms
train_transforms = transforms.ComposedRCNNTransforms(mode='train', min_max_size=[800, 1333])
train_transforms = transforms.Compose([
eval_transforms = transforms.ComposedRCNNTransforms(mode='eval', min_max_size=[800, 1333])
transforms.RandomHorizontalFlip(),
transforms.Normalize(),
transforms.ResizeByShort(short_size=800, max_size=1333),
transforms.Padding(coarsest_stride=32)
])
eval_transforms = transforms.Compose([
transforms.Normalize(),
transforms.ResizeByShort(short_size=800, max_size=1333),
transforms.Padding(coarsest_stride=32),
])
train_dataset = pdx.dataset.CocoDetection(
train_dataset = pdx.dataset.CocoDetection(
data_dir='./MyDataset/JPEGImages',
data_dir='./MyDataset/JPEGImages',
...
...
docs/data/format/segmentation.md
浏览文件 @
75596064
...
@@ -22,10 +22,13 @@ MyDataset/ # 语义分割数据集根目录
...
@@ -22,10 +22,13 @@ MyDataset/ # 语义分割数据集根目录
## 划分训练集验证集
## 划分训练集验证集
**为了用于训练,我们需要在`MyDataset`目录下准备`train_list.txt`, `val_list.txt`和`labels.txt`三个文件**
,分别用于表示训练集列表,验证集列表和类别标签列表。
[
点击下载语义分割示例数据集
](
https://bj.bcebos.com/paddlex/datasets/optic_disc_seg.tar.gz
)
**为了用于训练,我们需要在`MyDataset`目录下准备`train_list.txt`, `val_list.txt`和`labels.txt`三个文件**
,分别用于表示训练集列表,验证集列表和类别标签列表。
[
点击下载语义分割示例数据集
](
https://bj.bcebos.com/paddlex/datasets/optic_disc_seg.tar.gz
)
<!--
> 注:也可使用PaddleX自带工具,对数据集进行随机划分,**在数据集按照上面格式组织后**,使用如下命令即可快速完成数据集随机划分,其中split指标训练集的比例,剩余的比例用于验证集。
> 注:也可使用PaddleX自带工具,对数据集进行随机划分,**在数据集按照上面格式组织后**,使用如下命令即可快速完成数据集随机划分,其中split指标训练集的比例,剩余的比例用于验证集。
> ```
> ```
> paddlex --split_dataset --from Seg --pics ./JPEGImages --annotations ./Annotations --split 0.8 --save_dir ./splited_dataset_dir
> paddlex --split_dataset --from Seg --pics ./JPEGImages --annotations ./Annotations --split 0.8 --save_dir ./splited_dataset_dir
> ```
> ```
-->
**labels.txt**
**labels.txt**
...
@@ -58,8 +61,18 @@ val_list列出用于验证时的图片集成,与其对应的标注文件,格
...
@@ -58,8 +61,18 @@ val_list列出用于验证时的图片集成,与其对应的标注文件,格
import paddlex as pdx
import paddlex as pdx
from paddlex.seg import transforms
from paddlex.seg import transforms
train_transforms = transforms.ComposedSegTransforms(mode='train', train_crop_size=[512, 512])
train_transforms = transforms.Compose([
eval_transforms = transforms.ComposedSegTransforms(mode='eval', train_crop_size=[512, 512])
transforms.RandomHorizontalFlip(),
transforms.ResizeRangeScaling(),
transforms.RandomPaddingCrop(crop_size=512),
transforms.Normalize()
])
eval_transforms = transforms.Compose([
transforms.ResizeByLong(long_size=512),
transforms.Padding(target_size=512),
transforms.Normalize()
])
train_dataset = pdx.datasets.SegDataset(
train_dataset = pdx.datasets.SegDataset(
data_dir='./MyDataset',
data_dir='./MyDataset',
...
@@ -71,5 +84,4 @@ eval_dataset = pdx.datasets.SegDataset(
...
@@ -71,5 +84,4 @@ eval_dataset = pdx.datasets.SegDataset(
file_list='./MyDataset/val_list.txt',
file_list='./MyDataset/val_list.txt',
label_list='MyDataset/labels.txt',
label_list='MyDataset/labels.txt',
transforms=eval_transforms)
transforms=eval_transforms)
```
```
docs/quick_start.md
浏览文件 @
75596064
...
@@ -14,8 +14,8 @@ PaddleX中的所有模型训练跟随以下3个步骤,即可快速完成训练
...
@@ -14,8 +14,8 @@ PaddleX中的所有模型训练跟随以下3个步骤,即可快速完成训练
PaddleX的其它用法
PaddleX的其它用法
-
<a
href=
"#训练过程使用VisualDL查看训练指标变化"
>
使用VisualDL查看训练过程中的指标变化
</a>
-
<a
href=
"#加载训练保存的模型预测"
>
加载训练保存的模型进行预测
</a>
-
<a
href=
"#加载训练保存的模型预测"
>
加载训练保存的模型进行预测
</a>
-
[
使用VisualDL查看训练过程中的指标变化
](
)
<a
name=
"安装PaddleX"
></a>
<a
name=
"安装PaddleX"
></a>
...
...
tutorials/train/image_classification/alexnet.py
浏览文件 @
75596064
import
os
from
paddlex.cls
import
transforms
from
paddlex.cls
import
transforms
import
paddlex
as
pdx
import
paddlex
as
pdx
...
...
编辑
预览
Markdown
is supported
0%
请重试
或
添加新附件
.
添加附件
取消
You are about to add
0
people
to the discussion. Proceed with caution.
先完成此消息的编辑!
取消
想要评论请
注册
或
登录