Windows Caffe(三) 图像数据转化为Caffe可以运行的数据
来源:互联网 发布:免费域名申请个人网站 编辑:程序博客网 时间:2024/06/04 20:21
在运行Caffe自带的两个例子的时候,我们的数据都来自互联网,是直接下载的二进制文件。
但我们大多数情况下使用的是原始的图片数据(如.jpg .png等),接下来研究如何将原始的图片数据转化为caffe可以运行的数据。
1、准备图片数据
caffe安装完成之后,在example/images文件下会有四张.jpg图片,cat.jpg, cat gray,jpg, cat_gray.jpg, fish-back.jpg
2、生成图片清单
我们写需要一个sh脚本,调用Linux命令生成图片的清单。Windows下如何运行shell脚本,第一个实验有说。
编写脚本的原因是我们有大量的训练数据和测试数据,手写清单不大现实。
具体操作
在example/images文件夹下创建一个create_filelist.sh 文件,文件内容如下:
# /usr/bin/env shDATA=D:/Caffe/Caffe_BVLC/examples/imagesecho "Create train.txt..."exec 2>>log.txtrm -rf $DATA/train.txtfind $DATA -name *cat.jpg | cut -d '/' -f6 | sed "s/$/ 1/">>$DATA/train.txtfind $DATA -name *bike.jpg | cut -d '/' -f6 | sed "s/$/ 2/">>$DATA/tmp.txtcat $DATA/tmp.txt>>$DATA/train.txtrm -rf $DATA/tmp.txtecho "Done.."这里对脚本做下大致的解释
DATA=D:/Caffe/Caffe_BVLC/examples/images 图片所在位置
exec 2>>log.txt 将执行期间所遇到的错误写入log.txt文件夹下
rm -rf递归强制删除
find $DATA -name *cat.jpg | cut -d '/' -f6 | sed "s/$/ 1/">>$DATA/train.txt 在$DATA目录下,查找*cat.jpg文件,cut表示截取路径,-f6表示第六层目录下(根据自己的情况修改)。sed表示在每行后面加上标注。
cat $DATA/tmp.txt>>$DATA/train.txt 将temp.txt文件中的内容写到train.txt文件后面,相当于两个文件合并。
运行该文件,会生成一个train.txt的文件。
3、生成lmdb格式的文件
将图片数据转化为lmdb格式的文件需要使用caffe提供的convert_imageset文件
该文件所在目录:
D:\Caffe\Caffe_BVLC\Build\x64\Release
该文件的使用格式:
convert_imageset [FLAGS] ROOTFOLDER/ LISTFILE DB_NAME
分析一下convert_imageset的四个参数
FLAGS
-gray: 是否以灰度图的方式打开图片。程序调用opencv库中的imread()函数来打开图片,默认为false
-shuffle: 是否随机打乱图片顺序。默认为false
-backend:需要转换成的db文件格式,可选为leveldb或lmdb,默认为lmdb
-resize_width/resize_height: 改变图片的大小。在运行中,要求所有图片的尺寸一致,因此需要改变图片大小。 程
序调用opencv库的resize()函数来对图片放大缩小,默认为0,不改变
-check_size: 检查所有的数据是否有相同的尺寸。默认为false,不检查
-encoded: 是否将原图片编码放入最终的数据中,默认为false
-encode_type: 与前一个参数对应,将图片编码为哪一个格式:‘png','jpg'......
ROOTFOLDER
图片存放的路径
LISTFILE
文件清单
DB_NAME
最终生成的lmdb或leveldb所存放的路径
具体操作
在example/images文件夹下创建一个create_lmdb.sh 脚本,脚本内容如下:
DATA=D:/Caffe/Caffe_BVLC/examples/imagesrm -rf $DATA/img_train_lmdbD:/Caffe/Caffe_BVLC/Build/x64/Release/convert_imageset.exe --shuffle \--resize_height=256 --resize_width=256 \$DATA $DATA/train.txt $DATA/img_train_lmdb执行该脚本,会在该目录下生成一个新的文件,如下图所示:
至此,将原始的图片数据转化为caffe能够执行的lmdb数据实验 完成。
如有疑问,欢迎一起探讨!
0 0
- Windows Caffe(三) 图像数据转化为Caffe可以运行的数据
- caffe(六)-------把原始图片数据转化为caffe能理解的数据
- caffe入门学习:从我们的数据转化成为caffe可以使用的数据格式
- caffe中将jpg数据转化为lmdb格式的文件
- caffe非图像数据转换为lmdb
- 【caffe】caffe中通过图像生成lmdb格式的数据
- Windows Caffe 学习笔记(三)在Caffe上训练和测试自己的数据
- 使用caffe训练自己的图像数据
- 用caffe跑自己的数据,基于WINDOWS的caffe
- caffe:将图像转化为LMDB格式文件
- caffe中mnist数据集的运行
- 将非图片数据转化为caffe可用的LMDB的方法
- caffe学习笔记1:转化自己的数据为(leveldb/lmdb)文件
- Windows下caffe训练自己的数据
- caffe windows 训练自己的图片数据
- Windows caffe vs2013训练自己的数据
- caffe-Windows:训练自己的数据
- windows caffe 训练自己的数据
- view 事件分发机制
- CSS3新标准选择器 框模型 背景和边框 文本效果 2D/3D 转换 动画 多列布局 用户界面
- 459. Repeated Substring Pattern
- SDWebImage源码解析之SDWebImageManager的注解
- SecureCRT工具登录跳板机,直接连接目标机器
- Windows Caffe(三) 图像数据转化为Caffe可以运行的数据
- Css中的伪类link,visited,hover,focus,active
- JSONArray,JSONObject和字符串的相互转换
- CMake入门指南
- jsoup Cookbook——设置一个元素的HTML内容
- Android 水平numberpicker 以及水平listview的实现
- 去除List中重复的数据
- spring项目步骤及事务归纳
- echarts 绘制动态图表