简笔画检索“Sketch Me That Shoe”
来源:互联网 发布:mac skype怎么加外国人 编辑:程序博客网 时间:2024/04/23 19:49
http://www.eecs.qmul.ac.uk/~qian/Project_cvpr16.html
问题提出及应用
根据绘制的简笔画进行图像检索,存在几个挑战:
1.跨域精细比对
2.简笔画高度抽象
3.数据少
简笔画存在一定的应用空间,比如下图搜索商品,还有人脸简笔画库CUKH Face Sketches。
网络结构
论文使用的基准网络结构是sketch-a-net,对其进行了两个改动,一是由ImageNet提取的边缘预训练,二是对数据进行了增强。
精细实例级 SBIR 数据库
1.有1432个简笔画和图像,716个图像对,419对鞋子,297对椅子。
2.数据标记,按照相似度标记不大可能,按照1)属性标记;2)生成最相似的前10个图像;3)三元组标记
网络模型
网络使用三元组损失函数学习,给定三元组
训练时,网络有三个分支,分别为简笔画,正样本和负样本,如下图所示:
网络训练分四步:
1.预训练Sketch-a-Net,使用ImageNet的边缘图
2.使用250类的TU-Berlin微调网络
3.使用ImageNet和TU-Berlin的数据进行三元组损失预训练
4.使用椅子和鞋子的数据微调
数据增加
根据外轮廓比内细节重要,长的笔画比短的重要的特点移除一部分笔划,或变形一部分笔画对数据增加。
实验结果
0 0
- 简笔画检索“Sketch Me That Shoe”
- Sketch
- Sketch
- When you tell me That you love me
- Where's me,Do you kown that?
- 简笔画~海豚
- 简笔画~海豚
- 简笔画~大象
- 简笔画~兔子
- 简笔画~公鸡
- 简笔画~鸭子
- 简笔画~猴子
- 论文:Sketch-a-Net that Beats Humans(附带CNN的理解)
- an article that inspire me ~~~from chairman mao:)
- 《9 Quotes that stayed with me as a developer》
- I want to do that you feel proud of me.
- when you tell me that you love me当你说爱我时(中文版)
- SHOE DETAIL
- Spring使用Cache
- GestureDetector
- 元素垂直居中
- 解密 | 大数据环境下的多维分析技术
- JAVA学习代码——利用正则表达式判断手机/邮箱/身份证
- 简笔画检索“Sketch Me That Shoe”
- 5.Linux下----C语言编辑语法高亮(原创)
- 使用Log Parser将IIS日志导入SQL分析
- bzoj1082: [SCOI2005]栅栏
- tjut 3436
- Android自定义控件封装之自定义属性的实现
- [.Net码农]asp.net三级嵌套repeater
- 文章标题
- Java NIO原理分析