12
13
物品
• 拍摄葡萄酒酒标，就能给出商品信息、并进行 比价、购买：佛山市咔嚓购的酒咔嚓APP。
14
物品
• 拍摄一组食物，就能给出这些食物的营养含量： 芯草莓科技的微营养App。
15
物品
• 拍一个应用图标，能识别出这是什么APP：亮风 台的应用拍拍APP
16
文字
• 拍摄外语文字，就能给出翻译：Viscovery、旷 视科技 • 拍摄一个数学题，就能给出答案和解析：学习 宝
4
计算机视觉的基本原理
• 首先，从图片中提取出特征。
–这个特征不仅是每个像素的颜色， 更重要的是更高级的特征，例如形 状、甚至图片中物体的名称。
• 进而，可以对大量图片进行聚类、 分类、搜索。
5
计算机视觉的主要辅助技术
• 图像压缩：可以减少描述图像所用的数据量。 • 图像增强和复原：这是一种图像预处理。目的 是提高图像质量，使图像更加清晰。 • 图像分割：把图像中有意义的部分提取出来， 例如边缘、区域等。 • 图像融合：把几个关于某一场景的图像合并， 最大限度地利用多个图像来源之间的互补信息， 生成一个新图像。
20
和互联网广告结合
• 根据网页上的图片，判断应该给这 个网页的访问者展示什么广告： Cortica
–以往的互联网广告都是基于用户访 问的网页中的文本内容了解用户的 兴趣，而没有考虑到图片内容。
21
重点：图像输入的来确率的挑战
• 物品形变会影响某些物品的识别。例如：同一 件服装随着人的姿势不同，会发生很多形状上 的变化。相比之下，建筑物的识别要容易很多。 • 拍摄角度也会影响人脸、服装等的识别 • 灯光明暗、物体反光也会影响物体识别。 • 拍摄焦距也会影响物体识别。 • 化妆也会影响人脸识别 • 干扰图像的遮挡会影响对商品图片的识别
– 云端API – 离线SDK开发包
• 例如：腾讯、Face++
26
语音识别技术也一样
• 有些公司侧重于底层技术，把API和SDK开 放给广大的应用开发者：例如，云知声 • 另一些公司在别的公司提供的底层技术基 础上，开发具体的应用app。 – 还有些公司不仅做底层，也做应用：例 如羽扇智公司。
27
图像数据
大数据应用基础
1
友情提示
请勿在室内吸烟
上课时间请勿：
--请将您手机改为“震动” 避免在课室里使用手机 --交谈其他事宜 --随意进出教室
上课时间欢迎：
--提问题和积极回答问题 --随时指出授课内容的不当之处
计算机视觉的重要性
• 图像是信息的重要载体。
–人类获取外界信息中，80%左 右来自视觉。
6
如何对韩国美女进行人脸识别
• 2013年韩国选 美竞赛的20名 参赛美女。 • 对参赛选手进 行人脸识别颇 有难度。发型 识别呢？
7
重点：人脸
• 拍摄人脸，就能识别出这个人的表情：Emotient、 Affectiva • 拍摄人脸#43;。
17
有一些公司采用了深度学习arch IQ Engines Looknow Clarifai Jet建筑、树木、白云、 蓝天等。
• 拍摄图如 鸭子、走路、死尸，进而根据描 述性词汇组成的向量，用自然语 言处理比较不同画作之间的相似 度：达特茅斯学院和微软剑桥研 究院
19
重点：基础服务：基于深度学习的 图片自动分类
• 给照片自动加标签、归类，进而可以用关键词 • 拍摄一个商品，就能在零售商数据库中找出这 件商品及同款商品的介绍、评论，并进行比价， 而且能进行购出这个景点的名称、介 绍：亮风台 • 拍摄一件展品，就能在数据库中找出这件展品 的介绍：Guidico
– 人脸数据库可以是明星脸数据库（）、也可以是社 交媒体上的全部头像（Face++）、也可以是罪犯人脸数 据库（MorphoTrust）
• 从视频中识别出含有某明星的片段：Orbeus • 身份识别——例如，Face++的云脸应用锁、灏泷智 能科技的FaceEID人脸身份实证、杭州热和科技 • 检测驾驶员疲劳驾驶精神状态，并进行预警：灏泷 智能科技
23
一种加Байду номын сангаас人脸识别率的策略
• 把所有人脸图形都调整到正面照角 度，然后生成给每个人脸正面照生 成一个3D模型。 • 在这些3D模型之间进行比较，就 更加准确。
24
如何降低对于隐私的担忧
• 尽量少把图像存储在云端 • 先不把技术用于涉及隐私的行 业
25
重点：图像识别底层技术的开放
• 一些公司通过以下方式，把底层的技术开放给 广大的、成千上万的开发者，由他们来设计各 种各样的应用。
8
人脸：识别表情、性别、年龄、种 族
• 旷视科技：
– 目前只能识 别微笑程度 – 不能识别其 他情绪
9
人脸验证
10
重点：物品
• 拍摄任意一个物品，就能链接 到这个商品的零售网页，或者得到商家优惠券： Target公司的In a Snap手机应用、腾讯、基美文 化传媒的基美耀拍APP（与亮风台合作开发）、 亿拍天下 • 拍摄一件衣服，就能在零售商数据库中找到这 件衣服，或者相似的衣服：Snap Fashion、 Style-Eyes、Slyce、搜鞋客、图图搜衣、亮风台