机器视觉测量技术杨永跃合肥工业大学2007.3目录第一章绪论1.1 概述1.2 机器视觉的研究内容1.3 机器视觉的应用1.4 人类视觉简介1.5 颜色和知觉1.6 光度学1.7 视觉的空间知觉1.8 几何基础第二章图像的采集和量化2.1 采集装置的性能指标2.2 电荷藕合摄像器件2.3 CCD 相机类2.4 彩色数码相机2.5 常用的图像文件格式2.6 照明系统设计第三章光学图样的测量3.1 全息技术3.2 散斑测量技术3.3 莫尔条纹测量技术3.4 微图像测量技术第四章标定方法的研究4.1 干涉条纹图数学形成与特征4.2 图像预处理方法4.3 条纹倍增法4.4 条纹图的旋滤波算法第五章立体视觉5.1 立体成像25.2 基本约束5.3 边缘匹配5.4 匹域相关性5.5 从 x 恢复形状的方法5.6 测距成像第六章标定6.1 传统标定6.2 Tsais 万能摄像机标定法6.3 Weng ’ s 标定法6.4 几何映射变换6.5 重采样算法第七章目标图像亚像素定位技术第八章图像测量软件(多媒体介绍第九章典型测量系统设计分析9.1 光源设计9.2 图像传感器设计9.3 图像处理分析9.4 图像识别分析附:教学实验1、视觉坐标测量标定实验2、视觉坐标测量的标定方法。
3、视觉坐标测量应用实验4、典型零件测量方法等。
3第一章绪论1.1 概述人类在征服自然、改造自然和推动社会进步的过程中,面临着自身能力、能量的局限性, 因而发明和创造了许多机器来辅助或代替人类完成任务。
智能机器或智能机器人是这种机器最理想的模式。
智能机器能模拟人类的功能、能感知外部世界,有效解决问题。
人类感知外部世界:视觉、听觉、嗅觉、味觉、触觉眼耳鼻舌身所以对于智能机器,赋予人类视觉功能极其重要。
机器视觉:用计算机来模拟生物(外显或宏观视觉功能的科学和技术。
机器视觉目标:用图像创建或恢复现实世界模型,然后认知现实世界。
1.2 机器视觉的研究内容1 输入设备成像设备:摄像机、红外线、激光、超声波、 X 射线、 CCD 、数字扫描仪、超声成像、 CT 等数字化设备2 低层视觉(预处理 :对输入的原始图像进行处理(滤波、增强、边缘检测 ,提取角点、边缘、线条色彩等特征。
3 中层视觉:恢复场景的深度、表面法线,通过立体视觉、运动估计、明暗特征、纹理分析。
系统标定4 高层视觉:在以物体为中心的坐标系中,恢复物体的完整三维图,识别三维物体,并确定物体的位置和方向。
5 体系结构:根据系统模型(非具体的事例来研究系统的结构。
(某时期的建筑风格—据此风格设计的具体建筑1.3 机器视觉的应用工业检测—文件处理,毫微米技术—多媒体数据库。
许多人类视觉无法感知的场合,精确定量感知,危险场景,不可见物感知等机器视觉更显其优越十足。
1 零件识别与定位4生产线机器人足球赛2 产品检验外形、表面、装配位置、超声探测内部裂纹和气孔3 移动机器人双目识别恢复场景。
无人驾驶汽车4 遥感图像分析航空摄影、气象卫星、资源卫星航空摄影:利用普通摄影机航拍。
制图、制导用气象卫星:红外成像、气象云图海洋资源:合成孔径雷达,获取海辰形象。
找矿农作物调查,自然灾害测报,生态环境检测。
5 医学图像分析X 射线、 CT (Computer Tomography 、核磁共振 MRI (magnetic resonance imaging ,超声成像。
作用:(1图像增强、标记、染色(2专家系统,自动研制6 安全鉴别、监视跟踪车辆识别、车牌号识别人脸、眼底、指纹、表情7 其他体育运动分析:游泳5制衣(人体扫描影视制作1.4 人类视觉简介1 人眼所能看到的光谱范围,只是电磁波辐射范围的很小的一部分,为 380nm -780nm ,可见光谱2 人眼的构造角膜占表面的 1/6具有屈光作用晶状体、玻璃体等都有屈光作用视网膜:杆状细胞(暗3 视觉信息处理(1 亮度 (2 形状(3运动(4颜色(5深度感(6通道(7并行人眼对运动物体特别敏感锥状细胞有三种,分别对 430、 540、 570,敏感,构成了三基色原理的基础。
深度感因视差而产生视觉过程:(1视觉的时间特性视觉在时间上有累积效应对一般的物体进行观察时,接收光的总能量E 与物体可见面积、表面宽度 L 和时间距 (观察时间长度 T 成正比。
另外:人对光的感觉有潜伏期,多次闪光会导致闪烁的知觉。
降龙十八章(2视觉的空间特性小而弱的光点单独呈现时可能看不见, 但当多个连在一起作为一个大的光点时同时呈现时便能看见了。
视觉度表示人所能看到景物细节的准确性。
认知觉察定位觉察:检测在视野中的某个给定物体是否存在定位:对两物体相对位置精确辨别的能力解像:对一视觉形状各组成部分之间距离的辨别能力认知:综合的能力和方法,包括明度识别,一定的解像力和定位能力。
(3形状知觉:轮廓、图形、背景轮廓:轮廓把物体与视野中的其它部分区分开来,轮廓不等于形状。
轮廓只是边界,是局部概念,而形状则是全体概念。
主观轮廓:主观轮廓产生的必要条件是有些不完整的因素出现将它完整起来就有一种把它变成简单和稳定正规图案的倾向。
(4视觉的相对性视觉感知的结果不仅仅取决于刺激本身,还与经验对比有关系。
(早晨、中午的太阳哪个更近前景与背景:前景:视觉关心的主体。
背景则是与前景相关联的其它刺激视觉知觉的对比:(1前景和背景可相互置换 (2前景受背景的影响(5视觉的选择性听而不闻视而不见。
依赖先验知识而取向。
(6视觉的整体性对部分感知之和而产生的一种整体知觉经验 (7视觉的恒常性亮度恒常性:黑布、白布各自一半在阳光下,一半在阴影中,我们仍然能够判定它为黑布白布。
大小恒常性:物体在视网膜上的象随距离而变化,但我们的感觉则并不是大小的变化而是距离的变化。
(感觉到远方的牛仍然比近处的狗大形状恒常性:直线投影为一点,通过经验加以矫正颜色恒常性:在相当宽的光明变化条件中,能够感受到颜色的恒常。
(8视觉的组织性相似性接近性封闭性封闭轮廓更容易够成图形。
连续性按列按行三列点列一条直线和曲线的多次交汇,心理上倾向于连续。
(9错视现象高度(10眼球微动现象1.5 颜色和知觉牛顿用三棱镜研究白光的折射,就此便发现白光可被分解成一系列从紫到红的连续光谱。
从而证明白光是由不同颜色的光线相混合而形成的, 而这些光实际上是不同频率的电磁波。
(1无颜色白灰黑黑白系列颜色(2有颜色除黑白系列之外的各种颜色色觉的产生: 光源的光反射或透射视网膜人脑解释物体均匀的反射各种光白色物体只反射某种或某几种颜色彩色CIE 国际明度委员会R :700nm (570G :546.1nm (540 光的三基色B :435.8nm (430 二基色叠加形成三补色颜料的三基色正是光的三补色。
人眼的锥状细胞有三种,分别对 430, 540, 570光谱敏感。
设三种刺激量分别为:X 、 Y 、 Z 则:Z Y Z Yy ++= , Z Y X X x ++=, Z Y X Zz ++=为刺激量的比例系数,称为色系数。
可见:x+y+z=1CIE1931色度图○ 1 三色比例系数 x 、 y 、 z 均大于零。
○ 2 Y的数值正好是彩色光亮度。
○ 3 x=y=z 表示标准白光。
这样:Hering 方格错觉⎥⎥⎥⎦⎤⎢⎢⎢⎣⎡⎥⎥⎥⎦⎤⎢⎢⎢⎣⎡=⎥⎥⎥⎦⎤⎢⎢⎢⎣⎡B G R 5943. 50565. 000601. 05907. 40. 11302. 17517. 17689. 2 Z ( Y ( X (○ 1 每一点对应一种颜色。
○ 2 色度图边界上二点代表纯颜色。
○ 3 连接两端点直线上的点可由二端点颜色合成。
3端点三角形内的颜色可由三端点颜色合成。
3基色不能组合出所有的颜色。
补色律:两个以适当比例混合能得到白色或灰色的颜色,互称为补色。
中间色律:两个非补色混合,便产生一个新的中间色或混合色,色调的混合比例确定。
代替律:如颜色X+Y>>B , A+B>>C 则有 A +X +Y >>C颜色模型① RGB 模型 (面向显示器、打印机等硬设备规划为单位正方体则所有 RGB 的值在 [0, 1]R = 700 nmG =546.1 nmB =435.8 nm根据不同需要提出了:RGB 、 CMY 、 XYZ 、YIQ 、 HSV (HIS标准白色的 RGB 光通量r φ、G φ、B φ为:r φ:G φ: B φ = 1:4.5907:0.0601这样把光通量为 1Lm 的红色, 4.5079流明的绿光, 0.0601流明的蓝光作为三基色的单位基色量。
这样某彩色光通量(C = R(R +G(G +B(B(C 表示光的明亮程度,其色度只取决于 R 、 G 、 B 之间的比例关系。
∴合B G R R r ++= , B G R G g ++= , BG R B b ++= r 、 g 、 b 为色度坐标, r + g + b = 1② CMY各种光也都可以用 CMY 三基色混合而成。
RGB, 由黑白,增色过程。
CMY ,由白黑,减色过程。
(绘图,打印机颜料。
⎥⎥⎥⎦⎤⎢⎢⎢⎣⎡-⎥⎥⎥⎦⎤⎢⎢⎢⎣⎡=⎥⎥⎥⎦⎤⎢⎢⎢⎣⎡B G R Y M C 111 ④ YIQ 保证彩色电视和黑白电视的兼容。
NTSC(国际电视系统协会。
Y 对应于 XYZ 中的 Y ,为亮度信息。
选择三色的基色量为 R=0.299, G=0.587, B=0.114∴ Y=0.299R+0.587G+0.114B规定:I =0.74(R -Y -0.27(B -YQ=0.48(R -Y + 0.41(B -Y综合有:⎥⎥⎥⎦⎤⎢⎢⎢⎣⎡⎥⎥⎥⎦⎤⎢⎢⎢⎣⎡---=⎥⎥⎥⎦⎤⎢⎢⎢⎣⎡B G R Q I Y 312. 0523. 0211. 0322. 0274. 0596. 0114. 0587. 0299. 0 这里 RGB 为 NTSC 制式 RGB⑤ HIS 模型H :色调。
混合光谱中的主要波长。
S : 饱和度。
一定色调的纯度。
纯光谱色是完全饱和,加入反光饱和度逐渐减小。
I : 密度、亮度(与反射率成正比RGB 到 HIS 转换(31B G R I ++= ], , [min(31B G R BG R S ++-= (( (22B G G R G R BR G R H --+--+-=HIS 转到 RGB]1, 0[, ∈I S ]1, 0[, , ∈B G R1(S I B -=∈H [0, 120°]I R =[60cos(cos 1H H S -+ ] (3R B I G +-=发光强度定义:光源 1210540⨯Z H 的单色光,在指定方向辐射强度为 W1.6 光度学光度学:研究光的强弱的学科。