3
MT9M034内部功能框图
3
034CMOS图像信息读出原理
CPLD
时钟
034 CMOS 场同步
数据 电源
行同步
MC HS VS DATA
PC 或 平 板
USB 2.0
接口
将配置好的CMOS的行、场、时钟同步信号和数据位分出与CPLD引脚连接，此时CPLD获得 CMOS传出的行时钟,场时钟，像素时钟和12位数字信号。CPLD将12位CMOS数字信号低四位舍 去，留下高八位送给CY7C68013进行传输。
的识别热目标，探测距离远，但是图像对比度差，细节信息不丰富；
1
可见光成像与红外成像区别
(1)可见光图像与红外图像的成像原理不 同，前者依据物体的反射率的不同进行 成像，后者依据物体的温度或辐射率不 同进行成像，因此红外图像的光谱信息 明显不如可见光图像。
光谱范围示意图
(2)可见光图像与红外图像的空间分辨率 不同，一般情况下，前者的空间分辨率 高于后者；
CPLD
配置
控制线
IRFPA
数据 电源
PC
MC HS VS DATA
USB 2.0接口 Nhomakorabea或 平 板
红外图像探测器采用了非制冷红外机芯组件，如图3-18所示。红外机芯的输出接口包括RS232接口、 图像数据以及同步信号（DATA、HS、VS、MC）。当需要配置红外机芯的工作模式时，RS232接口 与PC机连接，配置完成后参数保存在ROM中，掉电不丢失，此时可以断开RS232与PC机的连接。
3
可见光CMOS图像信息读出原理
CMOS图像传感器MT9M034是Aptina公司于
2012年底推出的一款定位于低照度环境成像 探测的高灵敏度、低噪声CMOS图像传感器， 拥有完善的相机功能，例如自动曝光控制、 增益控制、窗口选择、视频模式和单帧模式
MT9M034实物图
等，获取图像的方式有线性模式和高动态模 式两种选择。
THANKS
可见光与红外摄像机构成的双目视 觉系统
目 录
研究的意义与 现代运用
系统总体模块 介绍
红外与可见光成像 简单原理
1
2
3
1
课题的目的与意义
可见光可以充分反映整个场景的细节信息，但是可见光传输易受环境影响，难以穿透雾、雨雪、尘 埃等，探测距离有限。 红外夜视技术是利用热辐射，将超过人眼观测的红外波段信息转换成可见信息。红外技术可以很好
数字图像的行同步信号和场同步信号不需要做处理。机芯产生的红外图像信号为50fps， 由于其场同步信号的消隐期过短，在通过USB传输时，相邻两帧数据之间的时间不足够 USB的开销，因此在CPLD中将场同步信号做1/2分频处理，输入上位机的图像信号为 25fps。
3
红外图像信息读出原理
红外机芯
RS232
3
形形色色的红外产品
（1）红外热像仪是一种利用红外探测器将看不见的红外辐射信号转换成可见图像的被动 成像仪器 （2）红外热像仪直接测量物体表面温度及温度分布. 将物体的温度分布转换为可视的图像。
3
红外焦平面
红外焦平面实物图
红外图像传感器分为制冷型和非制冷型。制冷型具 有信噪比高、成像质量好的特点，但是其通常需要 在很低的温度下才能正常工作，因此，需要为它提 供一个制冷系统，从而加大了整个系统的体积、重 量和成本。随着非制冷型传感器的发展，其信噪比 和成像质量都有很大提高，且可以做出较大的阵列。 在本文设计的系统中要求具有体积小、重量轻、功 耗低的特点。用非
非制冷焦平面热成像技术的特点： 由于没有制冷系统，故具有低成本、低功耗、长寿命、小型化和可靠性等优点， 是当前热成像技术发展和应用的热点之一。
3
红外主要参数指标
指标 阵列规模
像元尺寸 帧率 典型热响应时间 典型响应率 工作温度范围 典型功耗 光谱响应
数值 640×512
20μm×20μm 50Hz 10ms 10~20mV/K(可调) -40℃ ~ +60℃ 300mW（不含TEC） 8~14μm
2
参数 传感器感光面积 有效像素数量 滤光片阵列类型 快门类型 输入时钟范围 输出最大时钟
MT9M034主要参数指标
典型值 1/3英寸 1280（H）×960（V） RGB彩色或黑白 电子卷帘式快门 6-50MHz(推荐27MHz) 74.25MHz 并行 12bit 12bit或14bit或20bit 最大45fps 最大60fps 1.8V或者2.8V(推荐1.8V) 1.8V 2.8V 270mW（当采用1280×720@60fps线性工作模式并口输出） -30℃~70℃
输出格式 串行HiSPi 1280×960 帧率 1280×720 I/O
供电电压
数字电压 模拟电压 功耗 工作温度
3
MT9M034的像素阵列结构
MT9M034的像素阵列共有1412列、1028行，像元尺寸即为3.75m×3.75m。如图所示。其 中暗像素(dark pixels)的向光面是光学不透明的，用于监视暗电平。其中位于上方的12行暗 像素用于暗电平矫正，位于右侧的64列暗像素用于行噪声矫正。有效像素周围环绕的一圈 光虚拟像素(Light dummy pixels)的向光面是光学透明的，用于改善图像的均匀性。
2
系统原理框图
光学 镜头
可见光 CMOS 红外焦 平面
可见光与红 外 图像采集 CPLD/FPGA
CY7 C68013 USB2.0 接口 键盘 电路
PC计算机或 Windows平板
工作过程如下：启动电源后，系统自检，完成对CMOS的配置，然后直接将可见光 MT9M034的数据送68013经USB2口，在计算机屏幕上显示可见光图像，能自动曝光 显示彩色图像。 在可见光图像下用来寻找目标，找到目标后，按键盘切换键，将采集数据换成红外， 计算机显示红外图像。当再按一次切换键，可将图像切换成可见光，继续寻找下一 个测量目标，依此循环。
(3)可见光图像与红外图像对同一景物的灰度差异不同； (4)可见光图像与红外图像的纹理和边缘特征不同；
2
二向分光镜
系统方案框图
红外传感器
硬件信号处理
红外与可见光 光线
USB输出
图 像 信 息
红外/可见光 图像
PC端显示
可见光传感器
电路设计以非制冷长波红外机芯和可见光彩色CMOS图像传感器为基础，硬件电路板将实时的两 种图像收集起来，在用户选定好 可见光/红外 图像输出后，采用标准的USB2.0输入输出接口与 PC机相连进行实时图像输出。