4万字带你看懂车载摄像头技术、市场、发展前景

4万字带你看懂车载摄像头技术、市场、发展前景

介绍：

本文经阿宝1990授权发表，作者为阿宝1990。

车载摄像头被誉为“自动驾驶之眼”。 主要通过镜头和图像传感器实现图像信息的采集。 近年来，摄像头已成为汽车视觉解决方案中最常见的智能承载工具之一。 本文将探讨车载摄像头的前世今生~

针孔成像

战国初期，中国学者墨子（公元前468年—公元前376年）及其弟子完成了世界上第一个小孔成像实验，《墨经》中记载：“当景来时，午时有结束了，而且场面很长，据说是结束了。” “风景。有光的人，温暖如枪。下面的人也高，上面的人也在下面。脚挡住了下面的光，所以风景在上面；头挡住了下面的光。”上有光，故风景在下；远近有端，与光相和谐，故风景在图书馆内。”

本文解释了小孔形成倒像的原因，并指出了光沿直线传播的本质。 这是对光的线性传播的第一个科学解释。

在西方世界，直到公元前350年，古希腊学者亚里士多德才提出光学规则。 西方人从此了解了小孔成像的光学原理。

暗盒素描

15世纪末，人们根据小孔成像原理制成了照相机暗箱（照相机暗箱），这实质上就是照相机的雏形。 意大利人达芬奇在他的作品中描述了这种暗箱，描述人们使用这种工具进行素描和绘画。

1553年，意大利人博尔塔出版了《自然魔法》一书，书中详细介绍了暗箱的使用方法。 有了这个工具，你只需要用铅笔把图像倒映到画纸上，描出轮廓，然后上色就可以完成一幅画了​​。 非常逼真的肖像，完全符合真实比例。

银版照相法

1822年，法国的尼埃普斯制作了世界上第一张感光材料照片，但图像不太清晰，需要曝光8小时。 1826年，他通过暗箱在涂有感光沥青的锡基板上拍摄了现存最早的照片。

1838年，法国物理学家达盖尔发明​​了盖尔银版照相法，它是用涂有碘化银的钢板在暗箱中曝光，然后用汞蒸气显影，然后用普通食盐固定。 这种方法得到的结果实际上是金属负像，但非常清晰，可以永久保存。 后来达盖尔根据这种方法制成了世界上第一台相机，曝光时间为20至30分钟。

1839年8月19日，法国政府宣布放弃银版照相术发明专利并予以公开。 人们通常将这一天视为摄影的开始。

胶片相机和数码相机

1866年，德国化学家肖特和光学学家阿古在蔡司公司发明了钡冠光学玻璃，生产出正光摄影镜头，带动了摄影镜头设计和制造的迅速发展。

随着感光材料的发展，1871年出现了涂有溴化银感光材料的干版，1884年出现了以硝化纤维素为基材的胶片。

1888年，美国柯达公司生产出一种新型感光材料——柔软的、可倒卷的“胶卷”。 这是感光材料的一次飞跃。 同年，柯达发明了世界上第一台装有胶卷的便携式盒式相机。 Kodak No.1是柯达推出的家用相机。 它的口号是“按下快门，剩下的由我来做”。 这款相机可以说是消费相机的鼻祖。

1969年，美国阿波罗登月飞船搭载的相机中采用CCD芯片作为相机感光材料，为照相感光材料电子化奠定了技术基础。

1981年，经过多年的研究，索尼生产出了世界上第一台采用CCD电子传感器作为感光材料的相机，奠定了电子传感器取代胶片的基础。 紧随其后，松下、科宝、富士以及美国、欧洲的一些电子芯片厂商纷纷投入CCD芯片的技术研发，为数码相机的发展奠定了技术基础。

1987年，一款采用CMOS芯片作为感光材料的相机在卡西欧诞生。

我们先回顾一下相机的发展历史：

摄像头模组内部结构及工作机制讲解

镜头：收集光线并将场景投影到成像介质的表面上。 有的是单镜头，有的则需要多层玻璃镜片才能获得更好的成像效果。

彩色滤光片：人眼看到的景物处于可见光波段，图像传感器能辨别的光波段比人眼要大。 因此，需要添加彩色滤光片来滤除多余的光带，以便图像传感器能够捕获多只眼睛看到的内容。 实际风景。

图像COMS传感器芯片：即成像介质，它将镜头投射到表面上的图像（光信号）转换为电信号。

电路板基板：将图像传感器的电信号传输到后端。 对于车载摄像头来说，这里的电路基板会有更多的电路。 需要将并行摄像头信号转换为串行传输，这样抗干扰能力更强。

摄像头模组的工作原理是镜头聚集光线，然后通过IR滤光片过滤掉不需要的红外光。 此时模拟信号进入传感器COMS芯片，通过AD数字输出。 这里放置了一些ISP图像处理芯片。 在相机端，将处理后的信号传输至主机。 有的没有放置ISP芯片，由主机端内置的ISP芯片进行图像处理。 这样，摄像头端的散热会好很多，辐射也会更小。

车载摄像头架构

车载摄像头的结构如上图所示。 如果放置在车身外部，则需要组成一个完整的摄像头。 如果是车内的DVR，则可以组装到上述摄像头模组中，无需考虑防水。

上图是我们汽车中常用的摄像头模块的解剖图。 除了最外面的铝壳、密封圈和镜头之外，中间其实是设计比较简单的几层板，通常包括传感器板、图像处理器的小板和串行器板。 为什么需要串行器是因为通常相机传感器或ISP的图像数据输出总线是MIPI CSI标准，其特点是高速行进，但传输总线距离较短，否则无法保证信号的完整性保证。

因此，在车辆上，我们需要将其转换为适合在车辆内长距离传输的高速总线标准，例如GMSL，因此总线转换通常是通过串口板在摄像头模块内部进行。 另外，同轴电缆可以用来给模块提供电源，也可以传输图像数据。

图像传感器CCD和COMS的区别

CCD ( ) 光敏耦合元件 CCD 主要由硅晶体半导体制成。 其基本原理类似于CASIO计算器上的太阳能电池。 通过光电效应，从感光元件表面感应到光源光线，从而将其转化为储存电荷的能力。 简单来说，当快门打开时CCD表面接收到来自镜头的光线时，光线的能量就会转化为电荷。 光线越强，电荷就越多。 这些电荷成为判断光强的依据。 。 CCD组件上设置有通道线。 通过将这些电荷传输到放大解码元件，可以将CCD上所有感光元件产生的信号还原出来，形成完整的画面。

CMOS（Metal-Oxide）互补金属氧化物半导体CMOS的材料主要是由硅和锗两种元素组成的半导体，使得N（带-）和P（带+）共存于CMOS上。 ）级半导体，这两种互补效应产生的电流可以被处理芯片记录并解释成图像。

CMOS和CCD最大的区别在于：放大器的位置和数量。 比较CCD和CMOS的结构，放大器的位置和数量是最大的区别。

CCD每次曝光时，快门关闭或内部频率自动断开（电子快门）后，都会进行像素传输过程，将每行中每个像素（pixel）的电荷信号依次传输到“ “缓冲器”（电荷在存储器中），底部的电路将输出引导至CCD旁边的放大器进行放大，然后串联ADC（模数数据转换器）进行输出。

在CMOS设计中，每个像素都直接连接到一个“放大器”。 光电信号可以直接放大，然后通过BUS路径传送到ADC转换成数字数据。 由于结构上的差异，CCD和CMOS在性能上表现有所不同。 CCD的特点是在传输过程中充分保持信号不失真（独家通道设计）。 通过将每个像素集成到单个放大器中进行统一处理，可以保持数据的完整性。 CMOS工艺相对简单，没有专门的通道设计，因此必须先放大每个像素的数据，然后再集成。

1、灵敏度差异：由于CMOS的每个像素都包含放大器和A/D转换电路，过多的附加器件压缩了单个像素感光区域的表面积。 因此，在相同像素、相同感光器尺寸的情况下，CMOS的感光度和亮度会低于CCD。

2、分辨率差异：在第一点“亮度差异”中，由于CMOS每个像素的结构比CCD复杂，所以它的感光开口没有CCD大。 当比较相同尺寸的CCD和CMOS感光器时，CCD感光器的分辨率通常优于CMOS。 但如果突破尺寸限制，目前业界的CMOS感光原件已经可以达到1400万像素/全画幅设计。 CMOS技术在亮度方面的优势可以克服大尺寸感光原稿制造的困难，特别是全画幅24mm×36mm尺寸。

3.噪声差异：由于每个CMOS光敏二极管都配有ADC放大器，如果以百万像素计算，需要超过一百万个ADC放大器。 虽然是统一的产品，但是各个放大器或者多个放大器至少存在一些细微的差别，很难达到放大同步的效果。 与单放大器的CCD相比，CMOS最终计算出的噪声更多。

4、功耗差异：CMOS图像电荷驱动方式为主动式，光敏二极管产生的电荷由相邻晶体管直接放大输出； 但CCD是无源的，必须施加外部电压来移动每个像素中的电荷。 到传输通道。 这种外部电压通常需要12伏（V）以上的电平，因此CCD还必须具有更精密的供电电路设计和耐压强度。 高驱动电压使得CCD的功率远高于CMOS。

5、成本差异：CMOS采用半导体行业常用的CMOS工艺，可以将所有外围设施一次性集成到单个芯片中，节省了芯片加工的成本和良率的损失； 相比之下，CCD采用电荷转移来输出信息，必须建立单独的传输通道。 如果通道中出现像素故障（Fail），就会导致整行信号被阻塞，无法传输。 因此，CCD的良率低于CMOS。 除了建立独立的传输通道和增加ADC等外设外，CCD的制造成本相对比CMOS高。

6.其他区别：IPA（Pixel）常用于数码变焦和放大。 CMOS必须依靠x、y图像定位和放大处理。 否则，由于各个像素放大器的误差，很容易出现图像不均匀的情况。 在制造设备方面，CCD必须采用专门定制的设备来制造。 因此，高像素CCD元件的生产不能在日本和美国生产。 CMOS的生产可以使用普通的存储器或处理器设备来进行。 综上所述，CCD和CMOS的特点决定了CMOS更适合用在手机等便携式设备中。 车载摄像头也采用COMS传感器，而CCD更适合在单反相机等专业设备上使用。

CMOS传感器的组成及关键参数

图像传感器的功能是光电转换。 关键参数是像素、单个像素尺寸、芯片尺寸和功耗。 从技术上来说，有前照式（FSI）、背照式（BSI）、堆叠式（Stack）等，下面简单介绍一下。

图像传感器从外部看分为感光区（像素阵列）、焊盘、内部电路和基板。 感光区域是由多个单像素组成的单像素阵列。 每个像素获取的光信号组合起来形成完整的图片。

CMOS芯片由微透镜层、彩色滤光层、电路层、感光元件层和基板层组成。

CMOS芯片横截面

由于光线进入每个单个像素的角度不同，因此在每个单个像素的上表面添加微透镜来校正光线角度，使光线垂直进入感光元件表面。 这就是芯片CRA的概念，需要与镜头的CRA保持在一点偏差范围内。

在电路架构方面，我们补充说，图像传感器是一个将光信号转换为电信号的暗盒。 卡盒外部通常包含电源、数据、时钟、通信、控制和同步等多个电路。 可以简单理解为，感光区域（Pixel Array）将光信号转换为电信号后，暗盒内的逻辑电路对电信号进行处理并进行一定程度的编码，然后通过数据输出电信号界面。

图像传感器关键参数

1、像素：指感光面积内单个像素的数量，如5Maga像素、8M、13M、16M、20M。 像素越多，拍摄图片幅面越大，可以捕捉到的图片细节越多。

2、芯片尺寸：指感光区域的对角线距离，通常以英制单位表示，如1/4英寸、1/3英寸、1/2.3英寸等。芯片尺寸越大，材料成本越高。

3、单个像素尺寸：指单个感光元件的长度和宽度，也称为单个像素的开口尺寸，如1.12微米、1.34微米、1.5微米等。开口尺寸越大。单位时间内进入的光能量越多，芯片的整体性能就会比较高，最终拍摄到的图像的整体图像质量就会比较优秀。 单像素尺寸是图像传感器非常关键的参数。

前照式 (FSI) 和背照式 (BSI)

传统的CMOS图像传感器具有前照式结构。 从上到下依次为透镜层、彩色滤光片层、电路层和感光元件层。 采用这种结构时，光线到达感光元件层时必须穿过电路层的开口，容易造成光损失。

背照式取代了电路层之上的感光元件层。 感光层仅保留感光元件的部分逻辑电路。 这允许光更直接地进入感光元件层并减少光损失，例如光反射。 因此，在相同的单位时间内，单个像素可以获得更大的光能，从而显着提高图像质量。 但这种结构的芯片生产工艺难度较大，良率下降，成本相对较高。

堆

堆叠式是背照式的改进。 它将所有电路层移至感光元件底层，最大化开口面积，减少芯片整体面积。 有助于产品小型化。 另外，将光敏元件周围的逻辑电路移到底部后，理论上逻辑电路对光敏元件的影响会更小，电路噪声抑制可以得到优化，整体效果应该会更好。 业内朋友应该知道，相同像素的堆叠芯片的物理尺寸比背照式芯片要小。

但堆叠式生产流程较大，良率较低，成本较高。 索尼的（堆叠式）和（背照式）可能很好地说明了上述问题。

10

图像传感器的技术分析

图像传感器的质量取决于进入单个像素的有效光量

我们在上一章中提到，图像处理器最关键的参数是单个像素大小。 单个像素尺寸越大，进入的光线量就越多，图像质量就越好。 因此，我们可以简单地认为，决定图像传感器性能的最大因素是进入单个像素的有效光线量，它决定了每个像素单位时间内能够捕获多少光能。 如果单个像素面积更大，则可以同时承载更多的光能，可以显着提高图像质量，更真实地还原图像场景。

数码相机和手机中使用的图像传感器的单个像素尺寸不同。 数码相机尺寸更大，寸寸拍摄效果更好。 但随着单个像素尺寸的增大，同一像素的图像传感器面积显着增大，摄像头模组体积增大、模组高度增加，功耗显着增加，发热量增大这种变化在数码相机中当然是可以接受的。 但放在追求便携性的手机上无疑是不合适的。

以HTC ONE为例，它采用了单个像素尺寸为2微米的图像传感器，从而带来了出色的图像质量，尤其是在夜景拍摄方面。 但正是因为单像素尺寸的增大，手机摄像头因为体积增大、发热等因素被限制在只有400万像素，这是令人难以接受的。 苹果做出了妥协，选择了1.5微米的单个像素尺寸。 虽然是妥协，但其仅有的800万像素还是受到诟病。 在新一代中，为了保证更好的拍摄效果，继续选用1.5微米芯片，换来的是结构和外观上前所未有的牺牲。 突出的摄像头设计堪称史上最丑的苹果摄像头！ 除了增大单个像素的尺寸来增加进光量，难道就没有其他办法了吗？

事实上，情况并非如此。 该技术可以在相同像素尺寸下进行优化，可以有效增加进光量。

技术解决什么问题？

根据三星公布的信息，该技术需要解决的第一个问题是增加单个像素的收缩能力，通过对比度提高成像动态范围最亮和最暗部分的图像质量。 第二个问题是，随着像素变得越来越小，它们抵抗相互干扰的能力会减弱，导致感应光源的颜色和数量不正确。 这种现象称为串扰。 光电二极管的微小探测器将部分光能转化为微小的电流，这些电流有时会出现在不该出现的地方，对图像造成影响。

发生串扰的原因有很多，其中最有可能的是光学串扰。 当像素接收到的光超过其所能承受的量时，电子中就会发生串扰，这完全是由于信号传输过程中光电二极管漏电流故障造成的。

例如，当单个像素捕获绿光时，一些光子可能会泄漏到蓝色或红色中，从而导致即使在没有蓝色和红色的场景中也会出现电流。 这会对原始图像造成轻微的扭曲，从而产生噪声。 。 尽管此类问题不可避免，但可以通过技术将影响降至最低。

技术原理

它本质上是现有BSI技术的演进，可以解决上述流媒体问题。 简单来说，通过在孤立的像素和相邻像素之间形成物理屏障，减少它们的分离面积，避免BSI传感器中单个像素之间的干扰问题，让像素吸收更多的光子，获得更好的效果。 照片效果不错。

从官方数据来看，与BSI相比，它可以隔离每种颜色的像素，提高传感器的取光能力，有望减少30%的像素串扰。 但这并不意味着最终的图像质量也会提高30%，而是可以更好地提高清晰度和色彩表现，使图像看起来更丰富。 三星配备了先进的图像传感器，图像质量和色彩表现有目共睹。

11

相机的工作原理

相机对模组工程如此熟悉，但有多少人真正了解相机从硬件到软件的工作流程。 我们了解相机的工作原理，这对于开展工作和协助解决遇到的一些问题非常有帮助。 接下来我们从套准角度分析相机的工作原理。 如何阅读相机规格表（驱动调节中用到的关键参数，以格科为例）。

每台相机都有一本规格书，里面是一个设备的所有说明，精确到设备的每一个细节，软件关心的寄存器，硬件关心的电气特性，封装等。

整体原理图如下：控制部分为相机上电、IIC控制接口，数据输出为相机拍摄的图像传输给主控芯片。 所有这些都必须有数据、水平和垂直同步以及时钟数。 /是带有CMOS接口的图像传感器芯片，可以感知外部视觉信号并将其转换为数字信号并输出​​。

我们需要通过MCLK向摄像头提供时钟，RESET是复位线，摄像头工作时PWDN应始终为低电平。 PCLK是像素时钟，HREF是行参考信号，VSYNC是场同步信号。 一旦向相机提供时钟并且相机复位，相机开始工作并通过HREF、VSYNC和PCLK同步传输数字图像信号。 数据通过8条数据线D0~D7并行发送。

(1)、像素阵列

阵列尺寸为1268列、1248行，有效像素为1616列、1216行。 也就是说，相机使用时，像素比这个多，所以去除部分边缘以保证图像质量。

(2)IIC

不用说，相机寄存器初始化数据就是从这里传送的。 所有 IIC 设备的工作原理都相同。 我们先拍个图，稍后再详细分析；

在调试驱动程序的过程中，以下部分比较重要：

(3)主时钟

所有电子元件都需要时钟才能工作。 为了让相机正常工作，这就是我们需要的时钟。 它设置在主控芯片中。 该时钟必须存在，否则相机将无法工作。

(4) 开关机时序，这个需要从规格书上获取。 请注意，不同相机的 PWDN 和这两个引脚是不同的。 这张图是上电时序图。 开机时参考一下，看哪里就知道了；

(5)PCLK\D1~D7

相机获取的数据必须传输。 一定有数据。 当然，数据必须有时钟和同步信号。 看看它的时机。 与LCD显示的时序相同。 原理是一样的：

(6) 主要寄存器：分辨率、YUV阶数、X轴、Y轴镜像相位、翻转。 上述工作完成后，可能还会出现一些问题，分辨率太小； YUV顺序错误，图像错误； XY 图像方向。 完成这些任务后，如果还有什么细节问题，如果想花时间，可以通过阅读规范中的寄存器来解决。 如果不想看就找模组厂的FAE。 他们很专业，会尽快帮你解决。 。

(7) 相机硬件接口

12

镜头

一台相机的好坏，70%的光学参数是由镜头决定的。 虽然单价没有COMS芯片那么贵，但性能非常重要。

我来解释一下与镜头相关的参数。 这对于买手机、单反的同学来说其实非常有用。

这里我们以车载DVR的隐藏式广角镜头为例。

镜筒的材质一般为金属，但也有塑料的。 金属镜筒会有更好的品质、耐高低温等指标，但它也有缺点。 当拧动螺杆时，金属套筒会产生金属机械粉末。 ，有掉入COMS感光区的风险，而且金属套的硬度比较硬。 拧紧底板时，很容易导致底板上带有COMS芯片的PCBA变形，导致成像后分辨率发生变化。

镜片的材质主要有两种，一种是玻璃，另一种是塑料。

玻璃镜片：G为缩写，表面形状多为球面，玻璃经磨削加工而成；

塑料镜片：以P为缩写，表面形状多为非球面，采用注塑加工而成。

为了追求轻薄、紧凑，手机摄像头多采用由1-4片玻璃镜片或塑料镜片组成的定焦镜头。 如2P、3P、3G、1G1P、2G2P等。

镜片的材质一般用在汽车上。 玻璃非常耐高温和耐刮擦。 玻璃的表面硬度比塑料好。 当然，玻璃也有缺点。 价格昂贵，并且相机的整体厚度变得更厚。 但就车辆中的性能要求而言，必须使用玻璃镜片，所以这里可以看到6G，它使用了6片玻璃。

13

镜头光学参数说明

焦距（Focal 或 EFFL）

它是指从成像侧主表面到光学系统焦点的距离。 它反映了光学系统聚焦物体的能力。

BFL后焦点

镜头最后一个透镜面到成像面的距离

这里的是上图所示的5.85mm；

BFL法兰距离

从镜头桶（前/后）到成像表面的距离

在这里，如上图所示，它为5.08mm±0.2mm

总镜头长度和总光学长度（TTL）

总的光学长度是指从系统的第一镜头表面到图像表面的距离。 而总镜头长度是指从最前表（通常是指表面）到图像表面（例如表面）的距离。 一般而言，镜头的设计太长或太短将变得困难，制造过程需要更高的要求。 该镜头的总长度为22.7mm±0.3mm。

相对光圈（fno。）

光学系统成像亮度索引，通常称为f数字（如传统相机上标记）。 在相同的光强度下，值越小，图像表面越亮，并且值越大，则图像表面越深。 对于一般成像光学系统，F2.0-3.2更合适。 如果需要较小的F数，则设计将更加困难，结构将更加复杂，制造成本将更高。 这里的FNO是F2.1。

视场角 (FOV)

光学系统可以映像的角度范围。 角度越大，光学系统可以映像的范围越宽，反之亦然。 在实际产品中，有光学FOV和机械FOV。 光学FOV是指该膜实际上图像的有效FOV范围。 机械FOV通常大于光学FOV。 这还有其他考虑因素和用途，例如需要使用机械FOV来引用手机盖的轻孔的设计或直径。

从理论上讲，这里的FOV角度越大，越好。 例如，在制作隐藏的驾驶录音机DVR相机时，此时，双方的图像需要尽可能宽，这对于信息的完整性更为方便。 当然，FOV角会直接影响最终的摄像头距离距离，因此最好根据相机的实际应用选择FOV角度。

光学失真（OPT）和电视失真（电视）

失真是指由光学系统相对于对象本身形成的图像的失真程度。 光学失真是指根据光学理论计算得出的变形程度。

电视失真是指实际捕获图像时的变形程度。 直流摄像机的标准是测量芯片（）短侧的变形。 一般而言，光学失真不等于电视失真，尤其是对于具有校正功能的芯片而言。 失真通常将其分为两种类型：枪管失真和钳口失真。 扭曲的更加生动的反射是鹰。 棋子失真使人更高和更薄。 枪管失真使人们变短和胖。

通常重视的是电视失真。 越小越好，将使处理后续芯片更容易。 这里镜头的电视失真不到21％。

相对照明（也缩写为RI）

它是指由光学系统相对于中心区域中的亮度（无单元）成像的图像边缘的亮度之比。 在实际的测量结果中，它不仅与光学系统本身有关，而且与使用的光敏膜（）有关。 同样，与不同芯片一起使用的镜头可能具有不同的测量结果。

该汽车镜头的RI指数≥53％。

CRA首席射线出口角和成像射线的成像表面入射角，穿过隔膜的中心

不同的视野具有不同的CRA值。 所有视野的CRA都将其变成曲线，即

所谓的CRA曲线。 图中显示的CRA值是有效图像高度处的值。

MTF

它在一定程度上反映了光学系统图像对象的分辨率能力。 一般而言，MTF越高，分辨率越强，MTF越低，分辨率就越低。 由于仅从一个角度评估MTF，因此镜头的分辨率也有一些缺点，因此在当前生产中，大多数仍使用反向投影来检查分辨率。

14

IR（光过滤器）

它主要用于调整整个系统的颜色繁殖。 它通常使用不同芯片的不同波长范围，因为芯片对不同波长范围的光具有不同的敏感性。 对于当前广泛使用的CMO和CCD光敏膜，这一点非常重要。 在早期的CCD系统中，简单IRF的使用通常无法获得更好的颜色繁殖效果。

IR-CUT：透射率为50％，650±10nm @ t = 50％时红外光频率

因此，在这里，您可以看到汽车相机镜头的红外过滤器基本上是650nm±10nm滤镜。

IR涂层的规格对镜头的颜色繁殖有很大的影响。 另外，优化涂层与IR的特性相结合将改善透镜的颜色繁殖。 因此，当某些相机的颜色繁殖效果相对较差时，优化失败的软件可以考虑进行IR涂层进行调整。

15

汽车镜头需要满足的可靠性测试要求

1.高温和低温存储以及高温和低温冲击。 这主要验证镜头在极端温度下是否会变形，从而导致图像失真。

2.例如，耐腐蚀性测试，下拉摄像头在汽车外面，暴露于风和雨。 腐蚀性液体很容易在镜头表面，并且清洁汽车时也会产生玻璃洗涤液的腐蚀。 因此，汽车透镜需要进行耐腐蚀性实验。

3.振动阻力测试，必须通过。 汽车本身的振动将传输到相机。 作为刚性材料，在运输过程中的各种道路条件或振动下，镜头需要保持完整，以满足车辆振动的要求。 实验要求。

4. IPX9K防水水平要求。 相机是否防水取决于它是否可靠。 实际上，最基本的事情是考虑连接的防水。 最大的影响是镜头本身的防水水平是否足够高。 通常，相机的整体防水水平是IPX6。 水平，但是镜头必须基本上通过IPX9K水平，以确保相机的整体防水能力。 如果它是汽车中的DVR驾驶记录仪，并且不会在汽车外放置，则可以降低此防水水平的要求。

5.盐喷雾剂测试。 这也是对车辆的必要测试之一。 不可避免的是，汽车将被驱车前往海滩等严峻的环境。 目前，空气中的盐喷雾成分将相对较大，并且随着时间的推移将腐蚀普通的金属。 很长一段时间后，它会生锈并直接崩溃。 因此，金属设备的外表面通常涂有抗腐蚀油，以便它可以通过盐耐药性测试标准要求。

6.一百个网格测试：使用HB铅笔在透镜G1的裸露表面上均匀地绘制一百个网格线（10个水平线，10个垂直线）。 用浸入酒精的擦拭纸擦拭彩绘区域。 观察镜头的表面。 如果从圆圈的中心到圆的外部3/4有1-2张胶卷的划痕，则可以接受。 如果没有表面膜的剥离，那是一个很好的产品。 发生网状膜损伤，诊断很差。

该实验的主要目的是验证镜头表面的摩擦阻力，尤其是汽车背面查看视图的摄像头。 如果刮擦镜头的表面，整个显示图像将非常不清楚，因此镜头需要能够承受强大的刮擦实验。 这里更大的实验是这个目的。

7.紫外线辐射测试

测试镜头放置在30W紫外老化的测试箱中，透镜的紫外线镜头240h。 实验后的所有性能和功能都是正常的。

我们都知道，紫外线非常强烈，一些塑料或玻璃会摆脱它。 考虑汽车暴露在阳光下后座椅的颜色。 黄色变化，因此汽车镜头必须通过此测试标准。

16

相机分辨率

实际上，分辨率的分辨率基本上是与线性相关的量。 我们查看相机的分辨率是否高。 最重要的是带有数百万像素的相机。

相对较旧的相机是30W像素。 当时，观看逆转图像非常模糊。 现在，无论是前视图的DVR，后视图还是360视图相机，基本上是启动了100W的摄像机。 SLA Model 3 Front -aeled 3相机使用的三个CMOS图像传感器的分辨率为1280 x 960像素（120万像素），并且供应商是Anson Micro （ON）子公司。 Tesla Model 3驱动程序使用相机捕获的图像信息来协助自动驾驶员控制模块单元。

一些朋友可能会说有数千万像素摄像机，而汽车相机没有这种技术能力？ 实际上，实际上并不是因为手机的能力很高，因此必须像SLR效果一样拍照。 因此，像素本身非常高，并且也直接通过MIPI输入传输来处理它。

另一方面，查看汽车相机。 该汽车相机拍摄的图像主要用于机器。 进行一些自动驾驶或驾驶监控。 100W像素的这一部分可以完全满足机器的数据。 数据越多，数据就越多。 对于较高的宿主的容量和计算能力而言，自主驾驶效果的改善不好。

此外，汽车摄像头传输的信号需要串行机器来传输它。 该连续机当前无法传输数千万像素芯片。 2K的视频非常好，汽车主机的这一部分需要处理车辆8-10摄像机，如果每个相机都是数千万像素，则该处理器的难度也会增加，并且成本也会增加。 是国王。

测试分辨率通常由标准分辨率卡测试，该卡可以提供辅助测试，例如垂直分辨率和实际拍摄的水平分辨率。

分辨率测试使用国际标准分辨率卡进行测试，并采用统一的射击角度和射击环境。 辩论速率的计算使用了HYRES软件，垂直分辨率和水平分辨率分开。

可以简要理解，该卡用于根据标准距离使用相机，然后通过软件读取相机的值。 您可以将中心分辨率和周围环境的分辨率直接在软件上获取值。 当然，由于人眼的视力因素，肉眼读取此值，此错误将具有很大的偏差。

对于200W像素摄像机，中央分辨率为≥800线，周围的分辨率为≥700。

17 号

相机灵敏度

灵敏度是色温，灰色卡上的光线为89-90％的反射系数。 当用相机拍摄时，当图像级别达到指定值时，所需的孔径索引f越大，f值越大，较高的敏感性就越高。

灵敏度越高，照明程度越低，相机质量越高。 如果照明性太低或太高，则相机拍摄的图像将恶化。 惰性尾巴可能会出现低照明。 如果照明程度太高，则图像“开花”。

18

相机信号-to -ratio

SO称为的信号 - 到命名比是指信号电压与噪声电压的比率。 它通常由S/N符号表示。 信号 - 命名比分为亮度和信号 - 命名比。

当相机采用照明场景时，监视器显示的屏幕通常相对较快。 观察者不容易看到屏幕干扰噪声，当相机较暗时，监视器显示的屏幕相对昏暗。 目前，观察者很容易参见图片中类似雪花的干扰噪声。 摄像机的信号 - 命名比越高，干扰对图片的影响越小。

汽车中可接受的信号 - 命名比为40dB。 当信号 - 命名比达到55dB时，此时噪声基本上是看不见的。

19

相机图像处理简介ISP初步简介

让我们看一下汽车摄像头模块的关键参数。 是否还有一些难以言喻的描述，例如白平衡，自动增益控制，颜色恢复等。上面的相机描述是主机控制。 这是解释它的关键设备。 ，图像信号处理器ISP，这些生活都是图像处理器ISP需要做的所有工作。

下图显示了汽车系统的基本组成：黄色箭头表示数据的传输，蓝色箭头表示控制信号的传输。

相机的图像处理过程大致是这样的：

感觉到相机的充电后，将其转换为每个像素的数字信号。 它的输出可以称为拜耳。 当拜耳进入ISP时，它将成为一系列图像，成为可以正常预览或拍照的图像。 。

图像处理中还有一些更关键的步骤，例如我们将保持白平衡，因为人眼的视野将对我们看到的颜色进行一定的校正。 例如，在黄光的范围内，我们看到的黄色光是击败明亮的白纸不再是白纸。 因此，校正白平衡非常重要。 校正白平衡后，将完成，每个像素的整个颜色通道将恢复。

然后，需要通过颜色校正的矩阵乘法来校正每个特征或由于某些原因的特征。 之后，您需要转移到YCBCR域，以减少噪音或亮度通道或颜色通道的补偿。 总体而言，这是一个非常简单的过程。 实际上，汽车应用中的过程非常复杂，涉及更多算法，例如HDR多帧暴露，合成，音调。

ISP的位置非常关键：

其中一些会将ISP图像处理芯片放在摄像机上，在处理到主机后传输信号，而有些则不会放置ISP芯片。 小的。

例如，当相机逆转时，距离主机5-8米的距离。 根据身体的长度，该部分通常位于相机模块的末端。 传输信号都是ISP降噪处理的ISP，以减少降噪处理。 后一个信号也更强。 缺点是该体积将变得更大，并且散热需求非常高。

例如，一些驾驶录音机DVR摄像机。 相机的这一部分非常接近控制主机CPU，样式的要求相对较高，ISP将放置在CPU上（许多DVR CPU已构建了-in -IN ISP芯片）。 无论是成本还是设计是最佳解决方案。

如前所述，摄像机的信号必须由ISP处理，因此如何处理这些信号以及应处理哪些过程，这些过程实际上是与颜色相关的内容。 首先，我们进行了与颜色相关的内容的流行科学，然后进行解释。 如何处理这些信号。

效果的调整涉及许多参数。 如果基本光学和软/硬件的原理在对图像处理原理的深度理解和掌握中具有更多的努力，那么它将有更多的努力以更少的方式做更多的事情。 否则，缺乏理论指导只能是通过感觉和经验准确地抓住问题的关键。 通常不可能准确掌握问题，无法掌握调试的核心技术，并且无法从根本上解决该问题。

20

颜色原理

对人眼的颜色的认识是基于人眼，即在光线下有三种不同的感应单元。 不同的电感单元对不同的光带具有不同的响应曲线，并且通过大脑的合成获得了颜色感知。 一般而言，我们可以通过RGB三色的概念理解颜色的分解和合成。

从理论上讲，如果人眼的响应和光谱的颜色光，光谱的反射如下，基本上对三种颜色光的响应不会互相影响，并且没有这样的交叉交叉-影响。

但是，实际情况并不理想。 下图显示了人眼的三种彩色诱导系统的响应。 可以看出，RGB的响应不是完全独立的。

下图显示了柯达相机频谱的响应。 可以看出，它与人眼的反应曲线不同。

21

校正颜色诱导

既然我们已经看到了对频谱的响应，那么RGB成分中对频谱的响应通常会与人眼偏离，当然，它需要纠正。 它不仅在交叉效应中，还需要校正颜色的颜色的响应强度。 通常的方法是通过颜色校正矩阵校正颜色。

此颜色校正操作通常由模块集成或后端ISP完成。 该软件通过修改相关寄存器获得正确的校正结果。 值得注意的是，由于还通过3*3变换矩阵实现了RGB-> YUV的转换，有时这两个矩阵将在ISP处理过程中合并在一起，并且矩阵操作将完成。 颜色校正和颜色空间转换。

22

色彩空间和变化

实际上，颜色描述非常复杂。 例如，基于RGB的三重颜色加光系统无法覆盖可能的颜色。 对于各种颜色表达以及颜色转换，软件和硬件应用的需求，有各种颜色模型的颜色空间表达。 这些颜色模型可以根据不同的原则根据不同的原则分为不同的类别。

匹配任何可见光所需的三个主要颜色灯比曲线

因为，我们通常接触的色彩空间的概念主要是RGB和YUV（实际上，这两个系统包括许多不同的颜色表达方法和模型，例如SRGB，Adobe RGB，...），如前所述，RGB描述了根据三个基于三个的颜色和光系统的原理进行颜色，而YUV则根据亮度和色彩差异原理描述颜色。

与其他颜色空间的转换相比，有一个标准的转换公式，因为YUV与硬件很大程度上相关，因此RGB和YUV的转换公式通常是多个版本，这略有不同。

共同的公式如下：

y = 0.30r+0.59g+0.11b

U = 0.493（b -y）= 0.15r - 0.29g +0.44b

v = 0.877（r -y）= 0.62r - 0.52g -0.10b

但是，存在一些问题，例如负值以及YUV值值范围的上限和下限范围之间的差异，这不利于计算机处理。 因此，根据不同的理解和需求，通常在软件处理中使用不同的不同。 此处未列出变形公式。

它反映在其中，我们还会发现一些可以设置YUV的输出值范围。 这就是为什么。

从公式来看，理解的关键点是UV信号实际上是蓝色差异信号和红色差异信号。 简而言之，实际上，在一定程度上，它间接表示蓝色和红色的强度。 了解各种颜色转化处理的过程将非常有帮助。

23

色温定义

色温的定义：黑体从绝对零度开始，每次称为1 （由字母K表示）。 当温度在一定程度上升高时，黑体会辐射可见光的光，其频谱成分以及给人的感觉也随着温度的升高而变化。 因此，黑体辐射的温度设置为一定的颜色光，将其设置为同一颜色灯源的色温。

公共光源色温：

光源温度（K）

钨丝灯（白炽灯）2500-3200K

碳杆灯4000-5500K

荧光（荧光灯，节能灯）4500-6500K

k灯5600 k

碳精髓5500〜6500K

平均阳光为5400k

云层中的阳光6500-7000k

12000-

随着色温的上升，光源从温暖到冷颜色的颜色转变，光源中的能量分布也从红光转移到蓝光端。

值得注意的是，实际光源的光谱分布不同，色温仅表示对能量的重点，并且不反映特定的光谱分布。 因此，即使相同色温的光源可能会引起不同的颜色反应。

人眼和大脑对色温具有一定程度的身体和心理适应能力，因此您看到的颜色不受色温偏移的影响，也没有能力。 因此，人眼看到的颜色将有一个巨大的偏差（尽管人眼睛在白光中看到了真实的颜色）。

天气和阳光时间变化的原因与不同频率光的折射率有关：

带有长波长，小折射率，强大的传输能力，短波长光，大型折射率，易于分散的光线，低折射率，这就是为什么交通灯是红色的原因，抗fog灯通常是黄色的。 颜色和其他现象的原因。

知道这一点，可以理解和分析阳光温度的法律和原因。

24

色温变化时颜色校正

因此，从理论上可以看出，随着色温的升高，色温应为阳性，否则，在这种光条件下，物体显示的颜色将偏离其正常颜色，因此有必要减少红色红色红色给红色。 增加，增加蓝光的收益。

同时，在调整参数时，有必要考虑应保持整体亮度通常保持不变，也就是说，当测量YUV时，Y值基本上应保持不变。 从理论上讲，可以认为您可以参考RGB-> YUV转换公式，RGB，RGB，RGB，这三个组件有助于Y值，从而确定RGAIN与BGAIN之间的比例关系。 但是，实际情况比这更复杂。 有必要考虑R和B的差分传感的横向进行和非线性，因此最佳值可能与理论值有一些偏差。

25

自动白平衡处理

自动白平衡基于假设场景的平均颜色。 如果结果与范围偏离范围，则将调整相应的参数，直到其平均值落入指定范围为止。 该处理可能基于YUV空间或RGB空间。 因为，通常的处理方法是通过校正R/B增益使UV值落在指定的范围内。 这可以自动白平衡。

处理特殊情况

在自动白平衡中，易于遇到的问题是，如果拍摄场景排除了光温度的影响，则其自身颜色的颜色偏离了平均颜色值，例如大的颜色图案的区域偏向某种颜色，例如：草地，红旗，蓝天等，此时，迫使白平衡调整其平均颜色附近的平均颜色，图像颜色将严重扭曲。

因此，通常的方法是：除了目标结果的预期颜色范围外，除了目标结果的预期颜色范围外，还有一对源图像的颜色范围的来源。 如果您重视它，则根本不进行自动白平衡处理。 这样可以保证对上述特殊情况的正确处理。

可以看出，这两对值的确认在自动白平衡的影响中起关键作用。

平台的示例

可以看出，随着色温的升高，变化定律基本上符合上一节中的理论分析。 但是，这里的大多数参数和理论值都有一些偏差。 其中，阳光灯的色温参数设置与理论值具有较大的偏差。 实际效果还证明了灯灯的参数设置使在家用太阳灯中拍摄的照片的颜色。 修改其参数后的实际射击效果已大大提高。 （如果您检查一些信息，您会发现通