芯片中心

tof芯片 一文看懂TOF

小编 2024-10-10 芯片中心 23 0

一文看懂TOF

来源:内容来自「国盛证券」,谢谢。

3D sensing是智能手机创新的趋势之一,当前正加速向中低端手机渗透。目前实现3D sensing共有三种技术,分别为双目立体成像、结构光和ToF,目前已经比较成熟的方案是结构光和TOF。其中结构光方案最为成熟,已经大规模应用于工业3D视觉,TOF则凭借自身优势成为在移动端较被看好的方案。

3D结构光最早应用于苹果旗舰iPhone X,结构光原理为通过近红外激光器向物体投射具有一定结构特征的光线,再由专门的红外摄像头进行采集获取物体的三维结构,再通过运算对信息进行深入处理成像。该技术目前共有编码结构光和散斑结构光两种实现类别。结构光技术仅需一次成像就可得到深度信息,具备低能耗、高成像分辨率的优势,能够在安全性上实现较高保证,因此被广泛应用于人脸识别和人脸支付等场景。但结构光技术识别距离较短,大约在0.2米到1.2米之间,这将其应用局限在了手机前置摄像,主要用于3D人脸识别屏幕解锁、人脸支付及3D建模等。

ToF(Time of Flight)技术是2018年才被应用到手机摄像头的3D成像技术,其通过向目标发射连续的特定波长的红外光线脉冲,再由特定传感器接收待测物体传回的光信号,计算光线往返的飞行时间或相位差,从而获取目标物体的深度信息。ToF镜头主要由发光单元、光学镜片及图像传感器构成。其识别距离可达到0.4米到5米,因此已有品牌,如OPPO、华为等,将其应用于手机后置摄像。ToF技术具备抗干扰性强、FPS刷新率更高的特性,因此在动态场景中能有较好表现。另外ToF技术深度信息计算量小,对应的CPU/ASIC计算量也低,因此对算法的要求更低。但相对于结构光技术,ToF技术的缺点在于其3D成像精度和深度图分辨率相对较低,功耗较高。

双目立体成像原理较为简单,即利用双摄像头拍摄物体,再通过三角形原理计算物体距离,合成立体图像。其具有高3D成像分辨率、高精度、高抗强光干扰的优势,同时能保持较低成本水平。但由于需要通过大量的CPU/ASIC演算取得它的深度和幅度信息,其算法极为复杂较难实现,同时该技术易受环境因素干扰,对环境光照强度比较敏感,且比较依赖图像本身的特征,因而拍摄暗光场景时表现差。由于以上原因,双目立体成像技术在手机上较少应用。

结构光技术和ToF各有优势,在移动端的应用上具有互补的特性,但不可否认的是,ToF的多场景应用呈现出了更为广阔的发展前景。iPhone X对3D结构光的应用带动了这项技术的发展和渗透,目前相较于ToF,结构光技术在应用上更为成熟,出货量上明显占优。而且结构光的扫描效果更为真实,具备更强的3D还原能力。但遗憾的是,作用距离的劣势限制了其应用。ToF技术弥补了距离上的缺陷,由于能够支持更远的作用距离,ToF技术可以被应用于包含3D人脸识别、3D建模以及手势识别、体感游戏、AR/VR在内的更多场景中,从而为智能手机更娱乐性和实用性的体验。此外,相比结构光技术,ToF的模组复杂度低,堆叠简单,可以做到非常小巧且坚固耐用,在屏占比不断提高的外观趋势下,更得到手机厂商的青睐。

ToF让3D建模“飞向寻常百姓家”

我们生活在一个三维的空间,对周围物体及环境的大部分经验来自于对深度信息的感知。对于人们来说,立体化的3D视觉比2D图片的形式要生动、沉浸许多,这也是人们所追求的直观体验。为解决这一需求痛点,3D建模技术应运而生并迅速发展。3D建模即通过相机等设备对物体进行采集照片,获取周围环境物体三维尺寸和深度信息,经计算机进行图形图像处理以及三维计算,从而全自动生成被拍摄物体的三维模型的技术。曾经主流的3D建模实现都十分昂贵,而当3D镜头技术和传统的镜头结合起来,意味着在移动端即可实现3D建模,ToF技术正推动着3D建模应用 “飞入寻常百姓家”。

随着体感交互、3D识别与感知、环境感知以及AR地图构建等技术与应用的发展,市场对 3D视觉与识别技术的兴趣日益浓厚,ToF的使用进一步丰富了3D建模技术的应用场景。

拍照虚化。ToF具备更好的景深采集功能,加入智能手机后摄模组后,能够实现快速、远距离获取更高精度的景深信息,从而完成较结构光更大范围的3D建模,而且由于自带红外光源,其在暗光环境下获得的景深信息同样准确。因此,有TOF摄像头参与的成像在虚化效果上会更加真实,富有层次,从而能够带来更好人像模式体验。

体感游戏。通过TOF技术能够采集到被拍摄人的身体深度信息,捕捉和采集身体的动作,进行手势判定,控制预制的3D建模人偶的形象和动作,实现真人和3D虚拟形象跟随,,用身体、动作和手势做游戏交互。

ToF助力消费级AR普及。ToF技术的应用亦是AR、VR时代的催化剂。考虑到ToF的两个独特的优点——作用距离长、刷新率高,存在远距离3D 测距需求的AR/VR是最能体现 TOF 优势的功能之一。3D摄像头技术提供的手势识别功能将成为未来AR/VR领域的核心交互手段。目前各大厂商推出的VR设备大都需要控制器,游戏控制器的优势在于控制反馈及时、组合状态多。

3D摄像头技术提供的手势识别功能将成为未来AR/VR领域的核心交互手段。 目前各大厂商推出的VR设备大都需要控制器,游戏控制器的优势在于控制反馈及时、组合状态多。以HoloLens为例,就拥有一组四个环境感知摄像头和一个深度摄像头,环境感知摄像头用于人脑追踪,深度摄像头用于辅助手势识别并进行环境的三维重构。

HoloLens相比以往任何设备的强大之处,在于其能够实现对现实世界的深度感知并进行三维建模。HoloLens 拥有拥有一组四个环境感知摄像头和一个深度摄像头,环境摄像头获得周围图像RBG信息,深度摄像头则利用TOF技术获得视觉空间深度图(Depth Map)并以此重建三维场景、实现手势识别。

下一波创新性革命,AR应用前景巨大。外观系列创新之后,下一波移动终端创新将围绕AR进行革命性创新。光学领域TOF有望接力结构光,从生物感知到虚拟现实,从人脸识别到3D建模,带来产业端升级和用户体验优化,前置人脸识别+后置虚拟现实功能可能成为手机的下一个形态。手机实现虚拟现实同样需要使用3D摄像头模组,进一步推动光学产业链的升级。

下一波创新性革命,TOF市场空间巨大

下一波移动终端创新将围绕AR进行革命性创新。随着增强现实内容市场的蓬勃发展,内容厂商不断推动AR/VR开发平台的发展,必然会推动TOF产业的发展。TOF有望接力结构光,从生物感知到虚拟现实,从人脸识别到3D建模,带来产业端升级和用户体验优化,前置人脸识别+后置虚拟现实功能可能成为手机的下一个形态。伴随AR/VR的发展,ToF有望成为智能手机摄像头的下一个风口。

我们看到2019年3D感测手机大多集中在高端机等旗舰机型,结构光以苹果为代表,自iPhoneX后的机型都已经搭载结构光功能,而华为搭载TOF的机型数量最多。根据Yole的预测数据也显示,全球3D成像和传感器的市场规模在2016–2022年的CAGR为38%,2017年市场规模18.3亿美元,2022年将超过90亿美元。其中,消费电子是增速最快的应用场,2016–2022年的CAGR高达160%,到2022年消费电子市场规模将超过60亿美元。

从出货量上来看,我们预测智能手机3D感测需求将从2017年的4000万部增加至2019年的2亿部以上,其中2019年的ToF机型还主要集中在几款高端旗舰机,从2020年开始TOF的出货量将进一步爆发,在整体3D感应中占比有望达到40%。

我们预测2019/2020年TOF的出货量为7760万/2.1亿部,同比大幅增长747%/166%。

BOM比较:TOF或更具成本优势

我们预计ToF和结构光的BOM成本大约为12~15美元和20美元,相比之下TOF更具有成本优势。以iPhone X为例,结构光技术的解决方案包括三个子模块(点投影仪,近红外摄像机和泛光照明器+接近传感器),而ToF解决方案则将三个集成到一个模块中,可以将包装成本降低。

我们预计在这个TOF模组中,芯片的成本仍占主要的部分,大约占到整体BOM的28%~30%。

深度解析3D Sensing摄像头产业链

目前TOF或结构光的3D感知技术均为主动感知,因此3D摄像头产业链与传统摄像头产业链相比主要新增加红外光源、红外传感器和光学组件等部分。通过对已经上市的主流3D摄像头产品进行拆解分析,3D摄像头产业链可以被分为:

1、上游:红外传感器、红外光源、光学组件、光学镜头以及CMOS图像传感器;

2、中游:传感器模组、摄像头模组、光源代工、光源检测以及图像算法;

3、下游:终端厂商以及应用。

TOF和结构光二者虽然原理不同,但其所需要的核心部件基本相同,TOF中的核心部件包括发射端的VCSEL光源、Diffuser等,接收端的镜头、窄带滤光片、近红外CMOS等。

1.VCSEL:垂直发射光源,国内厂商逐步突破

VCSEL(Vertical-Cavity Surface-Emitting Laser,垂直腔表面发射激光器)是一种垂直于衬底面射出激光的半导体激光器。 由上下两个DBR反射镜和有源区这三部分组成。VCSEL单价贵于LED、LD,可通过大规模量产降低成本。 VCSEL的垂直结构更适合使用晶圆级制造和封测,并且规模量产之后具有成本优势。

VCSEL具有效率高、功耗低、传输速率快、制造成本低等优良特点,逐渐替代了LED成为主流选择。 发射光源包括两种,一种是边发射的(如LD),一种是垂直的(如VCSEL),前者一般波长较长,用于信息传输;后者可以通过压缩垂直腔体的容积用于体积较小的应用中,更适合作为3D感知的发光源。早期3D感知经常使用LED作为光源,但红外LED的响应速度较差,扫描结果不够精准。VCSEL在3D感知领域性能优于LED,逐渐替代了LED成为主流选择。

VCSEL主要进入壁垒在于资质认证和量产能力,国内厂商逐步突破。 目前VCSEL领域主要厂商为光通讯芯片领域的国外大厂,包括Lumentum、Finisar、II-VI、Philips Photonics等,其中Lumentum是VCSEL全球领先的供应商,供应国际大客户新机型3D感知模组的激光源。

TOF 的 VCSEL 并不像结构光那样对编码图案有一定要求,常规的规则排列即可,因此可供选择的 VCSEL 供应商也会更多。未来VCSEL需求量激增,但VCSEL产业链过去被美国和日本少数厂商把控。去年苹果推出iPhone X后,VCSEL需求持续加大,因此留给国内VCSEL公司很大的成长空间和市场空间。国内的供应商如纵慧、睿熙、华芯等均取得了不小的突破。

2. Diffuser:将光调制成均匀的面光源

Diffuser的主要功能为显示器提供一个均匀的面光源,材料需选择光透过率高的材料,将化学颗粒作为散射粒子,光线在经过扩散层时会不断的穿过,在此同时光线就会发生许多折射、反射与散射的现象,进而形成光学扩散的效果。未来手机3D成像的Diffuser将会更加复杂化与定制化,应用场景更加细分,同时随着TOF的爆发,产品设计也将持续创新,规模优势日益凸显。

3.窄带滤光片:只允许通过特定波长

窄带滤光片是带通滤光片的一种,是光谱特性曲线透射带两侧邻接截止带的滤光片,即在特定的波段允许光信号通过,在其他波段则阻止光信号,窄带滤光片的通带较窄,一般小于中心波长的5%。目前全球主要的窄带滤光片主要有两家,美国的VIAVI和中国的水晶光电。

窄带滤光片在3D传感领域需求大,是3D视觉系统中红外光接受模组的组成部分,位于镜头和近红外图像传感器之间。在3D视觉系统中,红外光源是实现深度测量的关键,红外光源包括红外LED和激光器(主要是VCSEL(红外激光发射器),在运作过程中,若VCSEL发射940nm波长的近红外光,为了接收端的图像传感器只接收到这一波长近红外光,需要通过窄带滤光片,将其余的环境光剔除。

水晶光电是国内光学精密薄膜镀膜龙头,在窄带滤光片上具有技术和先发优势。目前 大客户的窄带滤光片方案是以水晶与VIAVI合作的方式供应。公司的强项在于镀膜工艺,预计新的竞争对手需要较长的时间才能切入,护城河较高。水晶有望抓住下游3D sensing需求的放量,凭借技术和先发优势将充分受益。

4.3D图像处理芯片:难度较高

3D成像所需的图像处理芯片的技术难度更高,与一般的图像处理芯片有所区别,通过算法将IR接收端采集的空间信息和镜头成像端采集的色彩信息相结合,进而生成三维图像。由于芯片的技术壁垒较高,目前供应商仅为几个芯片巨头,包括STM、TI、NXP等。

5.成像镜头端:产业链较为成熟

手机摄像头对应的产业链企业包括图像传感器制造商、模组封装厂商、镜头厂商、马达供应商、滤光片供应商等。由于行业技术壁垒和集中度高,产业链的龙头多为日本、韩国、中国台湾所垄断,大陆的厂商主要集中在红外滤光片和镜头模组封装上,包括舜宇光学、欧菲科技、水晶光电、立讯精密(立景)、丘钛科技等。

在CIS市场份额上面,索尼一家独大,市场份额高达42%,三星居第二位,市场份额达到了18%,豪威排第三,市场份额为12%,随着手机、汽车、工业等下游应用领域对CIS的需求不断增加,市场空间有望进一步扩大。Yole Development数据显示,2016年CMOS图像传感器市场规模达到115亿美元,相较2015年同比增长约13%,预计2016至2022年全球CMOS图像传感器市场复合年均增长率将保持在10.50%左右,2022年将达到约210亿美元。出货量方面,2017年全球CIS出货量超40亿颗,预计2021年全球出货量将达70亿颗。

在摄像头模组上面,根据TSR的数据2016和2017年欧菲科技的市场份额为9%和13.3%,舜宇光学的市占率为7.9%和9.5%,丘钛科技的市占率为5.3%和6.5%。2017年,全球TOP摄像头模组厂商占据了全球超过50%的市场份额,比2016年增长了13个百分点,集中化趋势愈加明显。一方面,产业集中度不断提高,另外一方面,以光学领域的双摄、3D摄像头和柔性显示为代表的功能性和差异化的创新层出不穷,持续利好自主创新能力强和具有产业整合及规模优势的龙头企业。

2018年,品牌集中度进一步加剧,全球TOP摄像头模组厂商与二、三线摄像头模组的出货量呈现两极分化,通常情况下,全球TOP摄像头模组厂商的月出货量可达35KK,而二、三线摄像头模组厂商最高出货量不超过15KK。前三大模组厂商也不断扩产,以满足下游需求。

在镜头市场,中国台湾的大立光占有绝对的龙头地位,在iPhone中供应了超过50%的镜头份额。在中国手机厂商方面,舜宇光学镜头的市占率在不断增加。目前大立光的年产能约为1.5亿,遥遥领先于其他厂商。

免责声明:本文由作者原创。文章内容系作者个人观点,半导体行业观察转载仅为了传达一种不同的观点,不代表半导体行业观察对该观点赞同或支持,如果有任何异议,欢迎联系半导体行业观察。

今天是《半导体行业观察》为您分享的第2131期内容,欢迎关注。

半导体行业观察

半导体第一垂直媒体

实时 专业 原创 深度

ToF落地——从“噱头”到“刚需”,ST十亿出货经验谈

ToF无疑是2019年最火的科技名词之一。由于具备测距、接近检测、存在检测、环境光检测、反射率检测、多区域检测、3D检测等功能,ToF可用于测距、避障、手势控制、人数统计、负荷管理、内容分析等应用中。

不过,就像众多新技术的落地过程中,许多开发者都用一种全面撒网的心态来试水。ToF在实际的落地中,应用五花八门,有实实在在的刚需,也有所谓的创造需求或是“噱头”。

近期,ST宣布其ToF出货量累积达到10亿颗。在这个市场摸爬滚打五年之久,产品迭代4代,收获50多家OEM客户,150多款手机采用ST ToF产品,评估套件销量超出35000套,ST经历了这个市场爆发的全过程。

<电子发烧友>采访了ST大中华暨南亚区影像事业部技术市场经理张程怡,就ToF现状及未来发展进行了探讨。

张程怡谈到,技术本身的特点、产品优势,以及成本都是很重要的考量因素。目前ST ToF产品仍以消费类为主轴,之所以聚焦这一市场,一方面原因是产品侧重于室内应用,另一方面是在目前架构之下将距离提升到了四米甚至五米,这个距离具有普遍的涵盖性,几乎完全可以满足普通家庭场景。在保证距离的前提下,他认为产品的大小、尺寸是关键,与其牺牲产品尺寸将距离做到假设十米,还不如在五米内优化产品,这是产品定位时与实际需求进行综合考虑后的结果。

下一步,张程怡看好3D ToF,用于包括3D人脸识别、3D建模以及手势识别、体感游戏、AR/VR在内的更多场景中,带来更多娱乐性和实用性的体验。

差异化的产品源于什么?

根据IHS-Markit的统计,ST在整个CMOS影像传感器与其他光电产品的市场份额中排在第五位,而ToF就属于其他光电产品。利用先进像素技术和硅制造工艺,以及光学封装/模块与影像系统的专长,ST能提供差异化的智能传感和光源解决方案。

ST ToF产品的独到优势在于:尺寸小,一级安规,数字输出,非模拟值,高精度。

之所以能够实现上述优势,与ST对基础创新和制程技术的投入密不可分。ST的ToF传感器模组采用其单光子雪崩二极管(SPAD)传感技术,在ST位于法国Crolles的300 mm前端晶圆厂制造,在其先进的后端封测厂进行组装和测试(ST在深圳和菲律宾共有2个后工序封测厂)。最终的ToF传感器模组集成了SPAD探测器、垂直腔面发射激光器(VCSEL)以及确保器件性能的必要光学元件。

据了解, SPAD是一个较特殊的光学制程,它的像素能接受的光亮是目前可行性技术中最大的,拥有强大的光接收能力。

张程怡表示,高精度是ST ToF芯片的一大亮点,这意味着它能够更好地抵抗温度变化、各类室内光源、目标物颜色干扰等。以对深色衣服的探测为例(ToF的测距原理是发出经调制的近红外光,遇到物体后反射,传感器根据光子往返飞行时间来直接测算物体与传感器的距离),由于深色更容易吸收光,返回的光很少,因此普通ToF会认为信号弱,对距离出现错误的判断,而ST ToF产品精度更高,更容易识别出误导。

目前,ST已经陆续推出了VL6180X、VL53L0X、VL53L1、VL53L3、VL53L5四代FlightSense产品。其中VL53L5是ST第四代产品,尺寸为6.4mm*3.0mm*1.5mm,将于明年正式推出,它主要有两大特点:

特点一:角度大。普通的产品视场角(FOV)一般控制在25-27度左右,ST的VL53L5视场角最大能够达到61度。据了解,FOV 61度的好处有两点:一是大角度覆盖范围更广,更适合大家电、大荧幕等稍大尺寸的产品;二是可编程,客户可根据自己的需求编程到所需要的角度,在所谓FOV有效角度上,可通过算法缩小、中间变化给予新的弹性。

特点二:可切割。VL53L5具有MZ(multi-zone,多区域)的特点,切割后分成四个象限,每个象限可以再切割,达到16个区域或更多。

据张程怡介绍,从前几代的27度增大到61度,VL53L5在软硬件上均做了改进,硬件上发射端加了镜头,以扩展更大的角度;接收端的凸透镜也做了放大,但因为加了这些光学的镜头套件,VL53L5芯片的尺寸比前代稍大一点。同时,软件的改进也十分重要,因为收到的信号会更多,软件要有足够的能力去识别和处理。

聚焦手机之外三大应用

目前,ST开始布局其他的应用领域,包括测距、接近检测、人数统计、门禁、农业无人机等等。张程怡总结到主要有三大应用:

一是应用于对焦,通常用于比较高端的照相或投影系统。例如照相是一种对焦,可以准确得到距离;投影仪是一种对焦,因为可以对着墙壁来投影。

二是人的检测。现在的智能系统,比如高铁站/机场的闸机还不够完善,还需要人工操作。如果ToF得到持续普及,那么人在一米远处系统就会自行启动,不管是刷脸、刷指纹,都会非常流畅。

或者在儿童教育面板中,进行专注用户存在检测,避免距离太近;更高级些还可以判断活体或非活体,例如笔记本电脑可以自动感测用户的接近/离开进行激活/关闭屏幕,而不会对面前的椅子做出误判。

三是物体的检测。最简单的是扫地机器人避障,此外在家用无人机、宠物等市场前景也同样被值得期待。

作者:张慧娟

相关问答

可测深度摄像头TOFCamera原理是什么?有哪些具体应用?

你好,科技一杆枪为您解疑答惑。我们发现,现在推出的品牌智能手机往往都搭载了一颗3D深感摄像头,也叫TOF镜头、景深镜头。这种深感摄像头其实利用的是3D成像技...

mate30pro有北斗芯片吗?

有华为mate30pro除了支持L1+L5双频GPS,还支持北斗导航/AGPS/Glonas/伽利略(E1+E5a双频)/QZSS(L1+L5双频),导航会更加的准确。华为Mate30Pro...

3588芯片参数?

3588芯片是采用了8nm工艺设计,拥有了四核A76+四核A55的八核CPU和Mali新一代odin四核GPU,内置6T算力的NPU。具备强大的视觉处理能力,可支持结构光、TOF等多种快...

lq60电源芯片参数?

lq60电源芯片配备一块6.8英寸P-OLED显示屏,分辨率为2480×1080,支持HDR10+;搭载高通骁龙865移动平台,辅以8GB+128GB内存版本,支持最高2TBMicroSD卡扩容...

瑞芯微3588芯片参数?

3588芯片是采用了8nm工艺设计,拥有了四核A76+四核A55的八核CPU和Mali新一代odin四核GPU,内置6T算力的NPU。具备强大的视觉处理能力,可支持结构光、TOF等多种快...

中国芯片发展还得靠华为这样的公司?

从普普通通的石英砂,到电子信息行业皇冠上的明珠,每一颗芯片都要经历极其严苛、难度极高的淬炼才能达到99.9999%的纯度,集科学见解、工业设计、高质量管理和创...

意法半导体是哪里的?

定制芯片定制与半定制IC都是为特殊用户而设计的,但它们的设计与制造方法不同。半定制芯片是包含了一系列电路单元的通用芯片,这些单元能够以多种方式实现互连...

苹果手机芯片在哪里生产的-ZOL问答

苹果手机芯片是自己研发,但是不是自主生产,苹果手机芯片外包给三星和台积电生产。苹果手机芯片不自产的原因:耗资巨大,在短暂的进军芯片生产后,苹果就果断退出...

vivo和oppo有什么不同?

感谢邀请:我是科技数码随时答,很高兴能回答这个问题OPPO和vivo的不同点在哪里?如果说两者历史的话,有点太官方啦!就简单的说说自己的理解吧!对于OV的认知...总...

华为p30上市时间是什么时候?华为p30配置怎么样?多少钱?-红...

3月26日,华为正式在法国巴黎公布了今年首款旗舰机:华为P30/P30Pro。华为官方已经于3月26日,也就是今天在欧洲市场正式开售两款新机:华为P3...

猜你喜欢