白癜风的治疗秘方 https://m.39.net/disease/a_5419408.html界面新闻记者
彭新
界面新闻编辑1
人类大脑中有约亿个神经元,它们相互连接构成了一个网络,其中的连接部分被称为突触,而这些多达约10亿的突触,其视觉机制的运行只需要不到1个灯泡的能量就能驱动。
如今,这一生理机制有望作用于手机摄像中,被称为“基于事件的视觉传感器(EVS)”,法国公司Prophesee近期宣布与高通合作,将EVS技术应用于手机中,目标是明年结束之前会有首款搭载EVS技术的手机问世。
EVS的技术起源于视觉神经的信号模拟,是模仿眼睛的感光机制而建立的传感器技术:人眼感受到光线后,视网膜上的受体细胞就会将光信号转换成神经信息,后段的神经细胞再分别挑选出亮部和暗部,经由神经节细胞,将信息传递到大脑的视觉皮层。
EVS则如同人类视觉神经,射入传感器的光线会转换成电气信号。电气信号通过放大器,由比较器根据亮度变化进行分离,形成变亮信号和变暗信号,然后再通过后段的信号处理,以EVS图像数据的形式输出。因此,EVS是一种只对亮度变化敏感并输出图像的视觉传感器。
这一方式与目前手机上所用的CMOS传感器截然不同:CMOS会将捕捉到的所有图像信息全部输出,而EVS只输出有变化的像素部分,因此可削减数据量,同时实现高速且高效的传感。
另一方面,CMOS传感器以“帧”为单位,基于固定速度,以一定时间为周期(如每秒60次)来记录图像。与其相比,EVS有非常高的时间分辨率,据称等效于每秒能记录0张影像,做到只捕捉运动物品的轨道部分,可以理解为几乎记录到物品的全部运动过程。
传统手机相机与Prophesee技术加持后的拍摄对比。
这意味着EVS在拍摄移动对象时十分有利,而智能手机厂商也希望自家摄像头拥有这类特点。目前,使用CMOS传感器的手机在拍摄高速运动物体时通常存在着所谓的“运动模糊”(motionblur),即照片中拍摄快速移动的物体存在明显痕迹。搭载了EVS传感器的摄像头就可以消除这种模糊,Prophesee和高通就期望在手机中做到这一点。
Prophesee主要研究模拟人眼视觉的“神经形态视觉技术(neuralmorphicvisiontechnology)”,直到最近几年这种技术才逐渐成熟。目前,Prophesee已经获得超过1.2亿美元的融资,投资方包括中国创新工场、小米和韦豪创芯等,目前在法国、美国、中国和日本都设有办公室,拥有超过人团队。
“其实我们没有创造一项新的技术,只是把自然界中存在了多年的原理,将之以最合适的、最正确的方式应用到产品和技术当中。”Prophesee联合创始人兼首席执行官LucaVerre告诉界面新闻,“在手机端,目前的应用是将Prophesee的EVS传感器与传统上以帧为单位的图像传感器进行结合,从而提高手机摄影照片的质量。”
LucaVerre提到,通过同步EVS传感器和传统传感器的数据,手机摄影可以实现高性能的图像去模糊。系统能够将EVS以微秒为单位记录的事件填充到两帧图像的间隙,通过算法提取纯动态信息,从而修复运动模糊。
与高通的合作也将为EVS进入手机市场降低难度,EVS传感器以及Prophesee的模糊消除算法可以与高通的骁龙手机平台整合。
对于手机OEM厂商而言,引入EVS传感器意味着手机将多一颗摄像头,最终手机上市需要1年的周期。
传感器的生产是在索尼帮助下完成的,生产出的EVS传感器成品提供给客户,目前在索尼半导体部门的