返回
产品中心
分类

事件相机的工作原理和应用场景

日期: 2024-01-29 作者: 产品中心

  事件相机最早诞生于1990年,那时候,许多研究人员探讨动物感知环境的方式,发现对变化更为敏感,所以设计出了实验室用的事件相机。2008年,诞生了第一款商用的事件相机。如今国内外都有企业和机构进行事件相机的研究。传统相机,无论是CMOS传感器,还是CCD传感器,亦或是RGBD相机,都有一个参数:帧率。它们是以恒定的频率拍摄获取图像。这样,即使帧率能达到1KHz,那也具有1ms的延时。所以传统相机存在一定的延迟问题。此外,传统相机需要通过一段时间的曝光,使感光器件积累一定的光子,那么在曝光时间之内如果物体在高速运动,则会产生模糊,这也是传统相机的一个问题。另外,传统相机的范围较低,具体表现为在光线极差或者亮度极高时,相机获取的信息有限。这样一些问题极大的限制了传统相机在一些应用场景中的应用。而事件相机则能很好的解决这样一些问题。事件相机,也称神经形态像机,或动态视觉传感器(DVS,Dynamic Vision Sensor),是一种能够响应局部亮度变化的成像传感器。事件相机不像常规相机那样使用快门捕获图像。相反,事件相机中的每个像素都独立且异步地运行,并在发生亮度变化时输出这些变化,否则保持沉默。下图可以非常形象的展示出事件相机和传统相机在工作原理上的不同。左侧:假设拍摄的是一个圆盘转动(圆盘此时逆时针转动一段时间然后停止)。右侧:上面是传统相机,圆盘停止时,标准相机输出不间断,然而这一些信息其实不是我们关注信息。下面是事件相机,其输出信息为亮度动态变化的位置,并且当图片无变化时即为no events,无输出。此前有业内人士对电子发烧友表示,基于这样的工作原理,事件相机有几个典型的特点:一是它的动态范围非常高,能够达到140dB;二是因为它只输出有效信息,不输出无效信息,它的数据量非常小;三是它的速度很快,能够达到1/10000s,甚至更高。因为这些特点,事件相机可适用于传统相机难以解决的一些场景中。比如城区场景中的鬼探头,传统相机在面对横向的鬼探头场景时,无法快速做出一定的反应,而事件相机可以更快感知到危险信号;再比如高速场景下的避障,车辆在高速上快速行驶时,遇到前方路面有一个轮胎,传统相机不能及时做出一定的反应,事件相机可以依靠低时延优势,快速识别并做出避障的动作。目前,不少公司都在致力于事件相机的发展,包括iniVation、prophesee(普诺飞思)、索尼(收购Insightness)、芯仑光电(韦尔股份子公司)、锐思智芯(Alpsentek)等。iniVation起源于瑞士,由基于事件视觉的发明者创立。该公司已推出多款产品,热门型号包括:DAVIS346 Color/Mono、DVXplorer、DVXplorer Lite/Mini、Stereo Kit等。iniVation的动态视觉平台可为诸多应用和行业提供支持和解决方案,包括物联网(超低功耗监控和智慧城市)、无人驾驶(车辆测距、SLAM和乘员监控)、机器人技术(场景理解与定位)、工业视觉(过程监控和基础设施检测)等。Prophesee于2014年成立于法国巴黎,专注于神经拟态视觉传感技术,目前基于事件的视觉技术推出多款传感器。其研发的普诺飞思原视觉(Metavision)传感器可应用于手机、无人驾驶、工业自动化、物联网、AR/VR、医疗设施等领域。比如在智能驾驶领域,Xperi旗下子公司DTS基于普诺飞思原视觉(Metavision)传感技术提供的事件数据,开发了基于神经拟态视觉系统的驾驶员监控解决方案(DMS),提供了更优的微光性能,以及新的检测功能,如眼跳或微表情检测等。再比如,高级驾驶辅助软件开发商Terranet AB与梅赛德斯-奔驰共同开发的VoxelFlow传感器,采用了普诺飞思原视觉(Metavision)传感器,可扫描车辆四周半径为40米的区域,反应时间为3毫秒。锐思智芯成立于2019年,拥有一支兼备芯片、算法、软件和硬件研发经验与能力的团队,核心专家来自全球顶尖机构。在高端视觉传感器领域拥有超过16年的技术积累,在事件相机领域拥有超过8年的研究经验。2021年10月,锐思智芯(Alpsentek)发布了首款融合仿生事件视觉传感器芯片——ALPIX-Pilatus(简称 ALPIX-P)。专为机器感知设计的传感器,可大范围的应用于机器人、智能手机、无人驾驶、无人机、安防等场景。ALPIX-P 采用锐思智芯自主研发的 Hybrid Vision融合式仿生事件视觉传感技术,即将仿生事件视觉技术与传统图像传感技术在像素级别进行融合。芯片可以在传统图像传感器模式和仿生事件相机模式之间快速切换,实现事件相机与 CIS 相机功能 “二合一”。在图像模式下,ALPIX-P 是一款最高帧率为 120 帧的全局曝光传感器,其图像质量与现有的商化的 CIS 输出的图像质量一致,兼容现有成熟的视觉系统。在仿生事件相机模式下,ALPIX-P 具有超高帧率,高有效信息占比,大动态范围的特点。事件相机的核心是神经拟态,神经拟态技术最早源于瑞士苏黎世联邦理工学院(ETH Zurich)。目前研究的企业主要有两个方向,一是传感器,即事件相机,就是文章提到的几家公司;另一个是神经拟态计算,主要是SoC芯片,如九天睿芯、时识科技。目前从两个方向来看,神经拟态在产品和应用上都有不错的进展。

  LG G3 Vista曝光:5.7寸720P屏 根据UA profile曝光的规格来看LG G Vista装备了分辨率为1280*720的5.7英寸屏幕,搭载高通骁龙400四核处理器,1GB的内存,8GB的内置储存,最高支持32GB的MicroSD卡扩展,运行Android 4.4系统。新浪手机讯 7月11日上午消息,不久前LG从美国商标专利局申请包括LG G3 Vista在内的四款商标,近日网上曝光了LG G Vista的宣传照。据悉,这款机器又称为LG G Pro 2 Lite,型号为LG-VS880。 此外LG G Vista还可能装备800万的后置摄像头和130万的前置摄像头,搭载3200mAh

  去年 9 月,三星带来了三星 Galaxy Z Flip3 折叠屏手机,凭借着独特的上下折叠设计,带来了精巧的“首饰盒”体验,非常受女性用户的喜爱。 现在有一手消息,继新一代的三星 Galaxy Z Flip 4 开始得到曝光后,近日有海外爆料达人进一步带来了该机设计上的更多细节。 据海外知名爆料着 @Ross Young 最新发布的信息数据显示,与此前曝光的消息基本一致,全新的三星 Galaxy Z Flip 4 将继续主打小巧轻便的折叠屏方案,不过与前作还是有较大区别的。 据称,这一代三星 Galaxy Z Flip 4 预计将会提供金色、灰色、浅蓝色和浅紫色等版本,而 Galaxy Z Fold4 将提供米

  :盖板上显示屏将会更大 /

  Samsung Z出现在Tizen开发者大会上 新浪手机讯 7月18日上午消息,上个月三星发布了搭载了自家操作系统Tizen的手机Samsung Z,那时三星称Samsung Z会在本月的Tizen开发者大会上正式亮相,但该机迟迟未出现,不管如此,就连发售日期也一再推迟,不过仍然还是有一部分用户对其相当期待,近日该机的土豪金版曝光。 据悉,土豪金版Samsung Z是出现在俄罗斯的Tizen开发者大会上,相比黑色版,只是后壳的配色变为了土豪金色,并有皮革般的手感,配置上Samsung Z搭载了4.7寸的720p屏幕、主频为2.3GHz的四核处理器、2GB RAM、16GB内存和MicroSD卡槽和260

  时隔多年,HTC再次成为谷歌手机的代工商,不同的是,此前的Nexus系列被全新Pixel系列所代替。好在,谷歌对于Pixel系列的重视程度要高于Nexus系列,不知道HTC能否借此东风再起。   在Pixel系列发布后,有业内人士透露,HTC代工的Pixel和Pixel XL,每款产品总量为50万台,而且两款产品加起来占HTC今年出货量的10%,由此估算,HTC 2016年的出货量只有1000万部,远不是华为、小米、魅族们的对手。不过小编好奇的是,这1000万部出货量都卖到哪里了,毕竟HTC在国内市场的声量已经不是一个惨字可以形容。

  前不久,高通在骁龙888 Plus的发布会上,意外泄露了下一代芯片的部分信息,其中透露搭载下一代旗舰芯片的机型将会在年底发布。 此前,有许多消息认为骁龙888的继任者会被命名为骁龙895,延续此前的命名规则,但一手消息显示,该芯片可能将会延续888的特性,被命名为“骁龙898”。 同时,爆料者@i冰宇宙还透露,骁龙898将会拥有频率达3.09GHz的X2超大核,这将会带来顶级的性能表现,也与此前的传闻相互呼应。 据此前消息,骁龙898将采用1+3+2+2的四丛集架构,其中Kryo 780超大核基于Cortex-X2,Kryo 780大核基于Cortex-710,Kryo 780能效大核基于Cortex-510(高

  之前, 有消息称魅族正在准备多款4G新机,并采用联发科处理器。 华强电子产业研究所手机和电子行业分析师潘九堂今天在微博上爆料,魅族有4款4G手机在研发中,其中3款采用MT6595处理器(发布时间在第三季度),另外1款采用三星猎户座处理器。 值得一提的是,之前传闻称 红米手机4G版也会搭载选择MTK平台 ,采用的也是联发科首款LTE手机芯片——MT6595。 MT6595是联发科于今年2月份发布的全球首款八核LTE处理器 ,采用big.LITTLE架构设计,内置了四颗Cortex-A7核心和四颗Cortex-A17核心,分为标准版MT6595、版MT6592M以及增强版MT6595T三个型号,其中MT6595

  我们知道,联想ZUK Z2 Pro刚刚回归京东,接下来将推出一款拥有极高屏占比的机型——ZUK Edge。我们之前不知道的是,ZUK貌似悄悄砍掉了一款新机,命名ZUK R1,看配置和外观应该是中低端产品。 ZUK R1谍照 要说这机型配置并不出色,采用720p屏幕,后置1300万像素镜头,但有几处非常引人关注。ZUK R1创下了ZUK多项第一次,第一次采用联发科Helio P10处理器,第一次采用类ID无边款设计,第一次内置虚拟键。 不过,我们明显能看到,该机正面配备了ZUK标志性的矩形Home键,背部采用金属材质,底部有ZUK标识。遗憾的是,网友透露,该机应该已经被砍掉,我们也就只能看看谍照了。

  就在比亚迪e6先行者电动车上市前夕,为了与大家伙儿一起来分享比亚迪新能源汽车的先进的技术产品,比亚迪昨日(25日)在深圳举行了“比亚迪e6先行者为未来上市策略研讨会”,会上披露了许多新车的具体细节。e6先行者是中国首款面向个人销售的纯电动汽车,也是比亚迪“双电化”战略即“汽车电动化、配置电子化”的重要成果,因此深受业界及消费者的的期待。作为唯一一家受邀参加比亚迪e6先行者电动车上市活动的新能源汽车领域专业媒体,电动车时代网将全程微博直播,敬请期待! 谁将成为第一辆e6先行者电动车的车主?备受瞩目 用心造车 比亚迪搞新能源不是“挂羊头卖狗肉” 在研讨会上,比亚迪股份有限公司汽车产业群总工程师廉玉波首先披露了e6先

  21天学通HTML+CSS+JavaScript Web开发-第7版(带目录)

  中的图像传感器和信号处理

  有奖直播 是德科技 InfiniiMax4.0系列高带宽示波器探头新品发布

  MPS电机研究院 让电机更听话的秘密! 第一站:电机应用知识大考!跟帖赢好礼~

  随着软件日益复杂,并且车载系统和传感器数量稳步增加,车内系统的通讯成几何增长,必须加强密码保护。这种保护能够最终靠经典的实时汽车开放 ...

  1、大模型技术的盛行对智能驾驶域控器领域的技术方面的要求与挑战?大模型技术确实给智能驾驶域控器领域带来了新的要求和挑战。例如Tesla的感知算 ...

  一 先导与重点文章主要介绍无人驾驶技术中几种常用的坐标系统,以及他们之间如何完成关联和转换,最终构建出统一的环境模型。这里重点理解 ...

  关于汽车电控系统,它其实并不是新能源电动汽车专有的,燃油车同样具备,只不过新能源电动汽车的电控系统更加的复杂,也更强大。汽车电控系 ...

  01 论过往新能源汽车向着高功率密度和高可靠性的方向发展,为满足这方面的需求,功率模块无论从电气性能(Si基和WBG材料的芯片)还是 ...

  站点相关:嵌入式处理器嵌入式操作系统开发相关FPGA/DSP总线与接口数据处理消费电子工业电子汽车电子其他技术存储技术综合资讯论坛电子百科