当前位置:首页 > 新闻中心

事件相机的工作原理和应用场景

时间:2024-02-15 作者: 新闻中心

  事件相机最早诞生于1990年,那时候,许多研究人员探讨动物感知环境的方式,发现对变化更为敏感,所以设计出了实验室用的事件相机。2008年,诞生了第一款商用的事件相机。如今国内外都有企业和机构进行事件相机的研究。传统相机,无论是CMOS传感器,还是CCD传感器,亦或是RGBD相机,都有一个参数:帧率。它们是以恒定的频率拍摄获取图像。这样,即使帧率能达到1KHz,那也具有1ms的延时。所以传统相机存在一定的延迟问题。此外,传统相机需要通过一段时间的曝光,使感光器件积累一定的光子,那么在曝光时间之内如果物体在高速运动,则会产生模糊,这也是传统相机的一个问题。另外,传统相机的范围较低,具体表现为在光线极差或者亮度极高时,相机获取的信息有限。这样一些问题极大的限制了传统相机在一些应用场景中的应用。而事件相机则能很好的解决这样一些问题。事件相机,也称神经形态像机,或动态视觉传感器(DVS,Dynamic Vision Sensor),是一种能够响应局部亮度变化的成像传感器。事件相机不像常规相机那样使用快门捕获图像。相反,事件相机中的每个像素都独立且异步地运行,并在发生亮度变化时输出这些变化,否则保持沉默。下图可以非常形象的展示出事件相机和传统相机在工作原理上的不同。左侧:假设拍摄的是一个圆盘转动(圆盘此时逆时针转动一段时间然后停止)。右侧:上面是传统相机,圆盘停止时,标准相机输出不间断,然而这一些信息其实不是我们关注信息。下面是事件相机,其输出信息为亮度动态变化的位置,并且当图片无变化时即为no events,无输出。此前有业内人士对电子发烧友表示,基于这样的工作原理,事件相机有几个典型的特点:一是它的动态范围非常高,能够达到140dB;二是因为它只输出有效信息,不输出无效信息,它的数据量非常小;三是它的速度很快,能够达到1/10000s,甚至更高。因为这些特点,事件相机可适用于传统相机难以解决的一些场景中。比如城区场景中的鬼探头,传统相机在面对横向的鬼探头场景时,无法快速做出一定的反应,而事件相机可以更快感知到危险信号;再比如高速场景下的避障,车辆在高速上快速行驶时,遇到前方路面有一个轮胎,传统相机不能及时做出一定的反应,事件相机可以依靠低时延优势,快速识别并做出避障的动作。目前,不少公司都在致力于事件相机的发展,包括iniVation、prophesee(普诺飞思)、索尼(收购Insightness)、芯仑光电(韦尔股份子公司)、锐思智芯(Alpsentek)等。iniVation起源于瑞士,由基于事件视觉的发明者创立。该公司已推出多款产品,热门型号包括:DAVIS346 Color/Mono、DVXplorer、DVXplorer Lite/Mini、Stereo Kit等。iniVation的动态视觉平台可为诸多应用和行业提供支持和解决方案,包括物联网(超低功耗监控和智慧城市)、无人驾驶(车辆测距、SLAM和乘员监控)、机器人技术(场景理解与定位)、工业视觉(过程监控和基础设施检测)等。Prophesee于2014年成立于法国巴黎,专注于神经拟态视觉传感技术,目前基于事件的视觉技术推出多款传感器。其研发的普诺飞思原视觉(Metavision)传感器可应用于手机、无人驾驶、工业自动化、物联网、AR/VR、医疗设施等领域。比如在智能驾驶领域,Xperi旗下子公司DTS基于普诺飞思原视觉(Metavision)传感技术提供的事件数据,开发了基于神经拟态视觉系统的驾驶员监控解决方案(DMS),提供了更优的微光性能,以及新的检测功能,如眼跳或微表情检测等。再比如,高级驾驶辅助软件开发商Terranet AB与梅赛德斯-奔驰共同开发的VoxelFlow传感器,采用了普诺飞思原视觉(Metavision)传感器,可扫描车辆四周半径为40米的区域,反应时间为3毫秒。锐思智芯成立于2019年,拥有一支兼备芯片、算法、软件和硬件研发经验与能力的团队,核心专家来自全球顶尖机构。在高端视觉传感器领域拥有超过16年的技术积累,在事件相机领域拥有超过8年的研究经验。2021年10月,锐思智芯(Alpsentek)发布了首款融合仿生事件视觉传感器芯片——ALPIX-Pilatus(简称 ALPIX-P)。专为机器感知设计的传感器,可大范围的应用于机器人、智能手机、无人驾驶、无人机、安防等场景。ALPIX-P 采用锐思智芯自主研发的 Hybrid Vision融合式仿生事件视觉传感技术,即将仿生事件视觉技术与传统图像传感技术在像素级别进行融合。芯片可以在传统图像传感器模式和仿生事件相机模式之间快速切换,实现事件相机与 CIS 相机功能 “二合一”。在图像模式下,ALPIX-P 是一款最高帧率为 120 帧的全局曝光传感器,其图像质量与现有的商化的 CIS 输出的图像质量一致,兼容现有成熟的视觉系统。在仿生事件相机模式下,ALPIX-P 具有超高帧率,高有效信息占比,大动态范围的特点。事件相机的核心是神经拟态,神经拟态技术最早源于瑞士苏黎世联邦理工学院(ETH Zurich)。目前研究的企业主要有两个方向,一是传感器,即事件相机,就是文章提到的几家公司;另一个是神经拟态计算,主要是SoC芯片,如九天睿芯、时识科技。目前从两个方向来看,神经拟态在产品和应用上都有不错的进展。

  Lumia X将是最便宜的WP8.1手机 新浪手机讯 7月10日上午消息,搭载Android系统的诺基亚X因为价格实惠公道成为最受关注的Android手机,而最近有传言表示,微软将推出Lumia安卓机,诺基亚X系列将会转变为Lumia X系列,不过近日有国内网友在新浪微博爆料称,Lumia X其实是最低端的WP8.1手机。 Lumia X将是最便宜的WP8.1手机 根据曝光图片来看,Lumia X的外形与Lumia 630有些相似,但整体更加圆润,也较厚一些。据称,Lumia X将是市场上最便宜的Windows Phone 8.1手机,不过具体价格未知。(基德)

  上个星期推特爆料大神OnLeaks爆料,LG今年下半年即将发布的骁龙835线预计将会采用无线充电,必须得说爆料大神不愧是大神,刚过一周,爆的料就得到了验证。 近日,一张疑似LG V30机身背部的无线充电圈谍照泄露,进一步证明了LG V30将会采用无线充电的传闻。虽然这并非什么惊喜,不过知道LG依然在投入自己的手机业务,而不是在退出中国市场后不思进取,还是让人感觉这是一件好消息,无论对LG还是消费者而言。 当然,这么大的无线模块不会贴在机身后背上,而是会内置在机身背部的电池与后盖之间,所以这张谍照有两个意思。 一是因为金属机身没办法使用无线应该是玻璃机身没跑了。 二是因为无线

  近几天,关于小米花1亿元购买专利的新闻被热炒了起来,而进一步的传闻则显示小米准备推出500元以下的4G手机。 今天中午,微博用户@手机晶片达人爆料称,小米准备用联芯1860芯片推出售价399元的移动4G手机,并开玩笑称这个品牌“应该叫什么米?”。 在官网查询之后发现,联芯1860芯片的全称为LC1860,使用28nm工艺制造,集成6颗主频2GHz的Cortex-A7核心,GPU型号则是Mali-T628MP2,支持双通道LPDDR3内存、2K显示屏、2000万像素摄像头等,看上去规格十分强悍。 另外LC1860还整合了基带,支持GSM/EDGE/WCDMA/TD-SCDMA/LTE FDD/TD-LTE网

  最近魅族新旗舰PRO 7的消息在网上频传,而从曝光的各种渲染图和谍照来看,该机的设计有点与众不同。今天网友@Fotoball分享了一张疑似魅族PRO 7的真机上手谍照,这张谍照比此前的更加清晰,颜值也更高。 魅族PRO 7上手谍照 当然,所有看到这张谍照的人都能第一时间注意到它的亮点。魅族PRO 7背部采用了一块副屏设计,可显示时间、天气、电话、相机等。这种设计与Yotaphone系列机型相似,因此也有人猜测PRO 7背部的这块显示屏采用的是E-ink电子墨水屏,能降低主屏使用频率,提升续航。 魅族PRO 7后壳谍照 另外,根据此前曝光的后壳谍照来看,魅族PRO 7在背部右侧开了一个凹槽,而这个设计应该就是为副显示屏准

  芯片漏洞问题频发,这一次轮到了英伟达。专门破解任天堂(Nintendo)Switch游戏主机以执行自制软体的ReSwitched团队日前公布了名为Fusée Gelée的漏洞细节,这是藏匿在Switch主机核心Nvidia Tegra X1晶片中的安全漏洞,将允许骇客执行任意程式,且宣称在主机出厂后即无法修补。自2018年以来,英特尔、AMD先后被芯片漏洞问题推上了风口浪尖,芯片漏洞不断被曝光,也让目前网络安全问题成为众矢之的,要性能还是要安全,对芯片厂商来说是个需要平衡的命题。 芯片漏洞引发行业关注 2018年的芯片市场注定是不平凡的一年,这边中兴的芯片断供事件在持续发酵,那边几大芯片巨头频繁曝出芯片漏洞问题。 近日

  据报道,作为搜索巨头的Google计划推出一款自有品牌的智能手机,采用Android系统,手机上将出现Google的标志。  据报道,这将是一款迄今为止功能最复杂、最先进的一款智能手机,目前Google正在和台湾手机代工厂商宏达公司进行研发合作。这款手机将配置触摸屏幕、超高速的应用处理器,处理速度远超于苹果公司的iPhone。 另外,随着Google最近收购一家网络电话公司,加上之前收购并全新推出的一号通服务Google Voice,Google还有可能成为一个电信运营商,从而提供完全免费的通话服务。之前已经有分析指出,Google在光纤网络、数据中心上均比Skype更有优势,能够推出话质更清楚、更稳定的

  此前爱尔兰运营商已经披露了索尼 Xperia XZ2 即将推出的消息,而现在又有预装 Android 8.1 系统的索尼新机 H8166 的 HTML 基准测试信息在网络上浮出水面,不仅显示手机名称为 Xperia XZ2 Pro,而且所配 4K 显示屏还具有 18:9 的纵横比例,这在某种程度上预示着该款机型或有很大的可能是索尼首款全面屏设计的旗舰产品,或将在 MWC 大会与索尼 Xperia XZ2 联袂登场。 根据知名论坛 Reddit 上的一张 HTML 基准测试截图显示,型号为 H8166 的索尼新机不仅预装有 Android 8.1 系统,而且手机名称为 Xperia XZ2 Pro,具备 18:9 的纵横比例,将会是一款全面屏设计

  集微网消息,魅族方面今日宣布将在本月21日召开魅蓝E3新品发布会,从宣传海报上的“给热血青年,更好的装备”字样能够准确的看出魅蓝E3的配置值得期待。不过在小编整理完所有与魅蓝E3的相关信息之后,发现魅族发布会不用开了,直接公布上市日期得了,魅蓝E3已经毫无秘密可言了。 昨天线下经销商【宇通手机】吴飞便在微信朋友圈公布了魅蓝E3的售价与外观,据悉魅蓝E3将有蓝、黑、金三种配色,2299元起接受独家预订。 硬件配置方面,我们综合了工信部官网与3C认证中心官网得知,魅蓝E3将采用5.99英寸大小的FHD+TFT屏幕,搭载主频为1.8GHz的处理器(可能是高通骁龙636处理器),RAM方面分为4GB与6GB,ROM方面为32GB、64G

  21天学通HTML+CSS+JavaScript Web开发-第7版(带目录)

  中的图像传感器和信号处理

  MPS电机研究院 让电机更听话的秘密! 第一站:电机应用知识大考!跟帖赢好礼~

  电源小课堂 从12V电池及供电网络优化的角度分析电动汽车E/E架构的趋势

  2月5日消息,AMD线程撕裂者竖起了工作站、发烧桌面处理器的天花板,Intel至强虽然无力抗衡,但也不能放弃,只是实力所限,提升有点慢,下一 ...

  DevEco Studio 4.1带来多种调试能力,助力鸿蒙原生应用开发高效调试

  目前,HarmonyOS NEXT星河预览版已经正式面向开发者开放申请,面向鸿蒙原生应用及元服务开发者提供的集成开发环境——DevEco Studio也迎 ...

  英特尔 Thread Director 技术助力,Linux 用户运行 Windows 虚拟机性能提升 14%

  2 月 5 日消息,去年 10 月,微软发布了一份指南,鼓励 Windows 用户通过 WSL 尝试 Linux,这多少让人有些意外。而如果你是一位 ...

  不支持超线,新款英特尔 Arrow Lake-S 芯片样品现身测试数据库

  2 月 3 日消息,消息人士 InstLatX64 近日在 X 平台分享了一条来自英特尔测试机数据库的信息,称发现了一款不支持超线 ...

  智能家居是在物联网的影响之下物联化体现。智能家居通过物联网技术将家中的各种设备(如音视频设备、照明系统、窗帘控制、空调控制、安防系 ...

  站点相关:嵌入式处理器嵌入式操作系统开发相关FPGA/DSP总线与接口数据处理消费电子工业电子汽车电子其他技术存储技术综合资讯论坛电子百科

扫一扫,加微信

版权所有 © 火狐电竞(中国)官方网站IOS/安卓通用版/手机APP(www.signaljammerblockers.com)
备案号:沪ICP备05031232号-66 技术支持: Sitemap.xml