datasheet

自动驾驶汽车应该如何感知世界?从重新定义机器视觉开始

2019-03-07来源: AutoLab关键字:自动驾驶汽车  感知世界  机器视觉

一直以来,自动驾驶所有运算都在决策层进行,芯片算力不足是高等级自动驾驶发展受制约的原因之一,那么能不能从感知层面减少数据流,降低芯片运算量呢?

大家应该知道,高等级的自动驾驶需要多种传感器共同配合,视觉传感器也是其中之一。

传统的机器视觉是怎样的?

传统摄像头通过间隔曝光,电荷量根据输入光的强度发生变化,以帧率的方式采集平面图像,将捕捉到的光学信息(包括采集点的灰度和颜色)转化成数字信号传输到决策层,实现场景的还原。

这就存在几个问题,一是数据不连续,帧的方式只记录了固定时间间隔的画面,还有大量曝光盲区时间点的物体运动信息丢失,同时快速运动场景下图像也不清晰甚至没有记录到;二是输出了大量无效冗余数据,增加芯片负担,造成计算资源浪费。

革新:让汽车的眼睛和耳朵拥有智慧

传统摄像头把 “看到”的所有画面输出到决策层,让芯片过滤筛选有用的信息,这是一种懒办法。所有有人提出了革新,那就是从感知层解决一部分数据,让汽车传感器拥有智慧,主动对信息过滤,并对有用信息加以分析后再输出。

就像古代的皇帝和大臣,作为皇帝的“耳目”,如果大臣没脑子,一股脑把所有奏折递交给皇帝,那皇帝一定会累死;而如果大臣能主动过滤一些没用的奏折,挑选出自己不能决定的那部分交给皇帝决策,那么整个国家就能高效运转。

今天我们要说的是保隆发布的一款动态视觉传感器DVS,它就是这个聪明的“大臣”。

保隆动态视觉传感器集成芯仑科技的芯片技术和武汉大学的算法技术,芯片模仿人眼视神经,摒弃传统图像帧率和曝光感知的方式,采用事件驱动原理,即以像素点的方式连续单独监测光强波动,仅在有光强变化时才能激发像素点进行数据输出,产生较低的数据率。

同时像素点的时间分辨率达到纳秒,相当于每秒几十万帧,能采集到更高速度的运动物体。动态范围高达140dB(普通相机一般都是60-70dB,车载要求达到120dB),让它也能在诸如隧道、大雾、等强弱光交替变化的环境条件下快速输出清晰图像,还能记录物体的运动矢量信息,从而预测物体运动趋势。

简单来说,你可以把它理解为青蛙的眼睛,对静态的物体视而不见,而对有相对运动的物体哪怕速度快过子弹,都能精准捕捉并预测轨迹。

动态视觉传感器能带来哪些优势?

据介绍,目前世界上做动态视觉传感器方案的公司并不多,包括瑞士的Inilabs、法国的Prophesee、三星(licensed IP)及保隆科技,前三者的传感器分辨率最大只到30万像素,而保隆科技目前做到了100万像素(车规级)。

同时它还拥有三种图像输出模式:

图片模式,与传统图像传感器一样的全幅图像,并兼容传统图像处理算法和硬件;

光流模式,从芯片上得到光流向量场信息,直接输出全分辨率运动矢量(方向和速度),能够对物体的运动方向和速度都有正确的预测;

动态模式,通过对自然光强变化的判定输出仿生的动态特征脉冲信号。

通过灵活运用三种数据流对算法进行优化,在很多场景下能将运算量降级上千倍。

举一个简单的应用案例就是,采用这种芯片技术的ADAS系统,跟传统的摄像头技术路径相比,其传感器从感知到信号到控制指令发出,时间可节省几百毫秒,对于一台时速120公里/小时的车辆而言,制动就能提前5米完成。

所以它不但解决了自动驾驶中算力不足的问题,还能帮助系统更快、更准、更轻松地感知外部环境,作用几乎可以代替激光雷达,而成本比激光雷达低了一个数量级,只比传统摄像头贵一些,将极大降低自动驾驶系统的成本。

法国咨询公司YOLE就将动态视觉传感器定义为L4和L5级别的自动驾驶必不可少的传感器之一。


关键字:自动驾驶汽车  感知世界  机器视觉

编辑:鲁迪 引用地址:http://mirrt.com/qcdz/2019/ic-news030725194.html
本网站转载的所有的文章、图片、音频视频文件等资料的版权归版权所有人所有,本站采用的非本站原创文章及图片等内容无法一一联系确认版权者。如果本网所选内容的文章作者及编辑认为其作品不宜公开自由传播,或不应无偿使用,请及时通过电子邮件或电话通知我们,以迅速采取适当措施,避免给双方造成不必要的经济损失。

上一篇:指纹识别将如何改变未来出行?
下一篇:苹果最有权势的19人:大洗牌之后AI、自动驾驶上位

关注eeworld公众号 快捷获取更多信息
关注eeworld公众号
快捷获取更多信息
关注eeworld服务号 享受更多官方福利
关注eeworld服务号
享受更多官方福利

推荐阅读

外媒:华为将在2021年推出自动驾驶汽车

传华为牌自动驾驶汽车即将面世!据外媒报道,华为正与欧洲、日本和中国的汽车厂商展开合作,并计划最早将于2021年推出自动驾驶汽车…… 据金融时报报道,华为目前正与欧洲、日本和中国的汽车厂商展开合作,并计划最早将于2021年推出自动驾驶汽车。 报道称,华为首席架构师党文栓表示,华为正为多家合作企业提供人工智能支持,其中包括德国大众旗下的奥迪、广汽丰田、北京新能源汽车和长安汽车。 “据我所知,我们正在合作开发一款汽车,预计将在2021年或2022年出货,该车将用到这些(自动驾驶)组件,”党文栓说。 “该车并不仅面向中国市场,还会走进欧洲。” 党文栓指出,得益于市场的规模和活力,中国将在2021年
发表于 2019-06-14
外媒:华为将在2021年推出自动驾驶汽车

宝马申请无人机洗车系统专利 可清洁自动驾驶汽车传感器

上有几家汽车保洁服务供应商,使用移动应用程序提供方便、个性化的汽车保洁预约服务。有几家服务供应商甚至推出车辆清洁上门服务,让车主省却驾车前往洗车站的麻烦。这项服务在一些目标客户中颇受欢迎。”事实上,MobileWash、Spiffy、Washos等应用都提供按需洗车服务,而福特已经与包括Spiffy在内的几家移动洗车公司合作,通过FordPass智能手机应用提供洗车服务。未来,这项技术还可能用于清洁自动驾驶汽车的传感器,这对于传统的汽车清洗来说是一场“噩梦”。该专利申请表示,如果遇到暴风雪或沙尘暴等事件,无人机可以自动清洁受影响的车辆。这增加了宝马使用无人机清洁自动驾驶汽车的可能性。因为如果自动驾驶汽车的传感器被沙子、灰尘、雪甚至鸟类
发表于 2019-06-13
宝马申请无人机洗车系统专利 可清洁自动驾驶汽车传感器

Uber公布与沃尔沃合作的自动驾驶汽车,配备更多冗余备用系统

Uber 公布了其与沃尔沃合作的自动驾驶汽车,新款车型基于沃尔沃 XC90 SUV 打造,与之前的车型不同的是,新车型将在原厂装配 Uber 的自动驾驶技术,而不是在量产版车型上进行改装。Uber 将于 2020 年开始上路测试新车型。  Uber 和沃尔沃为车辆增加了更多冗余系统。该车仍将配备方向盘和踏板,但 Uber 表示,最终它将用于在没有人驾驶的情况下运行。考虑到这一点,两家公司在车辆中构建了多个冗余备用系统,尤其是转向、制动和电池。Uber 表示,如果任何一个主要系统因某些原因失效,那么备用系统将立即采取措施使汽车停下来。  此外,Uber 最近还宣布将在墨尔本开启飞行出租车试点项目,而洛杉矶、德克萨斯州达拉斯-沃斯堡
发表于 2019-06-13
Uber公布与沃尔沃合作的自动驾驶汽车,配备更多冗余备用系统

大众与Aurora终止自动驾驶汽车项目,或选择携手福特

据外媒报道,就在首次宣布合作不到两年的时间里,大众汽车和自动驾驶初创公司Aurora似乎已经终止了合作。《Financial Times》援引知情人士的话报道称,大众跟Aurora将不再续签任何合作合同。 据消息人士披露,两家公司在本月早些时候完成了它们的最后一个合作项目。 “大众集团一直是自早期从Aurora Driver发展而来的Aurora的一个很好合作伙伴,”Aurora发言人在今天的电子邮件声明中说道,“随着Driver的不断成熟和我们平台实力的增强,我们持续与越来越多能扩充我们专业知识、扩大我们产品覆盖面的合作伙伴继续合作。”大众也证实了该报道,但只说了“我们合作关系下的活动已经结束。” 
发表于 2019-06-13

Uber在华盛顿发布新一代沃尔沃自动驾驶汽车-XC90

据路透社报道,Uber将在华盛顿发布最新一代的沃尔沃自动驾驶汽车。Uber表示,新生产的XC90将由沃尔沃汽车(Volvo Cars)在瑞典组装,并配备方向盘和制动踏板等人类控制装置。但Uber同时指出,该车还将配备专为计算机(而不是人类司机)设计的转向和制动系统。 之前,Uber已经购买了约250辆沃尔沃XC90 SUV,并对其进行了改造,以供自动驾驶使用。 Uber先进技术事业部(ATG)负责人埃里克·梅霍夫(Eric Meyhofer)称,这些新车(内部代码为“519G”,数年前就开始研发)更安全、更可靠,将“很快”取代Uber车队中的旧车。 梅霍夫还透露:“这些新车即将投产。”新车还配备了多个
发表于 2019-06-13
Uber在华盛顿发布新一代沃尔沃自动驾驶汽车-XC90

汽车的“第二引擎”车联网,将如何推动未来汽车发展?

报告,保证车辆实时安全。  另一方面,安吉星APP提供的蓝牙虚拟钥匙分享车辆功能颇为值得一提。试想一下,未来的完全自动驾驶汽车,不仅能满足你的日常通勤,还能在其余时间接入网约车平台,帮你赚钱。这时候,通过蓝牙钥匙分享给你的“用户”就能帮助其实现快速用车,可以极大的提升用车体验。  此外,安吉星APP还具备远程车辆控制(包括远程开启空调、远程启动发动机等),以及打通线下应用场景的智能家居互联功能。不难看出,安吉星正意识到未来的互联将不局限于车内,而是打破服务壁垒,以车为媒介让用户更好的与外界事物互联。  其实,对于未来的出行场景也是一样,车企们为之努力的原因不仅是为了让科技更便利用户,更重要的是让用户感受到科技带来的温暖。这种温暖或体
发表于 2019-06-12
汽车的“第二引擎”车联网,将如何推动未来汽车发展?
热门资源推荐

小广播

相关热搜器件

电子工程世界版权所有 京ICP证060456号 京ICP备10001474号 电信业务审批[2006]字第258号函 京公海网安备110108001534 Copyright © 2005-2019 EEWORLD.com.cn, Inc. All rights reserved