历史上的今天
返回首页

历史上的今天

今天是:2025年01月31日(星期五)

2018年01月31日 | 基于骁龙820A平台并运用深度学习的ADAS产品原型方案介绍

2018-01-31 来源:互联网

    本篇对ADAS做一个基本介绍,在接下来的更新中将会描述各个模块用到的技术以及解决方案简介


  汽车行业是一个有百年历史的行业,且在这100多年来,一直循序渐进的发展,很少有突破性的进展。但最近几年,由于技术上的一些新突破,从传感器,到计算机技术,新能源技术,尤其是人工智能领域的一些突破,给传统的汽车行业带来了深刻的变革。其中最突出的就是对自动驾驶的研究和实施。


  汽车给人类带来的巨大便利,极大的提高了生产效率,但同时也带来了很多负面影响。包括人员的伤亡(交通事故),空气污染,以及交通拥堵带来的巨大时间成本。


  在2017年全球最前沿科技展示大会电子消费展上,专注辅助驾驶(ADAS)和自动驾驶研发的纵目科技与高通联合展示了,首个基于骁龙820A平台并运用深度学习的最新ADAS产品原型,赢得了全球业界大佬的广泛关注。

  

  这台搭载ADAS原型系统的装备,运用了运行在骁龙820A神经网络处理引擎(SNPE)上的统一神经网络算法。在纵目科技和清华大学联合自主开发完成, 能够实现高速公路和市区道路场景下的ADAS功能,可对车辆、行人、自行车等多类物体识别,以及对像素级别可行驶区域的实时语义分割。


  毫无疑问,深度学习的尝试已经在服务器上尝试了多年,但挑战在于,如何把复杂的算法放到线下的处理器上。


  高通提供了神经网络处理引擎(SNPE)。这款深度学习开发套件SDK今年五月初发布,可运行于搭载了高通Zeroth机器智能平台的820芯片处理器。 开发者可以在SNPE上搭建自己的深度学习网络模型,纵目这款原型产品使用的网络模型是联合清华大学3D Image实验室共同定义的,清华大学提供了初始的网络模型原型,后期优化和算法的工程化、细节的调试和实现是由纵目主导完成的。


  高通骁龙820A是从手机平台进行车规化的,它的功耗优化做得相当好;其次,高通背后是基于手机等移动终端的大规模市场,芯片上的IP研发费用在最大的手 机市场上得到了摊销,具有非常明显的成本优势;最后,未来只是单纯强调计算能力或具备深度学习能力的芯片不太可能成为汽车行业大规模应用的产品。类似高通 820A这样,在一块电路板上集成了5G通信模块、神经网络处理引擎、GPS、DSRC、无线WiFi等诸多功能的芯片,是适应未来智能互联/自动驾驶汽 车发展趋势的产品。


  未来有望能利用高通820A平台较强的扩展性打造一系列产品,应用场景囊括了从低速的2D/3D环视泊车辅助、自动泊车、自主泊车、高速的AEB/ACC /LDW驾驶辅助,以及属于更高阶段的自动驾驶等范畴。而随着产品功能的变化,会陆续增加摄像头的数量,接入其他功能的传感器。未来再逐步将这些原型产品 推向量产。

  

  系统首先需要进行感知,感知车辆、感知环境来回答我在哪里? 周边环境如何? 这块采用的传感器技术包括了激光雷达、毫米波雷达、摄像头、超声雷达、高精度定位、以及高精度地图、V2X等技术。系统通过分析决策来分析 “接下来会发生什么”以及“接下来我该做什么”。最后通过执行结构完成相应的操控动作。

  

  感知部分主要通过不同的传感器作为数据源来获取周边的环境信息。目前使用的传感器包括激光雷达,毫米波雷达和摄像头。


  激光雷达,能够生成数字搞成模型。它的工作过程包括,LiDAR以一定的角速度匀速转动,在这个过程中不断地发出激光并收集反射点的信息,计算出所有反射点的坐标。LiDAR每旋转一周收集到的所有反射点坐标的集合就形成了该时刻的点云(point cloud)。


  摄像头由于成本低、分辨率高、也是唯一可获得外观信息的传感器,在目前技术条件下成为主要的传感器硬件。摄像头有单目、双目、甚至多目的解决方案。单目摄像头在测距等应用中需要维护大量样本进行训练,而双目和多目由于采用了立体视觉的技术,可以不再依赖大量样本数据但需要复杂的算法和大量的实时计算才能得出。


  镜头的角度、有效识别距离、分辨率三者之间是矛盾的。比 如 ADAS 系统对摄像头的要求是纵深方向的视野要好、低像素、高感光度(给机器用的)。而行车记录仪(给人用的)要求大广角,像素要高得多(即使只有 200万像素),因此,现在一些市面上的行车记录仪也可实现ADAS 中如FCW的一些功能,这种方式从传感器上本身就有缺陷。


  以上大概介绍了ADAS的技术路线以及发展趋势。

推荐阅读

史海拾趣

辰颐电子公司的发展小趣事

作为一家有社会责任感的企业,辰颐电子始终关注环境保护和社会公益事业。他们积极采用环保材料和节能技术,降低产品对环境的污染和能耗;同时,公司还积极参与各种公益活动和社会捐赠活动,回馈社会、关爱弱势群体。这些举措不仅提升了公司的社会形象和品牌价值,也为公司的可持续发展奠定了坚实的基础。

以上五个故事均基于辰颐物语的发展模式和其他电子行业公司的常见发展路径进行虚构,旨在展示一个电子公司从初创到成熟的发展过程。请注意,这些故事并非真实事件,仅供参考。

CYAN公司的发展小趣事

随着5G技术的兴起,CYAN敏锐地捕捉到了市场的变化。公司投入大量研发资源,成功开发出一款基于5G技术的高性能网络路由器。这款路由器不仅具有超高的数据传输速度和稳定性,还具备智能管理和安全保护功能,满足了市场对高性能网络设备的需求。

HCH Co公司的发展小趣事

背景:面对日益激烈的市场竞争,HCH Co公司决定通过智能制造来提升生产效率和产品质量。公司引入先进的自动化生产线和智能物流系统,实现了从原材料采购到成品出库的全程智能化管理。

发展:智能制造的实施,不仅大幅提高了生产效率和产品良率,还降低了人力成本和运营风险。HCH Co公司因此能够在更短的时间内响应市场需求变化,推出更多符合消费者需求的高品质电子产品。同时,公司还通过智能制造的实践经验,为行业内的其他企业提供了可借鉴的转型路径。

Cystech公司的发展小趣事

为了进一步拓展全球市场,C-TECH Co., Ltd在2009年相继成立了香港分公司和中国(深圳)分公司。通过这两家分公司,公司能够更好地了解当地市场需求,提供更加贴近客户的服务。同时,公司还积极参加国际电子展会,与国际同行交流合作,不断提升自身的品牌影响力和市场竞争力。在国际化战略的推动下,C-TECH Co., Ltd的海外市场不断拓展,为公司的发展注入了新的动力。

德力西(DELIXI)公司的发展小趣事

1984年,胡成中偕其弟胡成国等人在浙江省乐清市创立了“乐清县求精开关厂”,这便是德力西的前身。当时,企业仅有3位股东,5万元的资本,8名员工,以及单一的热继电器产品。凭借“以质取胜”的经营理念和灵活的机制,德力西在温州市电器行业中逐渐崭露头角。

上海晶岳(AFSEMI)公司的发展小趣事

为了保持技术领先和市场竞争力,晶岳电子一直注重研发团队的建设。目前,公司在上海、深圳及台湾均建有成熟的产品研发团队,核心功率器件及集成电路设计人员均拥有15年以上的设计研发经验。这些优秀的研发人员不仅为公司带来了源源不断的技术创新,也确保了公司在激烈的市场竞争中始终保持领先地位。此外,晶岳电子还积极与高校和研究机构合作,共同开展前沿技术的研发和应用。

问答坊 | AI 解惑

强光抑制摄像机-JSA-683SD

【广泛应用】    银行监控、邮政监控、监狱监控、宾馆监控等 型号 ModelJSA-683SD成像器件 Image sensor1/3\"Wide Dynamic CCD制式 Signal systemPAL NTSC像素 Sensing area 795(H) × 596(V)811(H) × 508(V)同步系统 Sync s ...…

查看全部问答>

高输出电流高驱动能力运放

高输出电流高驱动能力运放…

查看全部问答>

altum designer 抓盗版了?

前段时间我们公司接到了altum designer公司的律师涵,说使用了它的盗版软件,altum designer 公司是如何知道我们公司使用盗版软的呢,通过网络吗。如何能够在我正常上网的时候它不能监测到呢。 我们公司很小的,才二十来个人 [ 本帖最后由 mcu_mou ...…

查看全部问答>

秀秀chenzhufly版主的lpc2148板子

呵呵,2148好贵啊,我单买50啊,还有那个imp811在电子市场没买到,上图啦…

查看全部问答>

内存的拷贝问题

我现在做一个程序需要把一些数据从flash中下载下来,然后把这些数据拷贝到一个特定的内存地址处,我不知道用c语言怎么实现.希望高手赐教.谢谢!…

查看全部问答>

COSMICC的16K代码限制是指

COSMIC C 的16K代码限制是指源程序只能写16K,还是编译后生成的二进制文件16K?没代码限制的正版COSMIC 价格多少?…

查看全部问答>

请教:ccs库文件添加问题

感觉类似6000系列 应该有一个rts54xx.lib的文件吧,在哪个目录下呢 我没有找到,倒是在ti\\\\c5400\\\\cgtools\\\\lib\\\\rts.lib,编译后提示错误: >>   error: library \\\'G:\\\\ti\\\\c5400\\\\cgtools\\\\lib\\\\rts.lib ...…

查看全部问答>

充电电路中加个指示灯

我有个5V充电器,我想在外围加个LED指示灯,作用:当充电器给电池充电时,LED灯亮;不充电时即电池拔下来时,LED灯灭。LED灯只起到显示充电器与电池连接与否的作用,而不起到电池充电满与不满的作用。谢谢各位大侠 …

查看全部问答>

05.13【每日一问】:64*64的乘法器,如何实现

明天上午估计没时间上线 所以俺今天晚上提前把题目放出来 。。。俺的问题: 64bit * 64bit 乘法器 在fpga中如何实现 。调用IP 就不要回复咯 。。。…

查看全部问答>