时间:2018年4月26日下午
地点:中国国际展览中心7号馆7030
余凯:各位朋友大家下午好,感谢大家关注地平线新产品介绍。
这次地平线在国内面向公众展出新一代面向自动驾驶的征程处理器,以及它的计算平台。
![](http://www.shujubang.com/UpLoads/Special/File/2018_05/636609554787894460.jpg)
最近大家越来越关注芯片的事情,因为我们在上层的应用无论做得多好,都要在处理器上面去计算。我们思考自动驾驶,无论在上层软件怎么做,但一定要有中国芯。地平线是最早意识到不仅要做软件,而且要做芯片,要做处理器。这是我们最新的成果,去年发布了征程1.0,面向ADAS;今年发布的是征程2.0的处理器,是面向3级及以上的自动驾驶。
这样一个处理器,如做复杂的视觉计算,可以实时去处理4路视频,包括做检测分割。我们在展台上展示的是奥迪车,是环视系统,大家可以互动式去体验,即在这样一个场景里,非常复杂的人群,能够做实时计算,而且不需要水冷系统。在场外,也邀请各位朋友去实车体验,有四块处理器,所构成整个计算系统,这个计算系统同时实时计算13路高清视频,做非常精确的行人、车道、车辆、道路、道路边界以及树木、建筑等,可解析的目标类型多达20类。
最近大家都在讨论中国公司依赖美国芯,怎么办?实际上,地平线已经静悄悄地做到了美国公司用中国芯。美国公司做4级自动驾驶是世界上最领先的,其实现在有的美国公司用的不是美国公司的处理器,而是地平线的处理器。这方面的进展,我们会在今年下半年向大家分享。
希望大家记住中国有一家企业,在三年前就开始布局人工智能处理器。而且我们一直认为人工智能自动驾驶处理器是整个人工智能产业的珠穆朗玛。因为,它对数据实时计算的要求、对延迟的要求,对功耗的要求、对数据处理能力的要求等等。未来,自动驾驶有冗余的传感器,实际上是四个轮子上面的大数据中心,需要海量的计算,所有要求都是最难的。如果去攻克自动驾驶的处理器,拿下人工智能技术的珠穆朗玛,我们在人工智能其他方面的应用实现,就会有一种一览众山小的感觉。
地平线去年在台积电大规模流片第一代处理器,我们在加快步伐,今年人工智能处理器在智慧城市的安防视频分析,以及在自动驾驶的海量计算,在这两个赛道上,我们会大规模推进商业化落地,大家会越来越多地看到地平线的产品,会越来越多地看到地平线的Horizon-inside。
地平线成立时,2015年6月8日,当时第一次接受采访,我们就喊出口号:要做机器人时代的Intel,要让每一辆汽车、每一个智能摄像头,更多的产品都用Horizon inside,这是地平线的小心愿。其实这也是中国科技产业真正打造核心创新力、竞争力的关键一步。
无论现在外卖、社交视频多么吸引用户,如果背后没有一个中国芯,一切都是空中楼阁。美国可以一纸令下,让一个大企业退出,这是在中国整体繁荣表面下所掩盖的一个非常骨感的现实。
现在我邀请大家去体验现场的展示,在奥迪上依靠我们的处理器对周围场景密集人群实时的感知,你们能够感受到人工智能算力在今天所能够达到的成果,也邀请大家有时间可以到我们外面绕着园区跑的车上实时感受一下。
谢谢大家!
![](http://www.shujubang.com/UpLoads/Special/File/2018_05/636609554990264320.jpg)
提问:今天展示Matrix平台上面应用的芯片是不是FPGA芯片+BPU的算法?可以这样理解吗?
余凯:对,这一代Matrix1.0,目前给大家展示的是基于英特尔FPGA/BPU,今年8、9月份,我们就会流片自己的征程芯片。这是样片,样片已经给大家看到了,在真实场景里的表现,它的功耗已经做得非常低,我们的BPU架构使得人工智能的计算更高效。
提问:我之前看到Matrix平台可以进行Google识别,不知道Google识别是FPGA达到的能力,还是地平线的BPU的算法?
余凯:是BPU处理器架构以及算法。
提问:地平线采用的是软硬一体化方案,以后主机厂用了地平线芯片以后,他们自己还需要算法团队吗?
余凯:好问题,我们会打造交钥匙的软件、硬件,包括上面的算法都会提供。但是我们是一个开放式平台,主机厂有自己的算法团队,在我们工具链和开发平台上也可以去开发他自己的算法。
提问:特斯拉之前用的Mobileye芯片,特斯拉之前有自己的算法团队?
余凯:对,特斯拉有它自己的算法团队,但是它的算法团队一直存在一些问题,今天早上我听说又有一个算法负责人离开了。
提问:征程1.0通过台积电流片,现在主机厂跟合作厂商进行协同开发的模式是什么样的?
余凯:目前这次展示的系统是跟奥迪合作开发,面向中国路况的4级自动驾驶。我们有很多合作伙伴,国内有一些合作伙伴,譬如我们跟长安在合作。我们跟国外一个大客户在合作,在国外部署了上百辆自动驾驶汽车。
提问:之前看到你们已经在做特定场景下的自动驾驶技术,现在有没有具体场景或合作项目?
余凯:因为地平线是做处理器平台的,并不是做自动驾驶汽车的,所以我们是通过与合作伙伴的合作,在他们自动驾驶汽车里面用我们的处理器平台。
提问:处于数据收集阶段还是预研项目还是实际商业应用?
余凯:三种都有。1. 与合作伙伴一起,通过我们的处理器平台,同时大量收集数据。2. 合作伙伴用我们的处理器平台去开发Demo车。3. 合作伙伴用我们的处理器去做运营测试,试运营。我认为试运营这个定义并不是十辆、二十辆,一定是上百辆的车在路上跑,这才叫试运营,否则就是Demo。目前这三种模式都有。
提问:局限于特定场景,还是大规模普通路况?
余凯:基本上是大规模的普通路况。
提问:你们在特定场景下有没有重点,还是不去限定使用场景?
余凯:去年我们在上海汽车城创新港发布了第一代全自动自主泊车,今年会做第二代,那是我们比较亲力亲为去做特定场景下的事情。
提问:今年荣威发布ERX5,支持自主泊车,最后一公里自己找车位泊车进去,这个技术你们现在做了吗?
余凯:我们在做。目前我们跟上海创新港汽车城合作。
提问:车位方面信息呢?
余凯:厂端开发的话,是同济大学的交通学院。
提问:你们在做智能安防摄像头,基本上你们已经入侵海康威视地盘了,海康威视技术去做汽车智能驾驶,应该也没有太大的技术门槛。有消息说他们已经在做智能驾驶的产品了,你们有什么应对措施,或如何应对海康这种量级公司的挑战?
余凯:我们不会去做这种摄像头,我们做摄像头是因为做示范,核心商业模式是卖处理器。
提问:做摄像头还是采用合作方式,把你们的芯片放进去?
余凯:对,这是我们的平台商业模式。比如做车载自动驾驶处理器,对谁都不容易,所以不存在你做安防做得很好,做车就容易,其实对谁都不容易。对于做全自动驾驶汽车,这是全球的挑战,对美国厂家也不容易,对谁都不容易。
提问:首先恭喜地平线,恭喜余博士,又有新的进展。我们是做智慧城市的,余博士心目中人工智能下的未来城市会是什么样子?
余凯:我觉得未来城市里让我最兴奋是两点:1.有很多实时的视频处理,让车流、人流都得到数据化,整个管理能够更加高效。2.交通运输能够在自动驾驶场景下更加高效,拥堵更少。这两点是让我最兴奋的,但是这两点其实也有关系,如考虑自动驾驶的话,自动驾驶处理器是车端实时计算,通过复杂的十字路口时,实际上是需要厂端指挥跟调配的,就像现在的机场需要塔台一样。比如十字路口的先行权,谁先走?实际上需要也一个智慧城市的系统来指挥。如全自动自主泊车,一方面有自动驾驶的部分,另一方面把这个车位分配给谁,这里面要有一个厂端的指挥调配。
地平线现在做的一个是面向智慧城市的安防监控处理器,一个是面向自动驾驶的处理器,但这两个处理器在未来智慧城市里会形成人工智能的两个支点,一个是在车端,一个是在厂端,把车流、人流全部都有机、高效组织在一起,这是我所构想的,也是为什么地平线做的人工智能处理器其实是未来的智慧城市、智慧生活非常重要的东西。
![](http://www.shujubang.com/UpLoads/Special/File/2018_05/636609555136631905.jpg)
主持人:现在算法负责人黄畅博士也到了现场,给大家介绍一下征程2.0处理器产品,关于技术方面的问题,大家也可以问他。
黄畅:地平线于去年年底完成的第一代处理器,用于后装ADAS系统,称之为征程1.0。在这个板上有很多小器件,其中包括斜放着的处理器,旁边是一些其他的辅助存储相关东西。这么一个小的板子可以很容易集成到现有智能后视镜或各种各样的汽车后装市场,可以去完成非常丰富的感知,尤其是基于物体感知的任务,如做检测、跟踪、属性抽取,还有一些识别类型的任务,可以满足许多后装的L0或L1、L2级别ADAS系统的需求。
这里的实时Demo,奥迪车上面有4个摄像头,在车里放着一块Matrix1.0处理板,就是部署上我们BPU架构的处理器,这个处理器能够实时处理128×720差不多100万象素的画面,非常细致地对每个象素进行标注。在这个场景里,我们只标注出人和非人的背景,如果大家有时间可以去实车上看,可见到对场景中20多类物体进行了实时处理分割,告诉你哪个象素是天空还是地面,还是建筑,还是树木,是人还是车。这是一个非常丰富语义的表达,而这些表达与通常所说的感知结构化结果,对于自动驾驶的预测、决策、规划控制都是事关重要的信息。
这块板子是我们自己设计的一整块板子,内部叫做Matrix平台,在这个风扇下面是英特尔A10-660FPGA,这块FPGA规模并不是很大,坦率来说只是一个终端级别的FPGA,只用终端级别的FPGA,就可以同时处理4路的视频。我们在场外的车上,一共有四块这样的Matrix板子,处理13个摄像头的输入结果,对它进行各种各样的分割、检测、对车子朝向进行三维的姿态分析。目前到了可以产品化生产的状态。
与此同时我们正在紧锣密鼓研发的,已经进入尾声的第二代征程处理器,就是去流片的一颗SOC芯片也已经接近完成,正常应该会在年底拿出来。那样一颗芯片相对于这个FPGA板来说,成本和功耗都有大幅度下降,而性能却有显著提升。
现在这个板子已经获得了很多人的青睐,我们走访很多客户,尤其是看到实车演示时大家都很惊讶,因为之前大家只能在一个很大的200、300W的GPU上看到那样的结果,想不到这样一个中等规模FPGA上已经能够实现这种效果。
地平线自动驾驶计算平台Matrix及征程2.0处理器亮相北京车展
4月25日至29日,2018北京国际车展在中国国际展览中心举行。会展期间,众多国内外汽车厂家展出了搭载自动驾驶技术的全新车型。作为嵌入式人工智能全球领导者的地平线(Horizon Robotics)也在26日的媒体开放日发布了新一代自动驾驶处理器征程2.0架构,以及基于征程2.0处理器架构的高级别自动驾驶计算平台Matrix1.0。
在车展现场,地平线搭建了模拟交通环境进行实时演示,让参观者更直观地体验Matrix1.0在自动驾驶方面的功能,吸引大量观众驻足体验。在活动现场,地平线创始人兼CEO余凯介绍了地平线最新的处理器产品以及未来规划。
![](http://www.shujubang.com/UpLoads/Special/File/2018_05/636609555324647215.jpg)
自主开发Matrix平台 最大化嵌入式AI计算性能
本次亮相的Matrix1.0,内置地平线征程2.0处理器架构,最大化嵌入式AI计算性能,是面向L3/L4的自动驾驶解决方案,可满足自动驾驶场景下高性能和低功耗的需求。依托地平线公司自主研发的工具链,开发者和研究人员可以基于Matrix平台部署神经网络模型,实现开发、验证、优化和部署。
据介绍,在高性能图像感知方面,Matrix1.0基于稀疏和定点神经网络,可每秒处理720P视频30帧,并支持4路视频的同时输入和实时处理;实现20种不同类型物体的像素级语义分割,能够精准识别每一个像素点的类别;同时还可实现三维的车辆检测,识别场景中的深度信息,进行距离的识别和判断;此外,Matrix1.0还能进行行人骨骼识别,判断行人朝向,从而进行行人运动轨迹预测。
由于Matrix1.0可支持20类不同物体的像素级语义分割,因此能够让汽车更好地理解复杂场景,特别是可以应对高度遮挡、快速响应场景下的无人驾驶挑战。比如当行人或者车辆被路边的树木或者其他物体遮挡时,通过像素级的识别,即使只检测到一部分,也能实现正确识别,从而做出响应。
目前,Matrix1.0平台在Cityscapes评测集下IoU分数全球领先。在实现像素级语义分割、三维物体检测、人体骨骼识别等业内领先功能的同时,仍能在31W的低功耗下运行。由于功耗低,该平台不需要水冷系统,已经达到嵌入式自动驾驶应用和产品化水平。
新一代自动驾驶芯片持续研发 更多量产与合作即将开启
本次车展地平线展出的Matrix1.0平台基于征程2.0处理器架构。地平线相关负责人表示,目前其新一代。自动驾驶处理器——征程2.0正在研发中,而未来在软硬件的进一步协同优化后,征程2.0处理器将可实现更强大的自动驾驶性能。
与此同时,征程1.0面向智能驾驶的ADAS产品——地平线星云也即将量产上市。该产品能够同时对行人、机动车、非机动车、车道线、交通标志牌、红绿灯等多类目标进行精准的实时监测与识别,准确率大于99%,可满足车载设备严苛的环境要求,以及复杂环境下的视觉感知需求,支持L2级别ADAS功能。
而此次展台上还展出了地平线正在和奥迪联合研发的高级别自动驾驶原型车,不久前奥迪驻北京发言人约翰娜·巴斯(Johanna Barth)在接受彭博社采访中公开表示,奥迪已经为中国项目挑选地平线公司为合作伙伴。据悉,双方将在自动驾驶技术研发与产品化等方面开展密切合作,共同推动高级别自动驾驶的研发和落地,特别是在中国市场的本地化落地合作。
![](http://www.shujubang.com/UpLoads/Special/File/2018_05/636609555429435430.jpg)
此外,地平线正在和博世等国内外的顶级Tier1,以及长安汽车等知名OEM厂商合作,也是中国唯一在全球四大汽车市场(美国、德国、日本和中国)都同顶级汽车Tier1s和OEMs建立合作关系的智能驾驶创业公司。
以“中国芯”创造人工智能“中国方案”
作为全球领先的嵌入式人工智能核心技术和系统级解决方案提供商,地平线以顶尖的研发和落地能力,树立起“算法+芯片+云”的行业标杆。为智能驾驶、智能城市、智能商业三大场景的行业客户提供高性能、低功耗、低成本、开放式的嵌入式人工智能软硬结合解决方案。
目前地平线已在北京、南京、上海、深圳四地建立了研发中心,完成了由英特尔投资领投,嘉实投资、中国建投、理成资产、混沌投资、云晖资本以及晨兴资本、高瓴资本、双湖资本和线性资本等新老投资人共同参与的总额超过一亿美金的A+轮战略融资。
自动驾驶是未来汽车行业的发展方向,也是下一阶段的行业竞争焦点。在这样的大趋势下,地平线的中期目标是:到2025年,实现三千万辆汽车搭载地平线的自动驾驶BPU,从而打造中国自己的自动驾驶“芯”时代。