第二届“光”+智能驾驶技术高峰论坛于2019年9月6日举办，本次论坛邀请了政府部门、咨询机构、整车企业、激光雷达制造商、红外夜视、摄像头等传感器重点企业及知名科研院所等到会研讨，共话光与汽车电子行业市场前景。以下为瑞萨电子香港有限公司汽车电子销售中心汽车电子应用技术部部长林志恩现场演讲实录：

瑞萨电子香港有限公司汽车电子销售中心汽车电子应用技术部部长林志恩

大家下午好！首先感谢盖世汽车邀请，今天和大家分享瑞萨电子在ADAS和360环视的解决方案。

可能有的人不知道瑞萨电子是什么样的公司，其实我们是一家专门做半导体的公司，由于8位、16位、32位的单片机还有SOC，瑞萨在这个行业很长时间，基本上市面上的汽车平均一辆车用上十几片瑞萨的单片机。

瑞萨有一个品牌Renesas autonomy，针对自动驾驶推出相关的产品都用Renesas autonomy来推出，整个看起来是自动驾驶的系统，瑞萨在从ADAS到自动驾驶的平台让我们有不同的产品来做，今天会针对多路摄像头的360环视系统的介绍，也可以做雷达或者激光雷达的传感器的感知。或者做车联网这块的车辆定位或者交通信息的传输。中间主要是做自动驾驶信息的收集然后做融合和判断。最右边是做车辆控制。瑞萨在自动驾驶和ADAS有SOC、R CAR还有单片机做相关的应用。

做ADAS或者自动驾驶应用，大家越来越关心的就是功能安全，你做的车辆是不是很安全，安全也要考虑到主芯片能不能达到ISO26262的要求，瑞萨作为ISO26262的创始会员，2008年我们已经推出单片机满足功能安全。2011年我们推出满足ISO最高级的功能安全的单片机，2013年我们把经验用到SOC上，R CRA是把功能安全做到SOC上。目前我们在推的R  CAR第三代完全可以满足功能安全ISO26262 ASILB等级的要求。

这个更清楚一点，汽车应用可分为汽车控制，从动力系统、图形仪表到底盘安全或者车身控制，RH850都可以满足不同不同的功能要求。R CAR做ADAS或者车联网，这一系列的产品可以做到ASIL B的功能要求。R CAR SOC产品的蓝图，目前R CAR H3是最高端的。针对ADAS应用的有两颗芯片，R CAR的V3M和V3H，我会针对它应用在360的应用方面做详细的介绍。

这是360环视的应用，你可以把它分成低端入门级的应用或者高端的，有需要在豪华级的更高端的。瑞萨R CAR可以针对不同的应用来满足市场的需求。比如简单的360环视可以选择R CAR V3M，支持四路百万象素的高清数字摄像头的输入。也可以做到全高清的输出。高端一点的可以用V3H，这颗可以支持到200万象素的高清环视。有的可能说要更多功能的可以选择第三代R CAR各种产品作为匹配。

这是我们在成本有优势的360的环视系统，我们R CAR V3M，你可以看到芯片用的是双核A53，还有R7，可以实现功能安全，可以跑实时的操作系统。支持四个摄像头的输入，把ISP也集成在芯片里面。芯片的设计得到验证都可以满足功能安全和网络安全的要求。V3H比较高端，最多支持8路摄像头输入。刚才V3M的功能不够客户的要求，可以选择V3H。可以把软件直接升级到V3H上面，芯片可以支持一个神经网络的硬件IP在里面，有些特殊的IP硬件加速器在里面。

做高端的环视系统，也可以满足L3级别的信号的采集和冗余。V3H因为集成了有些特殊的加速器，可以做一些深度学习、人工智能相关的应用。最右边有密集光流，还有一些立体分杈，物体的分类，用这个芯片来做识别或者神经网络的算法，可以满足除了环视或者前视，可以做到满足L3级别的要求的芯片。

因为做ADAS或者自动驾驶这块，大家要求计算机视觉的处理，神经网络的算法的要求越来越高，瑞萨在芯片开发的时候会考虑到把市场的需求、功能做上去。你可以看到上面会加上特殊的硬件的加速器，有些可编程的计算机的视觉处理。这些加速器可以减少浮点的运算，可以用上最新的汽车级ARM的核。再用最新16纳米的工艺，工艺越新，功耗越低。

瑞萨在ADAS或者自动驾驶的产品方案提供给客户什么价值？瑞萨作为汽车行业长久的品牌是大家值得信赖的，我们除了提供芯片也会提供底层的软件驱动，还有自己做的开发工具和生态系统，或者我们有R CAR联盟，R CAR联盟是合作伙伴基于R CAR产品开发相关应用。整个产品方案客户可以灵活选，你要用整套方案可以和我们的合作伙伴合作，他们可以提供方案给你，或者你只需要芯片和工具从头自己开发，整个来讲是一个白盒子，很灵活的符合市场的不同客户的需求。

刚才提到我们芯片集成ISP，ISP集成到芯片的好处，大家知道做摄像头模组，目前大部分都是ISP的芯片集成到摄像头模组里面。摄像头模组尤其是车规模组会有尺寸限制，另外还有功耗。如果把ISP集成到SOC上就不需要考虑模组的尺寸的大小，可以把ISP的芯片省掉，ECU和摄像头模组通讯的控制可以减少通信口。ISP集成到芯片可以对应目前大部分的摄像头的传感器，可以灵活调曝光和解析度。

ISP集成在SOC的好处是可以集中控制，尤其是做环视360的话，每个摄像头的参数都不一样。环视四个摄像头，四个摄像头的参数都不一样，每个摄像头单独调就比较困难，如果集中到SOC上统一调四个摄像头，这样就会比较灵活方便。出来的效果会更好，就不会有阴暗差别，更容易调。

瑞萨R CAR的产品在视频输入上，我们支持不同的摄像头从200万象素60帧、100万象素的30帧、200万象素30帧，R CAR系列都可以支持不同的象素要求，通过不同的芯片。视频输出支持大部分的显示格式，比如超高清的4K30帧的输出的解析度，R CAR第三代也可以支持，或者是高清的1080P、720P或者是数字的RGB都可以，所以整个R CAR比较灵活，可以满足不同客户的需求。

大家刚才看我们的框图可能有疑问，一般做360环视要有GPU，为什么我的芯片没有GPU？其实我们是用自己的硬件加速器叫IMR来做，IMR是我们自己IP，是一个硬件的IP在里面，可以专门用来做这些图像变形，尤其是像摄像头鱼眼光学的纠正或者做立体摄像头的调整。再做环视系统可以做一些虚拟化的摄像机的效果。IMR的硬件很简单，可以通过软件的编程来改变摄像头显示不同的位置，这个不需要占用CPU的任何资源，因为它是独立的硬件IP，所以整个系统不需要占用CPU的资源。另外它是通过RAM和RAM之间直接处理，所以环视相关的视频处理会有一定速度的优势。

环视的比较，你可以定义显示不同的角度，这些角度是固定的显示的模式。这样整个系统的功耗都会非常低，或者是任意角度，第二个需要显示的任意角度的图像出来，那它的功耗也跟GPU比相对比较低，如果芯片跑的是GPU，GPU本身的性能越高功耗就会越大。这是我们用IMR来做环视的优势。这是实际用V3M做环视的外围的框图，很简单，你可以看到左边一个芯片加上PMIC加上存储，右边那些是传统的车规通讯，可以连上以太网。整个360的系统看起来很简洁、很简单，整个开发出来就有成本的优势。

这是我们做的360环视演示的DEMO，360环视做的是百万象素的摄像头，高清视频的输出，你可以看到一开始就做调试，把摄像头做标定，可以显示不同的较的效果，看起来整个就很简单。

实际装车的效果（视频播放），这是我们和我们的合作伙伴做的装在实车的360环视。不用GPU，用IMR核做的环视效果，可以显示任意的角度。

目前客户很多在市场上用360能做什么，360能用在做自动泊车系统，R CAR这边做360环视系统做自动泊车有什么优势？因为芯片做了计算机视觉的加速器在里面，可以满足不同的应用需求，可能360环视要加上一些行人检测、障碍物检测，车道线检测相关的功能，很容易把这些功能加上去。另外我们这个芯片可以达到功能安全的要求。因为我们用了我们家的IMR硬件，已经是实现了功能安全。

目前GPU要实现功能安全还是有一定的难度。ISP集成到芯片的好处，除了整个系统的BOM可以降下来，可以对应支持目前市面上比较通用的摄像头传感器。功耗方面，我们跟传统的用GPU来实现360环视肯定是有优势在里面。另外R CAR V3H可以选不同的加速器，客户按照他们的需求选哪颗适合他们的芯片。另外在工艺生产方面，目前使用的是16纳米的生产工艺，下一代产品会继续用更新的，比如12、10、7纳米的工艺开发下一代的产品。

最后讲一下为什么选择瑞萨的产品，瑞萨的产品是一个开放还有值得信赖的品牌，目前我们有超过250家的合作伙伴，他们可以支持我们的产品提供方案，在创新方面我们会推出更多的高性能、低功耗的满足不同的汽车应用的产品。因为瑞萨在汽车行业已经做了很长时间，除了功能安全、车辆安全还有质量，一直都得到客户的信赖。

我今天的演讲到这里。谢谢！

敬请关注盖世汽车“第二届‘光’+智能驾驶技术高峰论坛”直播专题！

PC：http://auto.gasgoo.com/NewsTopic/205.html

移动：https://m.gasgoo.com/news/topic/205