作者:电子创新网张国斌
随着人口老龄化和劳动力成本上升,智能机器人在制造业、服务业、医疗等领域的应用需求不断增加。它们能够承担一些繁重、危险或复杂的工作,提高生产效率和服务质量。同时,随着人们生活水平的提高,对智慧机器人的需求也在不断增加。
那么,智能机器人到底需要什么样的SoC?今天,致力于推广中国芯的的第十四届松山湖中国 IC 创新高峰论坛在东莞松山湖隆重开幕,本次论坛聚焦“智慧机器人”主题,来自本土的10家与智慧机器人相关的IC公司,将推介最新的产品技术信息。
在上午的论坛上,合肥酷芯微电子有限公司联合创始人、CTO沈泊分享了智能机器人SoC 需求并推介了该公司感算一体的智能机器人SoC AR9481。
机器人主控芯片有哪些核心诉求?沈泊认为主要有四点:一是要有丰富的传感器接口、要融合可见光、热成像、麦克风、激光雷达等;二是较高的数据处理能力、三是要有较高的AI算力,要能实现目标跟踪、识别、深度图提取、图像分割等支持NLP及视觉大模型。四是较低的系统功耗,功耗3-5W以内最佳。
他表示AR9481是酷芯微电子针对机器人应用的第四代智能SOC智能SoC,它具有高CPU主频、高NPU算力、多光谱传感器感知能力、宽电压工作范围、强CV处理能力和低功耗的特点。“AR9481功耗比较小,对于典型应用功耗限制在1W,完成一个完整的机器人的应用,这样对我们用户的整机开发就非常有用。”他指出,“该芯片已经进入到量产阶段,客户已经追着我们下订单了,差不多有大几十万颗的订单在手,到9月份就开始大批量量产。”
他表示,考虑到机器人应用需要可靠性,他们在这个芯片里面包括了接口运行可靠性。
他表示AR9481不仅有强大的算力,而且有非常强的感知能力,该芯片首先是有非常强的可见光的感知能力,可以支持4-8K的视频,视频输入可以最高6路,甚至可以超过10路的,2D、3DHDR是比较常规的操作,除此之外,还有专门的AI ISP能力,芯片可以做AI超分、降噪、AI视频提亮,会有一整套的完整解决方案。
他举例说上图左边是用AIISP处理过的,右边是普通的,可以看到低噪度下图像几乎看不到。而AR9481有较好的图像和色彩还原能力。
上图是AR9481的核心参数,CPU为4核@2.4GHz,DMIPS在20K以上,NPU是业界集成度最高的8TOP等效算力;ISP是可见光/热成像ISP;DSP 为专用视觉处理加速器@1.2GHZ,支持必/SGBM深度图,工艺是12nm。最低工作电压可以到0.65V。
我们对热成像类的产品,分辨率的支持也做了全分辨率的支持,从非常低成本的120的分辨率,到1920的分辨率,都可以得到完整的支持。我们也功耗做的非常低,比如说做1080最高分辨率的红外的ISP,我们功耗可能叫100毫瓦量级可以搞定,在全球也是比较领先的。
他特别强调了该芯片在热成像领域的能力,该芯片热成像能力强,而且可以做到把可见光和热成像画面叠加起来,叠加以后有更好的分辨力(左图)。
据他介绍,AR9481 NPU是公司第四代的NPU,该芯片集成了8TOPS算力,可以满足很多机器人需求。也可以支持INT8、INT16的混合精度计算,同时也支持语音和视觉大模型,“可能有人觉得扫地机器人跑什么大模型呢?但是这个已经有非常多客户就提出这个要求,包括最近上市的一些产品,上面已经跑了视觉大模型,是用酷芯微上一代的芯片。”他指出,,可以在一个端侧的芯片上支持起来。
他指出AR9481支持很多典型的应用场景,如扫地机器人,一颗芯片里面要支持SLAM的导航、定位,双目深度图提取、避障、目标识别、语音大模型,“有些客户也希望跑一些语音大模型。包括在无人机的应用,无人机的应用首先影像输入的要求比较高,基本是4K起步。避障可能是4-6路视觉避障应还跑光流、多光谱影像支持等。”他举例说,“深度图提取有很多流派,一种是用传统的SV的方式来提取深度图,还有一种为了更高的精度用,我们的芯片是这两种模式都支持,如果对精度有极限需求,我们建议用深度学习的方法去做,我们认为机器人应用需求比较多元化,不是单独某一个方案就可以满足,需要融合其他技术。”