对话爱芯元智副总裁史欣: 坚守初心,加速布局普惠AI新征程
【CPS中安网 cps.com.cn】
近年来,随着智慧城市建设加速,网络视频摄像头向高清化、智能化方向发展,IPC SoC芯片作为智慧城市管理芯片之一,也逐步成为主流的前端设备视觉芯片,在设备成像、视频压缩编码等性能层面发挥着决定性的作用。
作为AI视觉芯片研发及基础算力平台公司,爱芯元智半导体(宁波)有限公司(以下简称“爱芯元智”)持续深耕,专注于高性能、低功耗的边缘侧、端侧人工智能芯片开发。此次亮相CPSE安博会的新一代IPC SoC芯片产品,凭借领先行业水平的高画质、智能处理和分析等能力,备受业内人士好评。
“爱芯是第二次参加深圳CPSE安博会了。2021年CPSE安博会至今,爱芯完成了四代产品的迭代,在市场份额和客户层面也实现了一定的突破。”爱芯元智副总裁史欣对CPS中安网记者表示。
基于此,在CPS中安网记者展位走访和领导层的面对面交流之中,CPS中安网得以深度挖掘爱芯元智的产品进阶之路和普惠AI的精神内核。
01.多项产品加速迭代,助力黑光技术升级
回溯此前,在过去的四年时间里,爱芯元智已经完成了四代多颗芯片产品的研发和量产工作。
更重要的是,爱芯元智凭借着爱芯通元混合精度NPU和爱芯智眸AI-ISP两大公司自研核心技术,对视频码流进行结构化处理,从而实现智能分析和处理,提高芯片产品的能效,目前已在智慧城市方向大规模出货。
谈及爱芯智眸AI-ISP的技术原理,史总介绍,爱芯智眸AI-ISP通过AI赋能ISP Pipeline里的4个关键模块,如“HDR、3DNR、RLTM和Demosaic”等,通过AI训练的方式不断提升四大模块的性能,提升了芯片的集成能力。
与此同时,爱芯通元混合精度NPU则通过减少数据搬运,在一定程度上减小了内存墙和功耗墙的阻碍,提高整个NPU的效率,从而在端侧边缘侧面积、功耗受限的情况下,以更高的有效算力支持更多的智能算法,受到越来越多有大模型部署需求用户的青睐,并先人一步成为Transformer端侧、边缘侧落地平台。
在此背景下,2023 CPSE安博会期间,爱芯元智精选了超过20颗芯片产品进行展示,分别归属AI-IPC、数模混合、同轴高清RX、同轴高清TX、智能高清IPC五大类产品亮相,同时有多款全新技术方案同步在线演示。
在爱芯元智工程师的带领讲解下,CPS中安网对此次展品有直观和系统化的认知。
两大智能IPC方案,分别展示了基于两款芯片产品的终端解决方案:基于AX620Q,可实现低成本、高集成度的双4Mp AI双目摄像头产品,可支持5Mp实时、4K非实时的真黑光;基于XS7312Q,可实现低成本、高集成度、内置智能算法的4Mp单目摄像头产品。
AI智能计算所需的AX650N KVM 4K60超低延时,基于AX650N编解码,网络传输一段4K60fps的视频数据只需要2帧时延即可实现。
AI智能计算则展示了AX650N强大的解码能力:32路1080p@30fps解码+32路结构化及跟踪算法+双4K显示或者96路D1@30fps解码+96路结构化及跟踪算法+双4K显示。
对于AX650N的未来前景,爱芯元智工程师谈到,“从客户角度来看,主要看重的就是解码能力强、AI性能强、低功耗等三大优势。”
爱芯元智基于AXera-Pi Pro所展示的Vision Transformer的实际应用示例:在AX650N上运行SAM和LaMa网络后,只需要简单的鼠标操作,就可以实现高精度的人机交互的图像修护应用。
爱芯元智工程师补充道,“基于技术开源,爱芯元智研发的AX650N芯片可以使其应用场景的功能使用更具隐私性和安全性。”
最后,将目光聚焦到此次最大亮点,即是爱芯元智的【黑光全彩】体验中心,吸引了众多观展人士的驻足。据了解,“真黑光”技术是通过爱芯智眸AI-ISP将画面真实还原,后续再通过NPU进行优化,进行更加准确的图像处理,在极低照度下获得超越人眼所见的黑光全彩效果。
CPS中安网还了解到,爱芯元智推出的新一代AX630C和AX620Q,都是搭载的新一代爱芯智眸4.0图像处理引擎和新一代爱芯通元4.0高性能、低功耗的NPU引擎,在高画质、智能处理和分析等方面领先行业水平。
“AX630C是爱芯元智面向智慧城市行业前端IPC市场推出的超高清智能SoC芯片,可支持4K@30fps实时真黑光。”史总强调。
综上来看,爱芯元智的技术积淀已久,才能在AI视觉芯片研发及基础算力领域占据重要地位,而“厚积薄发”的背后,来自于爱芯元智对初心的坚守,并致力于通过普惠AI造就更美好的生活。
02.坚守AI-ISP路线,加快普惠AI场景落地
为了真正能让机器看得见、看得清、看得懂,爱芯元智在2021年正式对外发布了其自研核心技术爱芯智眸AI-ISP。
据CPS中安网了解,爱芯元智自研技术的突破,颠覆了传统ISP纯硬件通路的设计方式,通过迭代AI模型来提升性能,快速实现芯片产品画质的升级换代,并在一些关键场景下突破了传统视频处理能力的“天花板”。
值得关注的是,涉及到实际应用层面,爱芯智眸AI-ISP通过迭代软件模型即可提升性能,快速实现芯片产品画质的升级换代。这意味着,爱芯元智用一颗芯片就能实现对不同场景、不同市场的覆盖,这既能降低AI综合应用成本,也是对生产力的极大提升。
在此技术积淀之下,今时今日的爱芯元智再次展示强大的研发实力。据悉,爱芯智眸AI-ISP在优化和迭代AI赋能ISP Pipeline里的4个关键模块之外,还通过爱芯通元混合精度NPU提升算力,进一步加快了AI开发的落地效率。
特别是今年,在大模型的火爆之下,基于AI的图像处理、可靠性及隐私安全保护等需求,已将AI从云端逐步向端侧和边缘侧等进阶,也对端侧算力提出了更高要求。
据CPS中安网了解到,目前爱芯元智第三代、第四代芯片所搭载的爱芯通元混合精度NPU都支持Transformer大模型。随着大模型的发展,爱芯元智也在积极探索通过大模型实现更好的AI-ISP效果,以技术创新解决低照和高动态的行业核心痛点。
“目前来看,爱芯元智会坚定地走AI-ISP的路线,等待整个市场的产业链成本优化、敏捷交付等条件时宜,开启拥抱普惠黑光的时刻。”史总表示。
而回到当下之时,谈及爱芯元智的“黑光全彩”技术的落地,史总表示,目前有创维、锐明及新能源头部车厂等合作方案落地,在智慧城市和智能驾驶领域上颇有成效。
“现在的黑光还处于可见光的概念,未来的AI-ISP不光是处理可见光,还有非可见光,还有多感知类,包括毫米波雷达、红外热成像等等。”史总补充。
简言之,将可见光和非可见光等都聚焦在单颗SoC芯片之上,将是众多芯片厂商的布局之一。相较于此,爱芯元智则基于已有红外热成像ISP、RGB可见光ISP技术及支持AI-ISP的NPU硬件平台技术,可实现产业链的进一步集成整合。
采访最后,史总强调:“AI本身是开放的,普惠AI的实现,需要我们更务实的基础上,加快技术迭代和产品升级。当前爱芯元智专注于一体两翼,三大布局,应用场景从智慧驾驶、智慧城市不断延展至新领域的探索,除可见光以外的视频感知、环境感知等等。”
声明:
凡文章来源标注为"CPS中安网"的文章版权均为本站所有,如需转载请务必注明出处为"CPS中安网",违反者本网将追究相关法律责任。非本网作品均来自互联网并标明了来源,如出现侵权行为,请立即与我们联系,待核实后,我们将立即删除,并向您致歉。
征稿:
为了更好的发挥CPS中安网资讯平台价值,促进诸位自身发展以及业务拓展,更好地为企业及个人提供服务,中安网诚征各类稿件,欢迎有实力安防企业、机构、研究员、行业分析师。投稿邮箱: tougao@cps.com.cn(查看征稿详细)