钞能力8888
03-23
这篇文章不错,转发给大家看看
@半导体产业纵横:
国内厂商,去搞AI ISP芯片了
免责声明:上述内容仅代表发帖人个人观点,不构成本平台的任何投资建议。
分享至
微信
复制链接
精彩评论
我们需要你的真知灼见来填补这片空白
打开APP,发表看法
APP内打开
发表看法
{"i18n":{"language":"zh_CN"},"detailType":1,"isChannel":false,"data":{"magic":2,"id":416602379223208,"tweetId":"416602379223208","gmtCreate":1742717534951,"gmtModify":1742717536376,"author":{"id":3560382599811193,"idStr":"3560382599811193","authorId":3560382599811193,"authorIdStr":"3560382599811193","name":"钞能力8888","avatar":"https://static.tigerbbs.com/1b5bb9f989d900381679c454f99c1351","vip":1,"userType":1,"introduction":"","boolIsFan":false,"boolIsHead":false,"crmLevel":1,"crmLevelSwitch":0,"currentWearingBadge":{"badgeId":"e50ce593bb40487ebfb542ca54f6a561-2","templateUuid":"e50ce593bb40487ebfb542ca54f6a561","name":"资深虎友","description":"加入老虎社区1000天","bigImgUrl":"https://static.tigerbbs.com/0063fb68ea29c9ae6858c58630e182d5","smallImgUrl":"https://static.tigerbbs.com/96c699a93be4214d4b49aea6a5a5d1a4","grayImgUrl":"https://static.tigerbbs.com/35b0e542a9ff77046ed69ef602bc105d","redirectLinkEnabled":0,"hasAllocated":1,"isWearing":1,"stampPosition":0,"hasStamp":0,"allocationCount":1,"allocatedDate":"2023.05.10","individualDisplayEnabled":0},"individualDisplayBadges":[],"fanSize":6,"starInvestorFlag":false},"themes":[],"images":[],"coverImages":[],"html":"<html><head></head><body><p>这篇文章不错,转发给大家看看</p></body></html>","htmlText":"<html><head></head><body><p>这篇文章不错,转发给大家看看</p></body></html>","text":"这篇文章不错,转发给大家看看","highlighted":1,"essential":1,"paper":1,"likeSize":0,"commentSize":0,"repostSize":0,"favoriteSize":0,"link":"https://laohu8.com/post/416602379223208","repostId":416594697953920,"repostType":1,"repost":{"magic":2,"id":416594697953920,"tweetId":"416594697953920","gmtCreate":1742716052254,"gmtModify":1742716082687,"author":{"id":4094888006325720,"idStr":"4094888006325720","authorId":4094888006325720,"authorIdStr":"4094888006325720","name":"半导体产业纵横","avatar":"https://static.tigerbbs.com/190112f141c8ef35bbe165d53bb19be3","vip":1,"userType":1,"introduction":"","boolIsFan":false,"boolIsHead":false,"crmLevel":1,"crmLevelSwitch":0,"individualDisplayBadges":[],"fanSize":308,"starInvestorFlag":false},"themes":[],"images":[{"img":"https://static.tigerbbs.com/0bf5038ef3ecfbc212b80c133ab723f2","width":"896","height":"897"},{"img":"https://static.tigerbbs.com/9caf7928f40fbd1adbc3cb1f4e7cec69","width":"735","height":"1162"},{"img":"https://static.tigerbbs.com/319fd5518e1352364aa8588b75fbfc39","width":"1080","height":"289"}],"coverImages":[{"img":"https://static.tigerbbs.com/0bf5038ef3ecfbc212b80c133ab723f2","width":"896","height":"897"},{"img":"https://static.tigerbbs.com/9caf7928f40fbd1adbc3cb1f4e7cec69","width":"735","height":"1162"},{"img":"https://static.tigerbbs.com/319fd5518e1352364aa8588b75fbfc39","width":"1080","height":"289"}],"title":"国内厂商,去搞AI ISP芯片了","html":"<html><head></head><body><p class=\"t-img-caption\"><img src=\"https://static.tigerbbs.com/0bf5038ef3ecfbc212b80c133ab723f2\" tg-width=\"896\" tg-height=\"897\"></p>\n<p>最近,有消息称字节在研某款 AI 智能眼镜正在考虑采用恒玄 2800 + 研极微的 ISP 芯片方案(但这不代表是最终方案)。</p>\n<p>对于AI眼镜来说,SoC的选择往往决定了产品的体验上限,比如Meta-Rayban 采用的是高通AR1的芯片方案。但实际上,为了满足AI智能眼镜拍摄的功能需求,则还需要外挂一块 ISP 芯片。</p>\n<p>其实,越来越多的厂商在开卷ISP芯片,并且在AI的需求下,很多芯片企业开始推出AI ISP芯片。</p>\n<h2>01</h2>\n<p><strong>ISP芯片,开始被重视</strong></p>\n<p>ISP芯片不是一个新鲜事物。</p>\n<p>ISP是Image Signal Processor的简称,即图像信号处理器。主要用于对图像传感器采集到的原始图像信号进行处理。</p>\n<p>在图像处理这块,大家更熟知的是CMOS图像传感器。CIS芯片功能相当于人类的视网膜,用来捕捉光线。而ISP,相当于大脑皮层中对应视觉处理的那一部分,用于处理图像。CIS和ISP凑在一起完成视觉感知的任务。</p>\n<p>2021年有一阵手机厂商自研芯片潮,都不约而同的选择了ISP芯片。</p>\n<p>vivo在2021年9月推出了自研独立ISP芯片V1,到目前已经推出了三代ISP芯片;小米推出了ISP澎湃C1,与小米MIX FOLD折叠屏手机同时发布。</p>\n<p>都选择自研ISP芯片,正是因为ISP对于图像改善的影响非常大。<strong>在同等CMOS的条件下,好的ISP芯片对图像质量的改善空间可达 10%~15%。</strong></p>\n<p>ISP芯片越来越被重视,与AI硬件的发展,尤其是AI眼镜离不开关系。</p>\n<p>需要了解的是,<strong>ISP 芯片分为集成和独立两种。</strong>集成ISP是指将ISP集成在SoC处理器中,比如高通骁龙系列、英伟达 Tegra 系列处理器内部都集成有ISP 芯片。</p>\n<p>独立ISP芯片则是独立于SoC处理器而存在的,也就是外挂形式。虽然成本更高,但优势明显。除了运算能力、成像质量更优秀外,因 ISP 带有可编程性,一般的独立 ISP 芯片都是手机商向 ISP 提供商定制的,所以与相机其他组件的契合度更佳,成像也有属于自己的特色。</p>\n<p>前文提到AI眼镜中,使用最多的是高通AR1芯片,其早就已经实现手机级别的ISP。从已经流出的产品配置信息来看,<strong>小米AI眼镜也是采用骁龙AR1双ISP芯片+索尼IMX681传感器的组合。</strong></p>\n<p>但高通AR1芯片的价格还是太高了。现在,<strong>厂商在评估AI眼镜时,以恒玄为代表的MCU外加MTK或ISP也是一个不错的方案。</strong>外挂ISP 芯片的方案,相比于高通 AR1 芯片具备高性价比,低功耗长续航的特点。</p>\n<p>并且,XR Vision Pro报道,<strong>调校ISP芯片也可以达到接近于高通AR1实现的拍摄效果,该方案的成本是高通 AR1 芯片方案的几分之一</strong>,整体 AI 智能眼镜的BOM成本可以控制在千元以内,产品零售价可以做到 1500 以内。</p>\n<p>影目科技X系列和闪极AI“拍拍镜”AI眼镜都搭载了紫光展锐W517芯片;<strong>雷神科技的AI眼镜采用了多种技术路线,其中也包括MCU级SoC+ISP方案等。</strong>整体来看,MCU级SoC+ISP方案可能更受到一些新兴厂商青睐。</p>\n<p>一位熟悉产业链上下游的投资人透露,预计今年年底恒玄会推出主控芯片加上ISP集成的SoC,这套方案的价格更便宜,功耗也能控制得更好,会比AR1更适合用在AI眼镜上,华为就在等这套方案。</p>\n<h2>02</h2>\n<p><strong>都有谁在做ISP芯片?</strong></p>\n<p>带上镜头的AI眼镜,需要大量的图片计算,所有这也是ISP暴涨的主要原因。</p>\n<p>我们细数国内ISP企业,各家有各家的看点。</p>\n<p>先看海思,海思的芯片实力很强,一般做的是集成ISP。从麒麟950开始,海思的SoC芯片中开始集成自研的ISP模块。以Hi3559A为例,我们可以看一下其ISP整体的结构。</p>\n<p class=\"t-img-caption\"><img src=\"https://static.tigerbbs.com/9caf7928f40fbd1adbc3cb1f4e7cec69\" tg-width=\"735\" tg-height=\"1162\"></p>\n<p>3559A是一个通用ISP,所以功能很全,如果用FPGA去实现这些,估计没有几个能做出来,ISP的特殊点就是针对不同的镜头、环境、Sensor等不同去调整需要实现的算法。</p>\n<p>在ISP芯片方面,因为智能手机对于成像要求越来越高,高通和联发科的ISP实力也是很强的。<strong>国内有一家企业与联发科关系匪浅,专门做的是ISP芯片,那就是星宸科技。</strong></p>\n<p>星宸科技的ISP芯片广泛应用于智能安防、智能车载、视频对讲等领域,其产品线丰富,涵盖了IPC SoC(网络摄像机芯片)、NVR SoC(网络视频录像机芯片)以及USB视频会议摄像头芯片等。</p>\n<p>星宸科技的第一大股东是SigmaStar,而SigmaStar由联发科间接持股100%。因此,星宸科技的控股股东是联发科。虽然联发科已明确表示不谋求星宸科技的控制权,但是星宸科技的多名管理层及核心技术人员出自联发科系统,例如董事陈恒真、监事蔡秉宪等曾在联发科任职。</p>\n<p>现在星宸科技在智能眼镜里的进展也很快,据了解,<strong>其智能眼镜芯片 SSC309QL 正与多家品牌客户对接测试,集成了自研的ISP 4.0 及 NPU</strong>,在视觉处理和各类多态大模型的适配上提升比较大。</p>\n<p><strong>富瀚微</strong>的ISP产品主要应用在安防监控、车载摄像头等。CES2025上发布了<strong>智能眼镜芯片MC6350。其中集成了富瀚微自研的AI ISP</strong>,在暗光下表现不错,解决目前主流智能眼镜产品在暗光下拍摄效果不佳的问题。</p>\n<p>当然也有前文提到的<strong>恒玄科技</strong>,恒玄科技<strong>ISP 芯片主要特点是能够与音频处理技术紧密结合</strong>,其在研智能眼镜专用 SoC 项目,主打单芯片集成低功耗 ISP 技术。</p>\n<h2>03</h2>\n<p><strong>擅长暗光环境的AI ISP兴起</strong></p>\n<p><strong>AI ISP的核心在于,将人工智能算法与ISP技术深度融合。</strong></p>\n<p>通过集成深度学习、机器学习等AI算法,AI ISP能够实现对图像内容的智能分析和处理,如物体识别、人脸检测、场景分类等。</p>\n<p>AI ISP的市场还是很大的。据市场研究机构预测,全球ISP芯片市场销售额将从2023年的6.65亿美元增长至2030年的10.2亿美元,年复合增长率达到6.4%。</p>\n<p>目前来看,<strong>AI ISP的应用更多的是在低光成像(AINR)方面。</strong>AI ISP能够实现在信噪比(SNR)上6~12dB的显著提升。当同等硬件条件下,AI-ISP与传统ISP的比较显示,AI-ISP不仅提高了画质性能,而且在成本效益上也表现出巨大的优势。</p>\n<p class=\"t-img-caption\"><img src=\"https://static.tigerbbs.com/319fd5518e1352364aa8588b75fbfc39\" tg-width=\"1080\" tg-height=\"289\"></p>\n<p>AI ISP的结合是有企业走在前面的,<strong>华为海思2021年就推出了“越影AI ISP”</strong>,把传统ISP技术与AI深度学习相结合,相比上一代旗舰ISP,低照场景下的图像信噪比提升了4倍。</p>\n<p><strong>全志科技</strong>在财报中表示,在视觉类应用的低光场景下,为解决低光拍摄和录制问题,<strong>研发了全新一代AI-ISP降噪算法</strong>,配合深度优化的软件,实现AI降噪功能的高效运行,并在相同信噪比情况下,实现2~4倍感光度提升,同时搭配了人脸检测、人形侦测、人脸识别、人形追踪等检测类和识别算法应用,在客户的产品上实现了量产落地。</p>\n<p>全志科技的AI ISP技术已经应用于其多款芯片产品中,如高集成视觉SoC、智慧视觉处理器等。这些产品广泛应用于智能电视、智能安防、智能车载等多个领域,为用户提供高质量的图像处理体验。</p>\n<p><strong>国科微新一代4K AI视觉处理芯片GK7606V1系列</strong>,也是搭载的自研AI ISP。测试结果显示,<strong>国科微 AI ISP 技术能够极低照度的黑光场景下,对图像进行全方位的优化和增强,使得图像更加清晰、细腻,色彩更加生动饱和。</strong></p>\n<p><strong>爱芯元智此前也公布了其AI-ISP技术,并将其命名为“爱芯智眸”。</strong>爱芯元智公司的AI ISP采用了混合精度、存算一体的架构设计,使得在有限的功耗下仍能达到高算力。与传统图像处理相比,AI ISP能够实现多种算法并行工作,尤其在去噪、差值和锐化等方面的表现更加自然、问题更少。</p>\n<p><strong>飞凌微</strong>(思特威子公司)发布的AIoT应用系列首款高性能端侧视觉<strong>AI SoC芯片A1</strong>,其中也集成自研的AI ISP部分,覆盖0.3MP至8MP分辨率。其优点在于:<strong>高性能暗光降噪和图像增强算法</strong>、最多3帧HDR合成、高分辨率RGB-IR图像处理等。</p>\n<h2>04</h2>\n<p><strong>结语</strong></p>\n<p>随着人工智能技术的飞速发展,AI ISP芯片正逐渐成为国内芯片厂商的新焦点。</p>\n<p>从华为海思的“越影AI ISP”到爱芯元智的“爱芯智眸”,再到国科微的4K AI视觉处理芯片。AI ISP芯片在智能手机、安防监控、智能驾驶等领域展现出强大的性能和应用潜力。</p>\n<p>虽然当前的AI-ISP技术已经实现了显著的进步,不断推高了画质处理的边界,但用户对画质的渴望似乎总是无穷无尽的。特别是在经济因素的影响下,基于卷积网络的AI-ISP技术仍未能完全满足所有客户的多样化需求。</p>\n<p>特别是那些非技术领域的消费者,他们对AI技术抱有更高的期望,希望它能带来质的飞跃和更为显著的画质提升,这也反映了大众对于新技术盛大承诺的渴望和好奇心。</p>\n<p>展望未来,AI-ISP技术发展面临三点潜在的机遇:第一,用户对画质的不断追求,意味着对更高标准的AI-ISP解决方案有持续的需求。第二,随着相关技术领域的进步,比如AR,VR,显示技术,自动驾驶等,将会带来新的画质上限提升需求,促进AI-ISP技术的进一步革新。第三,AI-ISP所引领的技术难度降低和成本的下降,可能为更广泛的应用提供了可能性,从而开拓新的市场和应用场景。</p>\n<p></p></body></html>","htmlText":"<html><head></head><body><p class=\"t-img-caption\"><img src=\"https://static.tigerbbs.com/0bf5038ef3ecfbc212b80c133ab723f2\" tg-width=\"896\" tg-height=\"897\"></p>\n<p>最近,有消息称字节在研某款 AI 智能眼镜正在考虑采用恒玄 2800 + 研极微的 ISP 芯片方案(但这不代表是最终方案)。</p>\n<p>对于AI眼镜来说,SoC的选择往往决定了产品的体验上限,比如Meta-Rayban 采用的是高通AR1的芯片方案。但实际上,为了满足AI智能眼镜拍摄的功能需求,则还需要外挂一块 ISP 芯片。</p>\n<p>其实,越来越多的厂商在开卷ISP芯片,并且在AI的需求下,很多芯片企业开始推出AI ISP芯片。</p>\n<h2>01</h2>\n<p><strong>ISP芯片,开始被重视</strong></p>\n<p>ISP芯片不是一个新鲜事物。</p>\n<p>ISP是Image Signal Processor的简称,即图像信号处理器。主要用于对图像传感器采集到的原始图像信号进行处理。</p>\n<p>在图像处理这块,大家更熟知的是CMOS图像传感器。CIS芯片功能相当于人类的视网膜,用来捕捉光线。而ISP,相当于大脑皮层中对应视觉处理的那一部分,用于处理图像。CIS和ISP凑在一起完成视觉感知的任务。</p>\n<p>2021年有一阵手机厂商自研芯片潮,都不约而同的选择了ISP芯片。</p>\n<p>vivo在2021年9月推出了自研独立ISP芯片V1,到目前已经推出了三代ISP芯片;小米推出了ISP澎湃C1,与小米MIX FOLD折叠屏手机同时发布。</p>\n<p>都选择自研ISP芯片,正是因为ISP对于图像改善的影响非常大。<strong>在同等CMOS的条件下,好的ISP芯片对图像质量的改善空间可达 10%~15%。</strong></p>\n<p>ISP芯片越来越被重视,与AI硬件的发展,尤其是AI眼镜离不开关系。</p>\n<p>需要了解的是,<strong>ISP 芯片分为集成和独立两种。</strong>集成ISP是指将ISP集成在SoC处理器中,比如高通骁龙系列、英伟达 Tegra 系列处理器内部都集成有ISP 芯片。</p>\n<p>独立ISP芯片则是独立于SoC处理器而存在的,也就是外挂形式。虽然成本更高,但优势明显。除了运算能力、成像质量更优秀外,因 ISP 带有可编程性,一般的独立 ISP 芯片都是手机商向 ISP 提供商定制的,所以与相机其他组件的契合度更佳,成像也有属于自己的特色。</p>\n<p>前文提到AI眼镜中,使用最多的是高通AR1芯片,其早就已经实现手机级别的ISP。从已经流出的产品配置信息来看,<strong>小米AI眼镜也是采用骁龙AR1双ISP芯片+索尼IMX681传感器的组合。</strong></p>\n<p>但高通AR1芯片的价格还是太高了。现在,<strong>厂商在评估AI眼镜时,以恒玄为代表的MCU外加MTK或ISP也是一个不错的方案。</strong>外挂ISP 芯片的方案,相比于高通 AR1 芯片具备高性价比,低功耗长续航的特点。</p>\n<p>并且,XR Vision Pro报道,<strong>调校ISP芯片也可以达到接近于高通AR1实现的拍摄效果,该方案的成本是高通 AR1 芯片方案的几分之一</strong>,整体 AI 智能眼镜的BOM成本可以控制在千元以内,产品零售价可以做到 1500 以内。</p>\n<p>影目科技X系列和闪极AI“拍拍镜”AI眼镜都搭载了紫光展锐W517芯片;<strong>雷神科技的AI眼镜采用了多种技术路线,其中也包括MCU级SoC+ISP方案等。</strong>整体来看,MCU级SoC+ISP方案可能更受到一些新兴厂商青睐。</p>\n<p>一位熟悉产业链上下游的投资人透露,预计今年年底恒玄会推出主控芯片加上ISP集成的SoC,这套方案的价格更便宜,功耗也能控制得更好,会比AR1更适合用在AI眼镜上,华为就在等这套方案。</p>\n<h2>02</h2>\n<p><strong>都有谁在做ISP芯片?</strong></p>\n<p>带上镜头的AI眼镜,需要大量的图片计算,所有这也是ISP暴涨的主要原因。</p>\n<p>我们细数国内ISP企业,各家有各家的看点。</p>\n<p>先看海思,海思的芯片实力很强,一般做的是集成ISP。从麒麟950开始,海思的SoC芯片中开始集成自研的ISP模块。以Hi3559A为例,我们可以看一下其ISP整体的结构。</p>\n<p class=\"t-img-caption\"><img src=\"https://static.tigerbbs.com/9caf7928f40fbd1adbc3cb1f4e7cec69\" tg-width=\"735\" tg-height=\"1162\"></p>\n<p>3559A是一个通用ISP,所以功能很全,如果用FPGA去实现这些,估计没有几个能做出来,ISP的特殊点就是针对不同的镜头、环境、Sensor等不同去调整需要实现的算法。</p>\n<p>在ISP芯片方面,因为智能手机对于成像要求越来越高,高通和联发科的ISP实力也是很强的。<strong>国内有一家企业与联发科关系匪浅,专门做的是ISP芯片,那就是星宸科技。</strong></p>\n<p>星宸科技的ISP芯片广泛应用于智能安防、智能车载、视频对讲等领域,其产品线丰富,涵盖了IPC SoC(网络摄像机芯片)、NVR SoC(网络视频录像机芯片)以及USB视频会议摄像头芯片等。</p>\n<p>星宸科技的第一大股东是SigmaStar,而SigmaStar由联发科间接持股100%。因此,星宸科技的控股股东是联发科。虽然联发科已明确表示不谋求星宸科技的控制权,但是星宸科技的多名管理层及核心技术人员出自联发科系统,例如董事陈恒真、监事蔡秉宪等曾在联发科任职。</p>\n<p>现在星宸科技在智能眼镜里的进展也很快,据了解,<strong>其智能眼镜芯片 SSC309QL 正与多家品牌客户对接测试,集成了自研的ISP 4.0 及 NPU</strong>,在视觉处理和各类多态大模型的适配上提升比较大。</p>\n<p><strong>富瀚微</strong>的ISP产品主要应用在安防监控、车载摄像头等。CES2025上发布了<strong>智能眼镜芯片MC6350。其中集成了富瀚微自研的AI ISP</strong>,在暗光下表现不错,解决目前主流智能眼镜产品在暗光下拍摄效果不佳的问题。</p>\n<p>当然也有前文提到的<strong>恒玄科技</strong>,恒玄科技<strong>ISP 芯片主要特点是能够与音频处理技术紧密结合</strong>,其在研智能眼镜专用 SoC 项目,主打单芯片集成低功耗 ISP 技术。</p>\n<h2>03</h2>\n<p><strong>擅长暗光环境的AI ISP兴起</strong></p>\n<p><strong>AI ISP的核心在于,将人工智能算法与ISP技术深度融合。</strong></p>\n<p>通过集成深度学习、机器学习等AI算法,AI ISP能够实现对图像内容的智能分析和处理,如物体识别、人脸检测、场景分类等。</p>\n<p>AI ISP的市场还是很大的。据市场研究机构预测,全球ISP芯片市场销售额将从2023年的6.65亿美元增长至2030年的10.2亿美元,年复合增长率达到6.4%。</p>\n<p>目前来看,<strong>AI ISP的应用更多的是在低光成像(AINR)方面。</strong>AI ISP能够实现在信噪比(SNR)上6~12dB的显著提升。当同等硬件条件下,AI-ISP与传统ISP的比较显示,AI-ISP不仅提高了画质性能,而且在成本效益上也表现出巨大的优势。</p>\n<p class=\"t-img-caption\"><img src=\"https://static.tigerbbs.com/319fd5518e1352364aa8588b75fbfc39\" tg-width=\"1080\" tg-height=\"289\"></p>\n<p>AI ISP的结合是有企业走在前面的,<strong>华为海思2021年就推出了“越影AI ISP”</strong>,把传统ISP技术与AI深度学习相结合,相比上一代旗舰ISP,低照场景下的图像信噪比提升了4倍。</p>\n<p><strong>全志科技</strong>在财报中表示,在视觉类应用的低光场景下,为解决低光拍摄和录制问题,<strong>研发了全新一代AI-ISP降噪算法</strong>,配合深度优化的软件,实现AI降噪功能的高效运行,并在相同信噪比情况下,实现2~4倍感光度提升,同时搭配了人脸检测、人形侦测、人脸识别、人形追踪等检测类和识别算法应用,在客户的产品上实现了量产落地。</p>\n<p>全志科技的AI ISP技术已经应用于其多款芯片产品中,如高集成视觉SoC、智慧视觉处理器等。这些产品广泛应用于智能电视、智能安防、智能车载等多个领域,为用户提供高质量的图像处理体验。</p>\n<p><strong>国科微新一代4K AI视觉处理芯片GK7606V1系列</strong>,也是搭载的自研AI ISP。测试结果显示,<strong>国科微 AI ISP 技术能够极低照度的黑光场景下,对图像进行全方位的优化和增强,使得图像更加清晰、细腻,色彩更加生动饱和。</strong></p>\n<p><strong>爱芯元智此前也公布了其AI-ISP技术,并将其命名为“爱芯智眸”。</strong>爱芯元智公司的AI ISP采用了混合精度、存算一体的架构设计,使得在有限的功耗下仍能达到高算力。与传统图像处理相比,AI ISP能够实现多种算法并行工作,尤其在去噪、差值和锐化等方面的表现更加自然、问题更少。</p>\n<p><strong>飞凌微</strong>(思特威子公司)发布的AIoT应用系列首款高性能端侧视觉<strong>AI SoC芯片A1</strong>,其中也集成自研的AI ISP部分,覆盖0.3MP至8MP分辨率。其优点在于:<strong>高性能暗光降噪和图像增强算法</strong>、最多3帧HDR合成、高分辨率RGB-IR图像处理等。</p>\n<h2>04</h2>\n<p><strong>结语</strong></p>\n<p>随着人工智能技术的飞速发展,AI ISP芯片正逐渐成为国内芯片厂商的新焦点。</p>\n<p>从华为海思的“越影AI ISP”到爱芯元智的“爱芯智眸”,再到国科微的4K AI视觉处理芯片。AI ISP芯片在智能手机、安防监控、智能驾驶等领域展现出强大的性能和应用潜力。</p>\n<p>虽然当前的AI-ISP技术已经实现了显著的进步,不断推高了画质处理的边界,但用户对画质的渴望似乎总是无穷无尽的。特别是在经济因素的影响下,基于卷积网络的AI-ISP技术仍未能完全满足所有客户的多样化需求。</p>\n<p>特别是那些非技术领域的消费者,他们对AI技术抱有更高的期望,希望它能带来质的飞跃和更为显著的画质提升,这也反映了大众对于新技术盛大承诺的渴望和好奇心。</p>\n<p>展望未来,AI-ISP技术发展面临三点潜在的机遇:第一,用户对画质的不断追求,意味着对更高标准的AI-ISP解决方案有持续的需求。第二,随着相关技术领域的进步,比如AR,VR,显示技术,自动驾驶等,将会带来新的画质上限提升需求,促进AI-ISP技术的进一步革新。第三,AI-ISP所引领的技术难度降低和成本的下降,可能为更广泛的应用提供了可能性,从而开拓新的市场和应用场景。</p>\n<p></p></body></html>","text":"最近,有消息称字节在研某款 AI 智能眼镜正在考虑采用恒玄 2800 + 研极微的 ISP 芯片方案(但这不代表是最终方案)。 对于AI眼镜来说,SoC的选择往往决定了产品的体验上限,比如Meta-Rayban 采用的是高通AR1的芯片方案。但实际上,为了满足AI智能眼镜拍摄的功能需求,则还需要外挂一块 ISP 芯片。 其实,越来越多的厂商在开卷ISP芯片,并且在AI的需求下,很多芯片企业开始推出AI ISP芯片。 01 ISP芯片,开始被重视 ISP芯片不是一个新鲜事物。 ISP是Image Signal Processor的简称,即图像信号处理器。主要用于对图像传感器采集到的原始图像信号进行处理。 在图像处理这块,大家更熟知的是CMOS图像传感器。CIS芯片功能相当于人类的视网膜,用来捕捉光线。而ISP,相当于大脑皮层中对应视觉处理的那一部分,用于处理图像。CIS和ISP凑在一起完成视觉感知的任务。 2021年有一阵手机厂商自研芯片潮,都不约而同的选择了ISP芯片。 vivo在2021年9月推出了自研独立ISP芯片V1,到目前已经推出了三代ISP芯片;小米推出了ISP澎湃C1,与小米MIX FOLD折叠屏手机同时发布。 都选择自研ISP芯片,正是因为ISP对于图像改善的影响非常大。在同等CMOS的条件下,好的ISP芯片对图像质量的改善空间可达 10%~15%。 ISP芯片越来越被重视,与AI硬件的发展,尤其是AI眼镜离不开关系。 需要了解的是,ISP 芯片分为集成和独立两种。集成ISP是指将ISP集成在SoC处理器中,比如高通骁龙系列、英伟达 Tegra 系列处理器内部都集成有ISP 芯片。 独立ISP芯片则是独立于SoC处理器而存在的,也就是外挂形式。虽然成本更高,但优势明显。除了运算能力、成像质量更优秀外,因 ISP 带有可编程性,一般的独立 ISP 芯片都是手机商向 ISP 提供商定制的,所以与相机其他组件的契合度更佳,成像也有属于自己的特色。 前文提到AI眼镜中,使用最多的是高通AR1芯片,其早就已经实现手机级别的ISP。从已经流出的产品配置信息来看,小米AI眼镜也是采用骁龙AR1双ISP芯片+索尼IMX681传感器的组合。 但高通AR1芯片的价格还是太高了。现在,厂商在评估AI眼镜时,以恒玄为代表的MCU外加MTK或ISP也是一个不错的方案。外挂ISP 芯片的方案,相比于高通 AR1 芯片具备高性价比,低功耗长续航的特点。 并且,XR Vision Pro报道,调校ISP芯片也可以达到接近于高通AR1实现的拍摄效果,该方案的成本是高通 AR1 芯片方案的几分之一,整体 AI 智能眼镜的BOM成本可以控制在千元以内,产品零售价可以做到 1500 以内。 影目科技X系列和闪极AI“拍拍镜”AI眼镜都搭载了紫光展锐W517芯片;雷神科技的AI眼镜采用了多种技术路线,其中也包括MCU级SoC+ISP方案等。整体来看,MCU级SoC+ISP方案可能更受到一些新兴厂商青睐。 一位熟悉产业链上下游的投资人透露,预计今年年底恒玄会推出主控芯片加上ISP集成的SoC,这套方案的价格更便宜,功耗也能控制得更好,会比AR1更适合用在AI眼镜上,华为就在等这套方案。 02 都有谁在做ISP芯片? 带上镜头的AI眼镜,需要大量的图片计算,所有这也是ISP暴涨的主要原因。 我们细数国内ISP企业,各家有各家的看点。 先看海思,海思的芯片实力很强,一般做的是集成ISP。从麒麟950开始,海思的SoC芯片中开始集成自研的ISP模块。以Hi3559A为例,我们可以看一下其ISP整体的结构。 3559A是一个通用ISP,所以功能很全,如果用FPGA去实现这些,估计没有几个能做出来,ISP的特殊点就是针对不同的镜头、环境、Sensor等不同去调整需要实现的算法。 在ISP芯片方面,因为智能手机对于成像要求越来越高,高通和联发科的ISP实力也是很强的。国内有一家企业与联发科关系匪浅,专门做的是ISP芯片,那就是星宸科技。 星宸科技的ISP芯片广泛应用于智能安防、智能车载、视频对讲等领域,其产品线丰富,涵盖了IPC SoC(网络摄像机芯片)、NVR SoC(网络视频录像机芯片)以及USB视频会议摄像头芯片等。 星宸科技的第一大股东是SigmaStar,而SigmaStar由联发科间接持股100%。因此,星宸科技的控股股东是联发科。虽然联发科已明确表示不谋求星宸科技的控制权,但是星宸科技的多名管理层及核心技术人员出自联发科系统,例如董事陈恒真、监事蔡秉宪等曾在联发科任职。 现在星宸科技在智能眼镜里的进展也很快,据了解,其智能眼镜芯片 SSC309QL 正与多家品牌客户对接测试,集成了自研的ISP 4.0 及 NPU,在视觉处理和各类多态大模型的适配上提升比较大。 富瀚微的ISP产品主要应用在安防监控、车载摄像头等。CES2025上发布了智能眼镜芯片MC6350。其中集成了富瀚微自研的AI ISP,在暗光下表现不错,解决目前主流智能眼镜产品在暗光下拍摄效果不佳的问题。 当然也有前文提到的恒玄科技,恒玄科技ISP 芯片主要特点是能够与音频处理技术紧密结合,其在研智能眼镜专用 SoC 项目,主打单芯片集成低功耗 ISP 技术。 03 擅长暗光环境的AI ISP兴起 AI ISP的核心在于,将人工智能算法与ISP技术深度融合。 通过集成深度学习、机器学习等AI算法,AI ISP能够实现对图像内容的智能分析和处理,如物体识别、人脸检测、场景分类等。 AI ISP的市场还是很大的。据市场研究机构预测,全球ISP芯片市场销售额将从2023年的6.65亿美元增长至2030年的10.2亿美元,年复合增长率达到6.4%。 目前来看,AI ISP的应用更多的是在低光成像(AINR)方面。AI ISP能够实现在信噪比(SNR)上6~12dB的显著提升。当同等硬件条件下,AI-ISP与传统ISP的比较显示,AI-ISP不仅提高了画质性能,而且在成本效益上也表现出巨大的优势。 AI ISP的结合是有企业走在前面的,华为海思2021年就推出了“越影AI ISP”,把传统ISP技术与AI深度学习相结合,相比上一代旗舰ISP,低照场景下的图像信噪比提升了4倍。 全志科技在财报中表示,在视觉类应用的低光场景下,为解决低光拍摄和录制问题,研发了全新一代AI-ISP降噪算法,配合深度优化的软件,实现AI降噪功能的高效运行,并在相同信噪比情况下,实现2~4倍感光度提升,同时搭配了人脸检测、人形侦测、人脸识别、人形追踪等检测类和识别算法应用,在客户的产品上实现了量产落地。 全志科技的AI ISP技术已经应用于其多款芯片产品中,如高集成视觉SoC、智慧视觉处理器等。这些产品广泛应用于智能电视、智能安防、智能车载等多个领域,为用户提供高质量的图像处理体验。 国科微新一代4K AI视觉处理芯片GK7606V1系列,也是搭载的自研AI ISP。测试结果显示,国科微 AI ISP 技术能够极低照度的黑光场景下,对图像进行全方位的优化和增强,使得图像更加清晰、细腻,色彩更加生动饱和。 爱芯元智此前也公布了其AI-ISP技术,并将其命名为“爱芯智眸”。爱芯元智公司的AI ISP采用了混合精度、存算一体的架构设计,使得在有限的功耗下仍能达到高算力。与传统图像处理相比,AI ISP能够实现多种算法并行工作,尤其在去噪、差值和锐化等方面的表现更加自然、问题更少。 飞凌微(思特威子公司)发布的AIoT应用系列首款高性能端侧视觉AI SoC芯片A1,其中也集成自研的AI ISP部分,覆盖0.3MP至8MP分辨率。其优点在于:高性能暗光降噪和图像增强算法、最多3帧HDR合成、高分辨率RGB-IR图像处理等。 04 结语 随着人工智能技术的飞速发展,AI ISP芯片正逐渐成为国内芯片厂商的新焦点。 从华为海思的“越影AI ISP”到爱芯元智的“爱芯智眸”,再到国科微的4K AI视觉处理芯片。AI ISP芯片在智能手机、安防监控、智能驾驶等领域展现出强大的性能和应用潜力。 虽然当前的AI-ISP技术已经实现了显著的进步,不断推高了画质处理的边界,但用户对画质的渴望似乎总是无穷无尽的。特别是在经济因素的影响下,基于卷积网络的AI-ISP技术仍未能完全满足所有客户的多样化需求。 特别是那些非技术领域的消费者,他们对AI技术抱有更高的期望,希望它能带来质的飞跃和更为显著的画质提升,这也反映了大众对于新技术盛大承诺的渴望和好奇心。 展望未来,AI-ISP技术发展面临三点潜在的机遇:第一,用户对画质的不断追求,意味着对更高标准的AI-ISP解决方案有持续的需求。第二,随着相关技术领域的进步,比如AR,VR,显示技术,自动驾驶等,将会带来新的画质上限提升需求,促进AI-ISP技术的进一步革新。第三,AI-ISP所引领的技术难度降低和成本的下降,可能为更广泛的应用提供了可能性,从而开拓新的市场和应用场景。","highlighted":1,"essential":1,"paper":2,"link":"https://laohu8.com/post/416594697953920","repostId":0,"isVote":1,"tweetType":1,"commentLimit":10,"symbols":["159813"],"verified":2,"subType":0,"readableState":1,"langContent":"CN","currentLanguage":"CN","warmUpFlag":false,"orderFlag":false,"shareable":true,"causeOfNotShareable":"","featuresForAnalytics":[],"commentAndTweetFlag":false,"andRepostAutoSelectedFlag":false,"upFlag":false,"length":6209,"optionInvolvedFlag":false,"xxTargetLangEnum":"ZH_CN"},"isVote":1,"tweetType":1,"viewCount":111,"commentLimit":10,"likeStatus":false,"favoriteStatus":false,"reportStatus":false,"symbols":[],"verified":2,"subType":0,"readableState":1,"langContent":"CN","currentLanguage":"CN","warmUpFlag":false,"orderFlag":false,"shareable":true,"causeOfNotShareable":"","featuresForAnalytics":[],"commentAndTweetFlag":false,"andRepostAutoSelectedFlag":false,"upFlag":false,"length":27,"optionInvolvedFlag":false,"xxTargetLangEnum":"ZH_CN"},"commentList":[],"isCommentEnd":true,"isTiger":false,"isWeiXinMini":false,"url":"/m/post/416602379223208"}
精彩评论