VLM多模态大模型摄像机芯片和解决方案
2026/10/26 14:08:00 关键字:
Hi3403V100/Hi3519DV500是面向视觉行业的超高清智能 SoC芯片,支持WDR、多级降噪、六轴防抖、硬件拼接等多种图像增强和处理算法,为用户提供了卓越的图像处理能力。集成了高效的神经网络推理单元,拥有10TOPS/2.5TOPS,并支持业界主流的神经网络框架,能满足多场景计算需求。 VLM多模态解决方案在Hi3403V100/Hi3519DV500芯片基础上依托图像 + 文本跨模
企业名称:海思技术有限公司
产品概况:
Hi3403V100/Hi3519DV500是面向视觉行业的超高清智能 SoC芯片,支持WDR、多级降噪、六轴防抖、硬件拼接等多种图像增强和处理算法,为用户提供了卓越的图像处理能力。集成了高效的神经网络推理单元,拥有10TOPS/2.5TOPS,并支持业界主流的神经网络框架,能满足多场景计算需求。 VLM多模态解决方案在Hi3403V100/Hi3519DV500芯片基础上依托图像 + 文本跨模态对齐能力,在端侧硬件本地化推理,既保留端侧低时延、数据不出域、隐私合规、带宽成本低的优势,又实现从「目标检测」到「场景语义理解」的升级,是安防智能化从被动告警走向主动事件研判的核心技术抓手。关键技术指标:
Hi3403V100关键技术指标 【处理器内核】 ? 四核 ARM Cortex A55@1.4GHz - 32KB I-Cache,32KB D-Cache /512KB L3 cache - 支持Neon加速,集成FPU处理单元 ? 内置 32bit MCU@500MHz - 32KB I-Cache,32KB D-Cache /64KB TCM ? 支持 TrustZone 【视频智能分析】 ? 图像分析加速引擎,高达 10.4Tops@INT8 算力,高达 15.2Tops@INT4 算力 - 双内核异构引擎 - 引擎1 支持4.8Tops算力,支持INT4/INT8/FP16 - 引擎2 支持5.6Tops算力,支持INT8/INT16 - 支持完整的API和工具链,易于客户开发 ? 支持 TrustZone - 支持USB3.0和PCIe2.0高速接口。 ? 双核 Vision Q6 DSP - 32K I-Cache /32K D-Cache /32K IRAM/320K DRAM ? 内置智能计算加速引擎 ? 内置双目深度加速单元 ? 内置矩阵计算加速单元 Hi3519DV500关键技术指标 【处理器内核】 ? 四核 ARM Cortex A55@1.4GHz - 32KB I-Cache,32KB D-Cache /512KB L3 cache - 支持Neon加速,集成FPU处理单元 ? 内置 32bit MCU@500MHz - 32KB I-Cache,32KB D-Cache /64KB TCM ? 支持 TrustZone 【视频智能分析】 ? 2.5Tops INT8 NN加速引擎 ? 神经网络 支持完整的API和工具链,易于客户开发 ? 升级 IVE 算子,支持特征点检测、周界、光流及多种计算机形态学算子 ? 升级 DPU 算法实现双目深度图加速单元,最大分辨率 2048 x 2048,最大视差 224,处理性能 720p@30fps 产品创新点:
Hi3403V100关键技术指标 【处理器内核】 ? 四核 ARM Cortex A55@1.4GHz - 32KB I-Cache,32KB D-Cache /512KB L3 cache - 支持Neon加速,集成FPU处理单元 ? 内置 32bit MCU@500MHz - 32KB I-Cache,32KB D-Cache /64KB TCM ? 支持 TrustZone 【视频智能分析】 ? 图像分析加速引擎,高达 10.4Tops@INT8 算力,高达 15.2Tops@INT4 算力 - 双内核异构引擎 - 引擎1 支持4.8Tops算力,支持INT4/INT8/FP16 - 引擎2 支持5.6Tops算力,支持INT8/INT16 - 支持完整的API和工具链,易于客户开发 ? 支持 TrustZone - 支持USB3.0和PCIe2.0高速接口。 ? 双核 Vision Q6 DSP - 32K I-Cache /32K D-Cache /32K IRAM/320K DRAM ? 内置智能计算加速引擎 ? 内置双目深度加速单元 ? 内置矩阵计算加速单元 Hi3519DV500关键技术指标 【处理器内核】 ? 四核 ARM Cortex A55@1.4GHz - 32KB I-Cache,32KB D-Cache /512KB L3 cache - 支持Neon加速,集成FPU处理单元 ? 内置 32bit MCU@500MHz - 32KB I-Cache,32KB D-Cache /64KB TCM ? 支持 TrustZone 【视频智能分析】 ? 2.5Tops INT8 NN加速引擎 ? 神经网络 支持完整的API和工具链,易于客户开发 ? 升级 IVE 算子,支持特征点检测、周界、光流及多种计算机形态学算子 ? 升级 DPU 算法实现双目深度图加速单元,最大分辨率 2048 x 2048,最大视差 224,处理性能 720p@30fps 市场推广情况:
芯片已经量产,其中Hi3403已累计发货430万+片,Hi3519DV500已累计发货600万+片 VLM模型解决方案26年Q1发布,使用该芯片和模型客户摄像机8月份在特邀客户先行进行试点,Q4扩大试点行业与场景 ,赋能10+个行业100万+设备智能化升级

微信扫描二维码,关注公众号。