[文章]【HarmonyOS IPC 试用连载 】科普一下Hi3518EV300的ISP
0
0
Hi3518EV300作为新一代消费类CameraSOC，集成新一代ISP以及业界最新的H265视频压缩编码器，在低码率、高画质等方面领先业界，同时人形检测，支持人脸和异常声音检测等智能应用；采用先进低功耗工艺和低功耗架构设计，使得Hi3518EV300在低功耗上引领行业水平。高度集成，为客户极大的降低了ebom成本。
那么神秘是ISP呢？
ISP——越影-新一代智能图像处理引擎
视觉感知是信息获取的核心入口，ISP是关键
视觉感知是数字时代信息获取的入口，ISP(Image SignalProcessor)作为视觉感知的核心技术，是智能终端从“看见世界”、“看清世界”到“看懂世界”的关键。ISP将光学透镜接收的光信息处理成图像信息，并通过一系列数字图像处理算法对图像噪声、亮度、色度等进行优化，让智能终端拥有看见世界的“智慧之眼”。
目前视觉感知的瓶颈主要在一下方面
视觉感知环境复杂多变，ISP成像质量面临挑战。视觉感知场景多样化、光线变幻复杂，如隧道或地库入口、恶劣天气、井下采矿等，且大量价值影像信息均在低照、弱光、逆光、背光、雨雪雾和大风等环境下完成采集，影像质量受低照光线及恶劣环境影响极大。传统ISP已近极限。
AI ISP突破的瓶颈
面对越来越高的场景复杂度和图像质量要求，传统ISP图像处理技术已近瓶颈。随着参数库逐渐庞大，调试越发困难，开发周期逐步拉长，画质提升的投资收益率也越来越低。此时，画质技术与AI技术的深度融合至关重要。利用AI算力深度学习海量场景和数据，智能调优复杂参数，输出算法模型辅助图像处理，使图像质量突破传统ISP极限。视觉感知要突破时间和外部环境天气的限制， 提供7*24小时全天候、全场景超高清影像。
超感光降噪——信噪比提升4倍
基于海思多年对低照场景的技术积累，神经网络深度学习噪声和信号的分布特性，训练出一套智能降噪的算法模型，让越影AI ISP能智能区分图像中的信号和噪声，实现低照度场景下的AI极致降噪。
多光谱融合——硬件加速 低照全彩
海思越影多光谱融合技术，通过红外补光，在ISP将可见光、850nm、940nm等常见光谱融合，即使是暗光、弱光甚至黑暗的环境，也能在不增加光污染的同时，使图像效果达到暗光全彩，悉数展现每一缕微光的力量。夜晚的城市景象、路灯下的车水马龙、夕阳西下的暮色，在海思芯片加持的摄像机下帧帧清晰分明，细节纹理饱满丰富，真彩如实。
超级宽动态——动态范围提升12dB
海思越影超级宽动态技术，能够基于价值目标进行场景识别自适应多重曝光，对不同曝光时间的长帧、中帧、短帧的图像数据，通过智能算法进行融合，融合后数据位宽20bit，动态范围相较一代提升12dB，使图像获得暗、亮区域的完美整合，亮处不过曝、暗部细节不丢失。逆光场景所见清晰，暗光场景色彩饱满，让视觉感知从此无惧逆光。同时基于场景识别的智能曝光技术，在光线急速变换场景，对目标区域进行精准超速识别，避免价值目标关键信息损失。
超级稳像——6轴数字防抖
在高空抛物、交通违章等场景中，高频小幅震动会导致目标物模糊，影响目标识别效率， 为城市安全带来隐患。在移动式场景中，低频大幅的抖动，严重影响观看的视觉感受。超级稳像技术，基于IMU 6轴传感信息智能分析运动姿态，通过精准补偿修正动态视频，有效减少由于外部环境晃动或抖动对视频成像造成的影响，大幅提升各种振动环境下的视频稳定性。
多维度感知——跨界融合 激发新潜能
视觉是感知信息的主要输入源，但生产生活对信息的需求是多维度的。海思越影支持RGB与红外热成像融合、可见光与结构光融合等多维感知能力，为红外测温相机、人脸支付、扫地机器人、雷达视频一体机等产品提供系统化解决方案，可广泛应用于安全防护、金融支付、无人机、工业视觉、交通等多种业务场景。多维度感知为各细分市场提供跨领域的解决方案，激发新智能终端品类的同时也激活了智能终端新的潜能及价值。
利用海思新一代AI ISP图像处理技术，实现智能城市未来可期，目前该技术在全天候清晰成像，赋能平安城市、交通管理等行业蓬勃发展。交通管理行业中使得城市交通管理效率更高，出现保障更加安全，随着技术的积累，未来在无人驾驶方面也将发挥其在整个生态中的作用，让智能城市交通管理系统推进无人驾驶更加智能
回帖高级模式
声明：本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人，不代表电子发烧友网立场。文章及其配图仅供工程师学习之用，如有内容图片侵权或者其他问题，请联系本站作侵删。 侵权投诉