随着车辆的普及和硬件的升级,当前汽车用户对车辆的诉求也从基础的驾驶代步向追求优质驾乘体验转变,简单的车内娱乐已经无法满足用户需求,围绕汽车的生活内容分享变得越来越重要。美摄科技近日公开了专为新一代智能网联汽车打造的全链路车载影像解决方案,从基础的图像增强到AI智能化视频处理等功能均涵盖其中,以满足当前日益丰富的多维度车载影像处理需求。
将汽车变成行走的摄影机这个想法听起来很酷,但为了实现这一目标有几个问题需要解决。与手机等设备相比,车载摄像头拍摄主要存在以下几个问题:一、车载摄像头拍摄出的往往是广角画面,在边缘会产生畸变现象,导致画面内容变形;二、车辆在行驶中难免会产生颠簸,由此带来的抖动、模糊等问题也极大影响画面呈现效果;三、由于汽车拍摄到的画面通常没有后期处理,画面效果也往往比较一般。
一、图像及画质增强
首先针对画面变形问题,美摄汽车图像及视频处理方案直接对摄像头采集到的画面进行畸变校正处理,在不损失画质的前提下,将图像恢复为无畸变的高质量拍摄效果。畸变校正可在超低的算力消耗下运行,同时兼容不同摄像头,只需简单标定即可完成适配,为车载摄像头带来更接近实际环境效果的拍摄效果。
在解决了画面变形问题后,美摄团队又在防抖上下足了工夫。通过算法检测视频抖动方向以及画面中物体的运行轨迹以实现画面稳像防抖,同时通过去运动模糊算法消除抖动拍摄时产生的模糊和伪影,整个算法可搭配在光学防抖(OIS)或者非光学防抖(non-OIS)设备上。
此外,为了弥补车载摄像头拍摄色彩的不足,美摄团队推出了智能校色产品,可以对拍摄图像进行智能分析,动态找出画面中存在的过暗、过曝、饱和度不佳、清晰度不足等问题,并自动驱动美摄自研的数十项图像调节算法对图像进行实时调优,一键达成专业校色效果。
如此一来,影响车载摄像头拍摄画面质量的几大因素都被一一攻克,使用户借助汽车也可以拍出近似手机拍摄效果的画面。
二、视频智能创作
单纯的拍摄记录已远不能满足当下年轻人乐于社交分享和追求个性表达的喜好,若是将车载摄像头拍摄的视频全部导出再由用户自己进行剪辑包装,不但耗时耗力,对没有剪辑基础的用户来说也十分不友好。
为了解决这一问题,美摄研发团队将自研的AI智能剪辑产品移植到了车机之上,让汽车摇身一变成为视频包装的载体。汽车智能剪辑是专为汽车内容记录而生的全新方案,在车辆行进过程中,车载摄像头会将实时视频流画面以一定时间间隔传递给美摄检测SDK,由检测SDK对画面进行分析处理。录制结束后,美摄SDK会对保存下来的本地视频进行读取,并按一定的帧间隔分析处理,分析完毕后自动保存特征文件,提取出其中的精彩片段,智能完成艺术包装。期间无需用户手动操作,即可自动生成高质量的汽车路书影片,并支持一键分享给社交好友。
对画面内容的精准识别是实现智能剪辑的关键因素,美摄庞大的AI标签库为智能检测提供了强大助力。2000多项AI标签搭配美摄SDK多维度的图像检测能力,让车机可以实现场景识别、人物识别、天空识别、活动检测、地标检测等多类别识别效果,从而实现实时分析画面内容信息,获取对应标签,实现智能剪辑。
AI标签类型
除了在画面识别中大显身手以外,AI检测与车辆信息相结合还可以产生更具特色的包装效果,如虚拟天空。在此基础上,美摄提供配套手机端视频编辑联动方案。在美摄SDK底层能力支持下,车机端可以与其他端实现视频制作工程互通。由车机端智能剪辑输出的视频,可以无缝衔接至手机端、Web端、PC端等,供用户进行深度编辑,满足用户个性化出行娱乐及社交分享需求。
三、车内互动及娱乐
开车的趣味不止驾驶,基于美摄自研的240点位检测方案,车机座舱可以对车内拍摄画面进行实时美颜美型、添加2D/3D人脸道具、变身Animoji等处理,探索车内娱乐的更多可能。
伴随着汽车智能化快速发展,智能座舱不断升级,语音交互成为最为便捷自然的互动方式。传统车载语音系统是通过人机问答的方式交流,而美摄实时语音数字人作为当前语音交互系统的延伸,则是通过分析问答系统返回的语音内容和情景事件,实时驱动数字人播报,并触发特定动作,由此为驾乘者带来更加真实、更场景化的语音交互服务。
美摄科技提供完整的数字人定制服务,包括形象设计、动作设计、动画创作等全流程,同时支持服饰妆容自定义,为企业量身打造专属数字人形象。企业也可以通过Unity等三维工具自行设计人物形象及动作,更具灵活性和自主性。整套方案资源占用极低,可在车机、大屏、手机等多类型设备中运行,具有良好的兼容性和稳定性。
四、AI识别及处理
作为方案的底层关键技术,多维度的AI图像检测能力赋予了车辆更多人性化功能。如车辆可以实时识别画面中的多种内容信息,进而联动车机硬件和图像引擎完成氛围灯控制、智能语音提示等各项操作,实现让汽车更智能、人车交互更自然的功能进化。
基于当前的信息安全法规要求,美摄科技在汽车行业解决方案中加入了匿名化处理产品。针对拍摄画面中出现的人脸和车牌,可以通过实时处理或后处理的方式将其匿名化,最低可以处理占比面积0.0005%的人脸和0.0002%的车牌画面。匿名化处理具备多种处理形式,包含模糊、同色、马赛克、效果遮挡等。
自美摄科技推出智能汽车图像及视频处理方案以来,已与智己汽车等行业内多家头部主机厂商达成合作,并实现实车量产。时至今日,汽车已不再是简单的交通工具,而是成为了真正意义上的“第三生活空间”。美摄汽车图像及视频处理方案,助力车企为用户带来更具想象力的玩法和多样化的服务,创造更具品质的驾乘空间。