10月20日,近日,计算机视觉领域的顶级大会ICCV 2021举办的VIPriors Challenge的结果正式公布。网易互娱AI Lab从蚂蚁集团、美团、加州大学伯克利分校、复旦大学等来自产业界和学术界的强队中脱颖而出。,并一举夺得体重识别比赛冠军。这是网易互娱AI实验室首次在3D视觉、语音、自然语言处理、游戏AI等领域获得多项国际冠军。,并再次登顶国际AI大赛,展示了网易互娱AI实验室在人工智能领域的综合实力。
ICCV是计算机视觉三大顶级国际学术会议之一,每两年举办一次,吸引了来自世界各地的一流学者、研究人员和开发者,共同探讨计算机视觉领域的前沿研究和应用。人的体重识别技术一直是计算机视觉研究的重要领域,在人体理解、行人跟踪、智能安防、智慧零售等领域有着广泛的应用。本次比赛的主要目的是在没有任何预训练模型的情况下,用少量的数据训练出高精度的人体体重识别模型,以减少当前视觉模型对训练数据的依赖,增加模型算法的通用性和实用性。
本次比赛只提供了436个ID字符8569张图片的训练集,并要求不能使用任何预训练模型和附加数据。一些问题,如数据量小、预训练先验不可用、数据遮挡严重等,严重影响了模型的准确性和泛化能力,这些问题也是实际业务中经常遇到的困难。网易互娱AI实验室团队凭借其对业务数据的敏感度和以往丰富的处理经验。针对这些难点,提出了一种基于骨干网络+特征聚合+双重损失的权重识别框架,并采用三重损失和中心损失、多骨干网络融合等方法提高提取特征的区分度。同时,通过随机擦除、局部灰度变换和不平衡ID校正提高了模型的泛化能力。此外,利用训练损失过滤噪声数据,挖掘困难样本数据,有效解决了原始数据中不同程度遮挡的问题。最后,使用重新排序和查询扩展技术来进一步提高模型的性能。在有限的最终数据下,Mean平均精度达到了96.52%的高精度,与竞争对手提供的67% mAP的基线模型相比,显著提高了近30%。
上述人体体重识别竞赛方案的相关技术来自网易互娱AI实验室长期的技术储备和积累。目前,这些技术已经应用到神盾图像和语音审计引擎中。该引擎依托前沿的计算机视觉和语音信号处理技术,每天处理上千万的图片和音频数据,几乎覆盖了网易互娱的所有游戏,让游戏的社交生态远离非法内容,包括色情、暴力、垃圾和滥用,为游戏的正常运行保驾护航。
网易互娱AI实验室成立于2017年,隶属于网易互动娱乐事业群,是游戏行业领先的人工智能实验室。目前,该技术已应用于网易互娱的多个热门游戏,如梦幻西游、哈利波特-魔法觉醒、阴阳师、西游、荒野行动、明日之后等。