近日，一年一度（dù）的全球计算机视（shì）觉顶级会议CVPR落（luò）下帷幕。OPPO在本次会议上屡获佳（jiā）绩，在六（liù）大赛道共十二（èr）项赛项中取得一项第一，七项第二，四（sì）项第三，排名仅次（cì）于（yú）百度等（děng）国内第一梯队的参赛选（xuǎn）手，再次（cì）展示了OPPO强劲的AI创（chuàng）新实力。

本次（cì）参加CVPR 2021竞赛的团队是来自OPPO研究院智能感知与交互研究部（bù）和OPPO美（měi）国研究所，他们先后在（zài）多目标行（háng）为分（fèn）析、足球（qiú）行为分析（xī）、长视频理（lǐ）解、时空行为检测、跨模态分析及人机交互（hù）识（shí）别六大（dà）赛道上取得优异的成绩。他们（men）通过对算法的优化（huà）、训练，不断强化OPPO的（de）AI能力，让AI更好地为人类服务，让（ràng）AI更懂人。

而由OPPO智能感知（zhī）首席科学家郭（guō）彦东与清华学者等共（gòng）同发表（biǎo）的（de）论文《View-Guided Point Cloud Completion》，也被本次CVPR收录。该论（lùn）文通过执行有（yǒu）效的跨模态和跨级别融合（hé）框架，为点云补（bǔ）全（quán）任务提（tí）出了（le）一（yī）套视图引导（dǎo）的全（quán）新解决方案。

其中（zhōng），OPPO在多目标行为分析（xī）（Multi-Agent Behavior）赛道（dào）中（zhōng）收获颇（pō）丰，其所（suǒ）应用的AI算法能基于（yú）特（tè）征点信息准确（què）判（pàn）别、预测动物及人在复杂交互（hù）内容（róng）下（xià）的行（háng）为。OPPO凭借（jiè）着领先的AI算法能力，从（cóng）全球240多个顶尖参（cān）赛团队中脱颖而（ér）出，获得子（zǐ）赛项（xiàng）少（shǎo）样本行为分类任务（Learning New Behavior）第一（yī），及传统分（fèn）类（Classical Classification）与标注风格迁移任务（wù）（Annotation Style Transfer）赛项的第二与（yǔ）第三名。目前，这（zhè）项技术正在OPPO智慧工厂发挥作（zuò）用，生产线上的（de）工人们在这套算法的辅助下，可以避免（miǎn）关（guān）键生产环节（jiē）的错（cuò）漏错放（fàng），让（ràng）自身和产（chǎn）线更安全。

多目标行为分析（xī）赛（sài）道

从（cóng）计算智能到（dào）人本智能（néng），OPPO让AI更“懂”人

在基于（yú）多（duō）张（zhāng）2D图片的3D人脸重建（3D Face Reconstruction From Multiple 2D Images）挑战赛中，OPPO自（zì）研的AI算（suàn）法所（suǒ）还原（yuán）的三维人脸模型与（yǔ）真实人脸（liǎn）误差（chà）仅为1mm左右（yòu），在主要指标成（chéng）绩（jì）排名中取得第二（èr）名。该算法克服了（le）在（zài）实（shí）际（jì）生活中（zhōng），特别是动态视频拍（pāi）摄（shè）时，因为（wéi）动（dòng）作导致的人脸（liǎn）五官点（diǎn）不明晰（xī）、表（biǎo）情夸张、甚至（zhì）图片数（shù）据失真等问（wèn）题。

事实上，OPPO自（zì）研的人脸检测算法已能够（gòu）识别635个人脸特征关键点，并实现（xiàn）30次/秒的高速运行。在不久前（qián）发布的OPPO Reno6系列上，依托于该算法架构的AI焕采美妆视频技术为用（yòng）户（hù）轻（qīng）松打造了动态的自然美妆（zhuāng）效果。这项（xiàng）技术（shù）将推动人像视频技术“升（shēng）维”进化，以3D级的特（tè）征点识别、令（lìng）“上妆”效果更服帖；也将在社交平（píng）台上制作出更丰富（fù）更（gèng）贴（tiē）合的（de）AR特效，实现（xiàn）“上（shàng）镜自由”让用户（hù）在日（rì）常生活中（zhōng）享受到（dào）技术带来的美好瞬间。

基于多张2D图片的3D人脸重建赛项

让AI理解我们所处的时（shí）间和空间（jiān）

OPPO的AI能力（lì）目前（qián）已发（fā）展到可（kě）以识（shí）别人在时空环境中的行为（wéi）状（zhuàng）态了。在足球行为（wéi）分析（SoccerNet）赛道中，OPPO取得动作定（dìng）位（Action Spotting）和回（huí）放定位（Replay Grounding）两个赛项第二名，仅次（cì）于百度。这项（xiàng）挑战需要（yào）在一段足球比赛视频中辨（biàn）别（bié）出十几（jǐ）种关键动（dòng）作（zuò），包括（kuò）越位、红牌等行为。这些动作基础规则复（fù）杂，动作（zuò）幅度小（xiǎo），连人类都很难识别出来（lái）。同时AI算法还需要排除摄（shè）影机位等干扰因素，准确定位回放片段在原始比赛视频（pín）中发生（shēng）的时间点。在不久的（de）将来，这（zhè）项技术将（jiāng）为体（tǐ）育（yù）爱（ài）好（hǎo）者们（men）带（dài）来福利，在（zài）比赛后AI可（kě）以（yǐ）实时整理（lǐ）精彩集锦。在该技术的帮助（zhù）下（xià），手（shǒu）机相册也可以自动制作类（lèi）似“精彩一（yī）周”的视频（pín）集锦，让用户可以随（suí）时回顾自（zì）己生活中的美（měi）好瞬间。

足球行为分（fèn）析（xī）赛（sài）道（dào）

在跨模态行为分析（MMact）赛道上，OPPO分别在行为识别（Cross-Modal Action Recognition）与（yǔ）行为定位（Cross-Model Action Temporal Localization）两个子赛项中取（qǔ）得第（dì）二名的成绩。OPPO强大的AI算法（fǎ）仅通过视（shì）觉（jiào）信息便可准确识别（bié）一段（duàn）视（shì）频中人物在（zài）特定空间（jiān）内发生的交谈、屈膝、走（zǒu）动等十余种动作。这种（zhǒng）行为识别（bié）和行为（wéi）定位在未（wèi）来（lái）有望成为家（jiā）中的贴心保镖。当父母不（bú）在（zài）身（shēn）边时（shí）， AI可（kě）以在宝宝下意识（shí）做出危险性动作（zuò）的时候，及时提醒父母，避免（miǎn）宝宝受到伤害。

此外（wài），OPPO还在时空（kōng）行（háng）为定位（AVA-Kinetics）赛道获（huò）得第三名。AVA数据集作为（wéi）行业内（nèi）第（dì）一个开辟时空行为（wéi）检测的数据集，使用该数据（jù）集的定位（wèi）赛项（xiàng）历来是人（rén）工（gōng）智能的（de）热门赛道之一，每年不乏国际（jì）顶尖（jiān）科技（jì）公司与（yǔ）院校的（de）知名团队参与（yǔ）其中（zhōng）。时空行为定位算法不仅可以准确识别（bié）视频中人们的（de）行（háng）为，还可以同步定（dìng）位其所（suǒ）处的时间段和空间范围。这也意味着，OPPO的AI技术不仅能（néng）理（lǐ）解（jiě）你在做（zuò）什么，还可以在时空中“找到”你（nǐ）。

OPPO正在向更（gèng）高维度的AI技术探索

本次CVPR上，OPPO在学术（shù）界前沿领域（yù）长视频理（lǐ）解（LOVEU, Long-form Video Understanding）挑（tiāo）战中，获得两（liǎng）大赛项第三名。这赛道对算法的（de）泛化性提出了极大挑战，它需要（yào）AI在预先没有特定分（fèn）类标准的（de）情（qíng）况下，自行理（lǐ）解视频的意义并分割（gē）出其边界的时间段（duàn）落。AI需要（yào）像人一样思考，理解视（shì）频中人（rén）类动作、颜色、物（wù）品、乃至光源的变化，并对变化点进行判断。未来（lái），这项技术（shù）可（kě）以（yǐ）广（guǎng）泛应用在（zài）视频领域，作为AI处理视频（pín）的（de）基础工序，为后（hòu）续包括人脸（liǎn）识别（bié）、行为识别等AI任（rèn）务的选（xuǎn）择和执（zhí）行奠定基础。

OPPO研（yán）究（jiū）院美（měi）国研究所参与（yǔ）了稠密深度（dù）估计（jì）挑战赛道，展（zhǎn）示了能够（gòu）基于2D图（tú）像输出稠（chóu）密3D深度（dù）信（xìn）息（xī）的技术，获得自监督学习赛项（xiàng）第二名的成绩，并获得“最（zuì）佳（jiā）创意奖（jiǎng）”。该技术通过利用（yòng）深度学（xué）习模型直接从普通图像输出深度信（xìn）息（xī），未来（lái）有可能替代ToF这样的（de）深度传感（gǎn）器，带（dài）来体验（yàn）更好的室内外（wài）导（dǎo）航。

OPPO始终秉持着“科技（jì）为人（rén） 以（yǐ）善（shàn）天下”的企业使命，在（zài）构建自身AI能力时也一直围绕着“以人（rén）为本（běn）”不断努力，向着更（gèng）智能、更前沿（yán）的（de）方向努力，让AI能够真正地为人所（suǒ）用，为我们带来更（gèng）智能更便捷的（de）生活。