奇观

发布时间：2025-04-30 16:48

奇观是连接用户和视频之间交互的桥梁，借助AI的识别能力，通过用户一键选择，即可对观影过程中的人物、明星、卡通角色、BGM、台词的识别。奇观分为“框内”、“框外”两大组成部分。“框内”指各端的播放器内，对播放器内的画面内容进行识别；“框外”指播放器外的识别，包括：扫一扫+AR扫一扫+图搜剧合并，是识别能力集合体。 [3]

多模态人物识别技术

爱奇艺在多模态人物识别领域领先，它综合利用人脸、人头、人体、声纹等多维度特征信息，对视频中的人物进行识别，大幅提高了综艺、电影、电视剧中的人物识别率，爱奇艺的人脸识别模型，除了人脸的身份之外，还有其属性信息，目前线上模型包含10+个属性，相较于工业界的其他模型更加全面。爱奇艺人脸识别与属性模型十五合一，一个模型可以同时识别身份属性，且各项属性的识别精度也比较高。奇观是多模态人物识别技术的应用功能，目前明星识别准确率达97.54%。 [4]

卡通角色识别技术

爱奇艺自建了业界首个的卡通人物数据库，拥有业内首个人工标注的大规模卡通人物识别检测数据集。基于真实场景中视频任务的多模态数据库已经成为业内重要的多模态数据，标签清晰规模大。目前已经有超过20,000个卡通人物（虚拟形象），并开通了10W+个卡通检测脸、38W+张卡通识别脸的iCartoonFace数据集，采用多模态人物识别技术和虚拟人物识别技术，综合对卡通类视频中的人物形象进行识别。奇观卡通人物识别技术的应用功能，目前识别准确率达到90.02% [4]

识别明星、识别卡通角色

触发奇观功能，可识别当前视频的明星人物或卡通角色。依托爱奇艺强大的多模态人物识别和卡通识别技术。爱奇艺的总明星识别数到30万+，总人物识别数到120万+，几乎涵盖了爱奇艺TOP100万中90%以上的PGC视频，包含影视剧、综艺、电影等多个频道。目前在爱奇艺APP 中全量上线，用户可以在观看视频时，点击奇观，可识别明星角色以及卡通角色，了解其角色相关的百科信息。 [5]

识别BGM

通过音频特征抽取和匹配等技术，提供给观众在观看影视中出现的配乐、背景音乐等，一键识别出用户感兴趣的音乐，例如：人气自制剧《隐秘的角落》中得到应用，并得到了良好的用户反馈；用户一键识别出感兴趣的音乐后，可以边观看视频边了解音乐信息，还可以链接到音乐社区进行收听。 [5]

识别商品购买

在爆款原创综艺《潮流合伙人》节目中，爱奇艺上线了行业首个支持识别同款商品并且进行购买，用户可根据个人喜好，点击奇观来识别明星同款，随后进入购买页面可进行购买。该功能在自制综艺《我是唱作人2》中得到了很好的应用，通过奇观，开启了新营销场景的大门。 [5]

台词实体识别

利用OCR和NLP等技术，通过对视频中角色台词的识别，帮助用户了解台词中的知识点、专业术语等信息。用户可以通过奇观按钮，边观看边了解台词中的信息。在影视剧《鬓边不是海棠红》得到了很好的应用，让观众能够了解丰富的戏曲知识。 [5]

AI优秀案例实践奖Top 30 [3]

网址：奇观 http://c.mxgxt.com/news/view/903212

⬅️上一篇：爱奇艺个人介绍怎么改爱奇艺演员

➡️下一篇：爱奇艺iq号和爱奇艺账号的关系