10月24日,相芯科技在RTE2020上正式发布了新一代AR视频特效SDK。相芯科技致力于打造XR内容的互动平台。此次发布的新一代AR视频特效SDK,开辟了20多项AR视频特效能力,全面赋能开发者,并依托这些基础能力和重叠组合的玩法,形成完整的AR视频解决方案。覆盖人脸和人体技术应用方向的综合能力矩阵,相芯科技AI AR各项能力的融合,更易用的平台工具和完善的售前售后服务体系,为开发者和行业合作伙伴提供高效、低成本的内容制作服务,帮助合作伙伴实现业务创新,创造巨大的用户价值。
AR特效能力覆盖范围很广
激发创造内容的新方式
对于在移动互联网的快速变化中成长起来的年轻用户来说,用视频创作和交流已经成为一种常态化的生活。随着5G的逐渐商业化,基于超高清、低时延、高交互的沉浸式视频服务场景不断涌现和演进,将成为视频行业的主力军。AR视频特效已经成为视频创作过程中不可或缺的工具之一。
自2016年以来,相芯科技不断为开发者更新迭代式AR视频特效解决方案,现已形成了游戏性丰富、性能卓越的成熟产品线。相芯科技的AR视频特效SDK提供了丰富的特效游戏,如美颜、人像滤镜、美容院、美体瘦身、AR道具贴纸、绿幕抠像、表情手势交互、背景分割、搞笑大头、avatar人脸驱动、avatAR全身驱动等。覆盖了行业内主流的ar特效。大幅提升人像拍摄的美感和艺术感,增强视频拍摄的互动性和趣味性。
人工智能让你更美丽
底层算法的优化带来了性能的大幅提升
新一代AR视频特效SDK是基于实时人脸跟踪、人体跟踪、人像分割、手势识别等深度学习技术的AR视频特效解决方案,提供了行业内非常全面的AR特效能力。
算法能力包括人脸关键点、面部表情运动检测、三维人脸模型重建、2D人体关键点、三维人体骨架、人像分割、头部分割、头发分割、手势识别等。在人脸特效方面,相芯提供了多达241个面部特征密集点,尤其是对于最‘玩’的两个部位——嘴巴和眼睛,相芯提供了更精准的点,保证应用层能够实现更多的玩法。同时,我们提供了56个面部表情系数和25个全身关键点,可以实现虚拟图像从面部到全身的实时驱动,效果灵活、逼真、有趣。此外,人像分割、头部分割、头发分割等技术能够实时准确识别轮廓,边缘清晰;15种人体动作识别和14种手势识别带来了更多的实时交互方式,大大拓展了用户的创作空间。
性能方面,这款新版本的AR视频特效SDK全面优化了底层算法,性能大幅升级。SDK的稳定性更好。美颜性能升级,美颜功能整合到第三方后,即使使用4年前的低配车型,也依然可以保证长时间流畅运行;优化手势识别性能,安卓端的CpU份额下降了30%以上,iOS端下降了50%以上;优化SDK包增量,其中人脸特效SDK的iOS包增量约为3.2M,安卓约为4.4m;同时pC底层性能进一步优化,多项功能性能提升,如美妆性能提升10%,健身、绿屏抠像性能提升30%。
相芯科技大幅优化了SDK的整体性能,不仅对数据有好处,也意味着开发者在
相芯科技的SDK支持iOS、安卓、pC、Mac、Unity等主流平台。可以灵活应用于各种业务场景。相芯还提供了行业内数十家音视频厂商的整合实例,连接快,成功率高。同时,相芯科技拥有专业的技术支持团队,提供全天候服务、快速响应、辅助对接,完善的售前售后服务在业内享有盛誉。
此外,针对不同需求的视频制作人,相芯科技开通了FUCreator编辑器,让有创作能力的平台开发者可以使用工具定制AR特效的制作、打包和实时调试,轻松打造属于自己的独特AR特效。FUCreator支持定制2D/3D贴纸、Animoji、AR口罩、美妆、背景分割等十多种特效。同时可以使用微笑、眨眼、比心、点赞等15种表情、15种手势,设置特效触发模式,设置个性化特效故事线,保证开发者能够独立高效地拓展能力和游戏性。
丰富业务场景,帮助行业向前发展
相芯科技是全球智能图形领域的创新追求者。我们深度参与计算机图形学和人工智能核心技术的融合创新,为客户提供XR内容制作和交互解决方案。目前,相芯科技的AR视频特效SDK已服务数千家B端客户,广泛应用于智能手机、直播短视频、虚拟社交、在线教育、新零售等诸多场景。
作为XR领域的内容创作形式之一,AR视频特效正在全民普及。凭借精湛的全栈式图形技术,依托与浙江大学合作建立的“浙江大学-相芯科技智能图形计算联合实验室”,相芯科技正在加速智能图形技术在XR领域的推广应用,打破XR内容制作的桎梏,重塑XR内容交互体验。不断丰富XR内容的业务场景,助力行业前行。