快手视频制作模板：快手Y-tech《短视频UGC智能创作中的计算机视觉技术》

近日，2021全球人工智能技术大会在杭州召开。本次会议汇聚了来自世界各地的人工智能领域专家，共同为人工智能的未来发展献计献策。在6月5日举行的计算机视觉论坛上，Y-tech部门AI技术平台负责人万鹏飞受邀发表了题为《计算机视觉技术在短视频UGC智能创造中》的演讲，分享了应用产业视角下计算机视觉技术向短视频智能创作方向的发展趋势及趋势。

快手深耕短视频内容创作生态，UGC智能创作降本增效

作为全国短视频社区，快手用户平均每天花费99.3分钟，日总活跃度达到3.792亿。在庞大的用户和流量的基础上快手视频制作模板，快手形成了动态的内容创作生态。平台原创视频存量300亿+，每月新增1000w+创作者。大部分内容是由普通用户创作的，即UGC（User）。据万鹏飞介绍，UGC强调人机协作。内容创作的主体是人，技术辅助人创作；智能创作强调技术具有一定的自动化能力，能够在内容创作中起到“降本增效”的作用。影响。对应实际产品，

人像美化功能：快手的人像美化功能包括美颜、美颜、美体、化妆、滤镜、画质增强等。除了基于图形和图像处理的经典技术方案外，快手@ >将基于深度学习的CV技术融入人像美化，极大提升用户体验。示例包括使用神经网络来提高人像照片的质量或使照片中的人更年轻，以及通过环境照明估计使真实场景中的美感效果更自然。

影音特效：除了常见的脸部AR装饰外，特效还有广泛的意义，包括但不限于各种玩法道具、贴纸动画、视频模板、小游戏等。比如万物互联的AR游戏是用摄像头扫描一般物体并触发效果（比如让湿纸巾跳舞）快手视频制作模板：快手Y-tech《短视频UGC智能创作中的计算机视觉技术》 ，而现场拍照游戏可以让图片以特定的方式移动（比如流行的“蚂蚁”啊嘿”前段时间），都是特效技术的范畴。

自主创作工具：快手推出了“快影”、“易显相机”等多款热门工具和产品，帮助用户创作专业的视频和图片。图片的“原始”应用程序。除了这些产品，万鹏飞在发布会上还重点介绍了另外两款比较特别的独立创作工具。

首先是虚拟偶像创播利器，A站面抓助手。用户可以低成本创建自己的头像，让头像随自己移动，进行直播互动和内容制作。大大降低了普通人或企业拥有和经营自己的虚拟偶像的门槛。

二是快手特效开放平台——碧阳特效平台，在这个平台上，人们可以设计、制作自己的特效玩法，发布到快手让更多人体验，获得接入到平台励磁。这样，短视频平台、特效创作者、特效消费者形成了互利共赢的生态系统。

CV技术助力快手短视频智能创作，5大变革传达技术发展趋势

短视频UGC智能创作各种功能的实现大多依赖（但不限于）计算机视觉技术，即CV技术。万鹏飞在演讲中从工业应用的角度介绍了人类感知与重构技术、环境感知与重构技术、像素级语义分析、生成技术和多模态技术五个技术方向。

人/环境感知与重构技术：感知与重构是智能创造的重要前提，也是CV领域的重要课题。主要包括点/帧检测、物体/场景识别、动作捕捉、VO/SLAM、3D重建等，这些CV基础技术有效保障了用户的创作体验。

像素级语义分析：该领域应用最广泛的是分割技术，俗称抠图。除了比较常见的人像分割，万鹏飞还展示了一个快手实时天空分割的案例。无论是窗户的遮挡，还是建筑物与天空的连接，分割都非常细腻。除了各种分割和抠图，有时还需要分析图片中的其他语义信息，例如深度和法线。

生成技术：以生成判别网络（GAN）为代表的生成技术是近年来非常热门的话题。除了各种有趣的特效（如“童话脸”特效），生成技术已经渗透到智能内容创作的方方面面。比如传统的染发效果就是在头发上叠加一层颜色，效果很假。使用生成技术染发更接近现实中的实际染色效果。

多模态技术：在现实世界中快手视频制作模板，人们感受和表达信息大多是多模态的。一个短视频不仅包含图片，还包含声音、文字信息等，因此UGC智能创作也要联合建模多模态信息。在智能创作方面快手视频制作模板：快手Y-tech《短视频UGC智能创作中的计算机视觉技术》 ，多模态技术的落地场景很多，包括短视频配乐、文案、图文转视频、文字生成图像等。

上述技术在实际实现中会面临很多挑战，包括如何保证算法在各种模型上都能发挥出最佳算法效果，保证流畅运行。如何保证用户在各种使用场景下都能保证算法的鲁棒性。这些都是CV技术在实际业务中落地时必须考虑和解决的问题。

演讲的最后，万鹏飞对短视频UGC智能创作技术未来发展的5大趋势进行了展望：“一是从单模态到多模态，利用多模态信息进行智能创作；二是，生成模型会越来越强大，生成的内容更加真实，生成过程更加稳定可控；三是内容形式正朝着虚实融合的方向发展，虚实的界限变得模糊，混合现实技术大有可为；第四，从辅助生产到辅助创意，技术需要帮助人们解决内容创作的创意瓶颈问题；最后，计算模式将走向云-边-端联合计算，强大的计算能力将为用户解锁更多、更智能的创意体验。”

快手Y-tech简介

Y-tech团队是公司在人工智能领域的探索者和开拓者，致力于计算机视觉、计算机图形学、机器学习、AR/VR等领域的技术创新和业务落地，不断探索新技术和新用户体验的最佳选择。Y-tech在北京、深圳、杭州和帕洛阿尔托设有研发团队，成员来自国际知名大学和公司。

长期招聘（全职和实习生）：计算机视觉、计算机图形学、多模态技术、机器学习、AI工程架构、美颜技术、特效技术、性能优化、平台开发、工具开发、技术美术、产品经理、等人才的方向。如果您对我们的工作感兴趣，请联系并加入我们，一起做很酷的事情，创造更大的价值。联系方式：

我想你会喜欢：