导读：快手针对虚拟世界互动的技术方案主要分为两方面，分别是平台和软件。在平台侧快手建立了快手虚拟世界互动平台（KMIP）快手埋点赞的平台，基于PAAS技术基础支撑各类下层应用。在软件侧，面向不同应用场景和用户群体的虚拟世界应用产品包括快手虚拟演播助手（KVS）、快手面捕助手（KFC）等。
文章将围绕下边五点展开：
①虚拟世界互动的背景与现况
②平台方案：快手虚拟世界互动平台（KMIP）
③软件方案
④项目案例
⑤总结与展望
分享嘉宾｜万鹏飞博士快手Y-techAI技术中心负责人
编辑整理｜杨佳慧
出品社区｜DataFun
01
虚拟世界互动的背景与现况
首先分享一下目前虚拟世界互动的一些基础概念、背景及现况，以及快手在已有内容社区基础上对虚拟世界进行的技术拓展与思索。
1.背景与现况
虚拟世界互动的定义：虚拟世界互动是指在虚拟空间中进行的沉溺式多人互动。人可以是真人和数字人（主要是数字人），互动多为社交、游戏和展览类的活动。在此概念下，市场上涌现出许多优秀的产品，例如：游戏类产品Roblox、工具&社交产品Zepet、开放剧情类产品RivalPeak、娱乐类产品腾讯音乐Tmeland、展会类产品网易瑶台、营销类产品百度希壤等。
（1）快手虚拟世界新形态平台
环绕着快手短视频和直播内容生态，虚拟世界平台衍生出更多不同的展示形态。例如云蹦迪、线上演唱会以及直播互动游戏等，听众可以通过发送弹幕以及基于H5的各类互动方式来提高参与感和沉溺感，并才能通过互动的形式成为虚拟活动中的决策参与者。另外，基于短视频和直播的虚拟世界互动无需改变用户对快手平台一贯的使用习惯，对用户愈发友好。
2.快手技术方案总览
快手针对虚拟世界互动的技术方案主要分为两方面，分别是平台和软件。在平台侧快手建立了快手虚拟世界互动平台（KMIP），基于PAAS技术基础支撑各类下层应用。在软件侧，面向不同应用场景和用户群体的虚拟世界应用产品包括快手虚拟演播助手（KVS）、快手面捕助手（KFC）等。
02
平台方案：快手虚拟世界互动平台（KMIP）
第二部份内容会从平台的角度给你们介绍一下快手在虚拟世界的一些技术建设。我们建立了快手虚拟世界互动平台（KMIP），作为一个统一的基座支撑各类在虚拟世界中的互动能力（云蹦迪、云演唱会等）。右图为快手虚拟世界互动平台的用户交互流程图。
用户（主播或听众）的设备软件（PC软件/App/H5）通过集成我们的KMIPSDK将各类交互讯号传递给KMIP，同时接收KMIP处理发送的流媒体信息快手埋点赞的平台，实现多端低延时接入的媒体交互和场景应用功能。
快手虚拟世界互动平台由三部份技术打造而成，分别为基础层、计算层和接入层。
以下为快手虚拟世界互动平台（KMIP）的特点。
多终端接入是指可以支持PC/手机/XR等各类设备的接入，以便用户参与。快手作为一个以内容为核心，联接听众和创作者，打通短视频和直播内容的分发平台，将用户群体界定成两大类：终端听众和创作者。创作者相较于终端听众而言在设备上会有着更高阶的需求，终端听众则更须要才能低门槛的参与，支持多终端的接入能够满足用户在使用上的差别。
RTC结构化数据传输的定义浅显来讲就是支持传输各类各样的数据，例如动捕/语音/文本/控制参数等。通过支持丰富多元的互动讯号的输入和对应的数据反馈，在满足适配不同交互方式和数据传输要求情况下同时可以保证系统在交互整个链路上的完整性而且增加了延后风险。
快手虚拟世界互动平台（KMIP）除了支持端渲染、云渲染，同时也支持端云协同渲染，以满足各类不同场景下的渲染需求。
快手虚拟世界互动平台（KMIP）才能支持真人(通过绿幕抠图接入)和数字人（虚拟IP、Avatar等）等多种角色参与其中。
基于快手虚拟世界互动平台（KMIP）的设计理念，才能承载多人互动的开放生态，开放世界多人同屏，用户还能自由切换视角以第一或第二人称视角参与其中，体验不同视角的场景。
03
软件方案：快手虚拟演播助手（KVS）等
第三部份内容会从实用性角度主要介绍两个应用于特定场景的软件，主要作用为提供给主播和创作者们更友好的交互方法。
1.快手虚拟演播助手（KVS）
关于快手虚拟演播助手的定义：KVS是一款面向PGC场景的数字人驱动及播出的工具。
主要面向的用户群体为追求高品质的数字人直播的用户。KVS为其提供了一站式服务，除了才能满足数字人所需的驱动和渲染能力，在其基础上还能否满足3D场景的互动能力。
以下是快手虚拟演播助手KVS的构架逻辑：
从业务层面来说虚拟演播助手可以渗透到智能文娱、直播电商和虚拟拍摄等场景。利用快手对音视频的高效处理和数据的埋点统计等中台能力，借助MVC等交互框架，和众多AI能力，实现虚拟人的高仿生及达到虚拟世界的高效互动。
2.快手面捕助手（KFC）
关于快手面捕助手的定义：KFC是一款面向UGC的数字人驱动及播出的工具。
以下是快手面捕助手KFC的构架逻辑：
KFC主要面向于q版虚拟主播（娱乐、游戏等），在交互层和能力层上也同样有些许的差异，稍特殊的一点是手链模式，手链模式是指在最小化当前程序时，虚拟人仍能叠加在桌面上，可提高虚拟世界互动的体验感和参与感，相比KVS，KFC的构架在中间件及基础层是基本相同的。
04
项目案例
第四部份会从几个精典案例入手愈发清晰的了解快手虚拟世界互动平台的实际应用。
1.案例一：主播与主播互动场景
虚拟主播同屏直播互动的核心点打破了时间和空间的限制，多位主播可以同时呈现在同一个数字空间中并进行相应的互动。PC端和手机端都支持。
2.案例二：主播与听众互动场景
真人主播和虚拟主播同屏共处的方式更才能推动用户，提高用户的体验感。
此处的虚拟主播均为实时驱动和专业诠释，所以对于用户反馈作出的反应也是即时且深度的，可加深用户的互动性和参与度。
3.案例三：其他创新场景
此处的互动剧是指用户可以充分参与到该活动中来，但是主播会按照听众的一些行为反馈来解锁不同分支的剧情迈向因而产生不同的故事结局。基于虚拟变身的互动则可以拉近主播和听众的距离，营造愈发个性化的体验。
无论从内容疗效还是呈现形式上，都彰显出基于直播方式的虚拟世界互动的场景在未来具有着巨大的想像空间和发展前景。
05
总结与展望
第五部份会从综合角度出发阐述虚拟世界的后续发展。
1.内容形态迭代
内容形态的迭代发展由过去的文字图象内容，逐步演变至今日视频和直播的方式。未来以XR作为新媒介衍生的新内容方式，其沉溺感和互动性会呈指数型下降，我们相信相关的研究领域中仍存在着待挖掘的巨大价值。
2.资源整合实现共赢
快手作为以用户为核心、视频和内容为驱动力的社区开放平台的产品，整合资源共同挖掘数字人和XR内容的潜力，对于快手生态来说具有重要意义。我们欢迎各个领域的生态合作伙伴和我们一起合作共建共赢。也欢迎在数字人及XR方面有需求的顾客联系我们，试用和采办我们的解决方案。
