据生数科技消息,Vidu S2即将开启实时直播首秀,携手造梦次元让虚拟IP“紫樱”走进实时互动直播间。直播将支持弹幕应答、投票换装、场景切换、点歌和礼物反馈等互动,观众的实时参与可能改变直播间后续内容。
这不是提前录制的数字人视频循环播放,而是一场能够被观众实时影响的直播。依托Vidu S2实时交互与编辑大模型,紫樱将根据观众留言作出角色反馈,创作者也可以随时调整直播场景与角色状态。
模型硬核赋能:Vidu S2筑牢虚拟直播底层能力
此次合作并非简单的API对接,而是围绕虚拟人直播场景,对实时交互数字人模型进行完整业务链路验证,重点应对传统数字人方案预训练成本高、交互响应延迟高以及动作表情机械僵硬等问题。
在换装换景方面,观众可以通过弹幕投票提出服装诉求,后台操作后,角色能够平滑完成服装切换,保持人物面部状态稳定。创作者下达场景指令后,直播背景可实现环境自适应融合,例如从室内空间平滑过渡至海边日落,人物光影也会随环境同步调整。
在对话打断和持品互动方面,紫樱能够根据弹幕进行实时对话,完成拿取话筒等道具动作,并支持低延迟打断恢复。面对突发弹幕,角色可以实现秒级停顿和台词接续;收到粉丝礼物后,还能及时鞠躬致谢,口型与动作保持匹配。
在长时稳定和无限时长方面,模型支持无限时长流式生成,持续输出720P高清画质,长时间开播时可减少角色漂移、卡顿等问题。此前,造梦次元已基于Vidu S1完成紫樱90分钟公开直播测试,跑通弹幕、观众提问和礼物打赏全链路响应。升级至S2后,模型进一步优化长时开播稳定性、口型对齐、肢体表情和打断恢复等表现,并支持直播场景与妆造流畅切换。
不止于单一角色:赋能海量原创IP解锁实时生命
Vidu S2与造梦次元的合作不局限于单个虚拟IP,而是希望打通从一张参考图到开播的完整通路。创作者拥有IP原画后,便有机会让角色进入直播间,与粉丝实时对话,使虚拟人物从静态插画转变为能够感知弹幕、回应观众情绪并陪伴受众的数字角色。
未来,双方将继续沉淀可复用的落地经验,探索不同风格虚拟IP的直播表现,帮助更多创作者拓展虚拟IP的内容边界。
福利惊喜|限量2000积分S2体验权益来袭
官方将免费派送3000份2000积分的Vidu S2体验权益,用户无需消耗个人自有积分,先到先得,领完即止。
原文:Vidu S2 实时直播首秀!携手造梦次元,开启 AI 主播实时互动时代(来源:生数科技)
