XEva 中文文档 下载 App

克隆人训练 素材上传与模型生成过程

训练的四阶段

创建克隆人后,平台会依次执行四个训练阶段:

阶段内容时长参考
素材审核平台自动 + 人工抽检检查素材合规性几分钟到半天
声音模型生成从语音素材训练出声学参数模型几小时
视觉模型生成从视频/图片素材训练出外貌和动效模型几小时
记忆库注入将填写的文本信息写入克隆人的上下文记忆即时完成

素材审核

上传的文本、语音和视频会先过一轮合规检查:

审核不通过的素材会被打回,需要修改后重新提交。

声音模型

详见 声音模型训练详解。这里简单说明:训练完成后,克隆人可以在语音通话和视频通话中用自己的声音说话。

视觉模型

详见 视觉模型训练详解。训练完成后,视频通话中的克隆人会有接近真人的外貌和动效反应。

质量的影响因素

克隆人最终质量由以下几个因素决定:

可以追加训练吗

可以。创建后随时可以追加上传新的语音和视频素材,平台会增量更新模型,不会从零开始。这对持续优化克隆人的声音效果特别有帮助。