会员登录 立即注册

搜索

剪映数字人口播原理

[复制链接]
崎山小鹿 发表于 2024-7-3 21:22:34 | 显示全部楼层 |阅读模式
崎山小鹿
2024-7-3 21:22:34 408 2 看全部
剪映版本升级了,新版本6.0.1支持数字人定制,于是我赶紧申请了使用资格
微信截图_20240702200113.png

目前的价格是49元创建一个数字人形象,能使用30天,30天之后要重新续费。
微信截图_20240703210617.png

支付49元之后剪映要求上传2.5至10分钟的视频
微信截图_20240703093744.png

接着要阅读一段话并录制视频上传
微信截图_20240703125157.png

第三步提交
微信截图_20240704115252.png

提交完成之后大概一个小时就会有一个特定数字人形象出现:
微信截图_20240703211258.png

发现在使用这个数字人时还额外的需要消耗积分,而我的积分为0,需要注册会员获取积分,就购买了一个19元包月的会员,终于可以正常使用了。

因为第一次定制数字人踩了不少坑。

1.上传的视频中每一帧都要有人物画面,像人物入场或者起身离场的画面都不能有。如果有这样的画面要用视频编辑软件剪掉。

2.录视频时眼睛平视摄像头,你以为他会自动纠正你的眼睛,滚犊子。

3.尽量露出完整的上半身轮廓,不要出现缺胳膊的情况。

4.嘴巴在任何时候都不能遮挡,如果要手扶眼镜要避开手拂过嘴巴的情况。
微信截图_20240703213558.png


推测剪映数字人的原理是:得到你的视频素材之后提取你的嘴型与音频的对应关系,在生成数字人的时候重新播放你的原始素材再根据当前的语音音频提取对应的嘴型,将新的嘴型覆盖原始素材嘴型,即完成数字人口播视频的生成。那么这里用到了嘴型识别技术和换嘴技术。相比3D数字人嘴型驱动方式这种对服务器的压力小太多,使用的嘴型都是原始素材中直接提取,所以生成的画面也非常逼真。

下面是我花了68元做的数字人效果。

回复

使用道具 举报

 楼主| 崎山小鹿 发表于 2024-7-3 22:39:12 | 显示全部楼层
崎山小鹿
2024-7-3 22:39:12 看全部
即使是字节跳动这样的公司做产品也是非常谨慎和保守的,以最少的投入获取最大的回报,能把数字人定制打到两位数以下也没别人了。
回复

使用道具 举报

 楼主| 崎山小鹿 发表于 2024-7-3 22:41:48 | 显示全部楼层
崎山小鹿
2024-7-3 22:41:48 看全部
崎山小鹿 发表于 2024-7-3 22:39
即使是字节跳动这样的公司做产品也是非常谨慎和保守的,以最少的投入获取最大的回报,能把数字人定制打到两 ...

换脸技术都比字节数字人技术高一个等级,更别说3d数字人嘴型和表情驱动了。
回复

使用道具 举报

  • 您可能感兴趣
您需要登录后才可以回帖 登录 | 立即注册 |

本版积分规则 返回列表

查看:408 | 回复:2

  • 免费在线 Autodesk FBX 到 OpenUSD 转换器

    免费在线 Autodesk FBX 到 OpenUSD 转换器 https://products.aspose.app/3d/zh-cn/co

    阅读:248|2024-07-10
  • 3D数字人制作-Character creator

    Character creator 《角色创建者》是由Reallusion [1]公司推出的一款3D角色建模软件,

    阅读:337|2024-07-08
  • 第九区

    第九区的本质是创建一个世界模型,希望用这个世界模型能为老百姓和政府提供数据和推理

    阅读:318|2024-07-07
  • Discuz强大的广告系统

    强大的广告系统 页头通栏广告:页头通栏广告显示于论坛页面右上方 全局 页尾通栏广

    阅读:203|2024-07-07
  • 对于老百姓而言VR到底能做什么?

    VR技术自诞生以来不断发展,已经广泛应用于教育、医疗、工程、军事、航空、航海、影视

    阅读:288|2024-07-06
  • 剪映数字人口播原理

    剪映版本升级了,新版本6.0.1支持数字人定制,于是我赶紧申请了使用资格 目前的价格

    阅读:408|2024-07-03
  • 科学作息AI助手

    在魔塔空间创建了一个作息时间管理的agent >>>>>点我体验

    阅读:370|2024-07-01
  • 开发者聊科学作息时间表

    非常有幸对科学作息时间表app的开发者做一次采访。 问:你对科学作息时间表app满意么

    阅读:337|2024-07-01
  • 在线制作ico图标的网站

    给大家推荐一个在线制作ICO图标的网站 比特虫: https://www.bitbug.net/ 你也可以直

    阅读:400|2024-06-30
  • 恢复微信聊天记录

    微信好友删除了,之前的聊天记录能恢复么?能的,不管是安卓、苹果、Windows下的微信

    阅读:405|2024-06-30
金双石科技,软件开发20年,技术行业领先,您的满意,就是我们的目标,认真负责,开拓进取,让成品物超所值
关于我们
公司简介
发展历程
联系我们
本站站务
友情链接
新手指南
内容审核
商家合作
广告合作
商家入驻
新闻合作

手机APP

官方微博

官方微信

联系电话:15876572365 地址:深圳市宝安区西乡街道宝民二路宝民花园 ( 粤ICP备2021100124号-1 ) 邮箱:qishanxiaolu@qq.com
QQ|Powered by Discuz! X3.5 © 2001-2024 Discuz! Team.
快速回复 返回顶部 返回列表