当前位置: 首页 > news >正文

数字人起飞!字节Loopy对口型功能上线 可根据语境匹配表情和情绪

月初时,字节跳动推出的新项目Loopy曾引发广泛关注。这个旨在实现数字人声音与画面、表情及情绪完美匹配的对口型项目,如今已在即梦平台上正式亮相,并收获了如潮好评。

人工智能 - Ai工具集 - 未来办公人的智能办公生活导航网站!

办公人的必备神器 - Ai-321.com

AIbase亲自体验后表示,Loopy的效果令人惊艳,堪称当前中文对口型服务的佼佼者。过去,对口型视频常给人一种声音与嘴型割裂的感觉,但Loopy的出现彻底改变了这一局面。

这款由字节跳动与浙江大学科研团队联手打造的基于音频驱动的视频扩散模型,不仅能让数字人的嘴型与声音精准同步,还能根据语境自动赋予其相应的语气、情绪和表情。它能细致入微地控制虚拟形象的每一个动作,包括非语音动作如叹息,以及情绪驱动的眉毛、眼睛和头部运动。

在即梦平台上,用户可以轻松体验Loopy的魅力。AIbase上传了一张女孩照片进行测试,发现即梦提供了两种对口型方式:文本朗读和上传本地配音。操作简便,只需上传角色图片或视频,输入文本或配音即可。

测试结果显示,无论是说话还是唱歌,Loopy都能完美呈现人物的细微表情和动态。法令纹等细节的处理也相当真实,让人仿佛置身于真实的对话场景中。此外,Loopy还考虑到了喉结、眉毛等细微变化,进一步增强了视频的真实感。

更换不同角度的照片进行测试后,AIbase发现正面的角色呈现更具代入感。人物在唱歌时的闭眼、摇头等动作也显得异常真实。同样令人惊艳的是,Loopy在男生版测试中也展现出了出色的效果,让人不得不佩服其强大的功能。


http://www.mrgr.cn/news/34338.html

相关文章:

  • I.MX6U 裸机开发9.BEEP蜂鸣器实验
  • 免费,WPS Office教育考试专用版
  • <项目代码>YOLOv8 草莓成熟识别<目标检测>
  • 微信小程序=》基础=》常见问题=》性能总结
  • 【机器学习】数学知识:标准差,方差,协方差,平均数,中位数,众数
  • 内网安全-代理技术-socket协议
  • 一个可以在线制作样本册,拥有海量样本图册模板可以套用的网站
  • Vert.x,Core - Future
  • 视频无损压缩工具+预览视频生成工具
  • Java 中使用 Gson 实现深度克隆 #什么是深克隆与浅克隆?#clone方法为什么不能直接通过某个对象实例在外部类调用?
  • 我设置了路由器自动切换ip,这会让我的账号登录地址经常改变吗
  • 奔驰「进退」两难
  • Webpack 常见配置项
  • apply、call和bind的作用和区别
  • 装饰器模式
  • Vue使用Vue Router路由:开发单页应用
  • 【网络协议栈】传输层的意义 和 UDP协议结构的解析(内含逻辑图解通俗易懂)
  • yolo自动化项目实例解析(四)ui页面整理1 (1.85)
  • kafka负载均衡迁移(通过kafka eagle)
  • 独立站崛起:2024全球商家共谋增长新蓝图
  • Kibana中突然看不到日志ElasticSearch突然采集不到日志问题解决分析
  • Linux——虚拟机和Windows间的文件传输方式
  • 【运维监控】influxdb 2.0 + grafana 11 监控jmeter 5.6.3 性能指标(1)
  • 9.23-部署项目
  • 基于深度学习的竞争性对抗学习
  • 场景题面试题——第一篇