AI个人学习
和实操指南

悦动人像EMO:基于人物肖像图片和人声音频生成高质量人物肖像动态视频

综合介绍

悦动人像EMO是阿里云大模型服务平台百炼(Model Studio)提供的一款高质量人物肖像动态视频生成工具。该工具基于人物肖像图片和人声音频文件,生成逼真的人物肖像动态视频。悦动人像EMO包含两个独立的模型:“悦动人像EMO-detect”和“悦动人像EMO”,分别用于人物图片合规检测和人物视频生成。用户可以通过简单的API调用,快速生成符合规范的高质量人物肖像视频,适用于多种应用场景,如虚拟主播、数字人等。

在通义APP中免费体验。正式商用可以通过API调用或阿里百炼平台自部署。

悦动人像EMO:基于人物肖像图片和人声音频生成高质量人物肖像动态视频-1

 

功能列表

  • 人物图片合规检测:使用“悦动人像EMO-detect”模型检测输入的图片是否符合规范。
  • 人物视频生成:使用“悦动人像EMO”模型,基于人物肖像图片和人声音频文件生成动态视频。
  • 多种风格选择:支持活泼、适中、平静等多种动作风格强度。
  • API调用:提供简单易用的API接口,方便开发者集成。
  • 独立部署:支持模型独立部署,满足高并发需求。

 

使用帮助

安装与配置

  1. 开通服务:首先需要在阿里云平台开通悦动人像EMO服务,并获取API Key。
  2. 获取API Key:登录阿里云账号,进入大模型服务平台百炼,获取API Key。

使用步骤

  1. 调用图片检测模型
    • 使用“悦动人像EMO-detect”模型,检测输入的人物肖像图片是否符合规范。
    • API调用示例:
     import requests
    url = "https://api.aliyun.com/emo-detect"
    headers = {"Authorization": "Bearer YOUR_API_KEY"}
    data = {"image": "base64_encoded_image"}
    response = requests.post(url, headers=headers, json=data)
    print(response.json())
    
  2. 调用视频生成模型
    • 使用“悦动人像EMO”模型,输入检测通过的人物肖像图片和人声音频文件,生成动态视频。
    • API调用示例:
     import requests
    url = "https://api.aliyun.com/emo"
    headers = {"Authorization": "Bearer YOUR_API_KEY"}
    data = {
    "image": "base64_encoded_image",
    "audio": "base64_encoded_audio",
    "style_level": "active"
    }
    response = requests.post(url, headers=headers, json=data)
    print(response.json())
    

独立部署

  1. 购买资源:在阿里云平台购买独占实例资源。
  2. 部署模型:分别部署“悦动人像EMO-detect-deployment”和“悦动人像EMO-deployment”模型。
  3. 调用部署模型
    • 调用“悦动人像EMO-detect-deployment”模型进行图片检测。
    • 调用“悦动人像EMO-deployment”模型进行视频生成。

 

资费与限流

模式 模型名称 单价 免费额度 任务下发接口QPS限制 同时处理中任务数量
模型调用 emo-detect-v1 模型调用,后付费:


0.004元/张

200张

有效期:百炼开通后180天内

5 同步接口无限制
emo-v1 模型调用,后付费:

  • 生成1:1画幅视频:0.08元/秒
  • 生成3:4画幅视频:0.16元/秒
1800秒

有效期:百炼开通后180天内

1

(在同一时刻,只有1个作业实际处于运行状态,其他队列中的作业处于排队状态)

模型部署 emo-detect 模型独立部署,预付费:

  • 10000元/算力单元/月
  • 20元/算力单元/小时

需部署成功后调用,仅收取部署费用。

5 1算力单元支持5并发
emo 1算力单元支持1并发

 

注意事项

  • 资费与限流:根据使用量后付费,具体资费标准请参考阿里云官方文档。
  • 并发限制:根据购买的算力单元,支持不同的并发任务数量。
AI轻松学

普通人的AI入门指南

帮助你以低成本、零基础学会如何利用AI工具。AI就像办公软件一样,是每个人的必备技能。 掌握AI会让你在求职中占据优势,在未来的工作和学习中事半功倍。

查看详情>
未经允许不得转载:首席AI分享圈 » 悦动人像EMO:基于人物肖像图片和人声音频生成高质量人物肖像动态视频

首席AI分享圈

首席AI分享圈专注于人工智能学习,提供全面的AI学习内容、AI工具和实操指导。我们的目标是通过高质量的内容和实践经验分享,帮助用户掌握AI技术,一起挖掘AI的无限潜能。无论您是AI初学者还是资深专家,这里都是您获取知识、提升技能、实现创新的理想之地。

联系我们
zh_CN简体中文