ARTICLE DETAIL

资讯详情

深耕郑州网站建设与运营推广的一线实战洞察。

Duix Avatar开源AI数字人:30分钟跑起离线视频生成

Duix Avatar开源AI数字人:30分钟跑起离线视频生成 Duix Avatar开源AI数字人30分钟跑起离线视频生成【免费下载链接】Duix-Avatar Truly open-source AI avatar(digital human) toolkit for offline video generation and digital human cloning.项目地址: https://gitcode.com/GitHub_Trending/he/Duix-AvatarDuix Avatar是一款完全免费、开源的AI数字人工具包跑在你自己的NVIDIA显卡上全程不需要联网。它解决的问题很直接用一段真人出镜的视频和录音做出会开口说话的数字人视频。一句话讲清楚这个开源AI数字人是什么Duix Avatar用一段说话视频克隆你的脸和声音再用文字或音频驱动这个数字人输出成片素材全程不出本机。 两个数字可以锚定它传统3D数字人方案要几十万美元AI生成路线把成本压到约1000美元脚本支持中、英、日、韩、法、德、阿拉伯、西语共8种语言。 商用免费但员工超10万人或年营收超千万美元的公司需要另签商业授权。它能做什么三个场景一次说清克隆形象和声音上传一段真人说话的视频程序自动拆出视频和音频用音频训练语音模型。面部特征和轮廓被提取成2D数字人模型声音克隆保留语调和语速。训练完可试听用你自己的声音朗读任意文本不满意就重传素材。用文字或音频驱动视频文字输入先转成语音数字人按文本节奏说话唇形自动对齐。音频输入直接喂一段现成录音形象跟着语调做表情和口型。支持导入多个模特模型不同场景切换不同形象。本地离线生成训练、合成全程不联网音视频都存在本地磁盘。数据落在D盘Windows或用户主目录LinuxWindows的D盘需留30GB以上。适合个人创作者、课程制作和企业内部培训片不适合没有NVIDIA显卡的用户也不做实时对话只产非实时视频。部署前先算一笔硬件账32GB内存是起步线NVIDIA显卡是硬门槛驱动不装好三个服务都起不来。项目参考配置CPU13代 Intel i5-13400F内存32GB及以上显卡RTX 4070需N卡并装好驱动磁盘WindowsD盘30GB、C盘100GBUbuntu100GBWindows一键安装步骤确认WSL是否已装没有就先装。执行wsl --update更新WSL。安装Docker Desktop首次运行跳过登录。在 deploy/ 目录执行docker-compose up -d拉镜像约30分钟、70GB流量。看到3个服务全部Running服务端即就绪再装官方客户端安装包。Ubuntu 22.04安装步骤执行sudo apt install docker.io docker-compose装好Docker环境。按官方说明装NVIDIA驱动用nvidia-smi看到显卡信息即成功。安装NVIDIA Container Toolkit配置Docker走NVIDIA运行时并重启Docker。在 deploy/ 目录执行docker-compose -f docker-compose-linux.yml up -d。客户端为AppImage双击启动root用户登录桌面时需加no-sandbox参数。装完后本地API怎么用Docker起来后127.0.0.1上暴露4个端点。客户端走的就是同一套你也可以自己调用搭流程真实调用代码在 src/main/service/ 目录里。http://127.0.0.1:18180/v1/preprocess_and_tran语音模型训练上传参考音频拿到后续合成要用的参数。http://127.0.0.1:18180/v1/invoke语音合成输入文本返回wav格式的朗读音频。http://127.0.0.1:8383/easy/submit视频合成提交音频路径和数字人视频路径返回任务编号。http://127.0.0.1:8383/easy/query?code任务编号查询合成进度轮询到完成取成片。本地部署和云端API怎么选官方并行提供两条路自己部署这套Duix Avatar开源AI数字人或者直接用云端API服务。维度自己本地部署云端API服务适合谁技术开发者商业用户硬件需自购GPU服务器不用买GPU自定义可改源码扩展只能通过API扩展想改参数、接自己的业务流程就本地部署想快速出货、不想维护服务器就选云端且云端唇形效果更细腻。常见问题compose拉镜像超时、连接被拒是Docker Hub在国内不稳定到Docker设置里加镜像源。定制模特报Connection refusedASR服务启动慢或16GB内存不够等服务几分钟再试内存升到32GB。创建模特失败、声音克隆报错上传的视频里没有连续人声换一段真人说话的视频。想自己搭数字人应用的开发者可以clone仓库https://gitcode.com/GitHub_Trending/he/Duix-Avatar后按部署章节动手。踩坑先看 doc/常见问题.md照着自查步骤过一遍。【免费下载链接】Duix-Avatar Truly open-source AI avatar(digital human) toolkit for offline video generation and digital human cloning.项目地址: https://gitcode.com/GitHub_Trending/he/Duix-Avatar创作声明:本文部分内容由AI辅助生成(AIGC),仅供参考
返回列表