当前位置：首页 > news >正文

数字人Live_Talking的搭建和使用

news 来源：原创 2025/5/29 10:52:09

Live_Talking是一个实时交互流式数字人，可以实现音视频同步对话。今天咱们来试着部署一下项目。

先来看下本地环境

系统：Ubuntu 22.04

显卡：rtx 3060

cuda: Cuda 12.1

git上推荐cuda11.3，但是我用cuda12.2也搭建成功了。

1、先来下载git 代码

git clone https://github.com/lipku/LiveTalking.git

2、conda 创建环境

conda create -n nerfstream python=3.10conda activate nerfstream

3、去https://pytorch.org/get-started/previous-versions/官网上面找到cuda对应版本的pytorch安装下

conda install pytorch==2.5.1 torchvision==0.20.1 torchaudio==2.5.1 pytorch-cuda=12.1 -c pytorch -c nvidiapip install -r requirements.txt

安装过程很顺利，没出现什么问题

4、下载模型

夸克云盘https://pan.quark.cn/s/83a750323ef0
GoogleDriver https://drive.google.com/drive/folders/1FOC_MD6wdogyyX_7V1d4NDIO7P9NlSAJ?usp=sharing

下载后按照这个方式修改下放到对应目录下面

将wav2lip256.pth拷到本项目的models下, 重命名为wav2lip.pth;
将wav2lip256_avatar1.tar.gz解压后整个文件夹拷到本项目的data/avatars下

4、接着跑下代码试试。

python app.py --transport webrtc --model wav2lip --avatar_id wav2lip256_avatar1

显示成功，浏览器中输入地址，如图：

咦，怎么没有数字人形象呢？而且，输入文字，一点send就报错。

研究了半天，又是看源码，又是重新搭建环境的，到最后才发现需要先点start，效果如图

哎...终于成功了。

这就是搭建livetalking的整个过程，大家在搭建的过程中有遇到什么问题的欢迎留言，大家一起讨论学习。

数字人Live_Talking的搭建和使用

Live_Talking是一个实时交互流式数字人，可以实现音视频同步对话。今天咱们来试着部署一下项目。先来看下本地环境系统：Ubuntu 22.04 显卡：rtx 3060 cuda: Cuda 12.1 git上推荐cuda11.3，但是我用cuda12.2也搭建成功了。 1、…...

编程日记 2025/5/29 10:52:09

Coupang火箭计划深度攻略：eBay卖家突破韩国市场的三维数据作战模型

一、市场机遇与竞争格局解码 1.1 Coupang生态位分析用户基数：2600万活跃买家（占韩国成年人口68%） 客单价表现：$82（较eBay韩国站高37%） 流量分布：移动端占比91%（需重点优化移动端详…...

编程日记 2025/5/8 10:45:02

Flask + ajax上传文件（四）--数据入库教程

本教程将详细介绍如何使用Flask后端和AJAX前端实现Excel/csv文件上传，并将数据导入数据库的功能。一、系统架构概述前端(HTML+JS) → AJAX请求 → Flask后端 → 数据库二、环境准备 1. 安装必要库 pip install flask pandas sqlalchemy openpyxl2. 项目结构 data_imp…...

编程日记 2025/5/29 9:22:25

C++ 部署的性能优化方法

一、使用结构体提前存放常用变量在编写前后处理函数时，通常会多次用到一些变量，比如模型输入 tensor 的 shape，count 等等，若在每个处理函数中都重复计算一次，会增加部署时的计算量。对于这种情况，可以考…...

编程日记 2025/5/29 10:20:53

并发设计模式实战系列(8)：Active Object

🌟 大家好，我是摘星！ 🌟 今天为大家带来的是并发设计模式实战系列，第8章Active Object，废话不多说直接开始~ 目录一、核心原理深度拆解 1. 对象与执行解耦架构 2. 核心组件二、生活化类比&#xff…...

编程日记 2025/5/29 9:56:24

jenkins容器提示磁盘空间过低

进入jenkins容器查看： sudo docker exec -it jenkins sh df -h查看磁盘占用情况： # df -h Filesystem Size Used Avail Use% Mounted on overlay 59G 56G 193M 100% / tmpfs 64M 0 64M 0% /dev shm…...

编程日记 2025/4/29 6:08:12

记一次pdf转Word的技术经历

一、发现问题前几天在打开一个pdf文件时，遇到了一些问题，在Win10下使用WPS PDF、万兴PDF、Adobe Acrobat、Chrome浏览器打开都是正常显示的；但是在macOS 10.13中使用系统自带的预览程序和Chrome浏览器（由于macOS版本比较老了&am…...

编程日记 2025/5/29 9:50:10

【3分钟准备前端面试】Hybrid开发谷歌浏览器调试安卓app

查看数据请求，页面dom结构和样式，日志打印输出，页面缓存等浏览器控制台素有功能，方便调试检查元素，方便bug的定位注：该文档是谷歌浏览器调试安卓apk内嵌网页前提 app包需要是debug包，并且app的webview开启debug模式需要翻墙安卓手机打开开发者模式，开启usb调试调试…...

编程日记 2025/5/28 16:25:30

【二分查找】寻找峰值（medium）

6. 寻找峰值（medium） 题⽬描述：解法⼆（⼆分查找算法）：算法思路：C 算法代码：Java 算法代码： 题⽬链接：162. 寻找峰值题⽬描述： 峰值元素是指其值…...

编程日记 2025/5/29 9:37:30

这是一款好用的PDF工具！

用户习惯有时确实非常顽固，想要改变它可能需要漫长的时间。比如PDF软件，我认为国产的福/昕、万/兴等软件都非常不错，它们贴合国人的使用习惯，操作起来非常顺手。但因为我习惯使用DC，所以在处理PDF文档时，…...

编程日记 2025/5/29 9:05:52

征程 6 逆向自证 hbm 与 bc 一致性

1.引言在征程 6 算法工具链使用过程中，会存在算法侧与软件侧的交接，偶尔会遇到，需要自证清白的情况，例如： 算法侧反馈：bc 精度没问题，也参考了【征程 6】bc 与 hbm 一致性比对文章&#xff…...

编程日记 2025/5/29 9:57:28

深入理解链表：从基础操作到高频面试题解析

目录一、链表基础概念 1.1 什么是链表？ 1.2 链表核心特性 1.3 链表与数组对比二、链表类型详解 2.1 单向链表 2.2 双向链表 2.3 循环链表三、链表核心操作实现 3.1 插入操作 3.2 删除操作四、链表高频面试题精讲 4.1 反转链表（LeetCode…...

编程日记 2025/5/29 9:46:03

【MCP Node.js SDK 全栈进阶指南】高级篇（1）：MCP多服务器协作架构

随着业务规模的不断扩大和系统复杂度的提升，单一服务器架构往往无法满足高并发、高可用性和弹性扩展的需求。在MCP生态系统中，多服务器协作架构成为构建大规模应用的必然选择。本文将深入探讨MCP TypeScript-SDK在多服务器环境下的部署、协作和管理，以及如何构建高可用、高性…...

编程日记 2025/5/29 9:44:35

铭记之日(3)——4.28

铭记之日(3)——4.28 25.4.28，绝对是继20.12.19与24.6.26之后，又一个被钉在耻辱柱上的日子。 4.28本质上为12.19的严重恶劣版。道德败坏、恶劣的大骗子终于在今日穿帮落马。斯文面孔下，竟藏匿了如此罪恶幽暗混沌的内心。 24.10.20&…...

编程日记 2025/4/29 6:06:03

4月28日信息差全景：国际局势、科技突破与市场震荡一、国际政治与安全：俄乌冲突关键转折

一、国际政治与安全：俄乌冲突关键转折 1. 乌克兰反攻进展与情报差异前线动态：俄国防部称在顿涅茨克击退乌军三次进攻，摧毁12辆坦克；乌方则宣布在巴赫穆特南部推进2公里，双方战报存在显著差异。信息差根源：战场信息管控导致西方媒体与俄媒报道截然不同。国际援助：美…...

编程日记 2025/5/25 9:52:34

Docker 容器虚拟化技术和自动化部署

Docker 容器虚拟化技术和自动化部署一、Docker 核心组件1.1 Docker 引擎1.2 Docker 镜像1.3 Docker 容器1.4 Docker 仓库二、Docker 环境安装清华镜像安装三、Docker 基本操作3.1 镜像管理3.1.1 查看本地镜像 docker images3.1.2 添加镜像标签 docker tag3.1.3 查看镜像信息…...

编程日记 2025/5/29 10:29:21

こんにちは Today, I will continue to share my life in JaPan. Everyone both know I couldn’t say JanPanese fluently【But I still learn this Language, I think it’s interesting for me{maybe it’s one exciting challenge, I want become a challenger that it li…...

编程日记 2025/5/23 20:27:48

OpenResty技术深度解析：原理、应用与生态对比-优雅草卓伊凡

OpenResty技术深度解析：原理、应用与生态对比-优雅草卓伊凡一、OpenResty技术概述 1.1 OpenResty是什么？ OpenResty是一个基于Nginx的高性能Web平台，它将标准的Nginx核心与一系列强大的第三方模块（主要是LuaJIT）捆绑在一起，形成了一个全功能的Web应用服务器。不同于传…...

编程日记 2025/5/29 9:09:27

深度学习任务评估指标

一、概念篇混淆矩阵有何作用？混淆矩阵（Confusion Matrix）是用于评估分类模型性能的工具，它展示了模型预测结果与实际标签之间的对比。混淆矩阵通常包括四个关键元素： True Positive (TP)：模型正确预测为正类的数量。True Negative (TN)：模型正确预测为负类的数量。F…...

编程日记 2025/5/29 10:52:08

Python-librosa库提取音频数据的MFCC特征

文章目录 MFCC特征代码分享 MFCC特征 MFCC（Mel-Frequency Cepstral Coefficients）是通过人耳对声音频率的感知方式对音频信号进行处理得到的特征，广泛用于语音识别和音频处理。代码分享 import os import librosa import pywt import matpl…...

编程日记 2025/5/29 9:17:36

因特网和万维网

本文来源 ：腾讯元宝因特网（Internet）和万维网（World Wide Web，简称WWW）是紧密相关但完全不同的两个概念，它们的核心区别如下： 本质不同因特网（Internet&#…...

编程日记 2025/5/22 20:00:40

道可云人工智能每日资讯｜“人工智能科技体验展”在中国科学技术馆举行

道可云元宇宙每日简报（2025年4月28日）讯，今日元宇宙新鲜事有： 《2025年提升全民数字素养与技能工作要点》发布近日，中央网信办、教育部、工业和信息化部、人力资源社会保障部联合印发《2025年提升全民数字素养与技能…...

编程日记 2025/5/29 9:18:49

Day8 鼠标控制与32位模式切换

文章目录 1. 例程harib05a（鼠标解读1）2. 例程harib05b（代码整理）3. 例程harib05c（鼠标解读2）4. 例程harib05d（移动鼠标指针）5. 通往32位模式之路 1. 例程harib05a（鼠标解…...

编程日记 2025/5/28 12:59:36

塔能科技：点亮节能之光，赋能工厂与城市

在能源形势日益严峻的当下，节能成为了各行各业的关键任务。工厂作为能耗大户，降低能耗迫在眉睫；市政照明作为城市运行的基本保障，也急需向绿色节能转型。塔能科技凭借其能源精准节能和定制开发的核心能力，为工厂节能和…...

编程日记 2025/5/29 9:08:27

UDP 报文结构与注意事项总结

目录一、UDP报文结构简介 1. 源端口号（Source Port，16位）： 2. 目的端口号（Destination Port，16位）： 3. 长度（Length，16位）： 4. 校…...

编程日记 2025/5/29 10:33:46

DBeaver CE 24.1.3 (Windows 64位) 详细安装教程

1. 下载安装包 dbeaver-ce-24.1.3-x86_64-setup.exe下载链接：https://pan.quark.cn/s/5a8dc9ad747f。下载完成后，双击运行安装程序。 2. 运行安装向导选择语言：安装程序启动后，选择安装语言（如英文或中文&#xff…...

编程日记 2025/5/27 17:55:03

Java多线程之线程控制

1、线程睡眠——sleep 如果我们需要让当前正在执行的线程暂停一段时间，并进入阻塞状态，则可以通过调用Thread的sleep方法注意如下几点问题 ①、sleep是静态方法，最好不要用Thread的实例对象调用它，因为它睡眠的始终是当前正在运…...

编程日记 2025/5/29 10:04:43

任意波形发生器——2路同步DA模拟量输出卡

定义‌ 任意波形发生器（Arbitrary Waveform Generator, AWG）是一种电子测试仪器，能够通过数字信号处理（DSP）和数模转换（DAC）技术生成非周期性、可编程的任意形状电信号。与传统函数发生器仅支持…...

编程日记 2025/5/29 9:29:43

【Java】使用 HTTP 响应状态码定义web系统返回码

系统状态码定义 public interface GlobalErrorCodeConstants {ErrorCode SUCCESS new ErrorCode(0, "成功");// 客户端错误段 ErrorCode BAD_REQUEST new ErrorCode(400, "请求参数不正确");ErrorCode UNAUTHORIZED new ErrorCode(401, "账号未登…...

编程日记 2025/5/29 9:56:24

测试反馈陷入死循环？5大策略拆解新旧Bug难题

新旧Bug堆叠，测试反馈陷入死循环，如果不及时解决此问题，往往容易导致项目延期、成本增加、团队效率降低，直接影响产品的市场竞争力。因此需及时应对此问题，进而保障项目进度如期进行，提升软件质量&#xf…...

编程日记 2025/5/29 9:50:10

结合大语言模型的机械臂抓取操作学习

结合大语言模型的机械臂抓取操作学习（完整ppt和代码）无视频代码能正常运行时不负责答疑! 电子产品，一经出售，概不退换算法设计、毕业设计、期刊专利！感兴趣可以联系我。 🏆代码获取方式1： 私信…...

编程日记 2025/5/29 10:01:07

待验证---Oracle 19c 在 CentOS 7 上的快速安装部署指南

Oracle 19c 在 CentOS 7 上的快速安装部署指南 Oracle Database 19c 是一个功能强大的企业级数据库系统，下面我将为您提供在 CentOS 7 上快速安装部署 Oracle 19c 的详细步骤。一、准备工作 1. 系统要求 CentOS 7 (64位)最小内存: 2GB (推荐 8GB 以上)最小磁盘…...

编程日记 2025/5/29 9:48:05

风力发电领域canopen转Profinet网关的应用

在风力发电领域，开疆canopen转Profinet网关KJ-PNG-205的应用案例通常涉及将风力涡轮机内部的CANopen网络与外部的Profinet工业以太网连接起来。这种转换网关允许风力发电场的控制系统通过Profinet协议收集和监控涡轮机的状态信息，同时发送控制命令。风力…...

编程日记 2025/5/23 10:57:49

vr全景相机如何选择？

VR全景相机，作为虚拟现实技术的核心设备之一，能够拍摄360度全景照片和视频，使用户通过虚拟现实设备身临其境地体验拍摄场景。这种技术的快速发展，得益于传感器、图像处理和计算机视觉技术的不断进步。选择一台合适的VR全景相机…...

编程日记 2025/5/20 7:55:16

在 Conda 中，包的安装路径在电脑的哪里

在 Conda 中，包的安装路径取决于你的 Conda 安装方式和环境类型（base 或其他虚拟环境）。以下是不同情况下的详细说明： 📌 1. Conda 包的默认安装路径 Conda 将所有包存储在 pkgs 目录下，并在各个环境中…...

编程日记 2025/5/28 14:37:45

phpstorm用php连接数据库报错

项目场景： phpstorm用php连接数据库问题描述用php使用mysql_connect 的时候报错了，没有这个函数原因分析： php解释器问题，后来查资料得知mysql_connct只适用于php5.5以下解释器。一开始用的7，改成5.3以后还是报…...

编程日记 2025/5/26 14:41:19

今日行情明日机会——20250428

指数依然在震荡区间，等待方向选择~ 2025年4月28日涨停主要行业方向分析一、核心主线方向一季报增长（业绩驱动资金避险） • 涨停家数：10家（最强方向）。 • 代表标的： ◦ 珀莱雅（2…...

编程日记 2025/5/23 20:55:03

Spring Boot 3与JDK 8环境下的单元测试实践指南

一、引言在Java后端开发中，单元测试是保障代码质量的核心手段。Spring Boot作为主流框架，其单元测试体系随着版本迭代不断优化。本文聚焦于JDK 8与Spring Boot 3的组合场景，深入解析单元测试的多种实现方式，对比不同测试策略的异…...

编程日记 2025/5/27 11:24:34

微分与积分（前言）

导数导数是一个非常重要的概念，先来看一个引例：速度问题。历史上速度问题与倒数概念的形成有着密切的关系。平均速度 v s t v\frac{s}{t} vts那么如何表示瞬时速度呢？ 瞬时经过路程： Δ s s ( t 0 Δ t ) − s ( t 0 ) Δ…...

编程日记 2025/5/26 10:01:07

61. Java 类和对象 - 使用 this 关键字

文章目录 61. Java 类和对象 - 使用 this 关键字1. 在方法或构造函数中引用对象成员1.1 区分同名变量1.2 在普通方法中引用字段或调用方法 2. 在构造函数中调用另一个构造函数示例：构造函数重载 3. 其他用法：返回当前对象4. 注意事项5. 总结 61. Java 类…...

编程日记 2025/5/27 15:25:52

安达发|高效智能塑料切割数控系统 - 全自动化软件解决方案

在当今的制造业中，塑料作为一种轻便、耐用且成本效益高的材料，被广泛应用于各个领域。随着科技的进步和市场需求的变化，塑料加工行业正面临着前所未有的挑战和机遇。为了提高生产效率，降低成本，并满足日益严格的质量标…...

编程日记 2025/5/8 15:03:58

20250428-AI Agent：智能体的演进与未来

目录一、AI Agent的定义与演进 1.1 传统AI Agent的发展历程 1.2 现代AI Agent的技术突破二、AI Agent的核心组件 2.1 大模型动态推理规划 2.2 工具系统的演进 2.3 记忆模块的设计三、AI Agent的工作流程 3.1 感知阶段 3.2 推理阶段 3.3 决策阶段 3.4 执行阶段 …...

编程日记 2025/5/22 10:15:13

微信小程序分页和下拉刷新

在page.json中配置下拉刷新和底部距顶部的距离： {"path": "school-detail","style": {"navigationStyle": "custom","navigationBarTextStyle": "black","enablePullDownRefresh&quo…...

编程日记 2025/5/26 18:29:20

文献阅读（一）植物应对干旱的生理学反应 | The physiology of plant responses to drought

分享一篇Science上的综述文章，主要探讨了植物应对干旱的生理机制，强调通过调控激素信号提升植物耐旱性、保障粮食安全的重要性。摘要干旱每年致使农作物产量的损失，比所有病原体造成损失的总和还要多。为适应土壤中的湿度梯度变化&#x…...

编程日记 2025/5/28 19:47:45

开源CMS系统的SEO优化功能主要依赖哪些插件？

在当今互联网时代，搜索引擎优化（SEO）是网站获取流量的核心手段之一。开源内容管理系统（CMS）因其灵活性和丰富的插件生态，成为许多开发者和企业的首选。本文将以主流开源CMS为例，深入解析其SEO优…...

编程日记 2025/5/10 21:08:38

YUM/DNF管理工具

YUM (Yellow dog Updater， Modified) ， RHEL8 中默认使用的软件批量管理工具由原版本的 yum 换成了速度更快的 dnf （ DNF Dandified YUM ），原有的 yum 命令仅为 dnf 的软链接，当然依旧可以使用。 [root…...

编程日记 2025/5/26 0:48:49

Deepseek 生成新玩法：从文本到可下载 Word 文档？思路与实践

大家好！最近有朋友问到，能不能用 Deepseek 这类强大的 AI 模型，根据一个包含具体格式要求（比如字体、字号、行距、对齐方式等）的提示词，直接生成一篇论文，并且输出一个能直接下载的 Word (.docx…...

编程日记 2025/5/29 10:23:11

【OSG学习笔记】Day 13: 事件处理——响应键盘与鼠标

在OpenSceneGraph (OSG) 中，事件处理是实现用户交互功能的重要部分。通过自定义按键事件（如 WASD 键控制模型移动），可以让用户与场景进行互动。 osgGA::GUIEventHandler osgGA::GUIEventHandler 是 OpenSceneGraph (OSG) 中用…...

编程日记 2025/5/28 8:06:55

element-ui carousel 组件源码分享

carousel 走马灯源码简单分享，主要从以下几个方面： 1、carousel 组件页面结构。 2、carousel 组件属性。 3、carousel 组件事件。 4、carousel 组件方法。 5、carousel-item 组件属性。一、组件页面结构。二、组件属性。 2.1 height 走马灯的高…...

编程日记 2025/5/10 19:07:20

相关文章：