提示：新版文档地址 https://doc.livetalking.ai

Welcome to livetalking documentation!

备注

This project is under active development.

Contents

• 0. Features
• 1. Installation
  • 1.1 Install dependency
• 2. Quick Start
• 3. Usage
  • 3.1 数字人模型
    • 3.1.1 模型用wav2lip
      • 替换成自己的数字人
    • 3.1.2 模型用musetalk
      • 替换成自己的数字人
    • 3.1.3 ER-Nerf
      • 3.1.3.1 音频特征用hubert
      • 3.1.3.2 设置头部背景图片
      • 3.1.3.3 全身视频贴回
      • 替换成自己的数字人
    • 3.1.4 模型用Ultralight-Digital-Human
  • 3.2 传输模式
    • 3.2.1 webrtc p2p
    • 3.2.2 webrtc推送到srs
    • 3.2.3 rtmp推送
  • 3.3 TTS模型
    • 3.3.1 gpt-sovits
    • 3.3.2 fish-speech
    • 3.3.3 cosyvoice
    • 3.3.4 腾讯语音服务
    • 3.3.5 豆包语音服务
    • 3.3.6 阿里千问语音服务
    • 3.3.7 xtts
  • 3.4 动作编排
  • 3.5 使用LLM模型进行数字人对话
  • 3.6 多并发
  • 3.7 语音输入
  • 3.8 虚拟摄像头输出
• 4. Docker Run
• 5. api接口
  • 5.1 获取视频
    • 5.1.1 请求参数
    • 5.1.2 返回数据
  • 5.2 发送文字
    • 5.2.1 请求参数
  • 5.3 切换播放视频
    • 5.3.1 请求参数
  • 5.4 录像
    • 5.4.1 请求参数
  • 5.5 打断数字人说话
    • 5.5.1 请求参数
  • 第三方软件对接流程
• 6. 性能优化
  • 6.1 图片缓存
• 7. 收费服务
  • 7.1 wav2lip高清版
  • 7.2 功能优化