分享一波文字转语音、语音转文字!AI视频生成神器!让外国人说中文,口型自然,不限语言,感兴趣的同学可以试试~

信息来源丨狮子座工作室

可以用Al生成视频,Whisper语音转文字
  • Whisper 开源项目:

    https://github.com/Const-me/Whisper/releases/tag/1.8.1
  • ggml-medium 语音模型:
    https://huggingface.co/openai/whisper-large-v2
  • CPU版的Whisper:
    https://github.com/chidiwilliams/buzz
  • Al视频生成:
    https://www.heygen.com

可以生成语音对口型的视频!Wav2Lip离线版V1.0



下载链接:https://www.mediafire.com/
流程方法:

1

Al视频生成:

https://www.heygen.com

Wav2Lip离线版:
https://www.freedidi.com/10734.html


下载并安装Docker:

https://www.docker.com/

2

使用开源项目:潘多拉 (Pandora)

https://github.com/orgs/community/discussions/

3

安装指令

dockerpull pengzhile/pandora
dockerrun  -e PANDORA_CLOUD=cloud -e PANDORA_SERVER=0.0.0.0:8899-p8899:8899-d pengzhile/pandora
4
获取自己的 Access TOKEN:

http://chat.openai.com/api/auth/session

5
访问本地链接:http://127.0.0.1:8899
搞定!


GEN2 Runway:https://runwayml.com/