V2EX = way to explore
V2EX 是一个关于分享和探索的地方
Sign Up Now
For Existing Member  Sign In
prnews
V2EX  ›  OpenAI

AI 影片读唇?

  •  
  •   prnews · Apr 22, 2024 · 1884 views
    This topic created in 737 days ago, the information mentioned may be changed or developed.

    请问有没有 AI 可以线上辨识被消音的人声视频(视频读唇)的服务? 我是有看到几个 github 项目,但是有没有已经可以实际运行的?

    (原由是我拍了一些访问视频,麦克风出问题,全部被消音,只看到人说话嘴在动)

    6 replies    2024-04-22 15:57:31 +08:00
    passive
        1
    passive  
       Apr 22, 2024 via Android
    这个太科幻了。要是可行,架一台普通相机都能收听对面楼里的开会内容了。

    之前有过高速相机拍摄薯片袋震动还原声音的,人家好歹采样率能跟上。
    minibear2021
        2
    minibear2021  
       Apr 22, 2024
    如果有足够的样本数据用于训练,我猜测是有可能的。实际上好像没有这样的数据,所以是不可行的。
    junan
        3
    junan  
       Apr 22, 2024
    要不找人读唇语,然后重新配音?
    ceeeeeeeeeeeeeeb
        4
    ceeeeeeeeeeeeeeb  
       Apr 22, 2024
    加上读舌还差不多
    XnEnokq9vkvVq4
        5
    XnEnokq9vkvVq4  
       Apr 22, 2024 via iPhone
    读唇没有那么魔幻,效果很有限
    prnews
        6
    prnews  
    OP
       Apr 22, 2024
    @junan 好像也只能这样了...
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Solana   ·   5867 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 50ms · UTC 03:06 · PVG 11:06 · LAX 20:06 · JFK 23:06
    ♥ Do have faith in what you're doing.