javascript音频API-分析音频文件以检测准确的声音，以便进行唇形同步

Question

bounty到期明天。该问题的答案有资格获得+ 100声望赏金。bluejayke希望引起更多关注对此问题：

想要与JavaScript进行实时唇形同步，该怎么办？

[我已经看到像waveform.js这样的东西，它使用Web Audio API来显示波形数据，并且还有许多其他工具能够分析JavaScript中音频文件的确切声点。

[如果是这样，应该有可能使用这种分析能力来使用JavaScript进行实时口型同步，即，通过简单地使用音频上下文，就可以在用户说话的同时让动画人物说话，并读取数据点以找到正确声音的方法。

所以问题变得更加具体：

我如何精确分析音频数据以提取在特定时间戳下发出的确切声音？

我想实时获得Rhubarb Lip Sync之类的最终结果，但JavaScript除外。它不一定是精确的，但应尽可能接近。

Answer 1

没有一种算法可以让您100％地正确检测音素。