リップシンクを測定するYUV / PCMビジュアライザ

Question

私は、エンコーダからの生の映像と生のオーディオの2つのダンプファイルを持っていると私は、「リップシンク」を測定することができるようにしたいです。アンビルを叩くハンマーの映像を想像してみてください。私は、フレーム単位で行ってみたいとハンマーが最終的にアンビルに当たったとき、オーディオトラック上の振幅のスパイクがあることがわかります。

ので、すべてがで起こる、私は単に音声を聞くことができないスピードで、私は、時間領域での波形を参照してくださいする必要があります。

私はビデオとオーディオの両方を参照できるようになるそこに任意のツールはありますか？

Answer 1

あなたは検証の観点から、その後、一般的にデコーダを有効に不安がある場合は、

目標は、一般的なリアルタイムクロックに対するオーディオとビデオPTSの値をチェックすることです。

生のYUVとPCMファイルは、タイムスタンプが含まれていません。 を使用すると、フレームレート、サンプルレートはあなたが生のYUVファイルビューアを使用することができますを知っている場合のビデオに与えられたフレームの（ファイルの先頭からの）時間を把握するために（私は自分の書きました） 、およびAudacityのようなツールは、オーディオファイルで音の開始までのファイルの時間形式の開始を把握します。ツールは通常、TS / PSファイルのオーディオとビデオの間の遅延を埋め込むので、これはまだあなたの全体の話を教えてくれないかもしれません。それとも、AB OSCOPEをフックアップし、古い学校に行くことができます。