PE-AVは、ビデオ理解タスクのための統一された特性評価ベースです

PE-AV(Perception Encoder Audiovisual) オープンソース解釈:SAM Audioを駆動する音声分離エンジン

- Abstract PE-AV(Perception Encoder Audiovisual)は、Metaのオープンソースのオーディオビジュアル共同エンコーダファミリーであり、Perception Encoderをベースにネイティブオーディオ機能を追加し、映像、音声、音声およびテキスト表現を統一さ...