PE-AVの整合学習は実際のビデオタスクにより近いです

PE-AV(Perception Encoder Audiovisual) オープンソース解釈:SAM Audioを駆動する音声分離エンジン

- Abstract PE-AV(Perception Encoder Audiovisual)は、Metaのオープンソースのオーディオビジュアル共同エンコーダファミリーであり、Perception Encoderをベースにネイティブオーディオ機能を追加し、映像、音声、音声およびテキスト表現を統一さ...