「演奏者の動き」をAIが解析。特定の演奏者だけが奏でる音を抽出するテクノロジー。MITのIBMワトソAIラボが開発
マサチューセッツ工科大学とIBMが共同設立した研究機関、MIT-IBMワトソンAIラボで開発したテクノロジー。

映像の中から演奏者の体の動きを解析し、その演奏者が奏でる音だけを抽出。

バイオリンしながらタップする演奏者の、それぞれの音だけを抽出することもできるというのも面白い。

[CVPR 2020] Music Gesture for Visual Sound Separation





















タグ
「演奏者の動き」をAIが解析。特定の演奏者だけが奏でる音を抽出するテクノロジー。MITのIBMワトソAIラボが開発