• 蘇黎與研究團隊公開展示真人音樂家與虛擬音樂家的合奏。 圖│蘇黎（虛擬音樂家 Virtual Musician）
  • 蘇黎與研究團隊開發的虛擬音樂家系統。 圖│研之有物、Unsplash（資料來源│蘇黎）
  • 自動伴奏系統可以即時追蹤音樂進度，判斷真人音樂家目前已經演奏到樂曲的哪個位置。 圖│蘇黎（虛擬音樂家 Virtual Musician）
  • 蘇黎與研究團隊採用 U 型網路模型訓練 AI，自動生成虛擬音樂家動畫影像。 圖│蘇黎（Wu, Y. T., Chen, B., & Su, L. (2020)）
  • 虛擬音樂家動畫的比較，左邊採用之前的研究，動作較不精準；中間是蘇黎團隊研究成果，自動生成的動畫骨架已有較多變化，並且右手拉弓動作較為準確；最右邊是符合真人動作的演奏動畫，需人工製作。 圖│蘇黎（虛擬音樂家 Virtual Musician）
  • 蘇黎團隊風格轉換的案例，透過共享語義標註，在電腦聽到印象樂派作曲家德布西的音樂（Sarabande in Pour le piano, L. 95（1901））之後，原本為巴比松畫派的圖像（The Lake Her Lone Bosom Expands to the Sky（1850）），會轉換成印象畫派風格。 圖│蘇黎（Crossing You in Style）
  • 蘇黎未來研究方向是以現有虛擬音樂家系統為基礎，再加入更多細膩動作的虛擬多人樂團。他坦言目前自動伴奏系統、肢體生成還有風格轉換這三項技術，都還有很大的進步空間。 圖│研之有物
1

  • 蘇黎與研究團隊公開展示真人音樂家與虛擬音樂家的合奏。 圖│蘇黎（虛擬音樂家 Virtual Musician）

  • 蘇黎與研究團隊開發的虛擬音樂家系統。 圖│研之有物、Unsplash（資料來源│蘇黎）

  • 自動伴奏系統可以即時追蹤音樂進度，判斷真人音樂家目前已經演奏到樂曲的哪個位置。 圖│蘇黎（虛擬音樂家 Virtual Musician）

  • 蘇黎與研究團隊採用 U 型網路模型訓練 AI，自動生成虛擬音樂家動畫影像。 圖│蘇黎（Wu, Y. T., Chen, B., & Su, L. (2020)）

  • 虛擬音樂家動畫的比較，左邊採用之前的研究，動作較不精準；中間是蘇黎團隊研究成果，自動生成的動畫骨架已有較多變化，並且右手拉弓動作較為準確；最右邊是符合真人動作的演奏動畫，需人工製作。 圖│蘇黎（虛擬音樂家 Virtual Musician）

  • 蘇黎團隊風格轉換的案例，透過共享語義標註，在電腦聽到印象樂派作曲家德布西的音樂（Sarabande in Pour le piano, L. 95（1901））之後，原本為巴比松畫派的圖像（The Lake Her Lone Bosom Expands to the Sky（1850）），會轉換成印象畫派風格。 圖│蘇黎（Crossing You in Style）

  • 蘇黎未來研究方向是以現有虛擬音樂家系統為基礎，再加入更多細膩動作的虛擬多人樂團。他坦言目前自動伴奏系統、肢體生成還有風格轉換這三項技術，都還有很大的進步空間。 圖│研之有物

Share

AD