當吉他遇見AI—吉他和弦神偷
當吉他遇見AI—吉他和弦神偷
  • 軟體應用類--銀獎

  • 當吉他遇見AI—吉他和弦神偷

  • 作品說明

    ●設計理念: 在現今網路發達的時代,許多厲害的吉他演奏者會上傳自己的影片到網路上, 若吉他初學者能夠善用「看影片學吉他的方式」,將會學到更多專業且悅耳的和弦。本作品就是專門為吉他學習者打造的自學吉他利器,主打「給我影片,給你和弦」,只要給「吉他和弦神偷」你喜歡的吉他影片,和弦神偷就會幫你偷出屬於你的和弦。 ●為什麼網路上有很多吉他譜了還需要吉他和弦神偷? 上網查的吉他譜通常和弦太過單調,想要跟明星或偶像親手彈出的吉他一樣好聽,往往需要透過影片來學習,但是用影片學吉他麻煩的點是,總是需要調整0.5倍速或是按暫停來看清楚和弦指法,更糟的是常常忘記前一刻學的和弦要怎麼按,因此「吉他和弦神偷」就是要來幫你把影片裡出現的所有和弦都一網打盡,按照順序地排列在你眼前,讓你學吉他的效率大幅提升!目前業界並沒有這樣的產品,核心內容全靠我們的創新力。 ●使用技術 首先,利用Librosa提供的Beat tracking達到歌曲節奏點偵測與追蹤,再由自己蒐集的Custom dataset訓練一套YOLOv4物件偵測模型,用來偵測「吉他範圍」以及「手指範圍」。吉他範圍的圖片用來輸出成吉他譜;而手指範圍的圖片用來透過Efficientnet進行和弦的辨識。最後使用者將會得到一份包含「和弦圖片」、「和弦名稱」、「和弦聲音」的有序時間吉他譜。

  • 隊伍名稱

    當吉他遇見AI—吉他和弦神偷

  • 指導老師

    林智揚

  • 學校名稱

    元智大學電機工程學系、銘傳大學國際企業學系

  • 創作團隊

    張舜程、高碧珮