← 回實驗室

🎹 4.1 虛空鋼琴

第 4 章 · AI 指揮家
🎯 學習目標:認識手勢辨識(HandPose)如何把你的手變成互動訊號——AI 抓出食指位置,讓你的手就是琴槌。
正在喚醒 AI(第一次要載入模型,請稍等)…

音符會從上面落下。伸出食指,在音符碰到底線那一刻、把指尖點到最下面那排對應的琴鍵上——像按真鋼琴一樣! 看你這首〈小星星〉能彈對幾個音。

🔬 它怎麼做到的?

AI 模型 HandPose 抓出你手上 21 個關鍵點,我們用食指指尖的位置判斷你「按」在哪個琴鍵上。 它不懂音樂,只是把你手的位置變成琴鍵訊號——會不會彈得準,看的是你的手和你抓的節奏。

🤔 該不該、為什麼

這種「看手勢演奏」很適合無障礙樂器(手不方便碰琴鍵的人也能玩音樂)、體感遊戲。 想一想:AI 幫你把動作變成音樂,那是 AI 在演奏、還是你在演奏