音樂筆記郭毅：人工智能在鋼琴學習中的應用

音樂筆記聯合創始人&CTO 郭毅

“

節後開工第一天，雲啟君給你來點幹貨~

2017年9月20日下午，雲啟資本攜手專注教育的映魅谘詢在上海成功舉辦第23期以“AI+教育”為話題的雲啟BBQ，包括朗播網創始人&CEO杜昶旭、音樂筆記聯合創始人&CTO郭毅、學霸君副總裁鄭濤、iPIN副總裁於曉燕，以及雲啟資本投資團隊一起來探討“AI+教育”的更多可能性。今天我們將為你分享音樂筆記聯合創始人&CTO郭毅的演講，以下為現場實錄：

大家好，今天很高興能參加這次交流，我叫郭毅，是音樂筆記的聯合創始人和CTO。我們公司成立於2014年，在音樂教育領域已經做了快三年的研究，大部分都是在技術領域裏麵，所以今天給大家講講人工智能在鋼琴學習中的一些應用。

在說我們的產品之前，先和大家分享兩個目前學鋼琴家庭的現狀問題。首先，中國差不多有1500萬的學鋼琴群童，孩子每周去老師那裏學琴之餘，大部分時間會在家裏自己練習或者請陪練老師，導致效率不高或者是陪練費用太高。其次，孩子學鋼琴是個糾錯及重複練習的枯燥過程，孩子可能念著念著對學琴產生抵製情緒，學到最後麵半途而廢的也非常多。那麼這裏麵有什麼樣的辦法幫助孩子提高練習的效率和興趣呢，就是我們第一個產品的設計初衷。

我們自主研發的智能陪練硬件，智能攝像頭，它可以放在鋼琴上，孩子的每一遍演奏都被記錄下來轉化為數據，通過我們的算法對它進行精確的評測，其精確度接近100%，對應曲譜上每一個音節，告訴孩子哪個音彈的有問題，然後結合評測反饋給孩子一些個性化及趣味性的練習方案，幫助孩子提高效率和興趣。

從技術層麵說，它其實是一種機器視覺的分析技術，首先，用機器視覺的諸多處理方法做了很多的預處理，去除了幹擾因素，然後我們會對鋼琴進行建模，就是說我們需要在一張圖片裏麵迅速的找到這個鋼琴上所有琴鍵的模型，並且這個模型必須做到像素級的切割。同時，我們自主研發做了樣本的標注，這裏麵是一個非常繁瑣的工作，所以我們對樣本做了很多自動的生成，就是通過我們的深度學習模型生成了幾十萬個樣本，這裏麵有一係列的技術在裏麵。再者是算法方麵，為了能讓算法在移動設備上良好工作，我們進行了大量的優化工作，其中包括神經網絡的結構優化等。

我們的第二個產品是，基於我們的人工智能陪練係統，提供在線直播排練的線上一對一服務，我們認為我們做了一個線上最好的鋼琴在線教室，基於我們的曲譜電子引擎，能夠真實還原一個線下教學場景: 我們的老師和小朋友交流的頭像，以及小朋友和老師雙方的鋼琴視角，這樣的話不管是老師做示範還是說學生去演奏，在這套係統裏麵都能夠完美的支撐，當然我們老師也是非常優秀的。

我們其實在音樂教育領域還在做更多的事情，比如演奏的力度評測，比如跟英語領域或者是K12領域一樣，我們也在做音樂教育領域的知識圖譜，希望能夠基於這個知識圖譜提供個性化的練習方案。另外我們也正在做的，即在線教室趨於用人工智能技術，我們可以給老師和學生配一個AI助教等等。開啟人類智慧寶庫的三把鑰匙，一個數字，一個語言，一個音符，那麼音樂筆記就希望能夠將人工智能富能到音樂的教育行業，讓孩子們能夠開心地練琴，提高練習效率，體會到音樂世界的無限美好。

感謝聯合主辦方映魅谘詢提供的支持，映魅谘詢於2012年成立，是一家綜合了科技類媒體、研究谘詢服務、投資產品的科技服務機構。2014年3月創立了旗下教育科技品牌POWER教育，將映魅谘詢的服務能力在教育科技領域進行深度挖掘。目前，已成為國內在教育科技領域有影響力的品牌之一。

接下來的時間我們繼續為您分享其它嘉賓的現場精彩觀點，請持續關注雲啟資本官方微信公眾賬號的推送~

最後來一波現場圖：