音樂筆記主要的做的是以技術(shù)驅(qū)動的在線鋼琴服務(wù)。
?多知網(wǎng)12月16日,在2017ACE素質(zhì)教育行業(yè)峰會上,音樂筆記的創(chuàng)始人兼CEO閆文聞分享了在人工智能技術(shù)下,鋼琴陪練機(jī)器人和共享教室的實際運用情況。
以下為閆文聞的分享內(nèi)容,經(jīng)多知網(wǎng)整理:
音樂筆記主要的做的是以技術(shù)驅(qū)動的在線鋼琴服務(wù)。
我們是一個從技術(shù)領(lǐng)域去切入到音樂教育的典型公司,主要邏輯是將人工智能技術(shù)與真人的服務(wù)相結(jié)合,把機(jī)器人或傳感器放到一個特定的垂直的應(yīng)用場景里面,讓其替人去做最基礎(chǔ)的判斷,達(dá)到高度整合數(shù)據(jù),提高人的工作效率的目的。
音視頻算法的本質(zhì)功能,即瞬間對用戶行為進(jìn)行判斷與反應(yīng),包括在毫秒內(nèi)判斷用戶觸鍵鍵位、按鍵時長甚至進(jìn)行單音的識別等等。
在鋼琴學(xué)習(xí)“找錯”或“標(biāo)記”這件事上,機(jī)器現(xiàn)在已經(jīng)比人做的好。
機(jī)器在平均1.5-2秒之內(nèi)將自動建立一個模型,對鍵盤的每一個鍵、每一個位置進(jìn)行精準(zhǔn)切割。通過自動化的標(biāo)記、自動化的判斷,機(jī)器會自動產(chǎn)生的決策。同時機(jī)器通過先前的感知與決策來判斷演奏的對錯和演奏的情況,直接反饋到通俗易懂,能被使用者理解的曲譜的譜面上。比如紅色的是音準(zhǔn)的錯誤,黃色是結(jié)構(gòu)的錯誤,基本上可以細(xì)化的標(biāo)注到每一個音符。同時,演奏的音視頻內(nèi)容對應(yīng)到每一個小節(jié)、每一次觸鍵,都由算法做好了精確的切割。所有演奏的音示范的曲譜都可以精準(zhǔn)的演奏音視頻,是最基礎(chǔ)的升級版的DVD。
當(dāng)一個孩子日常的練習(xí)曲子,平均在20秒或者是一兩分鐘。沒有人能夠去一直盯著孩子,關(guān)注孩子演奏的狀態(tài)。
在行業(yè)里,重復(fù)性的勞動首先應(yīng)該交給機(jī)器,機(jī)器不會介意做最瑣碎的臟活累活,并且現(xiàn)在機(jī)器做這類型的工作比人更得心應(yīng)手。
音樂筆記后臺有300多萬條演奏音視頻的數(shù)據(jù),樣本也是通過300多萬條的標(biāo)注去實現(xiàn)的,目前識別精度超過了99.5%以上。
基于核心技術(shù),我們有最直接的硬件產(chǎn)品——陪練機(jī)器人,陪練機(jī)器人最主要是對音準(zhǔn)和節(jié)奏的實時的反饋、對錯的反饋,精度達(dá)到了99.5%以上。
陪練機(jī)器人產(chǎn)品,可以為整個行業(yè)提供最基礎(chǔ)的功能,可以讓任意鋼琴,包括電鋼琴、原生鋼琴,變成智能鋼琴。
教鋼琴和教K12的其他的學(xué)科不一樣的,鋼琴教學(xué)要同時看到孩子的臉和手、鍵盤。做遠(yuǎn)程教學(xué)時,鋼琴教室對傳輸?shù)囊蟾撸瑢σ羯?、聲音還原有更高級別的需求。
基于同樣的硬件,我們又有了在線教室,可以讓任何一臺琴瞬間可以上網(wǎng)。
音樂筆記的在線直播的鋼琴課,有三個主要的元素,真人老師、機(jī)器人的老師、直播的在線教室。
課程產(chǎn)品主要是兩種,第一是四對一的陪練產(chǎn)品,第二是和中國人保一起推出的“考級效果保險”。
“四對一”是四個老師對一個學(xué)生,四個老師包括授課老師、班主任老師, 7×24小時陪孩子的機(jī)器人老師,還有通過互聯(lián)網(wǎng)、直播教室去聯(lián)系到全球的名師。
在陪練課程服務(wù)里面,能夠通過機(jī)器人的輔助以及人的參與,全程將孩子練琴這件事的數(shù)據(jù)采集上來,并透明化、實時的給家長進(jìn)行傳遞。因為有全程的孩子的練習(xí)數(shù)據(jù),所以我們也很榮幸的跟中國人保去推出基于數(shù)據(jù)的效果險。如果平時對著機(jī)器練習(xí)效果不錯,但是考試沒有發(fā)揮好,人保會賠償全額學(xué)費。
我們覺得技術(shù)應(yīng)該是開放的。最近,珠江鋼琴做了云學(xué)堂的發(fā)布會,也是圍繞我們這套核心的技術(shù)和核心產(chǎn)品建立起來的,我們也希望通過和珠江的合作方式,能推介給整個行業(yè),用AI技術(shù)賦能整個行業(yè)的互聯(lián)網(wǎng)化發(fā)展。
合作方式非常直接,第一,在線教室,通過把一部分課程改到晚上,減輕琴房的負(fù)擔(dān)。第二,陪練機(jī)器人,與大家合作做機(jī)器陪練課,商業(yè)模式會更優(yōu)一些。