漸凍人協會

落地運用 從實驗到產品走進病友家中 實質造福病友|台灣第一套漸凍人居家使用的腦波溝通和語音合成系統

發佈日期:2021-08-25    精選主題

落地運用 從實驗到產品走進病友家中 實質造福病友
台灣第一套漸凍人居家使用的腦波溝通和語音合成系統

2021年8月25日發佈


  朱老師(化名)坐在輪椅上,開心地打招呼,看得出他講話有點吃力,嘴部肌肉正在退化,接著,他打開電腦,喇叭傳出「你好」兩個字,這是朱老師的合成聲音,除此之外,他也將能使用腦波儀,不需動用身體任何肌肉,透過腦波意念,便能和外界溝通!

  宏智生醫科技股份有限公司、臺北大學通訊系語音暨多媒體訊號處理實驗室與聲帆股份有限公司於8月24日聯合舉辦捐贈快閃活動。宏智生醫科技捐贈10套腦波溝通系統,腦波儀採用貼片形式,方便病友居家使用,並且動「眼」便有緊急叫人鈴的功能;臺北大學通訊系語音暨多媒體訊號處理實驗室與聲帆股份有限公司捐贈客製化文字轉語音系統20套,病友只要在電腦輸入文字,便能用自己的聲音「發聲」。感謝2020年科技部前瞻司持續支持漸凍病友智慧溝通系統研發之「科技突圍計畫」,此計畫由台灣科技大學機械系劉益宏教授擔任主持人,與共同主持人臺北大學通訊工程學系江振宇副教授共同研發腦波溝通與文字轉語音系統,讓實驗室研發成果落地成產品,實際運用在漸凍病友家中,造福漸凍人在溝通的便利與溫度。


走出實驗室,進到漸凍人家中的腦波儀

  由於漸凍症的病程發展,從四肢開始無法動彈,直到動口說話都成困難,僅能使用眨眼來進行溝通,針對中後期病友,在全身癱瘓甚至連眼球也不能活動的狀況下,運用腦波溝通系統便能偵測病友意圖,加速其對外溝通效率。劉益宏教授研發出僅需使用簡易貼片的「腦波溝通系統」,其整合了自行開發的腦波AI解碼技術與宏智生醫的高解析度腦波儀,可在前額葉蒐集資訊,病友與家屬在操作上相當簡便,技術團隊克服腦波獨立型態需要客製化的困難,病友透過簡易的意念想像或專注,此系統便能將腦波中隱藏的訊息轉化成「是」跟「否」,也加上緊急叫人鈴功能,幫助病友面對緊急狀況能夠迅速求救!劉教授將腦波解碼技術授權給仁寶電腦子公司—宏智生醫科技,今年,宏智生醫科技進一步將此技術與腦波儀整合完畢並商品化,讓科研成果真正落地並捐贈給漸凍病友,讓病友實際運用,落實企業社會責任!

台灣第一個為漸凍人客製化的語音合成系統
  聲音,是表達情感重要的方式之一,缺少了聲音,個人的獨特性等同被抹滅。2020年,漸凍人協會與臺北大學通訊工程學系江振宇副教授共同合作為病友量身打造個人化的語音合成系統,研究團隊製作專門的文本,文本包含了所有中文會發音的音節,病友照著文本唸以及錄音,考量到病友體能,從原本要錄製三小時有效語料,現在只要錄製三十分鐘。目前國際上,需要大量語料庫才能完成語音系統,而研究團隊造就用小的資料庫,合成高相似度的語音合成。團隊將針對病友構音異常的音,進行修復,並依據錄好的聲音,標記詞性發音,再來抽取聲紋和音高,標記抑揚頓挫、輕重緩急,得到參數。語音合成系統建置後,病友在電腦輸入文字,便能用自己的聲音「發聲」。
  今年,臺北大學通訊系語音暨多媒體訊號處理實驗室與聲帆股份有限公司捐贈客製化文字轉語音系統20套幫助病友留存個人聲音的獨特性。聲帆股份有限公司未來將繼續與漸凍人協會合作,持續完善合成技術,改進合成品質,讓合成的語音更加逼真,增進漸凍人的溝通互動溫度。

中華民國運動神經元疾病病友協會/漸凍人協會
媒體聯絡人:企劃部白睿婷02-2585-1367*107或0953-989-542



宏智生醫科技股份有限公司與漸凍人協會合照


臺北大學通訊系語音暨多媒體訊號處理實驗室與聲帆股份有限公司與漸凍人協會合照


 





0