精品国产人成在线_亚洲高清无码在线观看_国产在线视频国产永久2021_国产AV综合第一页一个的一区免费影院黑人_最近中文字幕MV高清在线视频

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

玩嗨OpenHarmony:基于OpenHarmony的自閉癥早期篩查聲紋特征濾波識別系統

共熵服務中心 ? 來源:未知 ? 2022-12-02 20:10 ? 次閱讀
原文引自:51CTO 開源基礎軟件社區 #DAYU200體驗官 《DAYU200運行自閉癥早期篩查聲紋特征濾波識別系統

1. 項目背景

根據《孤獨癥教育康復行業發展狀況報告》,在全世界范圍內每 54 個兒童就有一個兒童患有自閉癥譜系障礙,目前中國的自閉癥譜系障礙患者已經超過了 1300萬,并且這個數量以每年近20萬的速度增長。

a4238694-7239-11ed-8abf-dac502259ad0.jpg

我們通過調研發現我國關于自閉癥譜系障礙方面的確診缺乏統一的診斷標準,各大醫院與醫療機構的主流診斷方案還是依托于量表等工具,誤診率高。但目前在確診方面缺乏科學精準的檢測儀器,導致被確診為自閉癥的患者平均年齡為4到5歲,遠遠滯后于18到24個月的最佳早期篩查診斷時機,使得患兒錯過最佳康復治療期。

我們團隊基于以上痛點,以兒童說話聲音作為原始數據,利用深度學習訓練出的高精度模型對比分析自閉癥譜系障礙兒童和正常兒童在聲學特征上的差異,使用音頻分析技術提取聲學特征參數進行分析,基于潤和大禹DAYU200從聲學角度指導醫生對待測兒童進行早期篩查,可將自閉癥患者實際篩查確診年齡提前至1到2歲,讓自閉癥譜系障礙兒童能極早地得到確診,從而能夠盡早進行干預治療,最大限度地減少天生發育障礙對患者及整個家庭的影響。

2. 我們是誰?守望星光團隊于2021年6月在鄭州輕工業大學梅科爾工作室成立,是一家專注于自閉癥譜系障礙診斷技術研發的在校創新創業團隊。梅科爾工作室的老師和同學們還必須在極為有限的條件下讓價值最大化,工作室在老齡化、老年人康復、特殊人群關愛方向的漫漫征途。從拿著一封封介紹信去醫院聯系合作,一點點走訪患者開始。如今,梅科爾工作室總計參與到60余個醫療項目的聯合創新開發中,其中40多個是特殊人群關愛類項目。在腦卒中、自閉癥和帕金森等領域完成了超過2000人次的病患數據樣本收集,沉淀出300多個可用醫療案例。

a44e3a38-7239-11ed-8abf-dac502259ad0.png

3. 設計思路

本項目通過神經網絡和音頻分析技術提取自閉癥譜系障礙兒童的聲學特征參數進行分析,篩選出最具有代表性的聲學特征和分類識別性能最優的模型,從聲學角度輔助醫生對自閉癥譜系障礙兒童進行早期診斷,并設計機器學習模型進行分類。構建模型,最終網絡的準確性達到 93.8%。醫生可在DAYU200端、網頁Web端、桌面exe程序端、手機鴻蒙APP查看結果,預測出自閉癥譜系障礙準確率超過 70%,推薦可能患有自閉癥譜系障礙孩子接受干預訓練,避免錯過最佳干預期。

3.1 開發技術設計框架

a47125c0-7239-11ed-8abf-dac502259ad0.jpg

3.2音頻數據采集

項目的音頻數據采集模塊主要由三部分組成,分別是揚聲器、三麥克風陣列數字信號處理器Esp32-Korvo音頻開發板。并通過回聲消除算法、語音增強算法、降噪算法和音頻自動增益算法收集音頻數據,以此來保證受測者的音頻數據質量。并通過藍牙或WLAN傳輸音頻數據至云服務器進行下一步處理。在內部布局上,通過精確測量開發板、揚聲器、可充電電池的尺寸,合理規劃設計了內部零件的位置,精準建模預留內部空間。效果圖如下:

a4951372-7239-11ed-8abf-dac502259ad0.png

3.3音頻數據預處理

我們將數據采集模塊得到的音頻數據上傳至我們的華為云服務器上,利用利用我們自主開發的降噪算法對收集到的聲音進行二次降噪,除去高斯噪聲、白噪聲等等的一 些噪音,然后利用 OpenSmile 提取聲學特征,得到的處理過后的數據會進行 Librosa 庫繪制MFCC 圖像。

首先在音頻轉圖像之前,通過 Berouti 譜減法對采樣的自閉癥患者語音中自帶的加性噪聲(背景噪聲)得到噪聲的頻譜信息,并將其從頻率空間中減去。同時為了避免提取困難,采用預加重技術將預加重濾波器加在原始音頻上,強化高頻部分,再通過分幀加窗使分析對象的信號變化不會突然消失。接著將連續的模擬信號轉化為數字信號,通過快速傅里葉變化對分幀加窗后的各幀信號進行快速傅里葉變換得到各幀的頻譜。并對語音信號的頻譜取模平方得到語音信號的功率譜。接著利用三角帶通濾波器對頻譜進行平滑化,并消除諧波的作用,突顯原先語音的共振峰。因此一段語音的音調或音高,是不會呈現在梅爾倒譜系數內。換言之,以梅爾倒譜系數為特征的聲學特征濾波識別診斷系統,并不會受到輸入語音的音調不同而有所影響。此外,還可以降低運算量。

最后,經離散余弦變換(DCT)得到 MFCC 系數。

音頻轉圖像具體流程展示圖如下:

a4bb267a-7239-11ed-8abf-dac502259ad0.jpg

提取聲學特征并繪制出的 MFCC 圖像如下:

a4eaff58-7239-11ed-8abf-dac502259ad0.png

3.4圖像數據分析

在深度學習模型預測程序中預測待測者自閉癥譜系障礙的患病概率,采用CNN卷積神經網絡來進行圖像識別,包含4個卷積層和3個全連接層,每個卷積層后面有一個LeakyRelu (激活函數)增強非線性,每兩個卷積層分別緊跟一個最大值池化層縮小特征圖組成一個卷積組模塊,卷積層的輸出通道數按順序分別是64, 32, 128, 64,卷積層的輸出特征圖進入全連接層前平鋪成向量,然后進入三個線性變換層逐層降低向量的維度,每個線性變換緊跟一個Dropout層防止過擬合,線性變換的輸出長度分別是128, 64, 1,最后輸出的一維向量用于二分類,輸出自閉癥譜系障礙兒童的概率和正常兒童的概率。基于深度神經網絡的算法,通過計算機較強的學習能力來學習自閉癥患者與正常人的聲學特征,以此達到對自閉癥患者語音數據的有效識別。

4. 方案效果

a518b2cc-7239-11ed-8abf-dac502259ad0.png

a553913a-7239-11ed-8abf-dac502259ad0.jpg

a580ab0c-7239-11ed-8abf-dac502259ad0.jpg

a5a123be-7239-11ed-8abf-dac502259ad0.jpg

a5cf888a-7239-11ed-8abf-dac502259ad0.jpg

a5fde374-7239-11ed-8abf-dac502259ad0.jpg

a632d480-7239-11ed-8abf-dac502259ad0.jpg

a65d1844-7239-11ed-8abf-dac502259ad0.jpg

a689f7ba-7239-11ed-8abf-dac502259ad0.jpg

a6b6bdea-7239-11ed-8abf-dac502259ad0.jpg

5. 開發環境
  • DevEco Studio for OpenHarmony3.0.0.900

  • OpenHarmony版本:3.1_Release

  • 開發板:DAYU200

a6d28d86-7239-11ed-8abf-dac502259ad0.pnga7db5352-7239-11ed-8abf-dac502259ad0.gif 本文完寫在最后我們最近正帶著大家玩嗨OpenHarmony。如果你有好玩的東東,歡迎投稿,讓我們一起嗨起來!有點子,有想法,有Demo,立刻聯系我們:合作郵箱:zzliang@atomsource.org
a7ebb0e4-7239-11ed-8abf-dac502259ad0.gif

a8013e3c-7239-11ed-8abf-dac502259ad0.png

a8345592-7239-11ed-8abf-dac502259ad0.pnga8972c62-7239-11ed-8abf-dac502259ad0.pnga8c0682a-7239-11ed-8abf-dac502259ad0.png

a8d21d5e-7239-11ed-8abf-dac502259ad0.png

a8ec8612-7239-11ed-8abf-dac502259ad0.png

a90bd1ca-7239-11ed-8abf-dac502259ad0.png

a924ce6e-7239-11ed-8abf-dac502259ad0.png

a93ba3fa-7239-11ed-8abf-dac502259ad0.png

a96f818e-7239-11ed-8abf-dac502259ad0.png

a990dec4-7239-11ed-8abf-dac502259ad0.png

a9ad6f12-7239-11ed-8abf-dac502259ad0.png

a9df71e2-7239-11ed-8abf-dac502259ad0.png

aa16ee88-7239-11ed-8abf-dac502259ad0.png

aa310ce6-7239-11ed-8abf-dac502259ad0.png

aa4b446c-7239-11ed-8abf-dac502259ad0.png

aa66dc68-7239-11ed-8abf-dac502259ad0.png

aa7eecb8-7239-11ed-8abf-dac502259ad0.png

aa94907c-7239-11ed-8abf-dac502259ad0.png

aabb8948-7239-11ed-8abf-dac502259ad0.png


原文標題:玩嗨OpenHarmony:基于OpenHarmony的自閉癥早期篩查聲紋特征濾波識別系統

文章出處:【微信公眾號:開源技術服務中心】歡迎添加關注!文章轉載請注明出處。


聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • 開源技術
    +關注

    關注

    0

    文章

    389

    瀏覽量

    7914
  • OpenHarmony
    +關注

    關注

    25

    文章

    3660

    瀏覽量

    16156

原文標題:玩嗨OpenHarmony:基于OpenHarmony的自閉癥早期篩查聲紋特征濾波識別系統

文章出處:【微信號:開源技術服務中心,微信公眾號:共熵服務中心】歡迎添加關注!文章轉載請注明出處。

收藏 人收藏

    評論

    相關推薦

    可穿戴壓電傳感器在肌少的應用

    響應的壓電薄膜,并構建了可穿戴下肢運動監測系統,用于肌少群體的運動監測與早期。相關成果已發表在《Advanced Materials
    的頭像 發表于 11-05 11:50 ?287次閱讀
    可穿戴壓電傳感器在肌少<b class='flag-5'>癥</b><b class='flag-5'>篩</b><b class='flag-5'>查</b>的應用

    第三屆OpenHarmony技術大會星光璀璨、致謝OpenHarmony社區貢獻者

    操作系統,OpenAtom OpenHarmony(以下簡稱“OpenHarmony”)的進步與發展離不開產業界、學術界及生態伙伴們的協力共建。OpenHarmony項目群技術指導委員
    的頭像 發表于 10-21 14:10 ?186次閱讀

    基于ArkTS語言的OpenHarmony APP應用開發:HelloOpenharmony

    1、程序簡介該程序是基于OpenHarmony標準系統編寫的UI應用類:HelloOpenHarmony。本案例是基于API9接口開發。本案例已在OpenHarmony凌蒙派-RK35
    的頭像 發表于 09-15 08:09 ?308次閱讀
    基于ArkTS語言的<b class='flag-5'>OpenHarmony</b> APP應用開發:Hello<b class='flag-5'>Openharmony</b>

    【開源鴻蒙】使用QEMU運行OpenHarmony輕量系統

    本文將會介紹如何從源碼安裝QEMU 6.2.0,以及如何使用QEMU運行OpenHarmony輕量系統。通過本文,你將會對QEMU和OpenHarmony輕量系統又一個初步的認知,并對
    的頭像 發表于 09-14 08:51 ?435次閱讀
    【開源鴻蒙】使用QEMU運行<b class='flag-5'>OpenHarmony</b>輕量<b class='flag-5'>系統</b>

    多目標智能識別系統

    。以下是關于多目標智能識別系統的詳細解析: 智慧華盛恒輝系統原理 多目標智能識別系統的核心原理基于圖像處理、機器學習和深度學習等技術。系統通過對輸入的圖像或視頻進行分析,提取其中的
    的頭像 發表于 07-16 10:42 ?1.3w次閱讀

    OpenHarmony之開機優化

    OpenHarmony已經支持了Bootchart工具,我們可以直接使用Bootchart工具,Bootchart工具介紹如下: 概述 Bootchart是一個用于系統啟動過程性能分析的開源軟件工具
    發表于 07-01 16:39

    OpenHarmony內核編程實戰

    編程入門[Hello,OpenHarmony]在正式開始之前,對于剛接觸OpenHarmony的伙伴們,面對大篇幅的源碼可能無從下手,不知道怎么去編碼寫程序,下面用一個簡單的例子帶伙伴們入門。▍任務
    的頭像 發表于 03-27 08:31 ?730次閱讀
    <b class='flag-5'>OpenHarmony</b>內核編程實戰

    介紹一種OpenAtom OpenHarmony輕量系統適配方案

    本文在不改變原有系統基礎框架的基礎上, 介紹了一種OpenAtom OpenHarmony(以下簡稱“OpenHarmony”)輕量系統適配方案。
    的頭像 發表于 03-05 09:24 ?1062次閱讀
    介紹一種OpenAtom <b class='flag-5'>OpenHarmony</b>輕量<b class='flag-5'>系統</b>適配方案

    淺談兼容 OpenHarmony 的 Flutter

    OpenHarmony SIG 組織在 Gitee 開源了兼容 OpenHarmony 的 Flutter。該組織主要用于孵化 OpenHarmony 相關的開源生態項目。 ? ? ▲ 倉庫地址
    的頭像 發表于 02-02 15:22 ?568次閱讀
    淺談兼容 <b class='flag-5'>OpenHarmony</b> 的 Flutter

    OpenHarmony Meetup 2023南京站亮點搶先看

    點擊藍字 ╳ 關注我們 開源項目 OpenHarmony 是每個人的 OpenHarmony 原文標題:OpenHarmony Meetup 2023南京站亮點搶先看 文章出處:【微信公眾號:OpenAtom
    的頭像 發表于 12-25 21:10 ?552次閱讀
    <b class='flag-5'>OpenHarmony</b> Meetup 2023南京站亮點搶先看

    潤開鴻AT32開發平臺通過OpenHarmony兼容性測評

    OpenHarmony兼容性證書 潤開鴻AT32開發平臺基于AT32F403核心控制單元設計,支持OpenHarmony輕量系統,搭載32位ARM? Cortex?-M4內核,主頻高達200MHz,擁有高達
    發表于 12-21 17:20

    openharmony開發應用

    隨著智能設備的普及和多樣化,開發者們對于更加靈活、高效的操作系統需求與日俱增。在這個背景下,華為推出了OpenHarmony,一個全場景智能終端操作系統和生態平臺。本文將詳細探討
    的頭像 發表于 12-19 09:42 ?642次閱讀

    培育根技術人才 共建OpenHarmony根社區未來 | OpenHarmony打造下一代智能終端操作系統根社區,繁茂人才生態

    點擊藍字 ╳ 關注我們 開源項目 OpenHarmony 是每個人的 OpenHarmony 2023年12月12日,OpenHarmony人才生態大會(以下簡稱“大會”)在上海召開。本次大會以
    的頭像 發表于 12-15 16:15 ?376次閱讀

    OpenHarmony Meetup 2023北京站圓滿舉辦

    OpenHarmony 正當時”OpenHarmony Meetup 2023 城市巡回活動,旨在通過 meetup 線下交流形式,解讀 OpenHarmony 作為下一代智能終端操作系統
    發表于 11-29 09:51

    OpenHarmony Meetup 2023北京站圓滿舉辦

    meetup線下交流形式,解讀OpenHarmony作為下一代智能終端操作系統的新版本及成果轉化,提升開發者對OpenHarmony的關注度,普及OpenHarmony開發技能,加速開
    的頭像 發表于 11-28 21:10 ?613次閱讀
    <b class='flag-5'>OpenHarmony</b> Meetup 2023北京站圓滿舉辦