精品国产人成在线_亚洲高清无码在线观看_国产在线视频国产永久2021_国产AV综合第一页一个的一区免费影院黑人_最近中文字幕MV高清在线视频

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內(nèi)不再提示

通過IP模塊實現(xiàn)音頻/語音子系統(tǒng)的設計

星星科技指導員 ? 來源:嵌入式計算設計 ? 作者:Charles Qi ? 2022-06-14 09:11 ? 次閱讀

隨著移動游戲和語音觸發(fā)等應用的日益普及,音頻/語音子系統(tǒng)在許多移動片上系統(tǒng) (SoC) 設計中發(fā)揮著重要作用。該子系統(tǒng)的設計必須滿足雙重需求:高性能、高分辨率音頻流處理以及始終在線、低功耗的語音觸發(fā)和識別??啥ㄖ频?a target="_blank">數(shù)字信號處理 (DSP) 和音頻/語音子系統(tǒng)解決方案知識產(chǎn)權(quán) (IP) 模塊可以提供一種經(jīng)濟高效的方式來開發(fā)和交付高性能音頻/語音產(chǎn)品。

在過去十年中,智能手機和平板電腦的出現(xiàn)推動了相當大的技術(shù)創(chuàng)新。高性能音頻和視頻應用對于為這些設備帶來個性化和消費者吸引力至關(guān)重要。移動游戲和語音觸發(fā)和識別等新興應用正在將音頻/語音子系統(tǒng)性能的要求推向頻譜的兩個極端。一方面,對高性能、高分辨率的多通道音頻流處理的需求不斷增長。另一方面,需要以極低的功耗始終開啟語音觸發(fā)和語音識別智能。音頻/語音子系統(tǒng)設計必須部署先進的數(shù)字信號處理 (DSP) 技術(shù)和架構(gòu)完善的系統(tǒng)解決方案,以滿足不斷增長的需求。

移動音頻/語音子系統(tǒng)概述

圖 1 顯示了一個具有代表性的移動音頻子系統(tǒng)。該子系統(tǒng)以音頻 DSP 內(nèi)核為中心,處理主要的音頻數(shù)據(jù)處理,包括對不同壓縮標準的流編碼/解碼、采樣率轉(zhuǎn)換、前后處理、噪聲抑制、語音觸發(fā)/語音識別等。音頻 DSP 內(nèi)核可能會或可能不會集成到應用處理器片上系統(tǒng) (SoC) 中。如果它被集成,DSP 內(nèi)核將是一個卸載處理器,位于 SoC 總線層次結(jié)構(gòu)上,可以訪問 SoC 的主存儲器系統(tǒng)。如果 DSP 未集成,則有專用總線接口將應用處理器 SoC 連接到獨立 DSP。MIC 和揚聲器等音頻外圍設備通過共享或點對點數(shù)字總線接口連接到 DSP 內(nèi)核。音頻外圍 IC 包含模擬組件,例如數(shù)模轉(zhuǎn)換器DAC)/音數(shù)轉(zhuǎn)換器ADC)、模擬濾波器和放大器。除了連接音頻外圍設備外,還可能有音頻接口連接到蜂窩基帶或 WiFi/BT/FM 收音機組合設備,以支持語音通話(在智能手機中)和藍牙音頻或來自 FM 收音機的音頻流。

圖 1:具有代表性的移動音頻/語音子系統(tǒng)。

poYBAGKn4FeAPfyFAAESZmTyMBk673.png

高性能、低功耗音頻數(shù)據(jù)處理

對高性能 DSP 的需求是由語音和音頻處理需求驅(qū)動的。在語音方面,為支持高性能 IP 語音 (VoIP) 而部署寬帶 (AMR-WB) 和超寬帶語音編解碼器,同時對噪聲抑制和與噪聲相關(guān)的音量控制預處理的要求也越來越高。 這些要求將音頻 DSP 處理復雜性提高了 2 到 4 倍。在音頻方面,編解碼器的復雜性隨著多通道無損版本的引入而達到頂峰,例如:

杜比 TrueHD、MS10、MS11

DTS 主音頻,M6,M8

然而,如表 1 所示,在后處理方面存在重大創(chuàng)新。

表 1:音頻后處理

poYBAGKn4F6AMZqXAAEl7gNVmok256.png

對高性能的需求正在推動音頻 DSP 擁有更多并行、更高精度的乘法累加單元 (MAC)。

在性能需求不斷增加的同時,對低功耗配置的需求也在從兩個角度增加:

對于移動游戲或?qū)I(yè)級音頻播放等高端音頻應用,由于移動設備的電池壽命限制,系統(tǒng)功率分布無法隨數(shù)據(jù)處理性能保持線性增長

在語音觸發(fā)或語音識別等新應用中,音頻系統(tǒng)需要始終開啟

這兩種觀點都要求 DSP 架構(gòu)具有極高的可擴展性和效率。具有可擴展指令集擴展、可配置內(nèi)存/I/O 分區(qū)和高級電源管理功能的 DSP 架構(gòu)是滿足高性能和低功耗需求的最佳選擇。

低功耗音頻傳輸

為了降低功耗并支持語音觸發(fā)等低功耗應用,除了音頻 DSP 的電源效率外,還需要考慮音頻數(shù)據(jù)傳輸?shù)男?。從音頻子系統(tǒng)拓撲來看,有兩個優(yōu)化點可以降低音頻傳輸?shù)墓β省?/p>

第一個優(yōu)化點是將音頻數(shù)據(jù)傳輸模型從基于系統(tǒng)內(nèi)存的模型更改為 DSP 隧道模型。使用基于系統(tǒng)內(nèi)存的模型,音頻數(shù)據(jù)預處理和后處理 DSP 被放置在整個 SoC 總線層次結(jié)構(gòu)的系統(tǒng)內(nèi)存中。該模型要求系統(tǒng)內(nèi)存和 SoC 總線層次結(jié)構(gòu)在音頻數(shù)據(jù)處理期間始終處于供電狀態(tài)。在此模型中,音頻數(shù)據(jù)還會多次遍歷 SoC 總線層次結(jié)構(gòu)。通過高頻 SoC 總線層次結(jié)構(gòu)和系統(tǒng)內(nèi)存進行數(shù)據(jù)訪問會消耗大量功率并妨礙對始終在線應用程序的有效支持。在 DSP 隧道模型中,通過音頻接口的音頻數(shù)據(jù)處理和發(fā)送/接收被本地化到具有專用本地存儲器和高效 FIFO 式接口的 DSP 處理器。

第二個優(yōu)化點是利用新的音頻接口標準,這些標準旨在支持具有低 I/O 引腳數(shù)和低功率效率的多個音頻外圍設備。最近,MIPI 聯(lián)盟建立了兩個新的音頻接口標準,SLIMbus 和 SoundWire,以優(yōu)化音頻子系統(tǒng)的連接性。SLIMbus 標準針對應用處理器和獨立 DSP 編解碼器之間的連接性。SoundWire 標準針對許多音頻設備,包括 DSP 編解碼器和音頻外圍設備。SoundWire 總線可以擴展以支持多個數(shù)據(jù)通道,以便在應用處理器和 DSP 編解碼器之間傳輸寬 PCM 音頻樣本。但也可以對其進行優(yōu)化,以支持將窄 PDM 樣本傳輸?shù)絾蝹€數(shù)據(jù)通道上的 MIC 和揚聲器。SoundWire 標準為數(shù)據(jù)傳輸定義了一種改進的 NRZI 數(shù)據(jù)編碼和雙倍數(shù)據(jù)速率,以最大限度地減少總線負載的主動驅(qū)動和切換。此外,該標準包含一個明確定義的時鐘速率改變方案和時鐘停止協(xié)議,以進一步降低永遠在線應用的功耗。由 SoundWire 標準優(yōu)化的音頻子系統(tǒng)如圖 2 所示。

圖 2:基于 SoundWire 的音頻子系統(tǒng)優(yōu)化

poYBAGKn4GSAToQaAAEu2mXbYok645.png

構(gòu)建高性能、低功耗的音頻子系統(tǒng)

高性能、低功耗音頻子系統(tǒng)已成為移動和消費設備的基本要素。新興的新應用程序,例如語音觸發(fā)和識別以及移動游戲,進一步增加了音頻處理的復雜性。音頻子系統(tǒng)設計需要以極低的功耗包含始終開啟的功能,并為多個音頻通道提供極高品質(zhì)的音頻效果。

審核編輯:郭婷

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學習之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 處理器
    +關(guān)注

    關(guān)注

    68

    文章

    19178

    瀏覽量

    229200
  • dsp
    dsp
    +關(guān)注

    關(guān)注

    552

    文章

    7962

    瀏覽量

    348308
  • 存儲器
    +關(guān)注

    關(guān)注

    38

    文章

    7455

    瀏覽量

    163623
收藏 人收藏

    評論

    相關(guān)推薦

    音頻子系統(tǒng)主要是用來做什么的,可以用來做PCM編碼器嗎?

    請問,音頻子系統(tǒng)主要是用來做什么的,可以用來做PCM編碼器嗎?支持PCM編碼輸出嗎?
    發(fā)表于 11-07 07:38

    ip網(wǎng)絡音頻終端是什么

    IP地址進行通信。它們可以將音頻信號轉(zhuǎn)換成數(shù)字信號,并通過局域網(wǎng)或因特網(wǎng)進行傳輸,從而在不同地點之間實現(xiàn)高質(zhì)量的音頻傳輸和通信。 二、主要功
    的頭像 發(fā)表于 10-08 14:52 ?282次閱讀

    D類音頻子系統(tǒng)中的電流感應放大器

    電子發(fā)燒友網(wǎng)站提供《D類音頻子系統(tǒng)中的電流感應放大器.pdf》資料免費下載
    發(fā)表于 08-29 10:55 ?0次下載
    D類<b class='flag-5'>音頻</b><b class='flag-5'>子系統(tǒng)</b>中的電流感應放大器

    無線模塊通過TCP/IP協(xié)議實現(xiàn)與PC端的數(shù)據(jù)傳輸解析

    在當今的信息時代,無線通信技術(shù)的發(fā)展日新月異,為我們的工作和生活帶來了極大的便利。其中,無線通信模塊通過TCP/IP協(xié)議向PC端傳送數(shù)據(jù)已經(jīng)成為了一種常見的通信方式。 無線通信模塊是一
    的頭像 發(fā)表于 06-15 16:16 ?433次閱讀

    音頻語音數(shù)據(jù)(AVD)模塊開發(fā)套件DA14AVDDECTDEVKT數(shù)據(jù)手冊

    電子發(fā)燒友網(wǎng)站提供《音頻語音數(shù)據(jù)(AVD)模塊開發(fā)套件DA14AVDDECTDEVKT數(shù)據(jù)手冊.rar》資料免費下載
    發(fā)表于 05-30 16:39 ?1次下載
    <b class='flag-5'>音頻</b><b class='flag-5'>語音</b>數(shù)據(jù)(AVD)<b class='flag-5'>模塊</b>開發(fā)套件DA14AVDDECTDEVKT數(shù)據(jù)手冊

    無線通信模塊通過TCP/IP協(xié)議實現(xiàn)與PC端的數(shù)據(jù)傳輸

    在當今的信息時代,無線通信技術(shù)的發(fā)展日新月異,為我們的工作和生活帶來了極大的便利。其中,無線通信模塊通過TCP/IP協(xié)議向PC端傳送數(shù)據(jù)已經(jīng)成為了一種常見的通信方式。本文將詳細介紹這一過程的主要步驟
    的頭像 發(fā)表于 05-11 15:44 ?564次閱讀

    音頻通話產(chǎn)品的福音,數(shù)字語音處理模塊,可消除回音,降低噪聲。

    音頻數(shù)字語音
    jf_63900430
    發(fā)布于 :2024年03月11日 22:37:46

    讓機器擁有說話能力,智能語音音頻處理SoC

    AI,還需要智能語音音頻處理SoC。 ? 智能語音音頻處理SoC ? 所謂智能語音音頻處理
    的頭像 發(fā)表于 02-02 00:15 ?2613次閱讀

    新款高性能網(wǎng)絡音頻模塊SV-2400V系列模塊介紹

    ,發(fā)送到網(wǎng)絡上,供其他網(wǎng)絡音頻模塊接收播放,具有CD級的播放音質(zhì)。同時提供高性能的雙向音頻數(shù)據(jù)傳輸,便于構(gòu)建網(wǎng)絡語音對講系統(tǒng)。 我們提供了N
    的頭像 發(fā)表于 01-31 16:24 ?363次閱讀
    新款高性能網(wǎng)絡<b class='flag-5'>音頻</b><b class='flag-5'>模塊</b>SV-2400V系列<b class='flag-5'>模塊</b>介紹

    1W 遠距離全雙工數(shù)據(jù)語音傳輸 無線音頻模塊 SA618F30 #全雙工

    語音傳輸音頻模塊
    思為無線
    發(fā)布于 :2024年01月22日 17:54:42

    如何用XR806實現(xiàn)語音緊急呼叫系統(tǒng)的設計呢?

    在該語音主動告警系統(tǒng)中,需要語音時別模塊和網(wǎng)絡告警模塊。
    的頭像 發(fā)表于 01-12 17:34 ?1277次閱讀
    如何用XR806<b class='flag-5'>實現(xiàn)</b><b class='flag-5'>語音</b>緊急呼叫<b class='flag-5'>系統(tǒng)</b>的設計呢?

    SV-2401V IP音頻廣播模塊SV-2401V號角音柱音箱解碼播放核心板

    linein輸入,發(fā)送到網(wǎng)絡上,供其他網(wǎng)絡音頻模塊接收播放,具有CD級的播放音質(zhì)。同時提供高性能的雙向音頻數(shù)據(jù)傳輸,便于構(gòu)建網(wǎng)絡語音對講系統(tǒng)
    的頭像 發(fā)表于 01-10 09:16 ?412次閱讀
    SV-2401V <b class='flag-5'>IP</b><b class='flag-5'>音頻</b>廣播<b class='flag-5'>模塊</b>SV-2401V號角音柱音箱解碼播放核心板

    芯知識 | 什么是音頻藍牙播放語音芯片?

    隨著科技的不斷進步,音頻藍牙播放語音芯片成為嵌入式音頻系統(tǒng)中備受關(guān)注的創(chuàng)新解決方案。本文將深入解析什么是音頻藍牙播放語音芯片,以及其在
    的頭像 發(fā)表于 12-15 08:36 ?752次閱讀
    芯知識 | 什么是<b class='flag-5'>音頻</b>藍牙播放<b class='flag-5'>語音</b>芯片?

    淺談IP網(wǎng)絡廣播系統(tǒng)

    深圳銳科達IP網(wǎng)絡廣播系統(tǒng) 網(wǎng)絡音頻廣播系統(tǒng)是一種基于TCP/IP網(wǎng)絡的純數(shù)字音頻廣播
    的頭像 發(fā)表于 12-08 08:46 ?787次閱讀
    淺談<b class='flag-5'>IP</b>網(wǎng)絡廣播<b class='flag-5'>系統(tǒng)</b>

    WT2003H語音芯片系列:通過bin文件實現(xiàn)板載語音更新,支持寬范圍音頻碼率

    在板更新語音,同時音頻碼率支持8kbps~320kbps的寬范圍,為各種應用場景帶來了極大的便利和可能性。一、通過bin文件實現(xiàn)板載語音更新
    的頭像 發(fā)表于 12-02 09:41 ?609次閱讀
    WT2003H<b class='flag-5'>語音</b>芯片系列:<b class='flag-5'>通過</b>bin文件<b class='flag-5'>實現(xiàn)</b>板載<b class='flag-5'>語音</b>更新,支持寬范圍<b class='flag-5'>音頻</b>碼率