當(dāng)前,手機(jī)廠商自研芯片之風(fēng)興起,而AI加持的獨(dú)立ISP芯片更是成為各家的著力點(diǎn),在小米、榮耀紛紛推出了搭載獨(dú)立ISP芯片的旗艦手機(jī)后,近日,vivo發(fā)布了新一代自研影像芯片,將此前的ISP架構(gòu)升級(jí)到AI-ISP架構(gòu),能夠?qū)崿F(xiàn)低延時(shí)、高效能的高精度AI計(jì)算,并計(jì)劃在其最新旗艦機(jī)型搭載該芯片。
在手機(jī)等影像消費(fèi)品領(lǐng)域,ISP起著至關(guān)重要的作用,其主要負(fù)責(zé)對(duì)前端傳感器傳回的圖像信號(hào)進(jìn)行運(yùn)算處理,通過線性糾正、降噪、曝光校正等處理,最終實(shí)現(xiàn)成像質(zhì)量的提升。簡(jiǎn)言之,ISP所要做到的就是將“數(shù)字眼睛”的視力水平提高到“人類眼睛”的水平,讓人眼看到數(shù)字圖像時(shí)的效果盡可能接近實(shí)景時(shí)的效果。其實(shí)SoC里面本身會(huì)有ISP單元,兩者屬于包含關(guān)系。在早些年,國(guó)產(chǎn)手機(jī)使用的移動(dòng)平臺(tái)基本都支持ISP,這也為旗艦手機(jī)影像能力提供了堅(jiān)實(shí)的基礎(chǔ)。但隨著國(guó)內(nèi)旗艦機(jī)市場(chǎng)的競(jìng)爭(zhēng)進(jìn)入白熱化,手機(jī)廠商正在尋找到新的創(chuàng)新點(diǎn)來搶占市場(chǎng)。比如小米于去年3月推出了新款自研澎湃C1手機(jī)ISP芯片,并搭載于小米MIX Fold折疊屏手機(jī)。同年9月,vivo推出了自研ISP芯片V1,該芯片應(yīng)用于vivo X70 Pro+機(jī)型;12月,OPPO推出了首款自研的影像專用NPU芯片馬里亞納X;華為也在12月的安博會(huì)中推出了新一代的ISP芯片越影。而vivo此次宣布將傳統(tǒng)ISP架構(gòu)升級(jí)到AI-ISP架構(gòu),則在一定程度上印證著ISP正走向AI化的大趨勢(shì)。事實(shí)上,隨著廠商對(duì)攝影技術(shù)的不斷“內(nèi)卷”,ISP承擔(dān)的重任與日俱增。傳統(tǒng)ISP架構(gòu)雖然能以極低延時(shí)處理大量的數(shù)據(jù)流水,但只能解決已知的、特定的問題。而AI擅長(zhǎng)處理復(fù)雜的、未知的問題,卻延時(shí)較大。AI-ISP架構(gòu)結(jié)合兩者的優(yōu)勢(shì),相當(dāng)于給傳統(tǒng)ISP芯片加一個(gè)新的AI大腦。相比于傳統(tǒng)的架構(gòu),AI-ISP能夠通過硬件直連的方式將AI計(jì)算直接融入ISP Pipeline中,完成數(shù)據(jù)的無縫緩沖和處理,處理能力、處理能效都有大幅提升。這也使得AI-ISP技術(shù)已經(jīng)成為了手機(jī)廠商的香餑餑。小米集團(tuán)高級(jí)副總裁曾學(xué)忠不久前表示,AI賦能是芯片研發(fā)的重點(diǎn)之一,將在計(jì)算攝影領(lǐng)域用AI算法與硬件進(jìn)行深入結(jié)合。下一代自研AI-ISP芯片,會(huì)在澎湃C1的基礎(chǔ)上有大幅度提升。在AI-ISP大勢(shì)面前,除了vivo、小米這種舍得大包大攬投入全流程研發(fā)芯片的廠商,也有一些手機(jī)廠商會(huì)選擇與國(guó)內(nèi)芯片廠商聯(lián)合定制,比如上半年發(fā)布的榮耀Magic4 至臻版所搭載的AI-ISP獨(dú)立影像芯片就是與合作伙伴聯(lián)合研發(fā)。事實(shí)上,對(duì)于一些起步較晚的廠商來說,聯(lián)合定制AI-ISP這種模式極大減少了研發(fā)成本,當(dāng)然,手機(jī)影像競(jìng)爭(zhēng)愈發(fā)激烈,手機(jī)廠商們?nèi)绻x擇放棄國(guó)際巨頭而采用國(guó)內(nèi)供應(yīng)商,勢(shì)必將對(duì)這些獨(dú)立芯片廠商提出更高的要求:即企業(yè)不僅要設(shè)計(jì)出不遜色于高通等頭部企業(yè)的芯片,還要保證產(chǎn)品供應(yīng)充足。而單從芯片設(shè)計(jì)來講,我們也確實(shí)看到一些獨(dú)立廠商為國(guó)產(chǎn)ISP芯片市場(chǎng)帶來的出色產(chǎn)品。比如,去年年底,海思就宣布推出了下一代用于安放場(chǎng)景的越影ISP芯片,其主要的亮點(diǎn)就是通過與AI引擎的深度整合,實(shí)現(xiàn)夜視降噪的高效處理;在今年年初的CES站上,安霸也發(fā)布了AISP,該產(chǎn)品利用了安霸在圖像和AI領(lǐng)域的積累實(shí)現(xiàn)高效的下一代ISP。在剛剛過去不久的上海世界人工智能大會(huì)上,智能視覺芯片研發(fā)公司愛芯元智也正式發(fā)布了其自研核心技術(shù)愛芯智眸AI-ISP。該技術(shù)改變了傳統(tǒng)ISP純硬件通路的設(shè)計(jì)方式,通過將ISP中的幾個(gè)關(guān)鍵硬件模塊抽離并用AI算法取而代之,例如對(duì)去噪的3DNR、demosaic等功能進(jìn)行AI化,將有限的算力集中在了最關(guān)鍵、人眼最可知的功能中,實(shí)現(xiàn)整個(gè)AI-ISP的最佳效果。目前,愛芯元智已經(jīng)推出兩代多顆智能視覺芯片,基于自研混合精度NPU和愛芯智眸AI-IS兩大核心技術(shù),愛芯核心產(chǎn)品和解決方案已經(jīng)廣泛應(yīng)用于智慧城市、智能消費(fèi)、智慧交通、智能穿戴等領(lǐng)域,并面向B端和C端不斷拓展應(yīng)用場(chǎng)景。值得一提的是,其推出的AX170A具備高達(dá)13.4TOPS /W的超高能效比,此外,該芯片獨(dú)有的20bit處理位寬可以輕松完成4K夜景視頻的預(yù)覽和拍攝。據(jù)了解,AX170A已經(jīng)通過國(guó)產(chǎn)手機(jī)客戶驗(yàn)收,并已進(jìn)入商用階段。不難看出,這些實(shí)實(shí)在在的國(guó)產(chǎn)芯片通過主打差異化形成了自己特有的優(yōu)勢(shì),并為越來越多手機(jī)廠商所信賴。無論是手機(jī)廠商大力投入自研,還是“小而美”幕后英雄不斷突破,都讓中國(guó)在芯片這一卡脖子領(lǐng)域逐漸樹立了信心。“AI-ISP這兩年ISP行業(yè)中最火的研究方向之一?!?愛芯元智相關(guān)負(fù)責(zé)人介紹,“隨著產(chǎn)業(yè)的發(fā)展,相信會(huì)有更多視覺成像的功能會(huì)被AI化,并且改變整個(gè)ISP 行業(yè)的生態(tài)。”事實(shí)上,而隨著社會(huì)生活智能化的進(jìn)一步提升,ISP也在進(jìn)入許多新的市場(chǎng)應(yīng)用領(lǐng)域。比如對(duì)于自動(dòng)駕駛/輔助駕駛這類對(duì)于延遲非常敏感的場(chǎng)景,ISP負(fù)責(zé)把原始影像作做夜視和降噪處理相應(yīng)處理,以確保自動(dòng)駕駛技術(shù)的可靠性;此外智慧城市升級(jí)也是對(duì)于ISP技術(shù)有新需求的重要智能場(chǎng)景,在各種低光照環(huán)境下,AI-ISP能很好地處理成像效果,從而確保智能城市管理系統(tǒng)能真正在所有時(shí)間段和所有場(chǎng)景下都能提供保護(hù)。中國(guó)工程院倪光南曾經(jīng)在回答一個(gè)記者詢問為何要堅(jiān)持自研芯片時(shí)表示,如果一個(gè)國(guó)家能夠在不用自研芯片的情況下,便足以成為一個(gè)科技大國(guó)的話,那么這一國(guó)家就不必去追求任何核心技術(shù),但中國(guó)不一樣,中國(guó)在芯片這一塊還有所欠缺,因此中國(guó)的科技企業(yè)不得不去進(jìn)行芯片自研。當(dāng)然我們也能看到,自研道路本就不好走,芯片由于集成度極高,自研難度更是有過之而無不及。但可以肯定的是,外國(guó)芯片廠商面對(duì)國(guó)產(chǎn)芯片“自主化”的浪潮會(huì)有更多應(yīng)對(duì)舉措,而國(guó)產(chǎn)廠商也將在不斷創(chuàng)新中與之抗衡并實(shí)現(xiàn)超越。
原文標(biāo)題:手機(jī)ISP加速“AI化”升級(jí),國(guó)產(chǎn)芯片“自主化”浪潮來襲
文章出處:【微信公眾號(hào):電子發(fā)燒友網(wǎng)】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。
聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場(chǎng)。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請(qǐng)聯(lián)系本站處理。
舉報(bào)投訴
原文標(biāo)題:手機(jī)ISP加速“AI化”升級(jí),國(guó)產(chǎn)芯片“自主化”浪潮來襲
文章出處:【微信號(hào):elecfans,微信公眾號(hào):電子發(fā)燒友網(wǎng)】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。
相關(guān)推薦
在當(dāng)今這個(gè)數(shù)字化浪潮洶涌澎湃的時(shí)代,人工智能技術(shù)正以驚人的速度重塑著企業(yè)的運(yùn)營(yíng)格局。作為AI人工智能與RPA超自動(dòng)化技術(shù)的領(lǐng)跑者,小易智聯(lián)依托其卓越的技術(shù)創(chuàng)新能力,精心打造了一系列高效
發(fā)表于 11-14 14:31
?164次閱讀
大模型、生成式 AI、數(shù)字孿生技術(shù)等前沿科技啟發(fā)了各行各業(yè)的新業(yè)務(wù)模態(tài),在這一時(shí)代背景下 NVIDIA 作為 AI 技術(shù)的耕耘者、加速計(jì)算方面的領(lǐng)導(dǎo)者,看到了數(shù)字化
發(fā)表于 11-09 13:52
?245次閱讀
、長(zhǎng)安、長(zhǎng)城、吉利、理想、賽力斯、睿藍(lán)、北汽新能源等9家車企以及多家芯片領(lǐng)域伙伴以“聚焦車企需求,加速汽車芯片國(guó)產(chǎn)化進(jìn)程”為主題,共同探討了汽車芯片
發(fā)表于 10-22 17:15
?399次閱讀
近日,第十二屆半導(dǎo)體設(shè)備與核心部件展示會(huì)(CSEAC 2024)在無錫太湖國(guó)際博覽中心開幕,先導(dǎo)集團(tuán)董事長(zhǎng)王燕清受邀出席,并在主題演講中分析了國(guó)產(chǎn)半導(dǎo)體設(shè)備在全球AI浪潮中崛起的關(guān)鍵,闡述了先導(dǎo)集團(tuán)在半導(dǎo)體領(lǐng)域的產(chǎn)業(yè)布局和
發(fā)表于 10-08 18:12
?267次閱讀
隨著AI技術(shù)的飛速發(fā)展,國(guó)產(chǎn)AI應(yīng)用正加速走向世界舞臺(tái)。據(jù)統(tǒng)計(jì),目前已有超過百款國(guó)產(chǎn)AI應(yīng)用成功
發(fā)表于 09-25 14:26
?300次閱讀
近日,隨著集團(tuán)公司監(jiān)控平臺(tái)(Elasticsearch集群)的下線,標(biāo)志著啟明信息正式完成國(guó)產(chǎn)化Doris數(shù)據(jù)庫升級(jí)替代任務(wù)。該項(xiàng)目既標(biāo)志著啟明信息信創(chuàng)升級(jí)替代邁入新臺(tái)階,同時(shí)也標(biāo)志著在Doris應(yīng)用領(lǐng)域取得
發(fā)表于 09-20 09:33
?753次閱讀
近日,蘇州山河數(shù)模微電子有限公司(簡(jiǎn)稱“山河數(shù)?!保┏晒ν瓿闪藬?shù)千萬人民幣的Pre-A輪融資,此次融資由耀途資本與永鑫方舟聯(lián)合領(lǐng)投,文治資本積極參與跟投。這筆資金的注入將為山河數(shù)模在技術(shù)研發(fā)與產(chǎn)品交付方面提供強(qiáng)有力的支持,助力公司加速推進(jìn)國(guó)產(chǎn)SBC
發(fā)表于 08-01 18:16
?1133次閱讀
在全球科技競(jìng)爭(zhēng)日益激烈的背景下,中國(guó)政府近日發(fā)布了一項(xiàng)重要通知,明確將優(yōu)先采購國(guó)產(chǎn)處理器(CPU)和操作系統(tǒng),以加速信息技術(shù)應(yīng)用創(chuàng)新的步伐,進(jìn)一步推動(dòng)國(guó)產(chǎn)技術(shù)的自主化。這一政策的出臺(tái),
發(fā)表于 06-19 16:54
?805次閱讀
在工業(yè)自動(dòng)化和智能制造的浪潮中,富唯智能憑借其自主研發(fā)的AI邊緣控制器,為運(yùn)動(dòng)控制領(lǐng)域帶來了全新的解決方案。這款基于x86架構(gòu)的IPC形態(tài)產(chǎn)品,不僅展現(xiàn)了出色的可擴(kuò)展性、可繼承性,更通
發(fā)表于 05-17 18:08
?781次閱讀
國(guó)內(nèi)消息源透露,中國(guó)工信部已經(jīng)設(shè)定了宏大的目標(biāo),計(jì)劃在明年將芯片的國(guó)產(chǎn)化率提升至25%,并采用積分方式來驅(qū)動(dòng)國(guó)家對(duì)國(guó)產(chǎn)芯片研發(fā)的資金支持。特別是在電動(dòng)車領(lǐng)域,預(yù)計(jì)到2027年,整車所需
發(fā)表于 05-15 11:21
?1704次閱讀
Network Runtime 神經(jīng)網(wǎng)絡(luò)運(yùn)行時(shí),作為中間橋梁連通上層AI推理框架和底層加速芯片,實(shí)現(xiàn)AI模型的跨芯片推理計(jì)算。提供統(tǒng)一
發(fā)表于 04-11 16:14
電子發(fā)燒友網(wǎng)報(bào)道(文/黃山明)AI加速芯片,也稱為人工智能加速器(AI Accelerator),是一種專為執(zhí)行機(jī)器學(xué)習(xí)和深度學(xué)習(xí)任務(wù)而設(shè)計(jì)
發(fā)表于 02-23 00:18
?4543次閱讀
使用硬件加速器來進(jìn)一步提升性能。我寫的這個(gè)簡(jiǎn)化的代碼只是為了幫助理解FPGA如何可能參與AI計(jì)算的過程。在實(shí)際的FPGA AI加速項(xiàng)目中,還需要考慮如何有效地處理數(shù)據(jù)流、優(yōu)化內(nèi)存訪問、
發(fā)表于 02-12 16:18
阿爾泰科技具有20多年測(cè)控系統(tǒng)自主研制軟硬件的產(chǎn)品積累,在國(guó)產(chǎn)化需求的浪潮中,其軟件的跨平臺(tái)特性?,得到最好的價(jià)值體現(xiàn),基于近年來信息產(chǎn)業(yè)的國(guó)產(chǎn)化成果,經(jīng)過大量的軟硬件適配,可以為測(cè)控
發(fā)表于 01-09 10:54
?410次閱讀
AI PC也將顯著增加更高帶寬的內(nèi)存需求,以提升整體運(yùn)算性能。由此或?qū)泶鎯?chǔ)領(lǐng)域芯片迭代及國(guó)產(chǎn)化機(jī)遇。
發(fā)表于 12-19 10:59
?817次閱讀
評(píng)論