精品国产人成在线_亚洲高清无码在线观看_国产在线视频国产永久2021_国产AV综合第一页一个的一区免费影院黑人_最近中文字幕MV高清在线视频

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

谷歌提出FlexiViT:適用于所有Patch大小的模型

CVer ? 來源:CVHub ? 作者:CVHub ? 2022-12-20 13:42 ? 次閱讀

太長不看版,果然還是延續谷歌的風格,創新不夠,實驗來湊。

廢話不多說,直接上圖,一圖勝千言:

c6e4c8c0-8024-11ed-8abf-dac502259ad0.png

FlexiViT

顧名思義,FlexiViT,翻譯過來不就是靈活的 ViT 嘛?

Ooo,那怎么體現靈活?我們先回顧下 Vision Transformers 的工作流程。

一句話總結就是,ViT 是一種通過將圖像切割成一個個小方塊(patch)將圖像轉換為序列從而輸入到Transformer網絡進行訓練和推理的一種神經網絡架構。

本文的重點便是在研究這些小塊塊對性能的最終影響。通常來說:

方塊切的越小,精度會越高,但速度就變慢了;

方塊切的越大,精度會降低,但速度就上來了;

So,我們究竟是要做大做強,還是做小做精致?不用急,來自谷歌大腦的研究人員為你揭曉答案:成年人才做選擇,老子大小通吃。

正經點,讓我們切回來,古哥通過燃燒了數不盡的卡路里向我們證明了,在訓練期間隨機改變方塊的大小可以得到一組在廣泛的方塊大小范圍內表現良好的權重(泛化性能好)。

這結論有什么用?那便是使得在部署時大家可以根據不同的計算預算來調整模型。

通過在以下五大版圖進行廣泛的投資,可以清晰的發現收益率遠超滬深300:

圖像分類

圖像-文本檢索

開放世界檢測

全景分割

語義分割

c7162d34-8024-11ed-8abf-dac502259ad0.png

c780db7a-8024-11ed-8abf-dac502259ad0.png

為了照顧下你們這些散(韭)戶(菜),古哥說你們可以將它任意添加到大多數依賴ViT骨干架構的模型來實現計算自由,即模型可以根據不同的計算資源調整自己的工作方式,從而獲得更好的性能和效率。

說了這么多,怎么做?直接把代號都發給你了,明天早盤直接梭哈即可:

c7c41764-8024-11ed-8abf-dac502259ad0.png

看到看到這里了,總不能白嫖吧?點個贊友情轉發下再走咯~~~

審核編輯 :李倩

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • 谷歌
    +關注

    關注

    27

    文章

    6142

    瀏覽量

    105113
  • 圖像
    +關注

    關注

    2

    文章

    1083

    瀏覽量

    40418
  • 模型
    +關注

    關注

    1

    文章

    3178

    瀏覽量

    48725

原文標題:谷歌提出FlexiViT:適用于所有Patch大小的模型

文章出處:【微信號:CVer,微信公眾號:CVer】歡迎添加關注!文章轉載請注明出處。

收藏 人收藏

    評論

    相關推薦

    NVIDIA推出適用于網絡安全的NIM Blueprint

    德勤使用適用于容器安全的 NVIDIA NIM Agent Blueprint 幫助企業利用開源軟件構建安全的 AI。
    的頭像 發表于 11-20 09:58 ?152次閱讀

    適用于TMS320C5504/05的電源

    電子發燒友網站提供《適用于TMS320C5504/05的電源.pdf》資料免費下載
    發表于 10-11 11:18 ?0次下載
    <b class='flag-5'>適用于</b>TMS320C5504/05的電源

    適用于工業應用的使用MDIO的以太網PHY配置

    電子發燒友網站提供《適用于工業應用的使用MDIO的以太網PHY配置.pdf》資料免費下載
    發表于 09-21 10:24 ?0次下載
    <b class='flag-5'>適用于</b>工業應用的使用MDIO的以太網PHY配置

    選擇適用于汽車應用的基準電壓

    電子發燒友網站提供《選擇適用于汽車應用的基準電壓.pdf》資料免費下載
    發表于 09-02 11:26 ?0次下載
    選擇<b class='flag-5'>適用于</b>汽車應用的基準電壓

    適用于AR眼鏡的TI DLP? Pico?技術

    電子發燒友網站提供《適用于AR眼鏡的TI DLP? Pico?技術.pdf》資料免費下載
    發表于 08-23 09:21 ?0次下載
    <b class='flag-5'>適用于</b>AR眼鏡的TI DLP? Pico?技術

    LMP91051是否適用于Pyreos的雙通道?

    LMP91051是否適用于Pyreos的雙通道(兩顆sensor集成在同一封裝中,共用電源和地)熱釋電紅外傳感器
    發表于 08-19 07:17

    谷歌發布用于輔助編程的代碼大模型CodeGemma

    谷歌發布了用于輔助編程的代碼大模型 CodeGemma。CodeGemma 基于谷歌今年 2 月發布的輕量級開源大模型 Gemma,針對 G
    的頭像 發表于 04-17 16:07 ?640次閱讀
    <b class='flag-5'>谷歌</b>發布<b class='flag-5'>用于</b>輔助編程的代碼大<b class='flag-5'>模型</b>CodeGemma

    微軟正式發布適用于Windows的Sudo

    微軟已在 Windows 11 Insider Preview Build 26052 中發布適用于 Windows 的 Sudo,并將其在 MIT 協議下進行開源。
    的頭像 發表于 03-19 09:20 ?800次閱讀
    微軟正式發布<b class='flag-5'>適用于</b>Windows的Sudo

    適用于所有尺寸TV的完全I2C可編程6通道LCD偏置IC TPS65177/A數據表

    電子發燒友網站提供《適用于所有尺寸TV的完全I2C可編程6通道LCD偏置IC TPS65177/A數據表.pdf》資料免費下載
    發表于 03-07 13:47 ?0次下載
    <b class='flag-5'>適用于</b><b class='flag-5'>所有</b>尺寸TV的完全I2C可編程6通道LCD偏置IC TPS65177/A數據表

    谷歌模型合成工具在哪下載安裝

    谷歌模型合成工具通常不是作為一個獨立的軟件產品提供下載和安裝的。相反,它們可能是作為谷歌云平臺的一部分,通過云服務的方式提供。以下是一些可能適用于
    的頭像 發表于 03-01 18:16 ?1627次閱讀

    谷歌模型框架是什么軟件?谷歌模型框架怎么用?

    谷歌模型框架通常指的是谷歌開發的用于機器學習和人工智能的軟件框架,其中最著名的是TensorFlow。TensorFlow是一個開源的機器學習框架,由
    的頭像 發表于 03-01 16:25 ?810次閱讀

    是否有適用于CYBT-343026-01的SPICE型號?

    您是否有適用于 CYBT-343026-01 的 SPICE 型號? 該模塊將在本質安全應用中使用,并且需要知道內部電容/電感。
    發表于 03-01 07:56

    谷歌模型合成軟件有哪些

    谷歌模型合成軟件通常指的是谷歌提供的用于創建、修改和共享3D模型的軟件。目前,谷歌推出的
    的頭像 發表于 02-29 18:20 ?1344次閱讀

    谷歌交互世界模型重磅發布

    谷歌模型
    北京中科同志科技股份有限公司
    發布于 :2024年02月28日 09:13:06

    IGBT適用于ZVS 還是 ZCS?

    IGBT適用于ZVS 還是 ZCS?
    的頭像 發表于 12-01 16:10 ?1195次閱讀
    IGBT<b class='flag-5'>適用于</b>ZVS 還是 ZCS?