精品国产人成在线_亚洲高清无码在线观看_国产在线视频国产永久2021_国产AV综合第一页一个的一区免费影院黑人_最近中文字幕MV高清在线视频

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

通過RepSurf點云結構實現多項任務SOTA

3D視覺工坊 ? 來源:CVPR 2022 Oral ? 作者:CVPR 2022 Oral ? 2022-10-09 16:01 ? 次閱讀

01 、摘要

大多數先前的工作通過坐標表示點云的形狀。然而,直接利用坐標描述局部幾何是不充分的。在本文中,我們提出了 RepSurf(representative surface),這是一種新穎的點云表示,顯式的描述了非常局部的點云結構。

我們探索了 RepSurf 的兩種變體,Triangular RepSurf 和 Umbrella RepSurf,其靈感來自計算機圖形學中的三角形網格和傘形曲率。我們在表面重建后通過預定義的幾何先驗計算 RepSurf 的表征。RepSurf 可以成為絕大多數點云模型的即插即用模塊,這要歸功于它與無規則點集的自由協作。

基于 PointNet++(SSG 版本)的簡單基線,Umbrella RepSurf 在各種基準上的分類、分割和檢測在性能和效率方面都大大超過了之前的 state-of-the-art。在只有0.008M參數數量、0.04G FLOPs 和 1.12ms推理時間的增的情況下,我們的方法在分類數據集 ModelNet40 上達到 94.7% (+0.5%),在 ScanObjectNN 上達到 84.6% (+1.8%) ;而在分割任務的 S3DIS 6-fold 上達到74.3%(+0.8%) mIoU,在ScanNet 上達到70.0% (+1.6%) mIoU 。

對于檢測任務,我們的 RepSurf 應用于最先進的檢測器,并在 ScanNetV2 上達到71.2% (+2.1%) mAP25、54.8% (+2.0%) mAP50 和在 SUN RGB-D數據集上64.9% (+1.9%) mAP25、47.7% (+ 2.5%) mAP50的性能。我們的輕量級Triangular RepSurf 在這些基準測試中同樣表現出色。

02、 介紹

對原始點云表征(Point Cloud Representation)的處理因其在自動駕駛、增強現實和機器人技術等各種應用中的優勢而引起了相當大的關注。但是,點云局部表征的不穩定性使得這個任務非常有難度。

局部形狀對于點云的學習至關重要。為了從局部結構信息中學習,一些先前的工作從Grid(例如PointCNN)、Relation(例如RS-CNN)或Graph(例如DGCNN)中學習。

然而,這些方法通過加入更多成分(如歐幾里得距離、注意力機制)或應用各種變換(如圖形構造、體素化)隱式地從點云shape中提取局部特征。這些可能導致復雜的預處理或大量計算。我們認為這可能會導致在預定義成分時遺漏信息,或在轉換過程中損失幾何形狀。因此,本文探索了更穩定的顯式點云局部表征。

03、 動機

我們首先受到泰勒級數的啟發。泰勒級數用導數表示局部曲線。為了簡化它,我們只考慮到二階導數。因此,我們可以通過其對應的切線粗略地表示局部曲線,或者我們稱之為 3D 點云中的“surface”。

04、 方法

為了將2D Curve擴展到3D Surface,我們引入了兩種RepSurf變體(Triangular RepSurf和Umbrella RepSurf)來近似的描述點云局部特征:

兩種RepSurf的實現也非常簡潔:

05 、實驗

RepSurf分別在3D分類(ModelNet40,ScanObjectNN)、分割(S3DIS,ScanNet)、檢測(ScanNetV2,SUN RGBD)上達到了不俗的效果:

06 、結論

我們希望我們的工作能夠激發3D社區并喚起對點云的顯示表征的重新思考。我們認為 RepSurf 值得在不同領域(例如自動駕駛)或更大規模的點云上進行進一步探索,因為 RepSurf 有能力去處理真實場景中的大量背景點。RepSurf 還可以通過其對幾何敏感度的能力對點云采樣帶來幫助。

審核編輯:郭婷

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • 機器人
    +關注

    關注

    210

    文章

    28214

    瀏覽量

    206570
  • 增強現實
    +關注

    關注

    1

    文章

    712

    瀏覽量

    44929
  • 自動駕駛
    +關注

    關注

    783

    文章

    13688

    瀏覽量

    166157

原文標題:CVPR 2022 | 增加0.008M參數,顯式局部點云表征實現多項任務SOTA

文章出處:【微信號:3D視覺工坊,微信公眾號:3D視覺工坊】歡迎添加關注!文章轉載請注明出處。

收藏 人收藏

    評論

    相關推薦

    NB81是否支持OneNet SOTA功能?應該如何激活SOTA

    NB81是否支持OneNet SOTA功能? 可以支持,應該如何激活SOTA
    發表于 06-04 06:14

    如何采用Android計算實現移動餐系統的設計?

    請問如何采用Android計算實現移動餐系統的設計?
    發表于 04-19 08:38

    SOTA的定義是什么?常規的實現方式有哪些

    1.SOTA的定義SOTA即軟件在線升級(Software updates Over The Air),是指在不連接燒寫器的情況下,通過CAN、UART或其它通訊方式,實現應用程序的更
    發表于 02-14 06:14

    怎樣通過LoRa模塊實現SX1268點對點通信呢

    怎樣通過LoRa模塊實現SX1268點對點通信呢?如何通過串口發送和接收數據并上傳到阿里物聯網平臺?
    發表于 02-21 07:43

    基于OpenHarmony的華為IoT智慧路燈實現

    判斷天黑情況,可以根據預置的閾值來實現路燈開啟關閉;同時智慧路燈的光線數據也可以同步上傳云端,通過云端可以查詢到智慧路燈的光線數據、路燈開啟關閉狀態,同時也可以設置智慧路燈開啟關閉的閾值,實現
    發表于 05-10 09:36

    任務閾值調度算法

    針對當前任務調度算法在密碼環境中無法實現任務實時處理的問題,提出一種基于滾動優化窗口的實時閾值調度方法。首先,將密鑰調用環節融入密碼任務
    發表于 11-24 17:08 ?5次下載
    <b class='flag-5'>云</b><b class='flag-5'>任務</b>閾值調度算法

    3D 的無監督膠囊網絡 多任務實現SOTA

    這是一種為 3D 提出的無監督膠囊架構,并且在 3D 重構、配準和無監督分類方面優于 SOTA 方法。 理解對象是計算機視覺的核心問
    的頭像 發表于 01-02 09:39 ?2061次閱讀

    通過引入實例 scale-uniform 采樣策略與 crop-aware 邊框回歸損失實現 SOTA 性能

    邊框回歸損失,能夠在所有尺度上改善全景分割效果,并在多個數據集上實現 SOTA 性能。 全景分割網絡可以應對很多任務(目標檢測、實例分割和語義分割),利用多批全尺寸圖像進行訓練。然而,隨著
    的頭像 發表于 02-15 09:11 ?1594次閱讀

    SOTA機制詳解

    1.SOTA的定義SOTA即軟件在線升級(Software updates Over The Air),是指在不連接燒寫器的情況下,通過CAN、UART或其它通訊方式,實現應用程序的更
    發表于 12-09 15:06 ?10次下載
    <b class='flag-5'>SOTA</b>機制詳解

    三維數據的兩種結構Kdtree和Octree

    三維數據用于表征目標表面的海量集合,但是各個離散之間并沒有拓撲關系,一般通過建立
    的頭像 發表于 03-14 10:57 ?7338次閱讀

    壓縮研究進展與趨勢

    壓縮編碼方案的需求與日俱增,全球最具影響力的MPEG和國內外學者共同致力于研究壓縮標準框架,力求建立完善的
    的頭像 發表于 03-16 10:28 ?1106次閱讀

    AURIX TC3XX系列最佳的SOTA方案

    01 什么是SOTASOTA全稱是云端軟件升級(Software updates Over The Air),就是指在不連接燒寫器的情況下,通過CAN、UART或其它通訊方式,實現
    的頭像 發表于 06-14 09:08 ?956次閱讀
    AURIX TC3XX系列最佳的<b class='flag-5'>SOTA</b>方案

    通過A2B更新軟件—A2B如何給汽車應用中的SOTA帶來變革

    無線軟件升級(SOTA)正迅速成為汽車OEM須開發和部署的重要能力。更新模塊、支持客戶、和通過附加特性帶來利潤的能力,使得掌握SOTA成為一個有吸引力的主張。本文討論SOTA為何出現在
    的頭像 發表于 06-15 16:02 ?1718次閱讀
    <b class='flag-5'>通過</b>A2B更新軟件—A2B如何給汽車應用中的<b class='flag-5'>SOTA</b>帶來變革

    人工智能SOTA什么意思

    人工智能SOTA什么意思 人工智能SOTA是機器學習領域中的一個術語,指的是目前能夠實現的最佳結果,SOTA是State of the art的縮寫,意為“最新技術”的最佳狀態。在人工
    的頭像 發表于 08-22 16:45 ?1.9w次閱讀

    三項SOTA!MasQCLIP:開放詞匯通用圖像分割新網絡

    MasQCLIP在開放詞匯實例分割、語義分割和全景分割三項任務上均實現SOTA,漲非常明顯。這里也推薦工坊推出的新課程《徹底搞懂視覺-慣性SLAM:VINS-Fusion原理精講與
    的頭像 發表于 12-12 11:23 ?759次閱讀
    三項<b class='flag-5'>SOTA</b>!MasQCLIP:開放詞匯通用圖像分割新網絡