精品国产人成在线_亚洲高清无码在线观看_国产在线视频国产永久2021_国产AV综合第一页一个的一区免费影院黑人_最近中文字幕MV高清在线视频

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

介紹一下Polars這個模塊的使用方式

數據分析與開發 ? 來源:Python實用寶典 ? 2023-02-03 09:15 ? 次閱讀

Polars 是一個速度極快的 DataFrames 庫。

它擁有以下特性:

1.多線程

2.強大的表達式API

3.查詢優化

下面給大家簡單介紹一下這個模塊的使用方式。

1.準備

請選擇以下任一種方式輸入命令安裝依賴

1. Windows 環境 打開 Cmd (開始-運行-CMD)。

2. MacOS 環境 打開 Terminal (command+空格輸入Terminal)。

3. 如果你用的是 VSCode編輯器 或 Pycharm,可以直接使用界面下方的Terminal.

pip install polars

2.Polars 使用介紹

在初始化變量的時候,Polars用起來的方式和Pandas沒有太大區別,下面我們定義一個初始變量,后面所有示例都使用這個變量:

importpolars aspl
df = pl.DataFrame(
{
"A": [1, 2, 3, 4, 5],
"fruits": ["banana", "banana", "apple", "apple", "banana"],
"B": [5, 4, 3, 2, 1],
"cars": ["beetle", "audi", "beetle", "beetle", "beetle"],
}
)

選擇需要展示的數據:

(df.select([
pl.col("A"),
"B", # the col part is inferred
pl.lit("B"), # we must tell polars we mean the literal "B"
pl.col("fruits"),
]))

效果如下:

149bf48e-a358-11ed-bfe3-dac502259ad0.png

他還能使用正則表達式篩選值并進行求和等操作:

# 正則表達式
(df.select([
pl.col("^A|B$").sum()
]))
# 或者多選
(df.select([
pl.col(["A", "B"]).sum()
]))
14ac1d5a-a358-11ed-bfe3-dac502259ad0.png

Polars支持下面這樣復雜且高效的查詢及展示:

>>> df.sort("fruits").select(
... [
... "fruits",
... "cars",
... pl.lit("fruits").alias("literal_string_fruits"),
... pl.col("B").filter(pl.col("cars") == "beetle").sum(),
... pl.col("A").filter(pl.col("B") > 2).sum().over("cars").alias("sum_A_by_cars"),
... pl.col("A").sum().over("fruits").alias("sum_A_by_fruits"),
... pl.col("A").reverse().over("fruits").alias("rev_A_by_fruits"),
... pl.col("A").sort_by("B").over("fruits").alias("sort_A_by_B_by_fruits"),
... ]
... )
shape: (5, 8)
┌──────────┬──────────┬──────────────┬─────┬─────────────┬─────────────┬─────────────┬─────────────┐
│ fruits ┆ cars ┆ literal_stri ┆ B ┆ sum_A_by_ca ┆ sum_A_by_fr ┆ rev_A_by_fr ┆ sort_A_by_B │
│ --- ┆ --- ┆ ng_fruits ┆ --- ┆ rs ┆ uits ┆ uits ┆ _by_fruits │
│ str ┆ str ┆ --- ┆ i64 ┆ --- ┆ --- ┆ --- ┆ --- │
│ ┆ ┆ str ┆ ┆ i64 ┆ i64 ┆ i64 ┆ i64 │
╞══════════╪══════════╪══════════════╪═════╪═════════════╪═════════════╪═════════════╪═════════════╡
│ "apple"┆ "beetle"┆ "fruits"┆ 11┆ 4┆ 7┆ 4┆ 4│
│ "apple"┆ "beetle"┆ "fruits"┆ 11┆ 4┆ 7┆ 3┆ 3│
│ "banana"┆ "beetle"┆ "fruits"┆ 11┆ 4┆ 8┆ 5┆ 5│
│ "banana"┆ "audi"┆ "fruits"┆ 11┆ 2┆ 8┆ 2┆ 2│
│ "banana"┆ "beetle"┆ "fruits"┆ 11┆ 4┆ 8┆ 1┆ 1│
└──────────┴──────────┴──────────────┴─────┴─────────────┴─────────────┴─────────────┴─────────────┘

3.Polars 高級使用

倒序操作,將值倒序后重新放回變量中,起名為xxx_reverse:

(df.select([
pl.all(),
pl.all().reverse().suffix("_reverse")
]))

14b9a254-a358-11ed-bfe3-dac502259ad0.png

對所有列求和,并放回變量中,起名為 xxx_sum:

(df.select([
pl.all(),
pl.all().sum().suffix("_sum")
]))
14da254c-a358-11ed-bfe3-dac502259ad0.png

正則也能用于篩選:

predicate = pl.col("fruits").str.contains("^b.*")

(df.select([
predicate
]))
14ef4b3e-a358-11ed-bfe3-dac502259ad0.png

在設定一個新列的時候,甚至可以根據條件來給不同的行設定值:

(df.select([
"fruits",
"B",
pl.when(pl.col("fruits") == "banana").then(pl.col("B")).otherwise(-1).alias("b")
]))
1504cb76-a358-11ed-bfe3-dac502259ad0.png

fold 函數很強大,它能在列上執行操作,獲得最快的速度,也就是矢量化執行:

df = pl.DataFrame({
"a": [1, 2, 3],
"b": [10, 20, 30],
}
)

out = df.select(
pl.fold(acc=pl.lit(0), f=lambdaacc, x: acc + x, exprs=pl.col("*")).alias("sum"),
)
print(out)
# shape: (3, 1)
# ┌─────┐
# │ sum │
# │ --- │
# │ i64 │
# ╞═════╡
# │ 11 │
# ├?????┤
# │ 22 │
# ├?????┤
# │ 33 │
# └─────┘








審核編輯:劉清

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • API
    API
    +關注

    關注

    2

    文章

    1484

    瀏覽量

    61810
  • Polar
    +關注

    關注

    0

    文章

    13

    瀏覽量

    14134
  • macOS系統
    +關注

    關注

    0

    文章

    9

    瀏覽量

    1540
  • vscode
    +關注

    關注

    1

    文章

    154

    瀏覽量

    7668

原文標題:Polars 速度極快的數據處理第三方模塊

文章出處:【微信號:DBDevs,微信公眾號:數據分析與開發】歡迎添加關注!文章轉載請注明出處。

收藏 人收藏

    評論

    相關推薦

    詳細介紹一下PSS+Pnoise仿真

    PSS+Pnoise仿真是很多電路要用到的仿真,今天我們詳細介紹一下這個仿真。
    的頭像 發表于 11-03 18:13 ?6834次閱讀
    詳細<b class='flag-5'>介紹</b><b class='flag-5'>一下</b>PSS+Pnoise仿真

    請問一下這個模塊用的什么芯片?

    大家有知道這個模塊用的什么芯片么?目前有這個需求。或者是否有其它穩定成熟的電路分享一下,防止12V直流電機堵轉導致燒掉電機的
    發表于 10-30 11:21

    介紹一下波形占空比實現的方式

    先上圖如圖 是我生成的個波形 這個波形的占空比在連續的四個周期內分別是10%,20%,30%,40%, 并且按照這個順序循環這里大致介紹一下
    發表于 08-04 09:25

    介紹一下三菱變頻器控制方式負載特征點

    三菱變頻器控制方式負載特征點,在三菱變頻器控制方式V/F控有說過開環和閉環,所以這個環節定很重要,下面小編為大家介紹
    發表于 09-03 07:35

    介紹一下ESP8266 WiFi 模塊

    文章目錄1 簡介2 ESP 8266 引腳排列3 供電方式4 單片機與ESP8266交互5 測試代碼6 最后1 簡介Hi,大家好,這里是丹成學長,今天學長向大家介紹一下ESP8266 WiFi
    發表于 01-18 09:15

    介紹一下SPI協議

    硬件接口協議在芯片是被廣泛使用的,上篇博文詳細介紹了I2C協議,這次來介紹一下spi協議。、SPI介紹1.SPI總線SPI(SerialP
    發表于 02-17 07:44

    介紹一下這款4g模塊的功能

    軟硬件高度集成模組化的產品,具有兼容性好、通信速度快、通信數據量大、網絡頻譜寬、通信靈活等特點,廣泛應用于電力、環保、金融、工業自動化等領域。 下面就介紹一下這款4g模塊的功能---成都縱橫智控研發! 支持GPS定位 支持北斗、
    的頭像 發表于 05-07 22:55 ?2.3w次閱讀

    電磁爐加熱一下就停一下什么原因及解決辦法

    電磁爐有時會出現加熱故障,現象是熱一下一下在熱一下又停一下,基本隔
    發表于 03-18 09:02 ?27.4w次閱讀

    電磁爐加熱一下就停一下什么原因

    電磁爐加熱一下就停一下什么原因。
    的頭像 發表于 06-04 10:01 ?3.8w次閱讀

    介紹一下機電暫態開源工具箱MatTrans的注意事項

    )作者:一一數二三這個工具箱所有代碼開源,且提供了圖形化仿真界面,單元模塊化,易于添加新的模塊和仿真器件。介紹一下我使用過程中的
    發表于 01-10 11:23 ?1次下載
    <b class='flag-5'>介紹</b><b class='flag-5'>一下</b>機電暫態開源工具箱MatTrans的注意事項

    Polars個使用Apache Arrow列格式作為內存模型

    需要注意的是,Python實現的Rust crate被稱為py-polars,以區別于Rust crate包polars本身。然而,Python包和Python模塊都被命名為polars
    發表于 07-07 16:21 ?1302次閱讀

    簡單介紹一下什么是微波通訊?

    歡迎來到東用知識小課堂,今天東東就為大家簡單介紹一下什么是微波通訊?我們通常說有三大傳輸系統:光纖通信、微波通信、衛星通信。實際上,衛星通信也是微波通信的種。通俗的講電磁波通信,主要分為廣播
    的頭像 發表于 03-05 11:33 ?2223次閱讀
    簡單<b class='flag-5'>介紹</b><b class='flag-5'>一下</b>什么是微波通訊?

    Polars模塊的使用方式

    Polars個速度極快的 DataFrames 庫。 它擁有以下特性: 1.多線程 2.強大的表達式API 3.查詢優化 下面給大家簡單介紹一下
    的頭像 發表于 10-17 10:39 ?525次閱讀
    <b class='flag-5'>Polars</b><b class='flag-5'>模塊</b>的使用<b class='flag-5'>方式</b>

    浪涌抗擾度怎么測?我們用這個A/D轉換器試了一下

    浪涌抗擾度怎么測?我們用這個A/D轉換器試了一下
    的頭像 發表于 11-27 15:20 ?728次閱讀
    浪涌抗擾度怎么測?我們用<b class='flag-5'>這個</b>A/D轉換器試了<b class='flag-5'>一下</b>

    將NVIDIA加速計算引入Polars

    Polars 近日發布了款由 RAPIDS cuDF 驅動的全新 GPU 引擎,該引擎可將 NVIDIA GPU 上的 Polars 工作流速度最高提速 13 倍,使數據科學家僅在
    的頭像 發表于 11-20 10:03 ?110次閱讀
    將NVIDIA加速計算引入<b class='flag-5'>Polars</b>