最新国产好看的视频,伊人天堂AV在线,国产Aaaaaa视频,蜜臀视频在线观看一区,人妻av色图,密臀久久久精品影片,青青视频免费观看毛片,久草在线观看视,国产三级精品色情在线

pandas批量拆分與合并Excel文件的實(shí)現(xiàn)示例

 更新時間:2025年11月25日 11:26:07   作者:風(fēng)華浪浪  
本文介紹了Pandas中基于整數(shù)位置的iloc和基于標(biāo)簽的loc方法進(jìn)行數(shù)據(jù)索引和切片的操作,并將大Excel文件拆分合并,具有一定的參考價值,感興趣的可以了解一下

一、Pandas 進(jìn)行索引和切片的iloc、loc方法

iloc是基于整數(shù)位置進(jìn)行索引和切片的方法
它允許您使用整數(shù)來訪問 DataFrame 或 Series 中的特定行和列

import pandas as pd

# 創(chuàng)建示例 DataFrame
df = pd.DataFrame({'A': [1, 2, 3], 'B': [4, 5, 6], 'C': [7, 8, 9]})

# 使用 iloc 訪問特定行和列
value = df.iloc[0, 1]  # 獲取第一行、第二列的值
row = df.iloc[1]  # 獲取第二行的所有列
col = df.iloc[:, 2]  # 獲取第三列的所有值
slice_df = df.iloc[1:3, 0:2]  # 獲取第二行到第三行、第一列到第二列的切片

print(value)  # 輸出: 4
print(row)  # 輸出: A    2\nB    5\nC    8\nName: 1, dtype: int64
print(col)  # 輸出: 0    7\n1    8\n2    9\nName: C, dtype: int64
print(slice_df)
# 輸出:
#    A  B
# 1  2  5
# 2  3  6

loc是基于標(biāo)簽進(jìn)行索引和切片的方法。
它允許您使用標(biāo)簽來訪問 DataFrame 或 Series 中特定的行和列

import pandas as pd

# 創(chuàng)建示例 DataFrame
df = pd.DataFrame({'A': [1, 2, 3], 'B': [4, 5, 6], 'C': [7, 8, 9]}, index=['a', 'b', 'c'])

# 使用 loc 訪問特定行和列
value = df.loc['a', 'B']  # 獲取索引為 'a',列為 'B' 的值
row = df.loc['b']  # 獲取索引為 'b' 的所有列
col = df.loc[:, 'C']  # 獲取列標(biāo)簽為 'C' 的所有值
slice_df = df.loc['b':'c', 'A':'B']  # 獲取索引為 'b' 到 'c',列標(biāo)簽為 'A' 到 'B' 的切片

print(value)  # 輸出: 4
print(row)  # 輸出: A    2\nB    5\nC    8\ndtype: int64
print(col)  # 輸出: a    7\nb    8\nc    9\nName: C, dtype: int64
print(slice_df)
# 輸出:
#    A  B
# b  2  5
# c  3  6

二、Pandas批量拆分與合并Excel文件

將一個大Excel等分,拆成多個Excel
將多個小Excel合并并標(biāo)記來源

import pandas as pd

df_path = '/Users/python/Desktop/means/ml-25m/ratings.csv'
df_source = pd.read_csv(df_path)
df_source.head()

	userId	movieId	rating	timestamp
0	1	296	5.0	1147880044
1	1	306	3.5	1147868817
2	1	307	5.0	1147868828
3	1	665	5.0	1147878820
4	1	899	3.5	1147868510
df.index    查看索引信息  總共行數(shù)1000209
RangeIndex(start=0, stop=1000209, step=1)
df.shape    查看總的行列信息  總共1000209行 4列 
(1000209, 4)

獲取總的行數(shù)信息
total_row_count = df.shape[0]
total_row_count

1000209

二、 將一個大的Excel 等分拆成多個Excel

計算拆分后每個excel的行數(shù) (可能除不盡 取余 + 1)
user_names = ["zhangsan", "lisi", "wanger", 'mazi']
split_size = total_row_count // len(user_names)
if total_row_count % len(user_names) != 0:
    split_size += 1
拆分多個dataframe 

for idx, user_name in enumerate(user_names):
    begin = idx * split_size
    end = (idx + 1 ) * split_size    
    df_sub = df_source.iloc[begin:end]
    df_subs.append((idx, user_name, df_sub))
將多個datafame 寫入csv

for idx, user_name, df_sub in df_subs:
    file_name = f'/Users/python/Desktop/means/ml-25m/ratings_{user_name}.csv'
    df_sub.to_csv(file_name, index=False)

三、 將多個Excel合并成一個大的Excel

1. 便利文件夾,得到要合并的Excel 文件列表
2. 分別去讀到dataframe, 給每個df添加一列用于標(biāo)記來源
3. 使用pd.concat 進(jìn)行批量合并
4. 將合并到的dataframe 輸入到excel
讀取要合并的excel,并添加username 列

df_list = []
fnames = ['ratings_mazi.csv', 'ratings_zhangsan.csv', 'ratings_lisi.csv','ratings_wanger.csv','ratings_mazi.csv']
for fname in fnames:
    file_name = f'/Users/python/Desktop/means/ml-25m/{fname}'
    df_split = pd.read_csv(file_name)
    username = fname.replace("ratings_", '').replace(".csv", '')
    df_split['username'] = username
    df_list.append(df_split)
使用pd.concat 進(jìn)行合并
df_merged = pd.concat(df_list)

df_merged.shape    查看總的行列信息    總共1000209行 4列 
df_merged.head()   查看合并后的前幾行信息

	userId	movieId	rating	timestamp	username
0	5109	508	3.0	840577637	mazi
1	5109	519	2.0	840577227	mazi
2	5109	524	2.0	840577346	mazi
3	5109	527	3.0	840576285	mazi
4	5109	529	3.0	840576680	mazi


df_merged['username'].value_counts() 查看username 的取值種類

username
mazi        500106
zhangsan    250053
lisi        250053
wanger      250053
Name: count, dtype: int64
將合并后的dataframe輸入到excel中

df_merged.to_csv('/Users/python/Desktop/means/ml-25m/ratings_merged.csv', index=False)

到此這篇關(guān)于pandas批量拆分與合并Excel文件的文章就介紹到這了,更多相關(guān)pandas批量拆分與合并Excel內(nèi)容請搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持腳本之家!

相關(guān)文章

  • Python中對象的引用與復(fù)制的使用

    Python中對象的引用與復(fù)制的使用

    引用和復(fù)制是Python處理對象的重要概念,本文主要介紹了Python中對象的引用與復(fù)制的使用,文中通過示例代碼介紹的非常詳細(xì),對大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價值,需要的朋友們下面隨著小編來一起學(xué)習(xí)學(xué)習(xí)吧
    2023-12-12
  • Python正則表達(dá)式中的符號^和[]舉例詳解

    Python正則表達(dá)式中的符號^和[]舉例詳解

    正則表達(dá)式是一種用于匹配字符串模式的工具,在Python中re庫提供了正則表達(dá)式的支持,這篇文章主要介紹了Python正則表達(dá)式中符號^和[]的相關(guān)資料,需要的朋友可以參考下
    2025-07-07
  • Python使用正則表達(dá)式抓取網(wǎng)頁圖片的方法示例

    Python使用正則表達(dá)式抓取網(wǎng)頁圖片的方法示例

    這篇文章主要介紹了Python使用正則表達(dá)式抓取網(wǎng)頁圖片的方法,結(jié)合具體實(shí)例形式分析了Python網(wǎng)頁文件的讀取及正則匹配相關(guān)操作技巧,需要的朋友可以參考下
    2017-04-04
  • pytest通過assert進(jìn)行斷言的實(shí)現(xiàn)

    pytest通過assert進(jìn)行斷言的實(shí)現(xiàn)

    assert斷言是一種用于檢查代碼是否按預(yù)期工作的方法,在pytest中,assert斷言可以用于測試代碼的正確性,以確保代碼在運(yùn)行時按照預(yù)期工作,本文就來介紹一下如何使用,感興趣的可以了解下
    2023-12-12
  • python中多個裝飾器的調(diào)用順序詳解

    python中多個裝飾器的調(diào)用順序詳解

    這篇文章主要給大家介紹了關(guān)于python中多個裝飾器的調(diào)用順序,文中通過示例代碼介紹的非常詳細(xì),對大家學(xué)習(xí)或者使用Python具有一定的參考學(xué)習(xí)價值,需要的朋友們下面來一起學(xué)習(xí)學(xué)習(xí)吧
    2019-07-07
  • Python生成隨機(jī)MAC地址

    Python生成隨機(jī)MAC地址

    這篇文章主要介紹了Python生成隨機(jī)MAC地址的相關(guān)資料,需要的朋友可以參考下
    2015-03-03
  • 使用npy轉(zhuǎn)image圖像并保存的實(shí)例

    使用npy轉(zhuǎn)image圖像并保存的實(shí)例

    這篇文章主要介紹了使用npy轉(zhuǎn)image圖像并保存的實(shí)例,具有很好的參考價值,希望對大家有所幫助。一起跟隨小編過來看看吧
    2020-07-07
  • python difflib模塊示例講解

    python difflib模塊示例講解

    這篇文章主要為大家詳細(xì)介紹了python difflib模塊的示例,具有一定的參考價值,感興趣的小伙伴們可以參考一下
    2017-09-09
  • Python安裝OpenCV的示例代碼

    Python安裝OpenCV的示例代碼

    這篇文章主要介紹了Python安裝OpenCV的示例代碼,本文給大家介紹的非常詳細(xì),對大家的學(xué)習(xí)或工作具有一定的參考借鑒價值,需要的朋友可以參考下
    2020-03-03
  • Python OpenCV中的resize()函數(shù)的使用

    Python OpenCV中的resize()函數(shù)的使用

    這篇文章主要介紹了Python OpenCV中的resize()函數(shù)的使用,文中通過示例代碼介紹的非常詳細(xì),對大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價值,需要的朋友們下面隨著小編來一起學(xué)習(xí)學(xué)習(xí)吧
    2019-06-06

最新評論

泗洪县| 穆棱市| 青河县| 长顺县| 周宁县| 天气| 天津市| 子长县| 南通市| 丹棱县| 临夏市| 张北县| 聂拉木县| 若羌县| 化隆| 白城市| 碌曲县| 昌黎县| 姚安县| 监利县| 乾安县| 靖远县| 喀喇沁旗| 乐都县| 宁波市| 九龙城区| 肃北| 昂仁县| 南华县| 龙泉市| 瓮安县| 宣化县| 石台县| 凤冈县| 布尔津县| 子长县| 娱乐| 色达县| 新和县| 云霄县| 江陵县|