• 技术文章 >Python技术 >Python基础教程

    python文件拆分与合并的方法

    小妮浅浅小妮浅浅2021-06-10 16:20:11原创3368

    1、统计回归所需处理的数据量可能非常大,必要时需对文件进行拆分或合并。

    2、可以用 pandas2、将 Excel 文件分割为多个文件或合并。

    将 Excel 文件分割为多个文件

    1

    2

    3

    4

    5

    6

    7

    8

    9

    # 将 Excel文件分割为多个文件

    import pandas as pd

    dfData = pd.read_excel('./example.xls', sheetname='Sheet1')

    nRow, nCol = dfData.shape  # 获取数据的行列

    # 假设数据共有198,000行,分割为 20个文件,每个文件 10,000行

    for i in range(0, int(nRow/10000)+1):

        saveData = dfData.iloc[i*10000+1:(i+1)*10000+1, :]  # 每隔 10,000

        fileName= './example_{}.xls'.format(str(i))

        saveData.to_excel(fileName, sheet_name = 'Sheet1', index = False)

    将多个Excel文件合并为一个文件

    1

    2

    3

    4

    5

    6

    7

    8

    9

    10

    11

    12

    13

    14

    # 将多个 Excel 文件合并为一个文件

    import pandas as pd

     

    ## 两个 Excel 文件合并

    #data1 = pd.read_excel('./example0.xls', sheetname='Sheet1')

    #data2 = pd.read_excel('./example1.xls', sheetname='Sheet1')

    #data = pd.concat([data1, data2])

    # 多个 Excel 文件合并

    dfData = pd.read_excel('./example0.xls', sheetname='Sheet1')

    for i in range(1, 20):

        fileName = './example_{}.xls'.format(str(i))

        dfNew = pd.read_excel(fileName)

        dfData = pd.concat([dfData, dfNew])

    dfData.to_excel('./example', index = False)

    以上就是python文件拆分与合并的方法,希望对大家有所帮助。更多Python学习指路:python基础教程

    推荐操作环境:windows7系统、Python 3.9.1,DELL G3电脑。

    专题推荐:python文件
    上一篇:python如何读取不同格式文件 下一篇:python数据预处理的三种情况

    相关文章推荐

    • 运行python文件失败怎么办• python文件怎么保存到本地文件格式• 如何将notepad绑定Python文件• 如何在终端打开Python文件• Python文件如何转换为字符串• python文件如何形成安装包?• 怎么用vs编python文件• python文件打包为exe提示找不到路径是什么原因?• python文件操作需要导入模块吗• python文件为什么加utf-8• python文件新建之后怎么执行• 如何设置python文件默认使用spyder打开• pycharm怎么运行python文件• python文件打开闪退要怎么处理?• Python文件路径是什么?怎么写?• python文件路径的操作• python文件路径的组成

    全部评论我要评论

    © 2021 Python学习网 苏ICP备2021003149号-1

  • 取消发布评论
  • 

    Python学习网