如何使用python將大量數據導出到Excel中的小技巧之一

来源:https://www.cnblogs.com/chengxuyuanaa/archive/2020/03/07/12434220.html
-Advertisement-
Play Games

如何使用python將大量數據導出到Excel中的小技巧 (1) 問題描述:為了更好地展示數據,Excel格式的數據文件往往比文本文件更具有優勢,但是具體到python中,該如何導出數據到Excel呢?如果碰到需要導出大量數據又該如何操作呢?本文主要解決以上兩個問題。 PS註意:很多人學Python ...


如何使用python將大量數據導出到Excel中的小技巧

   (1) 問題描述:為了更好地展示數據,Excel格式的數據文件往往比文本文件更具有優勢,但是具體到python中,該如何導出數據到Excel呢?如果碰到需要導出大量數據又該如何操作呢?本文主要解決以上兩個問題。

 PS註意:很多人學Python過程中會遇到各種煩惱問題,沒有人幫答疑容易放棄。為此小編建了個Python全棧免費答疑.裙 :七衣衣九起起巴而五(數字的諧音)轉換下可以找到了,不懂的問題有老司機解決裡面還有最新Python教程項目可拿,,一起相互監督共同進步!

(2)具體步驟如下:

1.第一步,安裝openpyxl,

使用pip install openpyxl即可,但是在windows下安裝的是2.2.6版本,但是centos自動安裝的是4.1版本,

寫的代碼在windows下運行沒問題,但centos上卻報錯了,說是ew=ExcelWriter(workbook=wb)少提供一個參數,於是果斷在 237伺服器上我已安裝2.2.6版本的,問題解決。

         pip install openpyxl==2.2.6

2.第二步,哈哈,沒有啦,廢話不說了,直接上代碼,ps,代碼中包含xlwt和openpyxl的兩個實現版本。

 (3)擴展閱讀:通過查閱資料,發現網上眾說紛紜,總結起來有如下幾點:

 python Excel相關的操作的module lib有兩組,一組是xlrd、xlwt、xlutils,另一組是openpyxl,

但是前一組(xlrd,xlwt)比較老,只能處理由Excel 97-2003 或者Excel 97 以前版本生成的xls格式的excel文件,xlwt甚至不支持07版以後的excel,這個格式excel文件一般來說,最大隻能支持256列或者65536行的excel文件。

因此面對需要導出大量數據到excel的情況,你將有如下三種選擇,1)換一種存儲格式,如保存為CSV文件  2)使用openpyxl—,因為它支持對Excel 2007+ xlsx/xlsm format的處理  3) win32 COM (Windows only)

當然,我們要直面困難了,為了更好地展示數據給產品和用戶,我們依然選擇的第二種。

ps,非常lucky,一番搜索後我找到了openpyxl,支持07+的excel,一直有人在維護,文檔清晰易讀,參照Tutorial和API文檔很快就能上手,就是它了~

【20180713 add ps,以下代碼在 openpyxl 的__version__ = '2.2.6' 和   openpyxl 的__version__ = '2.4.8' 測試通過 ,考慮到openpyxl的最新版本是__version__ = '2.5.4' , 如需最新版本python操作excel的例子

   (4)閑話少說,直接上代碼,敬請參考

# coding:utf-8

'''

# 希望對大家有幫助哈,請多提問題

create by yaoyz

date: 2017/01/24

'''

importxlrd

importxlwt

# workbook相關

fromopenpyxl.workbookimportWorkbook

# ExcelWriter,封裝了很強大的excel寫的功能

fromopenpyxl.writer.excelimportExcelWriter

# 一個eggache的數字轉為列字母的方法

fromopenpyxl.utilsimportget_column_letter

fromopenpyxl.reader.excelimportload_workbook

classHandleExcel():

'''Excel相關操作類'''

def__init__(self):

self. head_row_labels = [u'學生ID',u'學生姓名',u'聯繫方式',u'知識點ID',u'知識點名稱']

"""

        function:

            讀出txt文件中的每一條記錄,把它保存在list中

        Param:

            filename:  要讀出的文件名

        Return:

            res_list: 返回的記錄的list

    """

defread_from_file(self,filename):

        res_list=[]

file_obj=open(filename,"r")

forlineinfile_obj.readlines():

            res_list.append(line)

        file_obj.close()

returnres_list

"""

        function:

            讀出*.xlsx中的每一條記錄,把它保存在data_dic中返回

        Param:

            excel_name:  要讀出的文件名

        Return:

            data_dic: 返回的記錄的dict

    """

defread_excel_with_openpyxl(self, excel_name="testexcel2007.xlsx"):

# 讀取excel2007文件

        wb = load_workbook(filename=excel_name)

# 顯示有多少張表

print"Worksheet range(s):", wb.get_named_ranges()

print"Worksheet name(s):", wb.get_sheet_names()

# 取第一張表

        sheetnames = wb.get_sheet_names()

ws = wb.get_sheet_by_name(sheetnames[0])

# 顯示表名,表行數,表列數

print"Work Sheet Titile:",ws.title

print"Work Sheet Rows:",ws.get_highest_row()

print"Work Sheet Cols:",ws.get_highest_column()

# 獲取讀入的excel表格的有多少行,有多少列

        row_num=ws.get_highest_row()

        col_num=ws.get_highest_column()

print"row_num: ",row_num," col_num: ",col_num

# 建立存儲數據的字典

        data_dic = {}

sign=1

# 把數據存到字典中

forrowinws.rows:

            temp_list=[]

# print "row",row

forcellinrow:

printcell.value,

                temp_list.append(cell.value)

print""

            data_dic[sign]=temp_list

sign+=1

printdata_dic

returndata_dic

"""

        function:

            讀出*.xlsx中的每一條記錄,把它保存在data_dic中返回

        Param:

            records: 要保存的,一個包含每一條記錄的list

            save_excel_name:  保存為的文件名

            head_row_stu_arrive_star:

        Return:

            data_dic: 返回的記錄的dict

    """

defwrite_to_excel_with_openpyxl(self,records,head_row,save_excel_name="save.xlsx"):

# 新建一個workbook

        wb = Workbook()

# 新建一個excelWriter

        ew = ExcelWriter(workbook=wb)

# 設置文件輸出路徑與名稱

dest_filename = save_excel_name.decode('utf-8')

# 第一個sheet是ws

ws = wb.worksheets[0]

# 設置ws的名稱

ws.title ="range names"

# 寫第一行,標題行

forh_xinrange(1,len(head_row)+1):

            h_col=get_column_letter(h_x)

#print h_col

ws.cell('%s%s'% (h_col,1)).value ='%s'% (head_row[h_x-1])

# 寫第二行及其以後的那些行

i =2

forrecordinrecords:

record_list=str(record).strip().split("\t")

forxinrange(1,len(record_list)+1):

                col = get_column_letter(x)

ws.cell('%s%s'% (col, i)).value ='%s'% (record_list[x-1].decode('utf-8'))

i +=1

# 寫文件

        ew.save(filename=dest_filename)

"""

        function:

            測試輸出Excel內容

            讀出Excel文件

        Param:

            excel_name:  要讀出的Excel文件名

        Return:

          無

    """

defread_excel(self,excel_name):

        workbook=xlrd.open_workbook(excel_name)

printworkbook.sheet_names()

# 獲取所有sheet

printworkbook.sheet_names()# [u'sheet1', u'sheet2']

sheet2_name = workbook.sheet_names()[1]

# 根據sheet索引或者名稱獲取sheet內容

sheet2 = workbook.sheet_by_index(1)# sheet索引從0開始

sheet2 = workbook.sheet_by_name('Sheet1')

# sheet的名稱,行數,列數

printsheet2.name,sheet2.nrows,sheet2.ncols

# 獲取整行和整列的值(數組)

rows = sheet2.row_values(3)# 獲取第四行內容

cols = sheet2.col_values(2)# 獲取第三列內容

printrows

printcols

# 獲取單元格內容

printsheet2.cell(1,0).value

printsheet2.cell_value(1,0)

printsheet2.row(1)[0].value

# 獲取單元格內容的數據類型

printsheet2.cell(1,0).ctype

# 通過名稱獲取

returnworkbook.sheet_by_name(u'Sheet1')

"""

        function:

            設置單元格樣式

        Param:

            name:  字體名字

            height:  字體高度

            bold:  是否大寫

        Return:

            style: 返回設置好的格式對象

    """

defset_style(self,name,height,bold=False):

style = xlwt.XFStyle()# 初始化樣式

font = xlwt.Font()# 為樣式創建字體

font.name = name# 'Times New Roman'

        font.bold = bold

font.color_index =4

        font.height = height

        borders= xlwt.Borders()

borders.left=6

borders.right=6

borders.top=6

borders.bottom=6

        style.font = font

        style.borders = borders

returnstyle

"""

        function:

            按照 設置單元格樣式  把計算結果由txt轉變為Excel存儲

        Param:

            dataset:要保存的結果數據,list存儲

        Return:

            將結果保存為 excel對象中

    """

defwrite_to_excel(self, dataset,save_excel_name,head_row):

f = xlwt.Workbook()# 創建工作簿

# 創建第一個sheet:

# sheet1

count=1

sheet1 = f.add_sheet(u'sheet1', cell_overwrite_ok=True)# 創建sheet

# 首行標題:

forpinrange(len(head_row)):

sheet1.write(0,p,head_row[p],self.set_style('Times New Roman',250,True))

default=self.set_style('Times New Roman',200,False)# define style out the loop will work

forlineindataset:

row_list=str(line).strip("\n").split("\t")

forppinrange(len(str(line).strip("\n").split("\t"))):

sheet1.write(count,pp,row_list[pp].decode('utf-8'),default)

count+=1

f.save(save_excel_name)# 保存文件

defrun_main_save_to_excel_with_openpyxl(self):

print"測試讀寫2007及以後的excel文件xlsx,以方便寫入文件更多數據"

print"1. 把txt文件讀入到記憶體中,以list對象存儲"

dataset_list=self.read_from_file("test_excel.txt")

'''test use openpyxl to handle EXCEL 2007'''

print"2. 把文件寫入到Excel表格中"

        head_row_label=self.head_row_labels

save_name="test_openpyxl.xlsx"

        self.write_to_excel_with_openpyxl(dataset_list,head_row_label,save_name)

print"3.  執行完畢,由txt格式文件保存為Excel文件的任務"

defrun_main_save_to_excel_with_xlwt(self):

print" 4. 把txt文件讀入到記憶體中,以list對象存儲"

dataset_list=self.read_from_file("test_excel.txt")

'''test use xlwt to handle EXCEL 97-2003'''

print" 5. 把文件寫入到Excel表格中"

        head_row_label=self.head_row_labels

save_name="test_xlwt.xls"

        self.write_to_excel_with_openpyxl(dataset_list,head_row_label,save_name)

print"6.  執行完畢,由txt格式文件保存為Excel文件的任務"

if__name__ =='__main__':

print"create handle Excel Object"

    obj_handle_excel=HandleExcel()

# 分別使用openpyxl和xlwt將數據寫入文件

    obj_handle_excel.run_main_save_to_excel_with_openpyxl()

    obj_handle_excel.run_main_save_to_excel_with_xlwt()

'''測試讀出文件,註意openpyxl不可以讀取xls的文件,xlrd不可以讀取xlsx格式的文件'''

#obj_handle_excel.read_excel_with_openpyxl("testexcel2003.xls")  # 錯誤寫法

#obj_handle_excel.read_excel_with_openpyxl("testexcel2003.xls") # 錯誤寫法

obj_handle_excel.read_excel("testexcel2003.xls")

obj_handle_excel.read_excel_with_openpyxl("testexcel2007.xlsx")
以上就是本次分享,都懂了嗎?註意:很多人學Python過程中會遇到各種煩惱問題,沒有人幫答疑容易放棄。為此小編建了個Python全棧免費答疑.裙 :七衣衣九起起巴而五(數字的諧音)轉換下可以找到了,不懂的問題有老司機解決裡面還有最新Python教程項目可拿,,一起相互監督共同進步!

本文的文字及圖片來源於網路加上自己的想法,僅供學習、交流使用,不具有任何商業用途,版權歸原作者所有,如有問題請及時聯繫我們以作處理。


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 基於S2SH開發房屋租賃管理系統(前臺+後臺)開發環境: Windows操作系統開發工具:Myeclipse+Jdk+Tomcat+MYSQL資料庫運行效果圖 源碼及原文鏈接:https://javadao.xyz/forum.php?mod=viewthread&tid=102 ...
  • 基於S2SH開髮網上蛋糕店(甜品)購物商城系統(前臺+後臺) 開發環境: Windows操作系統開發工具:eclipse+Jdk1.8+Tomcat8+MySQL資料庫註意:請使用JDK1.8 Tomcat8版本運行運行效果圖 源碼及原文鏈接:https://javadao.xyz/forum.ph ...
  • 第一步:引入庫 import time import base64 import rsa import binascii import requests import re from PIL import Image import random from urllib.parse import qu ...
  • 前面知道NumPy是 Python 語言的一個擴展程式庫,支持大量的維度數組與矩陣運算,也針對數組運算提供大量的數學函數庫。numpy是基於c語言開發,所以這使得numpy的運行速度很快,高效率運行就是numpy的一大優勢。但numpy的特長並不是在於數據處理,而是在於能非常方便地實現科學計算,所以 ...
  • 什麼是Dubbo Dubbo是一款高性能、輕量級的開源Java RPC框架,它提供了三大核心能力:面向介面的遠程方法調用,智能容錯和負載均衡,以及服務自動註冊和發現。 什麼是RPC RPC全稱(Remote Procedure Call)遠程過程調用 過程指的是某個代碼片段的執行,遠程調用則意味著我 ...
  • Java的三魂七魄之一:多線程。本文章帶你瞭解多線程的多個知識點,包括多線程的創建、線程安全問題、線程通信問題... ...
  • 1、while迴圈 使用while列印1.2.3.4.5.6.8.9.10 #快速註釋Ctrl+?count = 1 while count <= 10: if count == 7: count = count + 1 pass #表示過,不執行下麵程式 else: print(count) co ...
  • 1.PHP語法基礎是否都會,比如異常捕捉,面向對象,數組操作語法,字元串操作,cookie,session,全局變數,超全局數組,防止sql註入,mysql預處理 2.MYSQL基礎語法,欄位設計,原生sql語句,如何優化查詢效率,索引如何使用,分組聚合,表關聯(一對多,多對多),分庫分表, 3.服 ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...