Python工具箱系列(二十一)

来源:https://www.cnblogs.com/shanxihualu/archive/2023/01/06/17030898.html
-Advertisement-
Play Games

為了方便準備試驗用的數據,建議使用Faker這個庫來模擬。Faker是一個Python軟體包,可生成偽造數據。無論是需要引導資料庫,創建美觀的XML文檔,填充持久性以進行壓力測試,還是匿名化來自生產服務的數據,Faker都能完美實現。 ...


準備數據

為了方便準備試驗用的數據,建議使用Faker這個庫來模擬。Faker是一個Python軟體包,可生成偽造數據。無論是需要引導資料庫,創建美觀的XML文檔,填充持久性以進行壓力測試,還是匿名化來自生產服務的數據,Faker都能完美實現。

pip install faker

以下代碼生成姓名、性別這類最常用的試驗數據。

from faker import Faker

def fakedata(maxtimes):
    fake = Faker('zh_CN')
    data_total = [[fake.name(), fake.company(), fake.phone_number(), fake.company_email(), fake.address(),
             fake.date_time(tzinfo=None)] for x in range(maxtimes)]
    print(data_total)
    return data_total

fakedata(10)

由於每次fake時,數據都在變化。為了方便使用,可以將生成的數據保存在文件中。文件類型可以是:

◇txt文件。雖然最簡單最自由,但要程式可行分析,不建議

◇excel文件。在Windows環境下使用非常方便。但平臺相容性差

◇csv文件。相容性強,跨平臺,解析方便,推薦

◇json文件。相容性強,跨平臺,解析方便,推薦

◇其它格式可以考慮yaml格式等

 

下麵代碼演示瞭如何以csv格式保存生成的數據:

from faker import Faker
import csv

def fakedata(maxtimes):
    fake = Faker('zh_CN')
    data_total = [[fake.name(), fake.company(), fake.phone_number(), fake.company_email(), fake.address(),
                   fake.date_time(tzinfo=None)] for x in range(maxtimes)]
    print(data_total)
    return data_total

headerlist = ['name','company','phone','email','address','date']
with open('fake.csv','w',encoding='utf-8') as f:
    writer = csv.writer(f)
    # 寫頭部信息
    writer.writerow(headerlist)
    
    # 寫數據
    data = fakedata(100)
    writer.writerows(data)

以上代碼生成100條記錄,並且保存在fake.csv文件備用。

 

創建資料庫並且插入記錄

sqlite是python3內置的標準庫,直接引用即可,不需要任何安裝,非常方便。

import sqlite3
import csv

# 連接資料庫,如果沒有,則直接創建
conn = sqlite3.connect("demo.db")

cur = conn.cursor()

# 創建表
sqlstr = 'create table demo_table(name text,company text,phone text,email text,address text,date text)'

cur.execute(sqlstr)

# 不提交表格沒有真正創建
conn.commit()

# 從文件中讀出數據,並且依次寫入資料庫
with open('fake.csv', 'r', encoding='utf-8') as f:
    reader = csv.reader(f)
    # 讀頭部信息
    header = next(reader)
    print(header)

    # 開始遍歷
    for row in reader:
        if row:
            insertsql = f"insert into demo_table (name,company,phone,email,address) values ('{row[0]}','{row[1]}','{row[2]}','{row[3]}','{row[4]}')"
            # 插入資料庫記錄
            cur.execute(insertsql)

    # 一次性提交
    cur.close()
    conn.commit()
    conn.close()

以上就將保存在fake.csv中的內容全部插入到了資料庫中。後續的CRUD操作都很類似。

sqlite還可以在記憶體中創建資料庫,只要輸入特殊參數值:memory:即可,該資料庫只存在於記憶體中,不會生成本地資料庫文件。只要使用如下所示的特殊的關鍵定即可。

conn = sqlite3.connect(':memory:')

記憶體資料庫速度更快,可以在不產生文件的情況下,實現臨時性的SQL運算,屬於一次性消費。


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 系統運維 SIG 已在龍蜥社區建立 SIG 組。目前 sysAK 工具集已經在龍蜥社區開源,並且在系統運維 SIG、跟蹤診斷 SIG 一起共建,希望大家後期加入 SIG 一起討論共建。本文將從技術角度分享 sysAK 系統。一、 What is sysAKsysAK 是我們去年才提的概念,但裡面的功 ...
  • 如果決策引擎是風控的大腦,那麼規則引擎則是大腦內的重要構成,其編排了各種對抗黑產的規則,是多年對抗黑產的專家經驗的累計,本文將向你介紹規則引擎的構成及實現。 ...
  • 簡介: 建造者模式,又稱之為生成器模式,屬於創建型的設計模式。將一個複雜對象的構建,與它的表示分離,使得同樣的構建過程可以創建不同的表示。 適用場景: 用於創建一些複雜的對象,這些對象內部構建間的建造順序通常是穩定的(這就表名可以抽離),但對象的外在面臨著複雜的變化。 優點: 創建和表象分離 缺點: ...
  • pom.xml中引入依賴 <!-- https://mvnrepository.com/artifact/org.apache.commons/commons-lang3 --> <dependency> <groupId>org.apache.commons</groupId> <artifact ...
  • 變數 使用步驟 聲明 賦值 引用 package main import "fmt" func main(){ //1.變數的聲明 var zl int //2.變數的賦值 zl = 19 //3.變數的使用 fmt.Println("zl = ",zl) //聲明和賦值可以合成一句 var fwy ...
  • 1.什麼是函數遞歸 函數的嵌套調用:一個函數裡面又寫了一個函數。 函數的遞歸調用:他是一種特殊的嵌套調用,他也是在函數裡面調用函數,但是他在函數體內調用的函數時他自己本身。 如果遞歸函數不斷的在函數體內調用函數自己本身,如果我們不給終止條件來結束程式運行的話,程式就會進入死迴圈,那這個時候程式運行將 ...
  • Python中強大的選項處理模塊。 示例 #!/usr/bin/pythonfrom optparse import OptionParser parser = OptionParser() parser.add_option("-f", "--file", dest="filename", hel ...
  • Java開髮網絡安全常見問題 等閑識得東風面,萬紫千紅總是春 1、敏感信息明文傳輸 用戶敏感信息如手機號、銀行卡號、驗證碼等涉及個人隱私的敏感信息不通過任何加密直接明文傳輸。 如下圖中小紅書APP 的手機簡訊驗證碼登錄介面,此處沒有對用戶手機號和驗證碼等信息進行加密傳輸,可以很簡單的截取並開展一些合 ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...