mysql應用之通過存儲過程方式批量插入數據

来源:https://www.cnblogs.com/simple1025/archive/2019/08/04/11297284.html
-Advertisement-
Play Games

我們平時的測試過程中有一個環節就是準備測試數據,包括準備基礎數據,準備業務數據,使用的場景包括壓力測試,後臺批量數據傳輸,前端大數據查詢導出,或者分頁列印等功能,準備測試數據我們通俗點講就是造數據,根據不同的使用場景我們有不同的造數據的方式,比如需要大數據時我們可以用jmeter壓測獲取大數據,也可 ...


我們平時的測試過程中有一個環節就是準備測試數據,包括準備基礎數據,準備業務數據,使用的場景包括壓力測試,後臺批量數據傳輸,前端大數據查詢導出,或者分頁列印等功能,準備測試數據我們通俗點講就是造數據,根據不同的使用場景我們有不同的造數據的方式,比如需要大數據時我們可以用jmeter壓測獲取大數據,也可以導入生產數據,簡單少許的測試數據我們直接在資料庫中插入,本篇主要記錄的是另外一種造數據的方式——通過編寫存儲過程來實現批量數據插入。

一、編寫調用存儲過程:

資料庫類型:mysql 

需求:在user表中插入數據,user表主鍵為id,id方式為長度為32位的字母+數字隨機字元串

1、創建存儲過程

 1 DELIMITER $$
 2 USE `db_test`$$
 3 DROP PROCEDURE IF EXISTS `proc_user`$$
 4 
 5 CREATE DEFINER=`root`@`%` PROCEDURE `proc_user`()
 6 BEGIN
 7    DECLARE user_name VARCHAR(60);
 8    DECLARE email VARCHAR(150);
 9    DECLARE rand_id VARCHAR(120);
10    DECLARE id VARCHAR(120);
11    DECLARE i INT DEFAULT 1000;
12    DECLARE createtime DATETIME;
13    DECLARE tel_body VARCHAR(40);
14    DECLARE tel VARCHAR(60);
15    -- 調試過程, 先插入5條
16    WHILE i <= 1005 DO
17      -- user_name = test + i
18      SET user_name = CONCAT('test', i);
19      SET email = CONCAT(user_name,'@qq.com');
20      SET rand_id= SUBSTRING(MD5(RAND()),1,28);
21      -- id = rand_id + i, +i的目的主要是為了區分測試數據與user_name對應
22      SET id = CONCAT(rand_id, i);
23      SET createtime = NOW();
24      SET tel_body = FLOOR(RAND()*100000000);
25      -- tel = 159開頭隨機號碼
26      SET tel = CONCAT('159', tel_body);
27 
28      INSERT INTO  `user`
29      VALUES(id,
30        user_name, 
31       '202cb962ac59075b964b07152d234b70', 
32       '0cc495f78776486294ebc7c08831aabe', 
33       NULL,
34       createtime,
35       tel,
36       email
37       );
38      SET i=i+1;
39      END WHILE;
40 END$$
View Code

2、調用存儲過程

1 CALL `proc_user`();
View Code

3、查看表數據

4、模擬批量插入5000條數據,

1)調用存儲過程,全部數據插入完成耗時如下:

2)核對資料庫插入數據總量

 

二、上述方法是將插入記錄數作為一個固定值,直接寫在存儲過程中,其實還可以設置參數,調用存儲過程時傳遞需要插入的記錄行數,如下:

 1 -- 傳參數的方法
 2 DELIMITER $$
 3 USE `db_test`$$
 4 DROP PROCEDURE IF EXISTS `proc_user`$$
 5 
 6 CREATE DEFINER=`root`@`%` PROCEDURE `proc_user`(IN cn INT(4))
 7 BEGIN
 8    DECLARE user_name VARCHAR(60);
 9    DECLARE email VARCHAR(150);
10    DECLARE rand_id VARCHAR(120);
11    DECLARE id VARCHAR(120);
12    DECLARE i INT DEFAULT 1000;
13    DECLARE createtime DATETIME;
14    DECLARE tel_body VARCHAR(40);
15    DECLARE tel VARCHAR(60);
16    -- 判定條件,i<=cn則插入
17    WHILE i <= cn DO
18      SET user_name = CONCAT('test', i);
19      SET email = CONCAT(user_name,'@qq.com');
20      SET rand_id= SUBSTRING(MD5(RAND()),1,28);
21      SET id = CONCAT(rand_id, i);
22      SET createtime = NOW();
23      SET tel_body = FLOOR(RAND()*100000000);
24      SET tel = CONCAT('159', tel_body);
25 
26      INSERT INTO  `user`
27      VALUES(id,
28        user_name, 
29       '202cb962ac59075b964b07152d234b70', 
30       '0cc495f78776486294ebc7c08831aabe', 
31       NULL,
32       createtime,
33       tel,
34       email
35       );
36      SET i=i+1;
37      END WHILE;
38 END$$
39 
40 -- 傳參數的方法CALL `proc_user`(cn); -- cn為任意大於1000小於9999的數值
41 CALL `proc_user`(1100);
View Code

三、函數簡要解釋: 

1、CONCAT()函數:

     拼接函數,將多個字元串拼接成一個字元串,語法為:CONCAT(str1,str2,…)

2、RAND()函數,FLOOR()函數:

     RAND(),0-1之間的隨機數,帶小數點

    

     FLOOR(),取整;

     FLOOR(RAND() *10),獲得0-10之間的整數(包含0,不包含10);FLOOR(RAND() *100000000),獲取10000000-99999999之間的隨機整數

    

3、SUBSTRING()函數:

     截取子字元串函數,從特定位置開始的字元串返回一個給定長度的子字元串

     語法:SUBSTRING(字元串,位置,長度),如SUBSTRING(MD5(RAND()),1,28),從MD5隨機字元串的第1位開始截取長度為28位的子字元串

 


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • 不知道你有沒有產生過這些疑問: 桌面上的圖標到底是啥?憑啥我在滑鼠上一雙擊,就會出來一些不可描述的畫面?都是從哪裡跑出來的? 憑什麼我在鍵盤上噼里啪啦地敲,某個位置就會顯示我想要的那些字元? 電腦怎麼知道我滑鼠點擊的是這個地方,又是怎麼知道我要輸入的是這個地方? 我在鍵盤上點“a”,是誰在顯示器上畫 ...
  • 我目前預習是通過視頻,學到此處視頻里的老師要登錄scott用戶,而我無法登陸,顯示用戶不存在,雖然在Oracle文件中也可以找到scott.sql文件,但經過網上教程創建用戶後我覺得很麻煩而且沒有成功,最終經過大量查閱後我得出了個人結論: 我現在用的是Oracle12c,據我看到的資料是12c應該朝 ...
  • 這次我們來說一下在Mysql中的編碼問題: 我們知道應用於電腦的最早的字元集是ASCII,它所組成的編碼是ASCII編碼;由於對於其他國家來說它所容納的字元個數比較少,後來就出現了ANSI字元集,它的編碼就是本地編碼,由於各個國家的本地編碼不相同,導致互相不相容,最後就出現了Unicode字元集, ...
  • 上一篇中,簡單的說明瞭下 count() 與 sum() 的區別,雖然count 函數是彙總行數的,不過我彙總行數的時候經常是使用SUM(1) ,那麼問題來了,count(1) 與 sum(1) 那個更快? 讓我們比較SUM和COUNT的性能:示例使用的是SQl server 官方示例資料庫 下麵是 ...
  • 1、 truncate 表報 ORA-00054 ,標明有事務正在操作該表 SQL> truncate table alldm.DM_XQKD_YUJING_D;truncate table alldm.DM_XQKD_YUJING_D*ERROR at line 1:ORA-00054: reso ...
  • 過期策略: 我們在set key時,可以給一個expire time,就是過期時間 這段過期時間以後,redis對key刪除使用:定期刪除+惰性刪除 定期刪除指redis預設在100ms內隨機抽取一些設置了過期時間的key,檢查是否過期,過期就刪除。 定期刪除因為隨機的,很多key沒有刪除,就用到惰 ...
  • 爬蟲數據去重: 使用MD5生成指紋判斷頁面是否變化 數據存入mongodb,對關鍵字進行複合索引(千萬以下) 對數據關鍵字進行哈希映射,生成指紋判斷是否在redis的指紋集合中,並可通過是否過濾判斷request對象是否進隊,對request對象進行過濾(千萬級別) 布隆過濾器,實現大數據去重(億級 ...
  • Cassandra簡介 Cassandra是一個開源分散式NoSQL資料庫系統。 它最初由Facebook開發,用於儲存收件箱等簡單格式數據,集GoogleBigTable的數據模型與Amazon Dynamo的完全分散式的架構於一身。Facebook於2008將 Cassandra 開源,此後,由 ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...