MySQL資料庫備份和恢復

来源:https://www.cnblogs.com/www233ii/archive/2019/11/30/11963640.html
-Advertisement-
Play Games

MySQL資料庫備份和恢復 [toc] 備份恢復概述 為什麼要備份 災難恢復：硬體故障、軟體故障、自然災害、黑客攻擊、誤操作測試等數據丟失場景 備份註意要點 能容忍最多丟失多少數據 恢複數據需要在多長時間內完成 需要恢復哪些數據 還原要點 做還原測試，用於測試備份的可用性 還原演練 備份類型： 完全 ...


目錄

MySQL資料庫備份和恢復

在這裡插入圖片描述

備份恢復概述

為什麼要備份

災難恢復：硬體故障、軟體故障、自然災害、黑客攻擊、誤操作測試等數據丟失場景

備份註意要點

能容忍最多丟失多少數據
恢複數據需要在多長時間內完成
需要恢復哪些數據

還原要點

做還原測試，用於測試備份的可用性
還原演練

備份類型：

* 完全備份，部分備份
    完全備份：整個數據集
    部分備份：只備份數據子集，如部分庫或表
* 完全備份、增量備份、差異備份
    增量備份：僅備份最近一次完全備份或增量備份（如果存在增量）以來變化的數據，備份較快，還原複雜
    差異備份：僅備份最近一次完全備份以來變化的數據，備份較慢，還原簡單
* 註意：二進位日誌文件不應該與數據文件放在同一磁碟
* 冷、溫、熱備份
    冷備：讀、寫操作均不可進行
    溫備：讀操作可執行；但寫操作不可執行
    熱備：讀、寫操作均可執行
        MyISAM：溫備，不支持熱備
        InnoDB：都支持
* 物理和邏輯備份
    物理備份：直接複製數據文件進行備份，與存儲引擎有關，占用較多的空間，速度快
    邏輯備份：從資料庫中“導出”數據另存而進行的備份，與存儲引擎無關，占用空間少，速度慢，可能丟失精度

備份時需要考慮的因素

溫備的持鎖多久
備份產生的負載
備份過程的時長
恢復過程的時長

備份什麼

數據
二進位日誌、InnoDB的事務日誌
程式代碼（存儲過程、函數、觸發器、事件調度器）
伺服器的配置文件

備份工具

cp, tar等複製歸檔工具：物理備份工具，適用所有存儲引擎；只支持冷備；完全和部分備份
LVM的快照：先加鎖，做快照後解鎖，幾乎熱備；藉助文件系統工具進行備份
mysqldump：邏輯備份工具，適用所有存儲引擎，溫備；支持完全或部分備份；對InnoDB存儲引擎支持熱備，結合binlog的增量備份
xtrabackup：由Percona提供支持對InnoDB做熱備(物理備份)的工具，支持完全備份、增量備份
MariaDB Backup： 從MariaDB 10.1.26開始集成，基於Percona XtraBackup 2.3.8實現
mysqlbackup：熱備份， MySQL Enterprise Edition組件
mysqlhotcopy：PERL 語言實現，幾乎冷備，僅適用於MyISAM存儲引擎，使用LOCK TABLES、
FLUSH TABLES和cp或scp來快速備份資料庫

冷備份 cp tar

  1. 確定資料庫是否關閉，沒關閉，關閉掉。（適合於可以停止訪問的公司類型）
[root@centos7 ~]#ss -ntl    # 確定3306埠關閉
State      Recv-Q Send-Q    Local Address:Port                   Peer Address:Port              
LISTEN     0      128                   *:111                               *:*                  
LISTEN     0      128                   *:6000                              *:*                  
LISTEN     0      5         192.168.122.1:53                                *:*                  
LISTEN     0      128                   *:22                                *:*                  
LISTEN     0      128           127.0.0.1:631                               *:*                  
LISTEN     0      100           127.0.0.1:25                                *:*                  
LISTEN     0      128           127.0.0.1:6010                              *:*                  
LISTEN     0      128           127.0.0.1:6011                              *:*                  
LISTEN     0      128           127.0.0.1:6012                              *:*                  
LISTEN     0      128                  :::111                              :::*                  
LISTEN     0      128                  :::6000                             :::*                  
LISTEN     0      128                  :::22                               :::*                  
LISTEN     0      128                 ::1:631                              :::*                  
LISTEN     0      100                 ::1:25                               :::*                  
LISTEN     0      128                 ::1:6010                             :::*                  
LISTEN     0      128                 ::1:6011                             :::*                  
LISTEN     0      128                 ::1:6012                             :::*                  

# 沒關閉使用這條命令關閉
[root@centos7 ~]#systemctl stop mariadb

MariaDB [(none)]> show databases;  # 備份前建立一個資料庫或表用以測試是否可以還原成功
+--------------------+
| Database           |
+--------------------+
| db1                |
| information_schema |
| mysql              |
| performance_schema |
+--------------------+
4 rows in set (0.00 sec)
  1. 打包並壓縮mysql目錄
[root@centos7 data]#tar -zcvf mysql-$(date +%Y%m%d-%H%M).tar.gz /data/mysql/*
[root@centos7 data]#ll   # 打包成帶時間格式
total 1324
drwxr-xr-x 4 mysql root     336 Nov 29 20:04 mysql
-rw-r--r-- 1 root  root 1355106 Nov 29 20:10 mysql-20191130-1144.tar.gz
  1. 發送到另一臺伺服器(最好伺服器上的資料庫版本和以前的相同)
[root@centos7 data]#scp mysql-20191130-1144.tar.gz 192.168.39.57:/data/
The authenticity of host '192.168.39.57 (192.168.39.57)' can't be established.
ECDSA key fingerprint is SHA256:vYJfaHhadE2ci7V5WRkZJ6iDUkQFzoZPmny56D9qKfI.
ECDSA key fingerprint is MD5:22:72:17:9a:a8:93:1a:02:d8:09:17:f4:85:fe:b3:f5.
Are you sure you want to continue connecting (yes/no)? yes     
Warning: Permanently added '192.168.39.57' (ECDSA) to the list of known hosts.
[email protected]'s password: 
mysql-20191130-1144.tar.gz                       100% 1323KB 100.2MB/s   00:00    

[root@centos7 data]#ls    # 查看一下
mysql-20191130-1144.tar.gz

[root@centos7 ~]# mkdir /backup
[root@centos7 ~]# tar zxvf /data/mysql-20191130-1227.tar.gz -C /backup

[root@centos7 backup]# tree   # 查看一下文件是否拷貝過來了
.
└── data
    └── mysql
        ├── aria_log.00000001
        ├── aria_log_control
        ├── db1
        │   └── db.opt
        ├── ib_buffer_pool
        ├── ibdata1
        ├── ib_logfile0
        ├── ib_logfile1
        ├── multi-master.info
        ├── mysql
        │   ├── columns_priv.frm
        │   ├── columns_priv.MYD
        │   ├── columns_priv.MYI
        │   ├── column_stats.frm
        │   ├── column_stats.MYD
        │   ├── column_stats.MYI
        │   ├── db.frm
        │   ├── db.MYD
        │   ├── db.MYI
        │   ├── db.opt
        │   ├── event.frm
        │   ├── event.MYD




[root@centos7 mysql]# ll   # 查看一下MySQL的目錄
total 110668
-rw-rw---- 1 987 981    16384 Nov 30 11:44 aria_log.00000001
-rw-rw---- 1 987 981       52 Nov 30 11:44 aria_log_control
drwx------ 2 987 981       20 Nov 30 11:43 db1
-rw-rw---- 1 987 981      942 Nov 30 11:44 ib_buffer_pool
-rw-rw---- 1 987 981 12582912 Nov 30 11:44 ibdata1
-rw-rw---- 1 987 981 50331648 Nov 30 11:44 ib_logfile0
-rw-rw---- 1 987 981 50331648 Nov 19 16:41 ib_logfile1
-rw-rw---- 1 987 981        0 Nov 19 16:57 multi-master.info
drwx------ 2 987 981     4096 Nov 19 16:41 mysql
-rw-rw---- 1 987 981    29310 Nov 19 16:41 mysql-bin.000001
-rw-rw---- 1 987 981     1685 Nov 30 11:35 mysql-bin.000002
-rw-rw---- 1 987 981      492 Nov 30 11:44 mysql-bin.000003
-rw-rw---- 1 987 981       57 Nov 30 11:41 mysql-bin.index
-rw-rw---- 1 987 981        7 Nov 30 11:44 mysql-bin.state
drwx------ 2 987 981       20 Nov 19 16:41 performance_schema


[root@centos7 mysql]# mv * /var/lib/mysql/  # 移動到原有目錄下

[root@centos7 mysql]# systemctl start mariadb.service  # 啟動服務

[root@centos7 mysql]# mysql  # 登錄資料庫

MariaDB [(none)]> show databases;  # 之前創建的資料庫還在代表還原成功
+--------------------+
| Database           |
+--------------------+
| information_schema |
| db1                |
| mysql              |
| performance_schema |
| test               |
+--------------------+
5 rows in set (0.00 sec)

mysqldump備份工具

  1. 邏輯備份工具：
    mysqldump, mydumper, phpMyAdmin
    Schema和數據存儲在一起、巨大的SQL語句、單個巨大的備份文件
    mysqldump:是MySQL的客戶端命令，通過mysql協議連接至mysql伺服器進行備份
  1. 命令格式:
mysqldump [OPTIONS] database [tables]
mysqldump [OPTIONS] –B DB1 [DB2 DB3...]
mysqldump [OPTIONS] –A [OPTIONS]

  1. mysqldump參考：
    https://dev.mysql.com/doc/refman/5.7/en/mysqldump.html

  2. mysqldump 常見通用選項：
-A, --all-databases #

-B, --databases db_name… #指定備份的資料庫，包括create database語句
-E, --events：#備份相關的所有event scheduler
-R, --routines：#備份所有存儲過程和自定義函數
--triggers：#備份表相關觸發器，預設啟用,用--skip-triggers，不備份觸發器
--default-character-set=utf8  #指定字元集
--master-data[=#]：  #此選項須啟用二進位日誌
#1：所備份的數據之前加一條記錄為CHANGE MASTER TO語句，非註釋，不指定#，預設為1
#2：記錄為註釋的CHANGE MASTER TO語句
#此選項會自動關閉--lock-tables功能，自動打開-x | --lock-all-tables功能（除非開啟-- single-transaction）
-F, --flush-logs #備份前滾動日誌，鎖定表完成後，執行flush logs命令,生成新的二進位日誌文 件，配合-A 或 -B 
選項時，會導致刷新多次資料庫。建議在同一時刻執行轉儲和日誌刷新，可通過和-- single-transaction或-x，--master-data   一起使用實現，此時只刷新一次二進位日誌
--compact      #去掉註釋，適合調試，生產不使用
-d, --no-data      #只備份表結構
-t, --no-create-info   #只備份數據,不備份create table
-n,--no-create-db  #不備份create database，可被-A或-B覆蓋
--flush-privileges     #備份mysql或相關時需要使用
-f, --force            #忽略SQL錯誤，繼續執行
--hex-blob #使用十六進位符號轉儲二進位列，當有包括BINARY， VARBINARY，BLOB，BIT的數 據類型的列時使用，避免亂碼
-q, --quick            #不緩存查詢，直接輸出，加快備份速度
  1. mysqldump命令用法
[root@centos7 ~]# mysqldump --help  # 有三種格式
mysqldump  Ver 10.14 Distrib 5.5.60-MariaDB, for Linux (x86_64)
Copyright (c) 2000, 2018, Oracle, MariaDB Corporation Ab and others.

Dumping structure and contents of MySQL databases and tables.
Usage: mysqldump [OPTIONS] database [tables]
OR     mysqldump [OPTIONS] --databases [OPTIONS] DB1 [DB2 DB3...]
OR     mysqldump [OPTIONS] --all-databases [OPTIONS]
  • 第一種用法(對某一個資料庫或者某個資料庫的特定表做列印，之後在導入到文件里,只是列印到屏幕里所以要導出)
[root@centos7 ~]# mysqldump -uroo hellodb students  # 備份hellodb資料庫的students表   （要指定用戶和密碼，沒設置密碼不用指定）不加表名就備份資料庫。
-- MySQL dump 10.14  Distrib 5.5.60-MariaDB, for Linux (x86_64)
--
-- Host: localhost    Database: hellodb
-- ------------------------------------------------------
-- Server version   5.5.60-MariaDB

/*!40101 SET @OLD_CHARACTER_SET_CLIENT=@@CHARACTER_SET_CLIENT */;
/*!40101 SET @OLD_CHARACTER_SET_RESULTS=@@CHARACTER_SET_RESULTS */;
/*!40101 SET @OLD_COLLATION_CONNECTION=@@COLLATION_CONNECTION */;
/*!40101 SET NAMES utf8 */;
/*!40103 SET @OLD_TIME_ZONE=@@TIME_ZONE */;
/*!40103 SET TIME_ZONE='+00:00' */;
/*!40014 SET @OLD_UNIQUE_CHECKS=@@UNIQUE_CHECKS, UNIQUE_CHECKS=0 */;
/*!40014 SET @OLD_FOREIGN_KEY_CHECKS=@@FOREIGN_KEY_CHECKS, FOREIGN_KEY_CHECKS=0 */;
/*!40101 SET @OLD_SQL_MODE=@@SQL_MODE, SQL_MODE='NO_AUTO_VALUE_ON_ZERO' */;
/*!40111 SET @OLD_SQL_NOTES=@@SQL_NOTES, SQL_NOTES=0 */;
mysqldump: Got error: 1044: "Access denied for user ''@'localhost' to database 'hellodb'" when selecting the database
  • 刪除庫做實驗
[root@centos7 ~]# mysqldump hellodb > /data/hellodb.sql  # 先導出資料庫

MariaDB [(none)]> drop database hellodb; # 刪除庫
Query OK, 7 rows affected (0.00 sec)

MariaDB [(none)]> show databases;  # 查看已經刪除掉了
+--------------------+
| Database           |
+--------------------+
| information_schema |
| db1                |
| mysql              |
| performance_schema |
| test               |
+--------------------+
5 rows in set (0.00 sec)

MariaDB [(none)]> create database hello; # 創建一個資料庫名字不一樣都可以
Query OK, 1 row affected (0.00 sec)

MariaDB [(none)]> use hello   # 進入創建的資料庫
Database changed
MariaDB [hello]> source /data/hellodb.sql  # 把sql腳本讀入到這個庫里
Query OK, 0 rows affected (0.00 sec)

Query OK, 0 rows affected (0.00 sec)

Query OK, 0 rows affected (0.00 sec)

Query OK, 0 rows affected (0.00 sec)

Query OK, 0 rows affected (0.00 sec)

Query OK, 0 rows affected (0.00 sec)

Query OK, 0 rows affected (0.00 sec)

Query OK, 0 rows affected (0.00 sec)

Query OK, 0 rows affected (0.00 sec)

Query OK, 0 rows affected (0.00 sec)


MariaDB [hello]> show tables;  # 查看表，表都在。
+-----------------+
| Tables_in_hello |
+-----------------+
| classes         |
| coc             |
| courses         |
| scores          |
| students        |
| teachers        |
| toc             |
+-----------------+
7 rows in set (0.00 sec)
這種方法可以恢復，但是資料庫的格式和字元集都是預設的，這種方法不建議用。
  • 第二種方法（推薦使用方法）
    -B 挑選指定的資料庫做備份
[root@centos7 ~]# mysqldump -B hellodb mysql > /data/hellodb_mysql.sql # 導出生成sql腳本，最好加上時間格式。
[root@centos7 ~]# vim /data/hellodb_mysql.sql   # 查看一下這個文件
# 這個sql腳本裡面有這一行是用來創建庫和定義庫的格式的，加上-B才會有這一行。
CREATE DATABASE /*!32312 IF NOT EXISTS*/ `hellodb` /*!40100 DEFAULT CHARACTER SET utf8 */;

USE `hellodb`;

MariaDB [(none)]> show create database hellodb; # 查看hellodb資料庫的字元集和格式
+----------+------------------------------------------------------------------+
| Database | Create Database                                                  |
+----------+------------------------------------------------------------------+
| hellodb  | CREATE DATABASE `hellodb` /*!40100 DEFAULT CHARACTER SET utf8 */ |
+----------+------------------------------------------------------------------+
1 row in set (0.00 sec)
  • 發送到遠程主機做測試
[root@centos7 ~]# scp /data/hellodb_mysql.sql 192.168.39.27:/root
[email protected]'s password: 
hellodb_mysql.sql                                100%  509KB  85.6MB/s   00:00
  • 導入sql腳本
MariaDB [(none)]> show databases;  # 遠程主機的資料庫
+--------------------+
| Database           |
+--------------------+
| information_schema |
| db1                |
| mysql              |
| performance_schema |
| test               |
+--------------------+
5 rows in set (0.00 sec)

MariaDB [(none)]> source /root/hellodb_mysql.sql  # 導入sql腳本

MariaDB [mysql]> show databases; # 查看資料庫生成
+--------------------+
| Database           |
+--------------------+
| information_schema |
| db1                |
| hellodb            |
| mysql              |
| performance_schema |
| test               |
+--------------------+
6 rows in set (0.00 sec)

MariaDB [mysql]> show create database hellodb;  # 查看hellodb字元集，是和原本一摸一樣的。
+----------+------------------------------------------------------------------+
| Database | Create Database                                                  |
+----------+------------------------------------------------------------------+
| hellodb  | CREATE DATABASE `hellodb` /*!40100 DEFAULT CHARACTER SET utf8 */ |
+----------+------------------------------------------------------------------+
1 row in set (0.00 sec)
  • 第三種方法 （所有的資料庫做備份） （完全備份）
[root@centos7 ~]# mysqldump -A |gzip > /data/All.sql.gz # 備份連帶壓縮一起執行
[root@centos7 ~]# ll /data/ 
total 140
-rw-r--r-- 1 root root 140945 Nov 30 16:00 All.sql.gz
# 還原下麵會做現在就解釋一下。

模擬資料庫崩潰，最大限度還原數據

[root@centos7 ~]# mysqldump -A --master-data=2 |gzip > /data/all_'date +%F'.sql.gz
mysqldump: Error: Binlogging on server not active
# 上面不成功是因為二進位日誌沒有啟用
  • 啟用二進位日誌
# 事先創建好二進位日誌存放的路徑
[root@centos7 ~]# chown -R mysql:mysql /data/mysql/  # 創建完路徑記得更改許可權
[root@centos7 ~]# vim /etc/my.cnf   # 修改配置文件
[mysqld]
log-bin=/data/mysql/bin_log   # 指定二進位日誌存放路徑（最好和資料庫是分開的） 最後的是指定日誌的首碼。
[root@centos7 ~]# systemctl restart mariadb.service  # 重啟服務
  • 完全備份資料庫
[root@centos7 ~]# mysqldump -A --master-data=2 |gzip > /data/all_`ate +%F`.sql.gz
[root@centos7 ~]# ll /data/
total 140
-rw-r--r-- 1 root  root  141043 Nov 30 16:29 all_2019-11-30.sql.gz
  • 模擬添加一條記錄，創建一個賬號。
MariaDB [(none)]> use hellodb
Reading table information for completion of table and column names
You can turn off this feature to get a quicker startup with -A

Database changed
MariaDB [hellodb]> insert students (name,age,gender)value('a',20,'M');
Query OK, 1 row affected (0.00 sec)

MariaDB [hellodb]> select * from students;
+-------+---------------+-----+--------+---------+-----------+
| StuID | Name          | Age | Gender | ClassID | TeacherID |
+-------+---------------+-----+--------+---------+-----------+
|     1 | Shi Zhongyu   |  22 | M      |       2 |         3 |
|     2 | Shi Potian    |  22 | M      |       1 |         7 |
|     3 | Xie Yanke     |  53 | M      |       2 |        16 |
|     4 | Ding Dian     |  32 | M      |       4 |         4 |
|     5 | Yu Yutong     |  26 | M      |       3 |         1 |
|     6 | Shi Qing      |  46 | M      |       5 |      NULL |
|     7 | Xi Ren        |  19 | F      |       3 |      NULL |
|     8 | Lin Daiyu     |  17 | F      |       7 |      NULL |
|     9 | Ren Yingying  |  20 | F      |       6 |      NULL |
|    10 | Yue Lingshan  |  19 | F      |       3 |      NULL |
|    11 | Yuan Chengzhi |  23 | M      |       6 |      NULL |
|    12 | Wen Qingqing  |  19 | F      |       1 |      NULL |
|    13 | Tian Boguang  |  33 | M      |       2 |      NULL |
|    14 | Lu Wushuang   |  17 | F      |       3 |      NULL |
|    15 | Duan Yu       |  19 | M      |       4 |      NULL |
|    16 | Xu Zhu        |  21 | M      |       1 |      NULL |
|    17 | Lin Chong     |  25 | M      |       4 |      NULL |
|    18 | Hua Rong      |  23 | M      |       7 |      NULL |
|    19 | Xue Baochai   |  18 | F      |       6 |      NULL |
|    20 | Diao Chan     |  19 | F      |       7 |      NULL |
|    21 | Huang Yueying |  22 | F      |       6 |      NULL |
|    22 | Xiao Qiao     |  20 | F      |       1 |      NULL |
|    23 | Ma Chao       |  23 | M      |       4 |      NULL |
|    24 | Xu Xian       |  27 | M      |    NULL |      NULL |
|    25 | Sun Dasheng   | 100 | M      |    NULL |      NULL |
|    26 | a             |  20 | M      |    NULL |      NULL |
+-------+---------------+-----+--------+---------+-----------+
26 rows in set (0.00 sec)

MariaDB [hellodb]> grant all on hellodb.* to test@'192.168.39.%' identified by 'centos'; # 創建一個賬號
Query OK, 0 rows affected (0.00 sec)
  • 假設資料庫崩潰了（刪之前確定二進位日誌獨立出來了）
[root@centos7 ~]# rm -rf /var/lib/mysql/* # 刪除資料庫
[root@centos7 ~]# mysql   # 登錄不上了
ERROR 2002 (HY000): Can't connect to local MySQL server through socket '/var/lib/mysql/mysql.sock' (2)
  • 查看資料庫和二進位文件
[root@centos7 ~]# ll /var/lib/mysql/  # 資料庫沒有了
total 0
[root@centos7 ~]# ll /data/mysql/  # 二進位文件獨立出來了
total 12
-rw-rw---- 1 mysql mysql 264 Nov 30 16:26 bin_log.000001
-rw-rw---- 1 mysql mysql 637 Nov 30 16:35 bin_log.000002
-rw-rw---- 1 mysql mysql  54 Nov 30 16:26 bin_log.index
  • 重新生成資料庫
[root@centos7 ~]# systemctl restart mariadb.service  # 重啟服務就可以

# 新版本在重新啟用服務的時候不會重新啟用資料庫
[root@centos7 ~]# mysql_install_db --user=mysql # 使用這條命令在新版上面生成資料庫

[root@centos7 ~]# mysql
Welcome to the MariaDB monitor.  Commands end with ; or \g.
Your MariaDB connection id is 2
Server version: 5.5.60-MariaDB MariaDB Server

Copyright (c) 2000, 2018, Oracle, MariaDB Corporation Ab and others.

Type 'help;' or '\h' for help. Type '\c' to clear the current input statement.

MariaDB [(none)]> 

[root@centos7 ~]# ll /var/lib/mysql/  # 查看庫是否生成
total 37852
-rw-rw---- 1 mysql mysql    16384 Nov 30 16:42 aria_log.00000001
-rw-rw---- 1 mysql mysql       52 Nov 30 16:42 aria_log_control
-rw-rw---- 1 mysql mysql 18874368 Nov 30 16:42 ibdata1
-rw-rw---- 1 mysql mysql  5242880 Nov 30 16:42 ib_logfile0
-rw-rw---- 1 mysql mysql  5242880 Nov 30 16:42 ib_logfile1
drwx------ 2 mysql mysql     4096 Nov 30 16:42 mysql
srwxrwxrwx 1 mysql mysql        0 Nov 30 16:42 mysql.sock
drwx------ 2 mysql mysql     4096 Nov 30 16:42 performance_schema
drwx------ 2 mysql mysql        6 Nov 30 16:42 test
  • 新的資料庫里之前的哪些庫和表是沒有的
MariaDB [(none)]> show databases;
+--------------------+
| Database           |
+--------------------+
| information_schema |
| mysql              |
| performance_schema |
| test               |
+--------------------+
4 rows in set (0.00 sec)
  • 解壓縮完全備份包
[root@centos7 data]# ls
all_2019-11-30.sql.gz  mysql
[root@centos7 data]# gzip -d all_2019-11-30.sql.gz 
[root@centos7 data]# ls
all_2019-11-30.sql  mysql
  • 臨時停用二進位日誌（不停用的話會有生成一份一模一樣的二進位所以最好關閉）
MariaDB [(none)]> set sql_log_bin=0;
Query OK, 0 rows affected (0.00 sec)
  • 還原資料庫的完全備份，當前會話使用。（但是在完全備份到資料庫崩潰這段時間的數據這樣是還原不了的）
MariaDB [(none)]> source /data/all_2019-11-30.sql
Query OK, 0 rows affected (0.00 sec)

Query OK, 0 rows affected (0.00 sec)

Query OK, 0 rows affected (0.00 sec)

Query OK, 0 rows affected (0.00 sec)

Query OK, 0 rows affected (0.00 sec)

Query OK, 0 rows affected (0.00 sec)

Query OK, 0 rows affected (0.00 sec)

Query OK, 0 rows affected (0.00 sec)
.......(省略)

MariaDB [test]> show databases;  # 完全備份之前建立的庫是在的
+--------------------+
| Database           |
+--------------------+
| information_schema |
| db1                |
| hello              |
| hellodb            |
| mysql              |
| performance_schema |
| test               |
+--------------------+
7 rows in set (0.00 sec)

MariaDB [test]> use hellodb;
Reading table information for completion of table and column names
You can turn off this feature to get a quicker startup with -A

Database changed
MariaDB [hellodb]> select * from students;  # 但是在這個表上添加的記錄沒有了
+-------+---------------+-----+--------+---------+-----------+
| StuID | Name          | Age | Gender | ClassID | TeacherID |
+-------+---------------+-----+--------+---------+-----------+
|     1 | Shi Zhongyu   |  22 | M      |       2 |         3 |
|     2 | Shi Potian    |  22 | M      |       1 |         7 |
|     3 | Xie Yanke     |  53 | M      |       2 |        16 |
|     4 | Ding Dian     |  32 | M      |       4 |         4 |
|     5 | Yu Yutong     |  26 | M      |       3 |         1 |
|     6 | Shi Qing      |  46 | M      |       5 |      NULL |
|     7 | Xi Ren        |  19 | F      |       3 |      NULL |
|     8 | Lin Daiyu     |  17 | F      |       7 |      NULL |
|     9 | Ren Yingying  |  20 | F      |       6 |      NULL |
|    10 | Yue Lingshan  |  19 | F      |       3 |      NULL |
|    11 | Yuan Chengzhi |  23 | M      |       6 |      NULL |
|    12 | Wen Qingqing  |  19 | F      |       1 |      NULL |
|    13 | Tian Boguang  |  33 | M      |       2 |      NULL |
|    14 | Lu Wushuang   |  17 | F      |       3 |      NULL |
|    15 | Duan Yu       |  19 | M      |       4 |      NULL |
|    16 | Xu Zhu        |  21 | M      |       1 |      NULL |
|    17 | Lin Chong     |  25 | M      |       4 |      NULL |
|    18 | Hua Rong      |  23 | M      |       7 |      NULL |
|    19 | Xue Baochai   |  18 | F      |       6 |      NULL |
|    20 | Diao Chan     |  19 | F      |       7 |      NULL |
|    21 | Huang Yueying |  22 | F      |       6 |      NULL |
|    22 | Xiao Qiao     |  20 | F      |       1 |      NULL |
|    23 | Ma Chao       |  23 | M      |       4 |      NULL |
|    24 | Xu Xian       |  27 | M      |    NULL |      NULL |
|    25 | Sun Dasheng   | 100 | M      |    NULL |      NULL |
+-------+---------------+-----+--------+---------+-----------+
25 rows in set (0.00 sec)
  • 查看sql腳本來確定丟失的二進位數據位置
[root@centos7 data]# grep '^-- CHANGE MASTER TO' /data/all_2019-11-30.sql  # 查找以這個開頭的行
-- CHANGE MASTER TO MASTER_LOG_FILE='bin_log.000002', MASTER_LOG_POS=245;  # 最後的數字確定丟失起點位置
  • 以二進位日誌恢復丟失數據
[root@centos7 mysql]# ll
total 1064
-rw-rw---- 1 mysql mysql     264 Nov 30 16:26 bin_log.000001
-rw-rw---- 1 mysql mysql     656 Nov 30 16:42 bin_log.000002 # 要這個文件245之後的
-rw-rw---- 1 mysql mysql   30373 Nov 30 16:42 bin_log.000003 # 和這個文件全部內容
-rw-rw---- 1 mysql mysql 1038814 Nov 30 16:42 bin_log.000004
-rw-rw---- 1 mysql mysql     245 Nov 30 16:42 bin_log.000005
-rw-rw---- 1 mysql mysql     135 Nov 30 16:42 bin_log.index

[root@centos7 mysql]# mysqlbinlog bin_log.000002 --start-position=245 > inc.sql
[root@centos7 mysql]# mysqlbinlog bin_log.000003 >> inc.sql
# 順序不要錯了

[root@centos7 mysql]# mysql
Welcome to the MariaDB monitor.  Commands end with ; or \g.
Your MariaDB connection id is 4
Server version: 5.5.60-MariaDB MariaDB Server

Copyright (c) 2000, 2018, Oracle, MariaDB Corporation Ab and others.

Type 'help;' or '\h' for help. Type '\c' to clear the current input statement.

MariaDB [(none)]> use hellodb;
Reading table information for completion of table and column names
You can turn off this feature to get a quicker startup with -A

Database changed
MariaDB [hellodb]> source /data/mysql/inc.sql  # 導入二進位腳本

MariaDB [hellodb]> select * from students;
+-------+---------------+-----+--------+---------+-----------+
| StuID | Name          | Age | Gender | ClassID | TeacherID |
+-------+---------------+-----+--------+---------+-----------+
|     1 | Shi Zhongyu   |  22 | M      |       2 |         3 |
|     2 | Shi Potian    |  22 | M      |       1 |         7 |
|     3 | Xie Yanke     |  53 | M      |       2 |        16 |
|     4 | Ding Dian     |  32 | M      |       4 |         4 |
|     5 | Yu Yutong     |  26 | M      |       3 |         1 |
|     6 | Shi Qing      |  46 | M      |       5 |      NULL |
|     7 | Xi Ren        |  19 | F      |       3 |      NULL |
|     8 | Lin Daiyu     |  17 | F      |       7 |      NULL |
|     9 | Ren Yingying  |  20 | F      |       6 |      NULL |
|    10 | Yue Lingshan  |  19 | F      |       3 |      NULL |
|    11 | Yuan Chengzhi |  23 | M      |       6 |      NULL |
|    12 | Wen Qingqing  |  19 | F      |       1 |      NULL |
|    13 | Tian Boguang  |  33 | M      |       2 |      NULL |
|    14 | Lu Wushuang   |  17 | F      |       3 |      NULL |
|    15 | Duan Yu       |  19 | M      |       4 |      NULL |
|    16 | Xu Zhu        |  21 | M      |       1 |      NULL |
|    17 | Lin Chong     |  25 | M      |       4 |      NULL |
|    18 | Hua Rong      |  23 | M      |       7 |      NULL |
|    19 | Xue Baochai   |  18 | F      |       6 |      NULL |
|    20 | Diao Chan     |  19 | F      |       7 |      NULL |
|    21 | Huang Yueying |  22 | F      |       6 |      NULL |
|    22 | Xiao Qiao     |  20 | F      |       1 |      NULL |
|    23 | Ma Chao       |  23 | M      |       4 |      NULL |
|    24 | Xu Xian       |  27 | M      |    NULL |      NULL |
|    25 | Sun Dasheng   | 100 | M      |    NULL |      NULL |
|    26 | a             |  20 | M      |    NULL |      NULL |  # 添加的a記錄回來了
+-------+---------------+-----+--------+---------+-----------+
26 rows in set (0.00 sec)

MariaDB [hellodb]> select user,host,password from mysql.user;
+------+---------------------+-------------------------------------------+
| user | host                | password                                  |
+------+---------------------+-------------------------------------------+
| root | localhost           |                                           |
| root | centos7.localdomain |                                           |
| root | 127.0.0.1           |                                           |
| root | ::1                 |                                           |
|      | localhost           |                                           |
|      | centos7.localdomain |                                           |
| test | 192.168.39.%        | *128977E278358FF80A246B5046F51043A2B1FCED | # 添加的賬戶也還原回來了
+------+---------------------+-------------------------------------------+
7 rows in set (0.00 sec)
  • 最後在啟用二進位日誌
MariaDB [hellodb]> set sql_log_bin=1;
Query OK, 0 rows affected (0.00 sec)
還原的時候，資料庫必須是不能訪問的狀態，資料庫的二進位日誌就是備份。

mysqldump的分庫備份

  1. 先查看庫名
MariaDB [(none)]> show databases;
+--------------------+
| Database           |
+--------------------+
| information_schema |
| db1                |
| hello              |
| hellodb            |
| mysql              |
| performance_schema |
| test               |
+--------------------+
7 rows in set (0.00 sec)
  1. 挑出資料庫備份(用grep)
[root@centos7 ~]# mysql -uroot -e 'show databases'|grep -Ev '^(Database|information_schema|performance_schema)$'
db1
hello
hellodb
mysql
test
  1. 使用while迴圈來備份
[root@centos7 ~]# mysql -uroot -e 'show databases'|grep -Ev '^(Database|information_schema|performance_schema)$'|while read db;do mysqldump -B $db|gzip > /data/$db.sql.gz;done
[root@centos7 ~]# ll /data/
total 156
-rw-r--r-- 1 root  root     516 Nov 30 17:31 db1.sql.gz
-rw-r--r-- 1 root  root    1898 Nov 30 17:31 hellodb.sql.gz
-rw-r--r-- 1 root  root    1892 Nov 30 17:31 hello.sql.gz
-rw-r--r-- 1 root  root  139603 Nov 30 17:31 mysql.sql.gz
-rw-r--r-- 1 root  root     516 Nov 30 17:31 test.sql.gz
  1. 使用for迴圈做備份
[root@centos7 ~]# for db in `mysql -uroot -e 'show databases'|grep -Ev '^(Database|information_schema|performance_schema)$'`;do mysqldump -B $db|gzip > /data/$db.sql.gz;done
[root@centos7 ~]# ll -t /data/
total 156
-rw-r--r-- 1 root  root     516 Nov 30 17:34 test.sql.gz
-rw-r--r-- 1 root  root  139603 Nov 30 17:34 mysql.sql.gz
-rw-r--r-- 1 root  root    1898 Nov 30 17:34 hellodb.sql.gz
-rw-r--r-- 1 root  root    1892 Nov 30 17:34 hello.sql.gz
-rw-r--r-- 1 root  root     516 Nov 30 17:34 db1.sql.gz
  1. 使用sed來備份數據
[root@centos7 ~]# mysql -uroot -e 'show databases'|grep -Ev '^(Database|information_schema|performance_schema)$' | sed -rn 's#(.*)#mysqldump -B \1 |gzip > /data/\1.sql.gz#p'|bash
[root@centos7 ~]# ll -t /data/
total 156
-rw-r--r-- 1 root  root     517 Nov 30 17:37 test.sql.gz
-rw-r--r-- 1 root  root  139603 Nov 30 17:37 mysql.sql.gz
-rw-r--r-- 1 root  root    1898 Nov 30 17:37 hellodb.sql.gz
-rw-r--r-- 1 root  root    1892 Nov 30 17:37 hello.sql.gz
-rw-r--r-- 1 root  root     516 Nov 30 17:37 db1.sql.gz
  1. 用sed替換grep分庫備份
[root@centos7 ~]# mysql -uroot -e 'show databases'|sed -rn '/^(Database|information_schema|performance_schema)$/!s#(.*)#mysqldump -B \1 |gzip > /data/\1.sql.gz#p' |bash
[root@centos7 ~]# ll -t /data/
total 156
-rw-r--r-- 1 root  root     516 Nov 30 17:43 test.sql.gz
-rw-r--r-- 1 root  root  139600 Nov 30 17:43 mysql.sql.gz
-rw-r--r-- 1 root  root    1898 Nov 30 17:43 hellodb.sql.gz
-rw-r--r-- 1 root  root    1892 Nov 30 17:43 hello.sql.gz
-rw-r--r-- 1 root  root     516 Nov 30 17:43 db1.sql.gz
分庫備份可以編寫成腳本，配合計劃任務使用。（最好備份的包加上時間格式要不容易覆蓋掉）

mysqldump的MyISAM存儲引擎相關的備份選項：

MyISAM不支持事務,只能支持溫備；不支持熱備，所以必須先鎖定要備份的庫，而後啟動備份操作
-x,--lock-all-tables #加全局讀鎖，鎖定所有庫的所有表，同時加--single-transaction或--
lock-tables選項會關閉此選項功能
#註意：數據量大時，可能會導致長時間無法併發訪問資料庫
-l,--lock-tables #對於需要備份的每個資料庫，在啟動備份之前分別鎖定其所有表，預設為on,--
skip-lock-tables選項可禁用,對備份MyISAM的多個庫,可能會造成數據不一致
#註：以上選項對InnoDB表一樣生效，實現溫備，但不推薦使用

mysqldump的InnoDB存儲引擎相關的備份選項：

InnoDB 存儲引擎支持事務,可以利用事務的相應的隔離級別,實現熱備，也可以實現溫備但不建議用
--single-transaction
#此選項Innodb中推薦使用，不適用MyISAM，此選項會開始備份前，先執行START TRANSACTION指令開啟
事務
#此選項通過在單個事務中轉儲所有表來創建一致的快照。 僅適用於存儲在支持多版本控制的存儲引擎中的表
（目前只有InnoDB可以）; 轉儲不保證與其他存儲引擎保持一致。 在進行單事務轉儲時，要確保有效的轉儲
文件（正確的表內容和二進位日誌位置），沒有其他連接應該使用以下語句：ALTER TABLE，DROP
TABLE，RENAME TABLE，TRUNCATE TABLE,此選項和--lock-tables（此選項隱含提交掛起的事務）選
項是相互排斥,備份大型表時，建議將--single-transaction選項和--quick結合一起使用

生產環境實戰備份策略

  1. InnoDB建議備份策略
mysqldump –uroot -p –A –F –E –R --single-transaction --master-data=1 --flushprivileges
--triggers --default-character-set=utf8 --hex-blob
>${BACKUP}/fullbak_${BACKUP_TIME}.sql
  1. MyISAM建議備份策略
mysqldump –uroot -p –A –F –E –R –x --master-data=1 --flush-privileges --
triggers --default-character-set=utf8 --hex-blob
>${BACKUP}/fullbak_${BACKUP_TIME}.sql

範例：完全備份和還原

#開啟二進位日誌
[root@centos8 ~]#vim /etc/my.cnf.d/mariadb-server.cnf
[mysqld]
log-bin
#備份
[root@centos8 ~]#mysqldump -uroot -p -A -F --single-transaction --master-data=2
|gzip > /backup/all-`date +%F`.sql.gz
#還原
[root@centos8 backup]#dnf install mariadb-server
[root@centos8 backup]#gzip -d all-2019-11-27.sql.gz
[root@centos8 ~]#mysql
MariaDB [(none)]> set sql_log_bin=off;
MariaDB [(none)]> source /backup/all-2019-11-27.sql
MariaDB [(none)]> set sql_log_bin=on;

範例：mysqldump 和二進位日誌結合實現增量備份

[root@centos8 ~]#mysqldump -uroot -p -A -F --single-transaction --master-data=2
|gzip > /backup/all-`date +%F`.sql.gz
#觀察備份文件中的二進位文件和位置，將之後的二進位日誌進行複製備份
[root@centos8 ~]#cp /var/lib/mysql/mariadb-bin.000003 /backup
[root@centos8 ~]#mysqlbinlog --start-position=389 /backup/mariadb-bin.000003 >
/backup/inc.sql

將誤刪除了的某個表進行還原

  1. 先完全備份一份
[root@centos7 ~]# mysqldump -A -F --single-transaction --master-data=2 |gzip > /backup/allbackup_`date +%F_%T`.sql.gz
[root@centos7 ~]# ll /backup/
total 140
-rw-r--r-- 1 root root 141141 Nov 30 18:03 allbackup_2019-11-30_18:03:08.sql.gz
  1. 在完全備份之後最一些記錄變化
MariaDB [db1]> create table test ( id int unsigned auto_increment primary key,name varchar(10) not null,mobile char(11) not null );  # 創建一張表
Query OK, 0 rows affected (0.00 sec)

MariaDB [db1]> show tables;  # 查看庫里的所有表
+---------------+
| Tables_in_db1 |
+---------------+
| test          |
+---------------+
1 row in set (0.00 sec)

MariaDB [db1]> insert test (name) values('rose'); # 添加記錄
Query OK, 1 row affected, 1 warning (0.00 sec)

MariaDB [db1]> insert test (name) values('jack'); # 添加記錄
Query OK, 1 row affected, 1 warning (0.00 sec)

MariaDB [db1]> select * from test; # 查看添加的記錄
+----+------+--------+
| id | name | mobile |
+----+------+--------+
|  1 | rose |        |
|  2 | jack |        |
+----+------+--------+
2 rows in set (0.01 sec)
  1. 誤刪除表
MariaDB [db1]> drop table test;
Query OK, 0 rows affected (0.01 sec)

MariaDB [db1]> show tables;
Empty set (0.00 sec)
  1. 解壓縮
[root@centos7 ~]# cd /backup/
[root@centos7 backup]# ll
total 140
-rw-r--r-- 1 root root 141141 Nov 30 18:03 allbackup_2019-11-30_18:03:08.sql.gz
[root@centos7 backup]# gzip -d allbackup_2019-11-30_18\:03\:08.sql.gz 
[root@centos7 backup]# ll
total 520
-rw-r--r-- 1 root root 528632 Nov 30 18:03 allbackup_2019-11-30_18:03:08.sql
  1. 找到上次完全備份的結束位置
[root@centos7 backup]# grep '\-\- CHANGE MASTER TO' /backup/allbackup_2019-11-30_18\:03\:08.sql 
-- CHANGE MASTER TO MASTER_LOG_FILE='bin_log.000006', MASTER_LOG_POS=245;
[root@centos7 backup]#
  1. 導出245之後的所有二進位日誌（增量備份）
[root@centos7 backup]# mysqlbinlog --start-position=245 /data/mysql/bin_log.000006 > /backup/inc.sql
[root@centos7 backup]# ll /backup/
total 524
-rw-r--r-- 1 root root 528632 Nov 30 18:03 allbackup_2019-11-30_18:03:08.sql
-rw-r--r-- 1 root root   2791 Nov 30 18:20 inc.sql
  1. 查看執行過的drop命令的時間和位置
[root@centos7 backup]# mysqlbinlog --start-position=245 /data/mysql/bin_log.000006|grep -i drop
DROP TABLE `test` /* generated by server */
[root@centos7 backup]# mysqlbinlog --start-position=245 /data/mysql/bin_log.000006|grep -C3 -i drop
# at 856   # 這個位置
#191130 18:07:32 server id 1  end_log_pos 961   Query   thread_id=35    exec_time=error_code=0
SET TIMESTAMP=1575108452/*!*/;
DROP TABLE `test` /* generated by server */
/*!*/;
DELIMITER ;
# End of log file
  1. 然後打開導出來的文件刪掉或註釋掉誤操作
[root@centos7 backup]# vim /backup/inc.sql 
# at 856
#191130 18:07:32 server id 1  end_log_pos 961   Query   thread_id=35    exec_time=0     error_code=0
SET TIMESTAMP=1575108452/*!*/;
#DROP TABLE `test` /* generated by server */   # 這行註釋掉其他的可以不用管
/*!*/;
DELIMITER ;
# End of log file
  1. 刪除資料庫（可以在一個新的主機上做這個實驗也可以）
[root@centos7 backup]# rm -rf /var/lib/mysql/*  # 刪除資料庫
[root@centos7 backup]# systemctl restart mariadb.service  # 重啟服務生成資料庫
[root@centos7 backup]# ll /var/lib/mysql/
total 37852
-rw-rw---- 1 mysql mysql    16384 Nov 30 18:33 aria_log.00000001
-rw-rw---- 1 mysql mysql       52 Nov 30 18:33 aria_log_control
-rw-rw---- 1 mysql mysql 18874368 Nov 30 18:33 ibdata1
-rw-rw---- 1 mysql mysql  5242880 Nov 30 18:33 ib_logfile0
-rw-rw---- 1 mysql mysql  5242880 Nov 30 18:33 ib_logfile1
drwx------ 2 mysql mysql     4096 Nov 30 18:33 mysql
srwxrwxrwx 1 mysql mysql        0 Nov 30 18:33 mysql.sock
drwx------ 2 mysql mysql     4096 Nov 30 18:33 performance_schema
drwx------ 2 mysql mysql        6 Nov 30 18:33 test
  1. 登錄資料庫關閉二進位日誌
[root@centos7 backup]# mysql
Welcome to the MariaDB monitor.  Commands end with ; or \g.
Your MariaDB connection id is 2
Server version: 5.5.60-MariaDB MariaDB Server

Copyright (c) 2000, 2018, Oracle, MariaDB Corporation Ab and others.

Type 'help;' or '\h' for help. Type '\c' to clear the current input statement.

MariaDB [(none)]> set sql_log_bin=0;
Query OK, 0 rows affected (0.00 sec)
  1. 還原完全備份
MariaDB [(none)]> source /backup/allbackup_2019-11-30_18:03:08.sql
Query OK, 0 rows affected (0.00 sec)

Query OK, 0 rows affected (0.00 sec)

Query OK, 0 rows affected (0.00 sec)

Query OK, 0 rows affected (0.00 sec)

Query OK, 0 rows affected (0.00 sec)

Query OK, 0 rows affected (0.00 sec)

Query OK, 0 rows affected (0.00 sec)

Query OK, 0 rows affected (0.00 sec)
.....(省略)

MariaDB [test]> show databases; # 查看資料庫是否還原
+--------------------+
| Database           |
+--------------------+
| information_schema |
| db1                |
| hello              |
| hellodb            |
| mysql              |
| performance_schema |
| test               |
+--------------------+
7 rows in set (0.00 sec)
  1. 再還原增量備份(註意是修改過誤操作的那個文件)
MariaDB [test]> source /backup/inc.sql
Query OK, 0 rows affected (0.00 sec)

Query OK, 0 rows affected (0.00 sec)

Query OK, 0 rows affected (0.00 sec)

Query OK, 0 rows affected (0.00 sec)

Database changed
Query OK, 0 rows affected (0.00 sec)

Query OK, 0 rows affected (0.00 sec)

Query OK, 0 rows affected (0.00 sec)

Query OK, 0 rows affected (0.00 sec)

Query OK, 0 rows affected (0.00 sec)

Charset changed
Query OK, 0 rows affected (0.00 sec)

Query OK, 0 rows affected (0.00 sec)

Query OK, 0 rows affected (0.00 sec)

Query OK, 0 rows affected (0.00 sec)

Query OK, 0 rows affected (0.00 sec)

Query OK, 0 rows affected (0.00 sec)

Query OK, 0 rows affected (0.00 sec)

Query OK, 0 rows affected (0.00 sec)

Query OK, 0 rows affected (0.00 sec)

Query OK, 1 row affected, 1 warning (0.00 sec)

Query OK, 0 rows affected (0.00 sec)

Query OK, 0 rows affected (0.00 sec)

Query OK, 0 rows affected (0.00 sec)

Query OK, 0 rows affected (0.00 sec)

Query OK, 0 rows affected (0.01 sec)

Query OK, 1 row affected, 1 warning (0.00 sec)

Query OK, 0 rows affected (0.00 sec)

Query OK, 0 rows affected (0.00 sec)

ERROR at line 65 in file: '/backup/inc.sql': No query specified  # 這裡沒有執行就是我註釋掉的drop命令（報錯不用管）

Query OK, 0 rows affected (0.00 sec)

Query OK, 0 rows affected (0.00 sec)

Query OK, 0 rows affected (0.00 sec)
  1. 開啟二進位日誌
MariaDB [db1]> set sql_log_bin=1; # 確保數據還原完畢再打開
Query OK, 0 rows affected (0.00 sec)
  1. 查看數據是否還原
MariaDB [db1]> show tables;  # 表沒有被刪掉
+---------------+
| Tables_in_db1 |
+---------------+
| test          |
+---------------+
1 row in set (0.00 sec)

MariaDB [db1]> select * from test; # 添加的記錄也在
+----+------+--------+
| id | name | mobile |
+----+------+--------+
|  1 | rose |        |
|  2 | jack |        |
+----+------+--------+
2 rows in set (0.00 sec)
做以上實驗確保你的二進位日誌獨立於資料庫之外。

您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • source insight搭建python環境
    SI是一個受到廣泛歡迎的代碼閱讀/編輯器，那麼能不能用SI來進行python開發呢，經過一晚上的試驗，終於實現了這一功能。 1.python的語法高亮 source insight 4.0版本已經預設支持python語言的語法高亮，無須另外設置 當然可以自行設置主題、字體大小等以符合個人閱讀編輯習慣 ...
  • Linux中crontab定時任務
    crontab安裝（centOS） yum y install vixie cron crontab語法（計劃任務） crontab [ u user] file crontab [ u user] [ e | l | r ] (default operation is replace, per 1 ...
  • Shell - 長 ping 腳本監控網路狀態
    生產環境中, 網路是否穩定(網路時延)是一個很重要的指標. 為了方便檢查網路時延的大小, 我們可以通過 “ping” 命令實現長時間的網路監控. ...
  • 做為GPU伺服器管理員，當其他用戶需要執行某個要root許可權的命令時，除了告訴他們root密碼，還有沒有別的辦法？
    通常一臺GPU伺服器(這裡指linux系統)不可能只有一個帳號能用的，比如當其他用戶想要在GPU伺服器上安裝一些軟體的時候，會需要用到apt\ get命令，但是apt\ get命令需要root用戶的操作許可權，如果GPU伺服器由你管理，那麼你如何在不直接給root密碼的情況下，讓其他用戶可以執行該命令 ...
  • nginx 配置實例-反向代理
    反向代理實例一 虛擬機IP：192.168.116.129實現效果：使用 nginx 反向代理，訪問 www.123.com 直接跳轉到 虛擬機的192.168.116.129:8080 實驗代碼 1） 啟動一個 tomcat，瀏覽器地址欄輸入 192.168.116.129:8080，出現如下界面 ...
  • oracle性能優化（項目中的一個sql優化的簡單記錄）
    在項目中，寫的sql主要以查詢為主，但是數據量一大，就會突出sql性能優化的重要性。其實在數據量2000W以內，可以考慮索引，但超過2000W了，就要考慮分庫分表這些了。本文主要記錄在實際項目中，一個需要查詢很慢的sql的優化過程，如果有更好的方案，請在下麵留言交流。 很多文章都有關於sql優化的方 ...
  • MySql事務的簡單使用
    4個特性 原子性：一個事務中的所有操作，要麼全部完成，要麼全部不完成，不會結束在中間某個環節。事務在執行過程中發生錯誤，會被回滾（rollback）到事務開始前的狀態 一致性：在事務開始前和事務結束以後，資料庫的完整性沒有被破壞。例如A和B之間的轉賬，不論轉多少次，轉多少，兩個人的總金額是不會變的 ...
  • ORA-00845 startup啟動不起來關於磁碟空間擴充
    問題描述：今天在虛擬機下進行startup的操作，但是沒有起來，系統報錯：ORA-00845: MEMORY_TARGET not supported on this system 1.startup啟動，MEMORY_TARGET啟動不起來在系統中，Oracle總共可以使用的共用記憶體大小，這個參數 ...
一周排行
    -Advertisement-
    Play Games
  • C#自增運算符詳解：++i與i++的區別及應用場景
    概述：在C#中，++i和i++都是自增運算符，其中++i先增加值再返回，而i++先返回值再增加。應用場景根據需求選擇，首碼適合先增後用，尾碼適合先用後增。詳細示例提供清晰的代碼演示這兩者的操作時機和實際應用。 在C#中，++i 和 i++ 都是自增運算符，但它們在操作上有細微的差異，主要體現在操作的 ...
  • Taurus.MVC 性能壓力測試（ap 壓測 和 linux 下wrk 壓測）：.NET 版本
    上次發佈了：Taurus.MVC 性能壓力測試（ap 壓測 和 linux 下wrk 壓測）：.NET Core 版本，今天計劃準備壓測一下 .NET 版本，來測試並記錄一下 Taurus.MVC 框架在 .NET 版本的性能，以便後續持續優化改進。 為了方便對比，本文章的電腦環境和測試思路，儘量和... ...
  • 一文讀懂.NET WebAPI中FromRoute、FromQuery、FromBody的關鍵角色與用法
    .NET WebAPI作為一種構建RESTful服務的強大工具，為開發者提供了便捷的方式來定義、處理HTTP請求並返迴響應。在設計API介面時，正確地接收和解析客戶端發送的數據至關重要。.NET WebAPI提供了一系列特性，如[FromRoute]、[FromQuery]和[FromBody]，用 ...
  • WPF/C#實現圖像濾鏡優化方案：打造炫目視覺體驗！
    原因：我之所以想做這個項目，是因為在之前查找關於C#/WPF相關資料時，我發現講解圖像濾鏡的資源非常稀缺。此外，我註意到許多現有的開源庫主要基於CPU進行圖像渲染。這種方式在處理大量圖像時，會導致CPU的渲染負擔過重。因此，我將在下文中介紹如何通過GPU渲染來有效實現圖像的各種濾鏡效果。 生成的效果 ...
  • Bogus 實戰：使用 Bogus 和 EFCore 生成模擬數據和種子數據【完整教程】
    引言 上一章我們介紹了在xUnit單元測試中用xUnit.DependencyInject來使用依賴註入，上一章我們的Sample.Repository倉儲層有一個批量註入的介面沒有做單元測試，今天用這個示例來演示一下如何用Bogus創建模擬數據 ，和 EFCore 的種子數據生成 Bogus 的優 ...
  • WPF隨筆收錄-實時繪製心率曲線
    一、前言 在自己的項目中，涉及到實時心率曲線的繪製，項目上的曲線繪製，一般很難找到能直接用的第三方庫，而且有些還是定製化的功能，所以還是自己繪製比較方便。很多人一聽到自己畫就害怕，感覺很難，今天就分享一個完整的實時心率數據繪製心率曲線圖的例子；之前的博客也分享給DrawingVisual繪製曲線的方 ...
  • wpf程式修改啟動入口註意事項
    如果你在自定義的 Main 方法中直接使用 App 類並啟動應用程式，但發現 App.xaml 中定義的資源沒有被正確載入，那麼問題可能在於如何正確配置 App.xaml 與你的 App 類的交互。 確保 App.xaml 文件中的 x:Class 屬性正確指向你的 App 類。這樣，當你創建 Ap ...
  • 記一次 .NET某爐膛鍋爐檢測系統 崩潰分析
    一：背景 1. 講故事 上個月有個朋友在微信上找到我，說他們的軟體在客戶那邊隔幾天就要崩潰一次，一直都沒有找到原因，讓我幫忙看下怎麼回事，確實工控類的軟體環境複雜難搞，朋友手上有一個崩潰的dump，剛好丟給我來分析一下。 二：WinDbg分析 1. 程式為什麼會崩潰 windbg 有一個厲害之處在於 ...
  • 一個.NET內置依賴註入的小型強化版
    前言 .NET生態中有許多依賴註入容器。在大多數情況下，微軟提供的內置容器在易用性和性能方面都非常優秀。外加ASP.NET Core預設使用內置容器，使用很方便。 但是筆者在使用中一直有一個頭疼的問題：服務工廠無法提供請求的服務類型相關的信息。這在一般情況下並沒有影響，但是內置容器支持註冊開放泛型服 ...
  • WPF隨筆收錄-DataGrid固定右側列
    一、前言 在項目開發過程中，DataGrid是經常使用到的一個數據展示控制項，而通常表格的最後一列是作為操作列存在，比如會有編輯、刪除等功能按鈕。但WPF的原始DataGrid中，預設只支持固定左側列，這跟大家習慣性操作列放最後不符，今天就來介紹一種簡單的方式實現固定右側列。（這裡的實現方式參考的大佬 ...
所有分類