sql server作業實現數據同步

来源:http://www.cnblogs.com/IcrazyT/archive/2017/10/13/7661217.html
-Advertisement-
Play Games

作業介紹 SQL SERVER的作業是一系列由SQL SERVER代理按順序執行的指定操作。作業可以執行一系列活動,包括運行Transact-SQL腳本、命令行應用程式、Microsoft ActiveX腳本、Integration Services 包、Analysis Services 命令和查 ...


作業介紹

     SQL SERVER的作業是一系列由SQL SERVER代理按順序執行的指定操作。作業可以執行一系列活動,包括運行Transact-SQL腳本、命令行應用程式、Microsoft ActiveX腳本、Integration Services 包、Analysis Services 命令和查詢或複製任務。作業可以運行重覆任務或那些可計劃的任務,它們可以通過生成警報來自動通知用戶作業狀態,從而極大地簡化了 SQL Server 管理[參見MSDN]。

    創建作業、刪除作業、查看作業歷史記錄....等所有操作都可以通過SSMS管理工具GUI界面操作,有時候也確實挺方便的。但是當一個實例有多個作業或多個資料庫實例時,通過圖形化的界面去管理、維護作業也是個頭痛的問題,對於SQL腳本與GUI界面管理維護作業熟優熟劣這個問題,只能說要看場合。下麵主要介紹通過SQL腳本來管理、維護作業。

作業優劣

     作業適合一些簡單的操作,主要是定時執行一些計劃,利用JOB定時執行,先清空本地數據,然後從遠程LinkServer遠程資料庫提取數據插入當前資料庫,方式簡單,操作容易,但是效率低,不需要檢查事物日誌去比較差異。

     但是頻繁的清空,插入,如果數據量比較大時候。效率會很低,而且進行一些複雜的操作是有點困難。主要看你的需求是咋樣。

實際例子

  需求:將一臺伺服器上的sql server2005某一些表的數據同步到另一臺伺服器裝有sql server 2008的資料庫中。在同步中,有一些數據4小時更新一次。另外一些2小時更新一次。

   設計:由於操作簡單我們首選採用server JOB來完成。在目標資料庫中來完成作業創建。因為sql server2005版本有點低。定時將SourceDate中數據更新到目標資料庫中,

         首先刪除目標資料庫中數據,然後進行插入操作。有些需求不需要刪除所有數據,但是你進行一些判斷是否存在要更新和插入。在JOB不好操作,我暫時沒有發現好的方法,只能將表清空,然後在插入,但是這樣數據量大的時候就會慢下來。

         這裡有兩種辦法實現設計,第一種就是源數據源中創建作業,另外一種是就是目標數據源中創建作業因為sql server2005版本有點低。定時將SourceDate中數據更新到目標資料庫中,

         這裡有兩種辦法實現遠程資料庫連接,第一種就是在創建作業鏈接遠程資料庫中採用腳本連接,另外一種是利用GUI界面中在鏈接伺服器中創建連接即可,我個人認為有界面版的好一些。

   實現:①:在源資料庫伺服器上建立鏈接伺服器。【伺服器對象】-【鏈接伺服器】-右鍵【新建鏈接伺服器(N)...】-【常規】(如下圖)

 

 

 

    註 意:鏈接伺服器IP:192.168.1.65是目標資料庫,建立這個鏈接伺服器準備直接訪問192.168.1.65的伺服器上的資料庫表。由於這裡是 SQL SERVER 所以伺服器類型選擇SQL Server。

 

   ②:選擇【安全性】設置登錄用戶和密碼,添加一個本地伺服器登錄到遠程伺服器的登錄映射。然後【確定】(如下圖)

 

 

 

 

 

 

    ③:這時可以看到了一個192.168.1.56的鏈接伺服器。右鍵【測試連接(T)】(如下圖)

 

 

 

 

   ④:如果出現如下對話框則說明配置正確(如下圖)

 

 

 

   

    在源資料庫伺服器上建立一個job主動的把數據push到目標資料庫里去。

    ⑤:新建立作業:【SQL Server 代理】-【作業】-右鍵【新建作業(N)...】

   

   ⑥:在【常規】中為作業起個名稱(如下圖)

   

   ⑦:點擊【步驟】,然後點擊【新建(N)...】創建作業步驟(如下圖)

   

   ⑧:編輯步驟(如下圖),然後【確定】

   從源資料庫push數據到目標資料庫的sql語句:

   truncate table [192.168.1.56].TargetData.[dbo].[TargetTable]

   go

   insert into [192.168.1.56 ].TargetData.[dbo].[TargetTable ] select * from SourceData.[dbo].[SourceTable]

   go

   

   ⑨:新建作業計劃(如下圖),然後【確定】

       

    ⑩:最終【確定】就可以了(如下圖)

   

   11:執行SQL JOB,右鍵點擊剛新建的作業【PushDataToTarget】-【作業開始步驟(T)...】(如下圖)

   

   12:結果出現下麵的問題(如下圖)

   

    13:然後去查看日誌右鍵點擊【PushDataToTarget】-【查看歷史記錄(V)】(如下圖)

        =============================================================    

     方法二:在目標資料庫伺服器上建立一個鏈接伺服器,讓目標資料庫主動的把數據pull到源資料庫中。

    1:創建鏈接伺服器 參照上方的方法,並測試鏈接成功。然後在目標數據中新建作業,如下圖

   

  2、新建步驟(如下圖)

  從源資料庫pull數據的sql語句:

  truncate table TargetData.[dbo].[TargetTable]

  go

  insert into TargetData.[dbo].[TargetTable ] select * from [192.168.2.200].SourceData.[dbo].[SourceTable]

  go

 

   

   3、新建計劃(如下圖)

   

  4、最終【確定】

   

   5、右鍵點擊【PullDataFromSource】-【作業開始步驟(T)...】

   

   6、執行結果如下

 

 

   7、再查看日誌如下

   

  8:表明執行結果是成功的。從上面的操作中可以總結出:

  鏈接伺服器的兩個特點:

    1.通過鏈接伺服器不能刪除(including truncate)鏈接源伺服器的任何對像.

    2:能過鏈接伺服器可以對鏈接源伺服器的表進行insert,updae,delete操作.

 2017-10-1314:58:20

2015.10.30 10:26 willem SqlServer2012 資料庫同步的兩種方式(SQL JOB + 建立鏈接伺服器)

 


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • Phoenix簡介及安裝部署使用 ...
  • /************************************************************ * 標題:MS SQLServer 批量附加資料庫 * 說明:請根據下麵的註釋使用此腳本 * 時間: 2015/7/13 11:16:41 ******************... ...
  • 這幾天剛好碰到數據的分頁查詢,覺得不錯,Mark一下,方法有兩種,都是使用select top,效率如何就不在這討論 方法1:利用select top配合not in(或者not exists),查詢第n頁的時候,過濾掉n-1頁的數據即可,示例假設每頁查詢數量為5,查詢第3頁的數據; Select ...
  • 一、通用函數和條件判斷語句 單引號出現的地方如下:1)字元串,例如:'hello'2)日期型,例如:'17-12月-80'3)to_char/to_date(日期,'YYYY-MM-DD HH24:MI:SS')雙引號出現的地方如下:1)列別名,例如:select ename "姓 名" from ...
  • 什麼叫做覆蓋索引? 解釋一: 就是select的數據列只用從索引中就能夠取得,不必從數據表中讀取,換句話說查詢列要被所使用的索引覆蓋。 解釋二: 索引是高效找到行的一個方法,當能通過檢索索引就可以讀取想要的數據,那就不需要再到數據表中讀取行了。如果一個索引包含了(或覆蓋了)滿足查詢語句中欄位與條件的 ...
  • 一、基本查詢 對於ORACLE,最常關註的無非就是關於ORACLE的查詢之類的語句了,而在PL/SQL上面,筆者使用的一般有兩種不同的查詢視窗:CommandWindow和SQLWindow兩種不同的視窗。 1.1現在將一些需要在CommandWindow使用的命令羅列如下: 上述分別是查詢當前用戶 ...
  • 1、mysqlfrm安裝 由於mysqlfrm是mysql-utilities工具一部分,那麼我們安裝mysql-utilities即可,下載好對應的源碼包,進行編譯安裝。 shell> tar -xvzf mysql-utilities-1.6.4.tar.gz shell> cd mysql-u ...
  • SQL語句中的三個關鍵字:MINUS(減去),INTERSECT(交集)和UNION ALL(並集); 關於集合的概念,中學都應該學過,就不多說了.這三個關鍵字主要是對資料庫的查詢結果進行操作,正如其中文含義一樣:兩個查詢,MINUS是從第一個查詢結果減去第二個查詢結果,如果有相交部分就減去相交部分 ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...