kattle 發送post請求

来源:http://www.cnblogs.com/always-online/archive/2016/04/19/5408101.html
-Advertisement-
Play Games

一、簡介 kattle是一款國外開源的ETL工具,純java編寫,可以在Window、Linux、Unix上運行,數據抽取高效穩定。它允許你管理來自不同資料庫的數據,通過提供一個圖形化的用戶環境來描述我們需要完成的功能。這裡使用的是pdi-ce-5.4.0.1-130。下載地址為http://com ...


一、簡介
  kattle是一款國外開源的ETL工具,純java編寫,可以在Window、Linux、Unix上運行,數據抽取高效穩定。它允許你管理來自不同資料庫的數據,通過提供一個圖形化的用戶環境來描述我們需要完成的功能。這裡使用的是pdi-ce-5.4.0.1-130。下載地址為http://community.pentaho.com/projects/data-integration/

二、示例

  1、需求如下:某系統對外發佈了一個介面,通過post方式請求該介面地址,並將參數放在請求體中,介面處理完後會將相應的信息返回。現在我們需要使用kattle完成這個工作。

  2、處理過程如下:

    思路: 構建參數 --> 發送post請求 --> 獲取相應數據 --> 後續處理(列印日誌)

    kattle 設計流程圖如下: 

    1)、表輸入如下:

  2)、構造參數

  3)、HTTP Post請求

  fields 頁簽主要配置請求參數等信息,這裡沒有用到就無需配置。

  4)、獲取結果數據

  5)、列印日誌

  運行日誌結果如下:

2016/04/19 15:05:09 - Spoon - 轉換已經打開.
2016/04/19 15:05:09 - Spoon - 正在打開轉換 [post_message]...
2016/04/19 15:05:09 - Spoon - 開始執行轉換.
2016/04/19 15:05:09 - post_message - 為了轉換解除補丁開始  [post_message]
2016/04/19 15:05:09 - 表輸入.0 - Finished reading query, closing connection.
2016/04/19 15:05:09 - 構造參數.0 - Optimization level set to 9.
2016/04/19 15:05:09 - 表輸入.0 - 完成處理 (I=1, O=0, R=0, W=1, U=0, E=0
2016/04/19 15:05:09 - 構造參數.0 - 完成處理 (I=0, O=0, R=1, W=1, U=0, E=0
2016/04/19 15:05:09 - 獲取結果數據.0 - Optimization level set to 9.
2016/04/19 15:05:09 - HTTP Post請求.0 - 完成處理 (I=0, O=0, R=1, W=1, U=0, E=0
2016/04/19 15:05:09 - 寫日誌.0 - 
2016/04/19 15:05:09 - 寫日誌.0 - ------------> 行號 1------------------------------
2016/04/19 15:05:09 - 寫日誌.0 - fromUserName = 88888888888888
2016/04/19 15:05:09 - 寫日誌.0 - accessToken = 88888888888888
2016/04/19 15:05:09 - 寫日誌.0 - username = zhangsan
2016/04/19 15:05:09 - 寫日誌.0 - id = 43890uj9f43r43
2016/04/19 15:05:09 - 寫日誌.0 - pdata = {"toUserNames":["guest"],"fromUserName":"88888888888888","accessToken":"88888888888888","message":{"msgType":1,"username":"zhangsan","uid":"43890uj9f43r43","createTime":"1440056195537"}}
2016/04/19 15:05:09 - 寫日誌.0 - result = {"name":"zhangsan", "age":20, "gender": "mail"} 
2016/04/19 15:05:09 - 寫日誌.0 - resultCode = 200
2016/04/19 15:05:09 - 寫日誌.0 - time = 19
2016/04/19 15:05:09 - 寫日誌.0 - uname = zhangsan
2016/04/19 15:05:09 - 寫日誌.0 - uage = 20
2016/04/19 15:05:09 - 寫日誌.0 - ugender = mail
2016/04/19 15:05:09 - 寫日誌.0 - sfts = 1
2016/04/19 15:05:09 - 寫日誌.0 - 
2016/04/19 15:05:09 - 寫日誌.0 - ====================
2016/04/19 15:05:09 - 獲取結果數據.0 - 完成處理 (I=0, O=0, R=1, W=1, U=0, E=0
2016/04/19 15:05:09 - 寫日誌.0 - 完成處理 (I=0, O=0, R=1, W=1, U=0, E=0
2016/04/19 15:05:09 - Spoon - 轉換完成!!

 


您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • (1) 選擇最有效率的表名順序(只在基於規則的優化器中有效):ORACLE的解析器按照 從右到左的順序處理FROM子句中的表名,FROM子句中寫在最後的表(基礎表 driving table)將被最先處理,在FROM子句中包含多個表的情況下,你必須選擇記錄條數最少的表作為基礎表。如果有3個以上的表連 ...
  • 有時候啊,當我們存放在資料庫裡面的數據,需要明文存放,但是對於前臺查詢出來的,又不太希望明文放出去的時候(比方說客戶的手機啊,郵箱啊)之類有點敏感的信息,之前通常是保存個明文,然後在前臺展現的時候再特殊處理一下,然後就ok了。 而現在呢,在2016提供了data mask的功能,可以遮掩對應列的一些 ...
  • 上一篇說了一下openjson 的一些使用方法,這次再說一下在2016裡面的查詢取值,當然就是 json_query 和 json_value 這2兄弟了 首先 可以看到,對於json_value 來說,如果說取到的屬性並不能直接解析成int,string,bool 這3種類型(那就是說 array ...
  • 引言 SQL Server通過一些工具來監控數據,其中之一的方法就是動態管理管理視圖(DMV). 常規動態伺服器管理對象 dm_db_*:資料庫和資料庫對象 dm_exec_*:執行用戶代碼和關聯的連接 dm_os_*:記憶體、鎖定、時間安排 dm_tran_*:事務和隔離 dm_io_*:網路和磁碟 ...
  • 1、內聯接(典型的聯接運算,使用像 = 或 <> 之類的比較運算符)。包括相等聯接和自然聯接。 內聯接使用比較運算符根據每個表共有的列的值匹配兩個表中的行。例如,檢索 students和courses表中學生標識號相同的所有行。 2、外聯接。外聯接可以是左向外聯接、右向外聯接或完整外部聯接。 在 F ...
  • 今天我們介紹Oracle資料庫中剩餘的查詢方法,今天的查詢方法會比昨天的更為複雜一些(PS:我也是個初學者,請見諒。。)。 一、分組函數 分組函數是為了區分同一個表中的不同數據而建立,其關鍵字為GROUP BY,其中可以包含任意數目的列。 舉例: SELECT DEPTNO.MAX(SAL)FROM ...
  • 在使用Oracle SQL Developer連接遠程伺服器的時候,出現如下的錯誤 在伺服器本地是可以正常連接的。這個讓人想起來,跟SQL Server的一些設計有些類似,伺服器估計預設只在本地監聽,不允許遠程訪問的,這是為了提高安全性。 解決的方法是,添加一個監聽地址 然後,重啟服務 ...
  • 如果哪天你忘記了線上MySQL資料庫的root密碼,怎麼辦? 大家往往會想到skip-grant-tables參數,具體步驟如下: 1. 關閉MySQL資料庫,因為root密碼忘記了,mysqladmin無法使用,此時,只能通過kill pid關閉程式。 在這裡,科普一下kill 和kill -9的 ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...