2018-11-26 BIG DATA ANALYSIS

搭建linux系統的java環境本人目前所知有兩種方式： 第一種是從oracle官網下載linux系統的jdk版本； 第二種是使用yum命令的方式下載安裝，咱們今天講的是第一種方式。 一、工具準備： 1、首先準備一個linux系統的伺服器或者虛擬機（下麵提供一個簡化版的虛擬機下載地址）： 虛擬機下載 ...

轉自：https://www.cnblogs.com/yangjig/p/6014198.html 在命令狀態下對當前行用== （連按=兩次）, 或對多行用n==（n是自然數）表示自動縮進從當前行起的下麵n行。你可以試試把代碼縮進任意打亂再用n==排版，相當於一般IDE里的code format。使 ...

一.前言 上一篇文章Redis 之複製-初入江湖中,講了關於Redis複製配置,如:如何建立配置、如何斷開複製、關於鏈接的安全性等等,那麼本篇文章將深入的去說一下關於Redis複製原理,如下: 複製過程 數據同步 全量複製 部分複製 心跳 非同步複製 二.複製過程 在從節點執行slaveof命令後,復 ...

Redis通常被稱為單進程單線程模型。 這不是真的！ Redis還運行多個後端線程來執行後端清理工作，例如清理臟數據和關閉文件描述符。在Redis中，主線程負責主要任務，包括但不限於：接收來自客戶端的連接，處理連接讀/寫事件，解析請求，處理命令，處理定時器事件和同步數據。只有一個CPU核心運行單個進 ...

MySQL是使用最多的資料庫，自己電腦上肯定要裝一個來多加學習，自己搞不懂的一些東西要多寫一些 sql 語句練習。 首先去 mysql 官網下載，地址：https://dev.mysql.com/downloads/mysql/ 選擇上圖的這個版本就可以把 windows 版的 mysql 最新版本 ...

預覽 精簡部分 保留全部 PostgreSQL 相關功能 刪除自帶的 pgadmin 4 刪除文檔 刪除開發用頭文件 刪除開發用靜態連接庫 刪除 Stack Build 工具 寫了一個管理資料庫用的批處理 註意： 部分系統可能需要安裝 vc2010_redis 下載地址 PostgreSQL 9.6 ...

一. TiDB的核心特性 高度相容 MySQL 大多數情況下，無需修改代碼即可從 MySQL 輕鬆遷移至 TiDB，分庫分表後的 MySQL 集群亦可通過 TiDB 工具進行實時遷移。 水平彈性擴展 通過簡單地增加新節點即可實現 TiDB 的水平擴展，按需擴展吞吐或存儲，輕鬆應對高併發、海量數據場景 ...

之前在這篇“Operating system error 32(failed to retrieve text for this error. Reason: 15105)”博客裡面，介紹了因為AWS的DMS的相關會話進程在讀取事務日誌備份中內容（跟普通的Replication有點不同），導致事務日... ...

移動開發（一）：使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說，近來想嘗試開發一款安卓APP，考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP，畢竟是使用Visual Studio開發工具，使用起來也比較的順手，結合微軟官方的教程進行了安卓 ...

前言 QuestPDF 是一個開源 .NET 庫，用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫，它徹底改變了我們生成 PDF 文檔的方 ...

項目地址 項目後端地址： https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址： ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址： http://tree ...

話不多說，直接開乾 一.下載 1.官方鏈接下載： https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe，運行開始下載SQL server； 二. ...

前言 隨著物聯網（IoT）技術的迅猛發展，MQTT（消息隊列遙測傳輸）協議憑藉其輕量級和高效性，已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫，為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...

Serilog支持多種接收器用於日誌存儲，增強器用於添加屬性，LogContext管理動態屬性，支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項，適用於不同需求。 ...

目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據，爬取信息時需要模擬瀏覽器行為，否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下： 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...

1.前言 什麼是熱更新 游戲或者軟體更新時，無需重新下載客戶端進行安裝，而是在應用程式啟動的情況下，在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR，Xlua，ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles，Addressable， ...

本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺，其實像阿裡雲，騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後，它會送 ...

通過以下方式可以高效，並保證數據同步的可靠性 1.API設計 使用RESTful設計，確保API端點明確，並使用適當的HTTP方法（如POST用於創建，PUT用於更新）。 設計清晰的請求和響應模型，以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證，確保接收到的數據符合預期格 ...