SOLR增量索引--刪除業務、定時增量索引

来源:http://www.cnblogs.com/shouce/archive/2016/06/03/5555055.html
-Advertisement-
Play Games

Ok,我又來寫SOLR的內容了,昨天做了修改和增加的增量索引,今天來說說關於刪除的增量索引以及定時更新增量索引,廢話不多說,下麵進入正文。 一、增量索引之刪除 昨天已經說過,增量索引其實就是SOLR對上次做過(增量或者全量)索引之後到這次做索引之間的這段時間資料庫發生變化的數據進行創建索引,昨天我們 ...


  Ok,我又來寫SOLR的內容了,昨天做了修改和增加的增量索引,今天來說說關於刪除的增量索引以及定時更新增量索引,廢話不多說,下麵進入正文。

 一、增量索引之刪除

  昨天已經說過,增量索引其實就是SOLR對上次做過(增量或者全量)索引之後到這次做索引之間的這段時間資料庫發生變化的數據進行創建索引,昨天我們說了增加一條數據或者修改一條數據之後創建增量索引,現在來說刪除數據的增量索引。

  其實這裡所說的刪除是假刪除,什麼意思呢?就是並不是說在資料庫中把某些數據給徹底刪除掉,而是說給你不想創建索引的數據一個標識符,然後告訴solr,有這個標識符的數據你就不要給我創建索引了,我不需要,然後solr創建索引的時候就會忽視這些有特殊標識符的數據,大概的原理就是這樣的,那麼怎麼實現的呢?下麵來看:

  1.1資料庫新增欄位

  昨天做新增的增量索引的時候需要在資料庫添加一個欄位,今天做刪除的,還是需要一個欄位,然後用這個欄位來標示數據是否需要創建索引,欄位如下所示:

  

  欄位名稱大家可以自己看著定,類型給個int就行,至於長度也隨意,我的是0表示需要創建索引的數據,1表示不需要創建索引的數據,也就是我所說的假刪除的數據。

  1.2修改配置文件

  同樣,需要將該欄位配置到data-config.xml和schema.xml文件中,如下所示:

  data-config.xml

  

  註意圈起來的三個地方,首先肯定是需要把isdelete欄位變成一個file標簽,其次,需要query語句需要添加上where條件,查詢出資料庫中所有的需要創建索引的數據,然後再添加一個deletedPKQuery語句,這條語句和deltaQuery與deltaImportQuery語句一樣,都是只有在做增量索引的時候起作用,deletedPKQuery是查詢出所有假刪除的數據的ID,然後由deltaImportQuery查詢出這些ID對應的記錄的全部數據,然後在已經創建的索引中刪除掉這一部分索引。

  schema.xml

  schema.xml文件中倒是沒有什麼大的變化,只需要把isdelete欄位添加進來即可:

  

1.3查看效果

按照上面的配置即可,然後我們來看一下效果,首先是資料庫:

您的分享是我們最大的動力!

-Advertisement-
Play Games
更多相關文章
  • Java容器可以說是增強程式員編程能力的基本工具,本系列將帶您深入理解容器類。 容器的用途 如果對象的數量與生命周期都是固定的,自然我們也就不需要很複雜的數據結構。 我們可以通過創建引用來持有對象,如 也可以通過數組來持有多個對象,如 然而,一般情況下,我們並不知道要創建多少對象,或者以何種方式創建 ...
  • 項目在變,需求在變,不變的永遠是敲擊鍵盤的程式員..... PDF 生成後,有時候需要在PDF上面添加一些其他的內容,比如文字,圖片.... 經歷幾次失敗的嘗試,終於獲取到了正確的代碼書寫方式。 在此記錄總結,方便下次以不變應萬變,需要的 jar 請移步:生成PDF全攻略 上述的這段代碼算是在原有 ...
  • 摘自aardio培訓群 www.aardio.com ...
  • 概述 之前學習的 Agent,GenSever以及GenEvent,都是用來管理狀態或者處理消息的。 但是在很多時候,我們需要的是執行某個任務,這時如果使用 GenSever 或者 GenEvent,就會顯得比較笨重。 這時,我們就可以使用 Task 模塊,使用 Task 模塊時註意以下幾點: 1. ...
  • 1、Tesseract介紹 tesseract 是一個google支持的開源ocr項目,其項目地址:https://github.com/tesseract-ocr/tesseract,目前最新的源碼可以在這裡下載。 實際使用tesseract ocr也有兩種方式:1- 動態庫方式 libtesse ...
  • 動機 今天有朋友寫信說他認為自己的wordpress博客內顯示的訪問統計信息不正常,希望我能為他製造一些訪問信息,供他對比。朋友提出的請求是在短時間內快速打開100個不同的博客頁面,以便他從產生的訪問量變化中理解博客訪問數據。 本人作為一個搞電腦的人,有把任何重覆性勞動自動化的衝動,所以雖然點開1 ...
  • 本文示例代碼測試環境是Windows下的APMServ(PHP5.2.6) 簡述 可能大家都知道,php中有一個函數叫debug_backtrace,它可以回溯跟蹤函數的調用信息,可以說是一個調試利器。 好,來複習一下。 one(); function one() { two(); } functi ...
  • C++這門語言從誕生到今天已經經歷了將近30個年頭。不可否認,它的學習難度都比其它語言較高。而它的學習難度,主要來自於它的複雜性。現在C++的使用範圍比以前已經少了很多,java、C#、python等語言在很多方面已經可以代替C++。但是也有很多地方是其他語言完全無法替代的,主要集中在需要運行效率比 ...
一周排行
    -Advertisement-
    Play Games
  • 移動開發(一):使用.NET MAUI開發第一個安卓APP 對於工作多年的C#程式員來說,近來想嘗試開發一款安卓APP,考慮了很久最終選擇使用.NET MAUI這個微軟官方的框架來嘗試體驗開發安卓APP,畢竟是使用Visual Studio開發工具,使用起來也比較的順手,結合微軟官方的教程進行了安卓 ...
  • 前言 QuestPDF 是一個開源 .NET 庫,用於生成 PDF 文檔。使用了C# Fluent API方式可簡化開發、減少錯誤並提高工作效率。利用它可以輕鬆生成 PDF 報告、發票、導出文件等。 項目介紹 QuestPDF 是一個革命性的開源 .NET 庫,它徹底改變了我們生成 PDF 文檔的方 ...
  • 項目地址 項目後端地址: https://github.com/ZyPLJ/ZYTteeHole 項目前端頁面地址: ZyPLJ/TreeHoleVue (github.com) https://github.com/ZyPLJ/TreeHoleVue 目前項目測試訪問地址: http://tree ...
  • 話不多說,直接開乾 一.下載 1.官方鏈接下載: https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads 2.在下載目錄中找到下麵這個小的安裝包 SQL2022-SSEI-Dev.exe,運行開始下載SQL server; 二. ...
  • 前言 隨著物聯網(IoT)技術的迅猛發展,MQTT(消息隊列遙測傳輸)協議憑藉其輕量級和高效性,已成為眾多物聯網應用的首選通信標準。 MQTTnet 作為一個高性能的 .NET 開源庫,為 .NET 平臺上的 MQTT 客戶端與伺服器開發提供了強大的支持。 本文將全面介紹 MQTTnet 的核心功能 ...
  • Serilog支持多種接收器用於日誌存儲,增強器用於添加屬性,LogContext管理動態屬性,支持多種輸出格式包括純文本、JSON及ExpressionTemplate。還提供了自定義格式化選項,適用於不同需求。 ...
  • 目錄簡介獲取 HTML 文檔解析 HTML 文檔測試參考文章 簡介 動態內容網站使用 JavaScript 腳本動態檢索和渲染數據,爬取信息時需要模擬瀏覽器行為,否則獲取到的源碼基本是空的。 本文使用的爬取步驟如下: 使用 Selenium 獲取渲染後的 HTML 文檔 使用 HtmlAgility ...
  • 1.前言 什麼是熱更新 游戲或者軟體更新時,無需重新下載客戶端進行安裝,而是在應用程式啟動的情況下,在內部進行資源或者代碼更新 Unity目前常用熱更新解決方案 HybridCLR,Xlua,ILRuntime等 Unity目前常用資源管理解決方案 AssetBundles,Addressable, ...
  • 本文章主要是在C# ASP.NET Core Web API框架實現向手機發送驗證碼簡訊功能。這裡我選擇是一個互億無線簡訊驗證碼平臺,其實像阿裡雲,騰訊雲上面也可以。 首先我們先去 互億無線 https://www.ihuyi.com/api/sms.html 去註冊一個賬號 註冊完成賬號後,它會送 ...
  • 通過以下方式可以高效,並保證數據同步的可靠性 1.API設計 使用RESTful設計,確保API端點明確,並使用適當的HTTP方法(如POST用於創建,PUT用於更新)。 設計清晰的請求和響應模型,以確保客戶端能夠理解預期格式。 2.數據驗證 在伺服器端進行嚴格的數據驗證,確保接收到的數據符合預期格 ...