軟件系統的數據檢索設計
軟件系統的數據檢索設計
隨著業務量加大，數據檢索量也會日益增多，為了減輕數據庫壓力，本系統采用ElasticSearch來實現數據檢索功能。
簡單來說，Elasticsearch 是一個實時的分布式存儲、搜索、分析的引擎，它可以近乎實時的存儲、檢索數據，本身擴展性很好，可以擴展到上百臺服務器，處理PB級別(大數據時代)的數據，ElasticSearch的檢索流程如下：
數據檢索流程圖
1) 執行refresh操作將mem buffer中的數據寫入到新的segment并寫入os cache，然后打開本segment以供search使用，最后再次清空mem buffer。
2) 一個commit point被寫入磁盤，這個commit point中標明所有的index segment。
3) filesystem cache(os cache)中緩存的所有的index segment文件被fsync強制刷到磁盤os disk，當index segment被fsync強制刷到磁盤上以后，就會被打開，供查詢使用。
translog被清空和刪除，創建一個新的translog。
審核編輯 黃宇
聲明：本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人，不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用，如有內容侵權或者其他違規問題，請聯系本站處理。
舉報投訴
-
數據
+關注
關注
8文章
7139瀏覽量
89577 -
軟件系統
+關注
關注
0文章
63瀏覽量
9524
發布評論請先 登錄
相關推薦
dbForge Studio for PostgreSQL:PostgreSQL數據庫多功能集成開發環境
數據庫模式和表數據的比較和同步 高效便捷地生成針對特定列的智能測試數據 支持14種格式的數據導入和導出 數據透視表中的
Oracle數據庫的多功能集成開發環境
Oracle數據庫的多功能集成開發環境 快捷菜單中的可視化對象編輯器 上下文感知的SQL代碼補全、智能格式化和重構 逐步執行的自動調試功能 多功能數據檢索、存儲和管理 數據庫模式和表數據
數字化車間數據中臺的功能作用及應用場景
解決方案，能夠存儲海量的生產數據、設備數據等，同時對數據進行分類、索引和管理，方便后續的數據檢索和分析。 數據分析與挖掘：具備強大的
檢索增強型生成(RAG)系統詳解
成流暢且類似人類的文本方面表現出色，但它們有時在事實準確性上存在困難。當準確性非常重要時，這可能是一個巨大的問題。 那么，這個問題的解決方案是什么呢？答案是檢索增強型生成（RAG）系統。 RAG集成了像GPT這樣的模型的強大功能，并增加了從外
Redis緩存與Memcached的比較
Redis和Memcached都是廣泛使用的內存數據存儲系統，它們主要用于提高應用程序的性能，通過減少對數據庫的直接訪問來加速數據檢索。以下是對Redis和Memcached的比較，涵
緩存技術在軟件開發中的應用
在現代軟件開發中，隨著數據量的爆炸性增長和用戶對響應速度的高要求，緩存技術成為了提升系統性能的重要手段。緩存技術通過將數據存儲在離用戶更近的位置，減少
PDM產品數據管理系統軟件是什么？一文讀懂PDM系統軟件
在現代制造業和工程領域中，產品數據管理（Product Data Management，簡稱PDM）系統已成為提升企業生產效率、保證產品質量的關鍵工具。PDM系統是以軟件為基礎，專門用
AD軟件打開DigIPCBA工作區，希望可以按照文件夾檢索
希望在AD軟件中打開工作區的時候，工作區內的文件夾能顯示，文件可以按照文件夾檢索，如果工作區內PCB項目很多，不能區分文件夾，不方便訪問
發表于 11-01 11:15
京東APP百億級商品與車關系數據檢索實踐
作者：京東零售 張強 導讀 本文主要講解了京東百億級商品車型適配數據存儲結構設計以及怎樣實現適配接口的高性能查詢。通過京東百億級數據緩存架構設計實踐案例，簡單剖析了jimdb的位圖(bitmap
RFID技術引領應急物資管理新模式
/S（瀏覽器/服務器）架構，構建了一個高效率的緊急物資管理平臺。基于B/S結構的系統以其迅速的數據檢索功能，在應急救援任務中能即時調配庫存資源，為緊急物資的有效管控及決策提供堅實后盾。
K8S學習教程三:在PetaExpress KubeSphere 容器部署 Wiki 系統 wiki.js 并啟用中文全文檢索
K8S學習教程(三):在PetaExpress KubeSphere 容器部署 Wiki 系統 wiki.js 并啟用中文全文檢索? 。
電表自動抄表系統軟件
1.電表自動抄表系統軟件簡述電表自動抄表系統軟件，是一種現代化電力工程可視化工具，它利用先進的信息科技，實現遠程、實時電能計量數據收集和分析。該系統不僅提升了電力工程公司的運營高效率，
態勢數據分析系統軟件
智慧華盛恒輝態勢分析軟件系統的功能描述、部署環境、界面使用、技術支持及一些常見問題及其解決辦法等。為數據態勢分析軟件系統的管理人員和使用人員
工商網監
評論