軟件系統(tǒng)的數(shù)據(jù)檢索設(shè)計(jì)

隨著業(yè)務(wù)量加大，數(shù)據(jù)檢索量也會(huì)日益增多，為了減輕數(shù)據(jù)庫(kù)壓力，本系統(tǒng)采用ElasticSearch來(lái)實(shí)現(xiàn)數(shù)據(jù)檢索功能。

簡(jiǎn)單來(lái)說(shuō)，Elasticsearch 是一個(gè)實(shí)時(shí)的分布式存儲(chǔ)、搜索、分析的引擎，它可以近乎實(shí)時(shí)的存儲(chǔ)、檢索數(shù)據(jù)，本身擴(kuò)展性很好，可以擴(kuò)展到上百臺(tái)服務(wù)器，處理PB級(jí)別(大數(shù)據(jù)時(shí)代)的數(shù)據(jù)，ElasticSearch的檢索流程如下：

數(shù)據(jù)檢索流程圖

1) 執(zhí)行refresh操作將mem buffer中的數(shù)據(jù)寫(xiě)入到新的segment并寫(xiě)入os cache，然后打開(kāi)本segment以供search使用，最后再次清空mem buffer。

2) 一個(gè)commit point被寫(xiě)入磁盤(pán)，這個(gè)commit point中標(biāo)明所有的index segment。

3) filesystem cache(os cache)中緩存的所有的index segment文件被fsync強(qiáng)制刷到磁盤(pán)os disk，當(dāng)index segment被fsync強(qiáng)制刷到磁盤(pán)上以后，就會(huì)被打開(kāi)，供查詢使用。

translog被清空和刪除，創(chuàng)建一個(gè)新的translog。

審核編輯 黃宇