Elasticsearch中如何實(shí)現(xiàn)分片大小設(shè)定和容量規(guī)劃

本篇文章給大家分享的是有關(guān)Elasticsearch中如何實(shí)現(xiàn)分片大小設(shè)定和容量規(guī)劃,小編覺得挺實(shí)用的,因此分享給大家學(xué)習(xí),希望大家閱讀完這篇文章后可以有所收獲,話不多說,跟著小編一起來看看吧。

創(chuàng)新互聯(lián)公司主要從事網(wǎng)站建設(shè)、網(wǎng)站設(shè)計(jì)、網(wǎng)頁設(shè)計(jì)、企業(yè)做網(wǎng)站、公司建網(wǎng)站等業(yè)務(wù)。立足成都服務(wù)五蓮,十載網(wǎng)站建設(shè)經(jīng)驗(yàn),價(jià)格優(yōu)惠、服務(wù)專業(yè),歡迎來電咨詢建站服務(wù):028-86922220

以 Elasticsearch 7.9.2 為準(zhǔn)。

分片大小

日志類:單個(gè)分片不超過 50G

搜索類:單個(gè)分片不超過 20G

先估算總數(shù)據(jù)量,再根據(jù)分片大小,確定分片數(shù)。

容量規(guī)劃

容量規(guī)劃時(shí)要考慮的因素:

  • 機(jī)器的軟硬件配置

  • 單個(gè)文檔的尺寸,文檔總數(shù),索引大小,分片個(gè)數(shù),副本個(gè)數(shù)

  • 文檔寫入方式(如 bulk 的單次數(shù)據(jù)量)

  • 文檔的復(fù)雜度

  • 文檔的讀取方式(如,要進(jìn)行怎樣的查詢和聚合)

容量規(guī)劃的步驟:

  1. 先進(jìn)行性能評(píng)估:例如每秒寫多少,每秒讀多少,讀單個(gè)文檔能接受多大延遲。

  2. 再觀察數(shù)據(jù):mapping 的樣子,需要什么樣的查詢和聚合。

兩個(gè)典型的場景:

  • 搜索:數(shù)據(jù)增長較慢。

  • 日志:增長快,需要冷熱分離,需要自動(dòng)刪除。

硬件配置:

搜索之類的高性能場景,磁盤要 SSD,磁盤 GB 數(shù)/內(nèi)存 GB 數(shù) = 1/10

日志和并發(fā)不高的場景,磁盤可以機(jī)械硬盤,磁盤 GB 數(shù)/內(nèi)存 GB 數(shù) = 1/50

單節(jié)點(diǎn)的數(shù)據(jù)量最好 2 TB 之內(nèi),最大不超過 5 TB。

JVM 的內(nèi)存配機(jī)器內(nèi)存的一半,同時(shí) JVM 內(nèi)存不超過 32 GB。

以上就是Elasticsearch中如何實(shí)現(xiàn)分片大小設(shè)定和容量規(guī)劃,小編相信有部分知識(shí)點(diǎn)可能是我們?nèi)粘9ぷ鲿?huì)見到或用到的。希望你能通過這篇文章學(xué)到更多知識(shí)。更多詳情敬請(qǐng)關(guān)注創(chuàng)新互聯(lián)行業(yè)資訊頻道。

分享文章:Elasticsearch中如何實(shí)現(xiàn)分片大小設(shè)定和容量規(guī)劃
文章來源:http://bm7419.com/article48/igioep.html

成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián),為您提供服務(wù)器托管、關(guān)鍵詞優(yōu)化、網(wǎng)站改版、云服務(wù)器、全網(wǎng)營銷推廣外貿(mào)建站

廣告

聲明:本網(wǎng)站發(fā)布的內(nèi)容(圖片、視頻和文字)以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主,如果涉及侵權(quán)請(qǐng)盡快告知,我們將會(huì)在第一時(shí)間刪除。文章觀點(diǎn)不代表本網(wǎng)站立場,如需處理請(qǐng)聯(lián)系客服。電話:028-86922220;郵箱:631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載,或轉(zhuǎn)載時(shí)需注明來源: 創(chuàng)新互聯(lián)

小程序開發(fā)