es创建索引数量多了好还是少了好_Elasticsearch性能优化总结
Elasticsearch是目前大數(shù)據(jù)領(lǐng)域最熱門的技術(shù)棧之一,經(jīng)過近8年的發(fā)展,已從0.0.X版升級至6.X版本,雖然增加了很多的特性和功能,但是在主體架構(gòu)上,還是沒有太多的變化。下面就把我對于ES使用實踐的一些經(jīng)驗總結(jié)一下,供大家參考;也請大家拍磚。
一、 硬件環(huán)境選擇:
如果有條件,盡可能使用SSD硬盤, 不錯的CPU。ES的厲害之處在于ES本身的分布式架構(gòu)以及l(fā)ucene的特性。IO的提升,會極大改進ES的速度和性能。
二、系統(tǒng)拓樸設(shè)計:
ES集群在架構(gòu)拓樸時,一般都會采用Hot-Warm的架構(gòu)模式,即設(shè)置3種不同類型的節(jié)點:Master節(jié)點、Hot 節(jié)點和 Warm節(jié)點。
Master節(jié)點設(shè)置:一般會設(shè)置3個專用的maste節(jié)點,以提供最好的彈性擴展能力。當(dāng)然,必須注意discovery.zen.minimum_master_nodes 屬性的設(shè)置,以防split-brain問題,使用公式設(shè)置:N/2+1(N為候選master節(jié)點數(shù))。 該節(jié)點保持: node.data: false ; 因為master節(jié)點不參與查詢、索引操作,僅負(fù)責(zé)對于集群管理,所以在CPU、內(nèi)存、磁盤配置上,都可以比數(shù)據(jù)節(jié)點低很多。
Hot節(jié)點設(shè)置: 索引節(jié)點(寫節(jié)點),同時保持近期頻繁使用的索引。 屬于IO和CPU密集型操作,建議使用SSD的磁盤類型,保持良好的寫性能;節(jié)點的數(shù)量設(shè)置一般是大于等于3個。將節(jié)點設(shè)置為hot類型:
node.attr.box_type: hot
針對index, 通過設(shè)置index.routing.allocation.require.box
總結(jié)
以上是生活随笔為你收集整理的es创建索引数量多了好还是少了好_Elasticsearch性能优化总结的全部內(nèi)容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: tableau三轴合并_《Tableau
- 下一篇: shiro单点登录原理_SSO单点登录三