Elasticsearch之配置详解
Cluster
-
集群名稱,默認為elasticsearch:?
cluster.name: elasticsearch -
設(shè)置一個節(jié)點的并發(fā)數(shù)量,有兩種情況,一種是在初始復(fù)蘇過程中:?
cluster.routing.allocation.node_initial_primaries_recoveries: 4?
另一種是在添加、刪除節(jié)點及調(diào)整時:?
cluster.routing.allocation.node_concurrent_recoveries: 2
Node
- 節(jié)點名稱,es啟動時會自動創(chuàng)建節(jié)點名稱,但你也可進行配置:?
node.name: elasticsearch-01 -
是否允許作為主節(jié)點,默認值為true:?
node.master: true -
是否存儲數(shù)據(jù),即存儲索引片段,默認值為true:?
node.data: true注意:?
master和data同時配置會產(chǎn)生一些奇異的效果:?- 當(dāng)master為false,而data為true時,會對該節(jié)點產(chǎn)生嚴重負荷;
- 當(dāng)master為true,而data為false時,該節(jié)點作為一個協(xié)調(diào)者;
- 當(dāng)master為false,data也為false時,該節(jié)點就變成了一個負載均衡器。?
?
你可以通過連接http://localhost:9200/_cluster/health或者http://localhost:9200/_cluster/nodes,或者使用插件http://github.com/lukas-vlcek/bigdesk或http://mobz.github.com/elasticsearch-head來查看集群狀態(tài)。
-
節(jié)點自定義屬性,可用于后期集群進行碎片分配時的過濾:?
node.rack: rack-01
Index
- 設(shè)置一個索引的碎片數(shù)量,默認值為5:?
index.number_of_shards: 5 - 設(shè)置一個索引可被復(fù)制的數(shù)量,默認值為1:?
index.number_of_replicas: 1
當(dāng)你不需要分布式時,可進行如下設(shè)置:
index.number_of_shards: 1 index.number_of_replicas: 0- 1
- 2
上述兩個屬性的設(shè)置直接影響集群中索引和搜索操作的執(zhí)行,假設(shè)有足夠的機器來持有碎片和副本,那么可以按如下規(guī)則設(shè)置這兩個值:?
- 擁有更多的碎片可以提升索引執(zhí)行能力,并允許通過機器分發(fā)一個大型的索引;?
- 擁有更多的副本能夠提升搜索執(zhí)行能力以及集群能力,但副本增多會降低插入和刪除操作的效率。
- 對于一個索引來說,number_of_shards一旦設(shè)置將不能修改,而number_of_replicas可以使用索引更新設(shè)置API在任何時候被增加或者減少;
ElasticSearch關(guān)注加載均衡、遷移、從節(jié)點聚集結(jié)果等等,可以嘗試多種設(shè)計來完成這些功能,可以連接http://localhost:9200/A/_status來檢測索引的狀態(tài)。
Paths
- 配置文件所在的位置,即elasticsearch.yml和logging.yml所在的位置:?
path.conf: /path/to/conf - 分配給當(dāng)前節(jié)點的索引數(shù)據(jù)所在的位置:?
path.data: /path/to/data?
可以可選擇的包含一個以上的位置,使得數(shù)據(jù)在文件級別跨越位置,這樣在創(chuàng)建時就有更多的自由路徑,如:?
path.data: /path/to/data1,/path/to/data2 - 臨時文件位置:?
path.work: /path/to/work - 日志文件所在位置:?
path.logs: /path/to/logs - 插件安裝位置:?
path.plugins: /path/to/plugins - 插件托管位置,若列表中的某一個插件未安裝,則節(jié)點無法啟動:?
plugin.mandatory: mapper-attachments,lang-groovy
Memory
- JVM開始交換時,ElasticSearch表現(xiàn)并不好:你需要保障JVM不進行交換,可以將bootstrap.mlockall設(shè)置為true禁止交換:?
bootstrap.mlockall: true?
請確保ES_MIN_MEM和ES_MAX_MEM的值是一樣的,并且能夠為ElasticSearch分配足夠的內(nèi)在,并為系統(tǒng)操作保留足夠的內(nèi)存。
Network
- 默認情況下,ElasticSearch使用0.0.0.0地址,并為http傳輸開啟9200-9300端口,為節(jié)點到節(jié)點的通信開啟9300-9400端口,也可以自行設(shè)置IP地址:?
network.bind_host: 192.168.0.1 - publish_host設(shè)置其他節(jié)點連接此節(jié)點的地址,如果不設(shè)置的話,則自動獲取,publish_host的地址必須為真實地址:?
network.publish_host: 192.168.0.1 - bind_host和publish_host可以一起設(shè)置:?
network.host: 192.168.0.1 - 可以定制該節(jié)點與其他節(jié)點交互的端口:?
transport.tcp.port: 9300 - 節(jié)點間交互時,可以設(shè)置是否壓縮,轉(zhuǎn)為為不壓縮:?
transport.tcp.compress: true - 可以為Http傳輸監(jiān)聽定制端口:?
http.port: 9200 - 設(shè)置內(nèi)容的最大長度:?
http.max_content_length: 100mb - 禁止HTTP:?
http.enabled: false
GateWay
- 網(wǎng)關(guān)允許在所有集群重啟后持有集群狀態(tài),集群狀態(tài)的變更都會被保存下來,當(dāng)?shù)谝淮螁⒂眉簳r,可以從網(wǎng)關(guān)中讀取到狀態(tài),默認網(wǎng)關(guān)類型(也是推薦的)是local:?
gateway.type: local - 允許在N個節(jié)點啟動后恢復(fù)過程:?
gateway.recover_after_nodes: 1 - 設(shè)置初始化恢復(fù)過程的超時時間:?
gateway.recover_after_time: 5m - 設(shè)置該集群中可存在的節(jié)點上限:?
gateway.expected_nodes: 2
Indices
- 設(shè)置復(fù)蘇時的吞吐量,默認情況下是無限的:?
indices.recovery.max_size_per_sec: 0 - 設(shè)置從對等節(jié)點恢復(fù)片段時打開的流的數(shù)量上限:?
indices.recovery.concurrent_streams: 5
Discovery
- 設(shè)置一個集群中主節(jié)點的數(shù)量,當(dāng)多于三個節(jié)點時,該值可在2-4之間:?
discovery.zen.minimum_master_nodes: 1 - 設(shè)置ping其他節(jié)點時的超時時間,網(wǎng)絡(luò)比較慢時可將該值設(shè)大:?
discovery.zen.ping.timeout: 3s?
上有更多關(guān)于discovery的設(shè)置。 - 禁止當(dāng)前節(jié)點發(fā)現(xiàn)多個集群節(jié)點,默認值為true:?
discovery.zen.ping.multicast.enabled: false - 設(shè)置新節(jié)點被啟動時能夠發(fā)現(xiàn)的主節(jié)點列表(主要用于不同網(wǎng)段機器連接):?
discovery.zen.ping.unicast.hosts: ["host1", "host2:port", "host3[portX-portY]"]
Various
- 在一個系統(tǒng)上禁用啟動多個節(jié)點:?
node.max_local_storage_nodes: 1 - 在刪除索引時,是否需要明確指定名稱,該值為false時,將可以通過正則或_all進行所以 刪除:?
action.destructive_requires_name: true
- 在一個系統(tǒng)上禁用啟動多個節(jié)點:?
轉(zhuǎn)載于:https://www.cnblogs.com/-flq/p/9505853.html
與50位技術(shù)專家面對面20年技術(shù)見證,附贈技術(shù)全景圖總結(jié)
以上是生活随笔為你收集整理的Elasticsearch之配置详解的全部內(nèi)容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: Win10系统的SurfacePro4如
- 下一篇: Spark Streaming