🏆 ▷ Hur man distribuerar ett Elasticsearch-kluster på Ubuntu Server 20.04

Elasticsearch är en mycket kraftfull sök- och analysmotor som kan skala extremt bra. Med det här verktyget har du grunden för att visualisera enorma mängder data. Men när du börjar skala Elasticsearch för att möta kraven från big data, kommer du att vilja använda mer än en server. När du börjar skala upp för att möta företagens krav, skulle en enda server kvävas av den mängden data.

Mer om datacenter

Så vad gör du? Du distribuerar ett kluster av Elasticsearch-servrar. Jag ska visa dig hur du gör just det. När du är klar har du den kraft som krävs för att börja bygga otroliga datavisualiseringsverktyg som kan hantera enorma mängder data.

SE: Snowflake datalagerplattform: Ett fuskark (gratis PDF) (TechRepublic)

Vad du behöver

Jag kommer att demonstrera detta på två instanser av Ubuntu Server 20.04, men du kan rulla ut det till ett så stort kluster som du behöver. Förutom de två instanserna av Ubuntu Server, behöver du också en användare med sudo-privilegier. Det är allt. Låt oss distribuera.

Hur man installerar Java

Du kommer att behöva minst Java 8 installerat på varje server, så vi kommer att installera standard JRE med kommandot:

sudo apt-get install default-jre -y

När det väl är installerat på båda våra testmaskiner kan vi installera Elasticsearch.

Hur man installerar Elasticsearch

Detta måste göras på båda maskinerna. Installera först Elasticsearch GPG-nyckeln:

wget -qO – https://artifacts.elastic.co/GPG-KEY-elasticsearch | sudo apt-key add –

Installera sedan apt-transport-https med:

sudo apt-get installera apt-transport-https

Lägg till det nödvändiga arkivet med kommandot:

echo “deb https://artifacts.elastic.co/packages/6.x/apt stabil main” | sudo tee -a /etc/apt/sources.list.d/elastic-6.x.list

Slutligen, uppdatera apt och installera Elasticsearch:

sudo apt-get updatesudo apt-get install elasticsearch -y

Starta och aktivera Elasticsearch:

sudo systemctl starta elasticsearchsudo systemctl aktivera elasticsearch

Hur man konfigurerar Elasticsearch

Du kommer att göra detta på båda servrarna, se bara till att ändra konfigurationen så att den passar varje maskin. Vi anropar den första maskinstyrenheten-1 och den andra maskinnoden-1. Öppna konfigurationsfilen med kommandot:

sudo nano /etc/elasticsearch/elasticsearch.yml

I den filen vill du redigera följande rader. Vissa av dessa rader kommer att kommenteras bort, så du måste först ta bort det inledande #-tecknet. Raderna som ska redigeras är (allt i fetstil ska redigeras efter behov):

kluster.namn: älgkluster
node.name: “styrenhet-1“
network.host: 192.168.1.80
http.port: 9200
discovery.zen.ping.unicast.hosts: [“192.168.1.80“, “192.168.1.81“]

I mitt fall är styrenheten på 192.168.1.80 och noden på 192.168.1.81.

Spara och stäng filen. Starta om Elasticsearch på båda maskinerna:

sudo systemctl starta om elasticsearch

Hur man testar klustret

Du måste ge Elasticsearch några minuter för att komma upp. Du kan testa det med kommandot:

curl -XGET ‘http://192.168.1.80:9200/_cluster/state?pretty’

Se till att redigera IP-adressen ovan till antingen din kontroller eller nod. Om du testar styrenheten, använd styrenhetens IP, och om du testar noden, använd nodens IP.

När Elasticsearch äntligen körs bör du se ganska mycket utdata som inkluderar:

{

“cluster_name” : “monkeypantz”,

“cluster_uuid” : “rGzNNmm_Rteel0Xg3xqw9w”,

“version” : 6,

“state_uuid” : “WVx5O6Q7SfOqZf_wxaPOKQ”,

“master_node” : “2NI9_pDYS1WvJYQz-XY3KQ”,

“blocks” : { },

“knutpunkter” : {

“yV2TBoxVTvKbh7E1ZngpbA” : {

“name” : “nod-1”,

“ephemeral_id” : “pkb3vapLTd2yFLrXO64ENA”,

“transport_address” : “192.168.1.81:9300”,

“attribut” : {

“ml.machine_memory” : “3137888256”,

“ml.max_open_jobs” : “20”,

“xpack.installed” : “true”,

“ml.enabled” : “true”

}

När både styrenheten och noden är igång, testa klustret med kommandot:

curl -XGET ‘192.168.1.80:9200/_cluster/health?pretty’

Se till att redigera IP-adressen så att den matchar IP-adressen för maskinen du kör kommandot på. Utgången bör innehålla:

{

“cluster_name” : “monkeypantz”,

“status” : “grön”,

“timed_out” : false,

“antal_noder” : 2,

“antal_data_noder” : 2,

“active_primary_shards” : 0,

“active_shards” : 0,

“relocating_shards” : 0,

“initializing_shards” : 0,

“unassigned_shards” : 0,

“delayed_unassigned_shards” : 0,

“antal_pågående_uppgifter” : 0,

“number_of_in_flight_fetch” : 0,

“task_max_waiting_in_queue_millis” : 0,

“active_shards_percent_as_number” : 100,0

}

De viktiga raderna att notera är:

“status” : “grön”,

“timed_out” : false,

“antal_noder” : 2,

“antal_data_noder” : 2,

Du kan också kontrollera noder från styrenheten med kommandot (kör på styrenheten):

curl -XGET ‘192.168.1.81:9200/_nodes/?pretty

Se till att ersätta IP-adressen ovan för din Elasticsearch-nod. Du kan också peka en webbläsare till http://SERVER:9200 (där SERVER är din kontrollers IP-adress) och du bör se utdata som liknar den i Bild A.

Bild A