Sisukord:

Kuidas käivitada oma sädeajaloo serveri?
Kuidas käivitada oma sädeajaloo serveri?

Video: Kuidas käivitada oma sädeajaloo serveri?

Video: Kuidas käivitada oma sädeajaloo serveri?
Video: Полный курс Redux Toolkit + RTK Query для начинающих | Редакс за 2 часа! 2024, November
Anonim

Sparki ajalooserveri lubamiseks tehke järgmist

  1. Looge DSEFS-failisüsteemis sündmuste logide kataloog: dse hadoop fs -mkdir /spark $ dse hadoop fs -mkdir /spark/events.
  2. Kui sündmuste logimine on lubatud, salvestatakse vaikekäitumine kõik logid, mistõttu salvestusruum aja jooksul kasvab.

Lisaks sellele, kuidas seadistada sädeajaloo serverit?

Sparki ajalooserveri lubamiseks tehke järgmist

  1. Looge DSEFS-failisüsteemis sündmuste logide kataloog: dse hadoop fs -mkdir /spark $ dse hadoop fs -mkdir /spark/events.
  2. Kui sündmuste logimine on lubatud, salvestatakse vaikekäitumine kõik logid, mistõttu salvestusruum aja jooksul kasvab.

Samamoodi, kuidas ma leian oma sädeajaloo serveri URL-i? Näiteks jaoks ajaloo server , oleksid need tavaliselt kättesaadavad aadressil server - url >:18080/api/v1 ja töötava rakenduse puhul aadressil https://localhost:4040/api/v1. API-s viidatakse rakendusele selle rakenduse ID [rakenduse ID] järgi.

Samuti, mis on spark History server?

The Spark ajaloo server on seiretööriist, mis kuvab teavet lõpetatud kohta Säde rakendusi. See informatsioon on tõmmatakse andmetest, mida rakendused kirjutavad vaikimisi Hadoop Distributed File System (HDFS) kataloogi.

Mis on Sparkui?

Spark Web UI võimaldab teil näha ajakava etappide ja ülesannete loendit, keskkonnateavet, teavet töötavate täitjate kohta ja palju muud. Vaadake seda 30-minutilist demo, et saada teavet järgmise kohta: Sparki programmi komponendid ja elutsükkel. Kuidas teie Sparki rakendus Hadoopi klastris töötab.

Soovitan: