Sisukord:

Millised on peamised konfiguratsiooniparameetrid, mida kasutaja peab MapReduce'i töö käivitamiseks määrama?
Millised on peamised konfiguratsiooniparameetrid, mida kasutaja peab MapReduce'i töö käivitamiseks määrama?

Video: Millised on peamised konfiguratsiooniparameetrid, mida kasutaja peab MapReduce'i töö käivitamiseks määrama?

Video: Millised on peamised konfiguratsiooniparameetrid, mida kasutaja peab MapReduce'i töö käivitamiseks määrama?
Video: Building Apps for Mobile, Gaming, IoT, and more using AWS DynamoDB by Rick Houlihan 2024, Mai
Anonim

Peamised konfiguratsiooniparameetrid, mida kasutajad peavad MapReduce'i raamistikus määrama, on järgmised:

  • Töö oma sisend asukohad hajutatud failisüsteemis.
  • Töö oma väljundi asukoht hajutatud failisüsteemis.
  • Andmete sisestusvorming.
  • Andmete väljundvorming.
  • Klass, mis sisaldab kaardi funktsiooni.
  • Vähendamisfunktsiooni sisaldav klass.

Millised on siin MapReduce'i programmi peamised konfiguratsiooniparameetrid?

Peamised konfiguratsiooniparameetrid "MapReduce" raamistikus on järgmised:

  • Sisestage tööde asukoht hajutatud failisüsteemis.
  • Tööde väljundi asukoht hajutatud failisüsteemis.
  • Andmete sisestusvorming.
  • Andmete väljundvorming.
  • Klass, mis sisaldab kaardifunktsiooni.
  • Klass, mis sisaldab vähendamise funktsiooni.

Samuti võib küsida, mis on kaardistajate ja reduktorite parameetrid? Kaardistajate neli parameetrit on:

  • LongWritable (sisend)
  • tekst (sisend)
  • tekst (vaheväljund)
  • IntWritable (vaheväljund)

Samuti on küsimus selles, millised on MapReduce'i töö peamised komponendid?

  • Peamine draiveriklass, mis pakub töö konfiguratsiooni parameetreid.
  • Kaardistaja klass, mis peab laiendama org. apache. hadoop. kaardistama. Kaardistaja klass ja pakkuda kaardi () meetodi rakendamist.
  • Reduktorklass, mis peaks pikendama org. apache. hadoop. kaardistama. Reduktorklass.

Mis on partitsioonija ja kuidas see MapReduce'i tööprotsessis aitab?

Eraldaja sisse MapReduce töö täitmine kontrollib vahekaardiväljundite võtmete jaotamist. Koos abi räsifunktsioonist tuletab võti (või võtme alamhulk) vahesein . Kirjed, millel on sama võtmeväärtus, lähevad samaks vahesein (iga kaardistaja sees).

Soovitan: