Innholdsfortegnelse:

Hvordan vet jeg om spark er installert Linux?
Hvordan vet jeg om spark er installert Linux?

Video: Hvordan vet jeg om spark er installert Linux?

Video: Hvordan vet jeg om spark er installert Linux?
Video: Tent CAMPING in the SNOW - Fire - Dog - ASMR 2024, November
Anonim

2 svar

  1. Åpen Gnist shell Terminal og skriv inn kommandoen.
  2. sc.versjon Eller gnist -send inn --versjon.
  3. Den enkleste måten er å bare starte " gnist -shell" i kommandolinjen. Den vil vise.
  4. gjeldende aktive versjon av Gnist .

Også å vite er, hvordan vet jeg om spark er installert Ubuntu?

Installere Spark på Ubuntu

  1. Last ned den siste utgivelsen av Spark her.
  2. Pakk ut arkivet.
  3. Flytt den resulterende mappen og lag en symbolsk lenke slik at du kan ha flere versjoner av Spark installert.
  4. Test ut Spark-skallet.
  5. Kanskje Scala ikke er din kopp te, og du foretrekker å bruke Python.

For det andre, hvor er gnist installert på EMR? Pr emr -4,0. 0, alle applikasjoner på EMR er i /usr/lib. Gnist er i /usr/lib/ gnist.

Følgelig, hvordan setter du opp en gnist?

Trinn for å installere Spark

  1. Trinn 1: Kontroller om Java er installert.
  2. Trinn 2: Kontroller om Scala er installert.
  3. Trinn 3: Last ned Scala.
  4. Trinn 4: Installer Scala.
  5. Trinn 5: Laster ned Apache Spark.
  6. Trinn 6: Installere Spark.
  7. Trinn 7: Bekreft installasjonen av Spark-applikasjonen på systemet ditt.

Må jeg installere Scala for gnist?

Du vil trenge å bruke en kompatibel Scala versjon (2.10. x). Java er et must for Gnist + mange andre transitive avhengigheter ( scala kompilatoren er bare et bibliotek for JVM). PySpark kobles bare eksternt (via socket) til JVM ved hjelp av Py4J (Python-Java interoperasjon).

Anbefalt: