Inhoudsopgave:

Hoe weet ik of Spark op Linux is geïnstalleerd?
Hoe weet ik of Spark op Linux is geïnstalleerd?

Video: Hoe weet ik of Spark op Linux is geïnstalleerd?

Video: Hoe weet ik of Spark op Linux is geïnstalleerd?
Video: Apache Spark - Install Apache Spark On Ubuntu |Spark Tutorial | Part 6 2024, Mei
Anonim

2 antwoorden

  1. Open Vonk shell Terminal en voer de opdracht in.
  2. sc.versie Of vonk -submit --versie.
  3. De gemakkelijkste manier is om gewoon te starten " vonk -shell" in de opdrachtregel. Het zal de.
  4. huidige actieve versie van Vonk .

Ook om te weten is, hoe weet ik of Spark op Ubuntu is geïnstalleerd?

Spark installeren op Ubuntu

  1. Download hier de nieuwste release van Spark.
  2. Pak het archief uit.
  3. Verplaats de resulterende map en maak een symbolische link zodat u meerdere versies van Spark kunt installeren.
  4. Test de Spark-schaal.
  5. Misschien is Scala niet jouw ding en gebruik je liever Python.

Ten tweede, waar is vonk geïnstalleerd op EMR? Vanaf emr -4,0. 0, alle toepassingen aan EMR zijn in /usr/lib. Vonk staat in /usr/lib/ vonk.

Dus, hoe zet je een vonk op?

Stappen om Spark. te installeren

  1. Stap 1: Controleer of Java is geïnstalleerd.
  2. Stap 2: Controleer of Scala is geïnstalleerd.
  3. Stap 3: Download Scala.
  4. Stap 4: Installeer Scala.
  5. Stap 5: Apache Spark downloaden.
  6. Stap 6: Spark installeren.
  7. Stap 7: Controleer de installatie van de Spark-toepassing op uw systeem.

Moet ik Scala voor Spark installeren?

Jij zal nodig hebben een compatibele. gebruiken Scala versie (2.10. x). Java is een must voor Vonk + vele andere transitieve afhankelijkheden ( schaal compiler is slechts een bibliotheek voor JVM). PySpark maakt gewoon op afstand (via socket) verbinding met de JVM met behulp van Py4J (Python-Java-interoperatie).

Aanbevolen: