Talaan ng mga Nilalaman:

Paano ko malalaman kung naka-install ang spark sa Linux?
Paano ko malalaman kung naka-install ang spark sa Linux?

Video: Paano ko malalaman kung naka-install ang spark sa Linux?

Video: Paano ko malalaman kung naka-install ang spark sa Linux?
Video: 5 Things that you should NEVER do to your Computer (Tagalog) 2024, Mayo
Anonim

2 Sagot

  1. Bukas Spark shell Terminal at ipasok ang command.
  2. sc.bersyon O kislap -submit --bersyon.
  3. Ang pinakamadaling paraan ay ang paglunsad lamang ng " kislap -shell” sa command line. Ipapakita nito ang.
  4. kasalukuyang aktibong bersyon ng Spark .

Ang dapat ding malaman ay, paano ko malalaman kung ang spark ay naka-install na Ubuntu?

Pag-install ng Spark sa Ubuntu

  1. I-download ang pinakabagong release ng Spark dito.
  2. I-unpack ang archive.
  3. Ilipat ang resultang folder at lumikha ng simbolikong link upang magkaroon ka ng maraming bersyon ng Spark na naka-install.
  4. Subukan ang Spark shell.
  5. Marahil ay hindi ang Scala ang iyong tasa ng tsaa at mas gusto mong gumamit ng Python.

Pangalawa, saan naka-install ang spark sa EMR? Bilang ng emr -4.0. 0, naka-on ang lahat ng application EMR ay nasa /usr/lib. Spark ay nasa /usr/lib/ kislap.

Dahil dito, paano ka magse-set up ng spark?

Mga hakbang sa pag-install ng Spark

  1. Hakbang 1: Tiyakin kung naka-install ang Java.
  2. Hakbang 2: Tiyakin kung naka-install ang Scala.
  3. Hakbang 3: I-download ang Scala.
  4. Hakbang 4: I-install ang Scala.
  5. Hakbang 5: Pag-download ng Apache Spark.
  6. Hakbang 6: Pag-install ng Spark.
  7. Hakbang 7: I-verify ang Pag-install ng Spark application sa iyong system.

Kailangan ko bang i-install ang Scala para sa spark?

gagawin mo kailangan para gumamit ng compatible Scala bersyon (2.10. x). Ang Java ay kinakailangan para sa Spark + marami pang ibang transitive dependencies ( scala Ang compiler ay isang library lamang para sa JVM). Ang PySpark ay kumokonekta lamang nang malayuan (sa pamamagitan ng socket) sa JVM gamit ang Py4J (Python-Java interoperation).

Inirerekumendang: