Satura rādītājs:

Kā es varu zināt, vai spark ir instalēts Linux?
Kā es varu zināt, vai spark ir instalēts Linux?

Video: Kā es varu zināt, vai spark ir instalēts Linux?

Video: Kā es varu zināt, vai spark ir instalēts Linux?
Video: Atveru turboreaktīvu portālu savā garāžā 2024, Novembris
Anonim

2 atbildes

  1. Atvērt Dzirkstele shell Terminal un ievadiet komandu.
  2. sc.versija Or dzirkstele -submit --version.
  3. Vienkāršākais veids ir vienkārši palaist " dzirkstele -shell” komandrindā. Tas parādīs.
  4. pašreizējā aktīvā versija Dzirkstele .

Ir arī jāzina, kā es varu zināt, vai Spark ir instalēts Ubuntu?

Spark instalēšana Ubuntu

  1. Lejupielādējiet jaunāko Spark versiju šeit.
  2. Izsaiņojiet arhīvu.
  3. Pārvietojiet iegūto mapi un izveidojiet simbolisku saiti, lai varētu instalēt vairākas Spark versijas.
  4. Izmēģiniet Spark apvalku.
  5. Varbūt Scala nav jūsu tējas tase, un jūs vēlētos izmantot Python.

Otrkārt, kur EMR ir uzstādīta dzirkstele? No plkst emr -4,0. 0, visas lietojumprogrammas ir ieslēgtas EMR atrodas mapē /usr/lib. Dzirkstele atrodas mapē /usr/lib/ dzirkstele.

Līdz ar to, kā izveidot dzirksteli?

Spark instalēšanas darbības

  1. 1. darbība: pārbaudiet, vai Java ir instalēta.
  2. 2. darbība: pārbaudiet, vai Scala ir instalēta.
  3. 3. darbība: lejupielādējiet Scala.
  4. 4. darbība: instalējiet Scala.
  5. 5. darbība. Apache Spark lejupielāde.
  6. 6. darbība: Spark instalēšana.
  7. 7. darbība: pārbaudiet Spark lietojumprogrammas instalēšanu savā sistēmā.

Vai man ir jāinstalē Scala for spark?

Jūs to darīsit nepieciešams lai izmantotu saderīgu Scala versija (2.10. x). Java ir obligāta Dzirkstele + daudzas citas pārejošas atkarības ( skala kompilators ir tikai JVM bibliotēka). PySpark vienkārši izveido savienojumu attālināti (izmantojot ligzdu) ar JVM, izmantojot Py4J (Python-Java mijiedarbība).

Ieteicams: