Satura rādītājs:

Kur es varu atrast dzirksteļu baļķus?
Kur es varu atrast dzirksteļu baļķus?

Video: Kur es varu atrast dzirksteļu baļķus?

Video: Kur es varu atrast dzirksteļu baļķus?
Video: Liene Uresina - Tev var būt viss. Sapņo un atrodi garšīgus mērķus 2024, Aprīlis
Anonim

Žurnāls katalogi

Noklusējuma SPARK_WORKER_LOG_DIR atrašanās vieta ir /var/ žurnāls / dzirkstele /strādnieks. Noklusējums žurnāls direktoriju, lai palaistu Dzirkstele SQL Thrift serveris ir $HOME/ dzirkstele - taupības serveris. Dzirkstele Apvalks un pielietojums baļķi tiek izvadīti uz konsoli. Žurnāls konfigurācijas faili atrodas tajā pašā direktorijā kā dzirkstele -env.sh.

Saistībā ar to, kā iegūt dzirksteļu baļķus?

Dzirkstele darbu vai pieteikumu no Analīzes lapas varat piekļūt baļķi izmantojot lietojumprogrammas lietotāja saskarni un Dzirkstele Lietojumprogrammas lietotāja saskarne. lapai, varat piekļūt baļķi caur Dzirkstele Lietojumprogrammas lietotāja saskarne. Varat arī papildus baļķi lai identificētu kļūdas un izņēmumus Dzirkstele darba vai pieteikuma kļūmes.

Līdzīgi, kā jūs pārbaudāt dzijas baļķus? Skatoties a žurnāls fails The baļķi lietojumprogrammas šablonu var skatīt arī pārlūkprogrammā resursu pārvaldnieka lietotāja saskarnē vietnē dzija .resourcemanager.webapp.address}/cluster (https://localhost:8088 vienā mezglā "klasterā").

Līdzīgi var jautāt, kā es varu iegūt Spark izpildītāju žurnālus?

Atbilde

  1. Norādījumi Spark izpildītāja žurnālu iegūšanai:
  2. Amabari - 1) atveriet Spark Service un cilni Konfigurācijas: 2) Atrodiet ierakstu Advanced spark-log4j-properties.
  3. Cloudera - iestatiet: spark.executor.extraJavaOptions=-Dlog4j.configuration=file:/etc/spark/conf.cloudera.spark_on_yarn/log4j.properties.

Kā atrast savu spark History servera URL?

Piemēram, par vēstures serveris , tie parasti būtu pieejami vietnē serveris - url >:18080/api/v1 un, ja lietojumprogramma darbojas, apmeklējiet vietni https://localhost:4040/api/v1. API uz lietojumprogrammu atsaucas ar tās lietojumprogrammas ID [app-id].

Ieteicams: