Turinys:

Kur galiu rasti kibirkštinių žurnalų?
Kur galiu rasti kibirkštinių žurnalų?

Video: Kur galiu rasti kibirkštinių žurnalų?

Video: Kur galiu rasti kibirkštinių žurnalų?
Video: Tech Spark Magazine – Big Data Issue 2024, Balandis
Anonim

Žurnalas katalogai

Numatytoji SPARK_WORKER_LOG_DIR vieta yra /var/ žurnalas / kibirkštis /darbininkas. Numatytoji žurnalas katalogas, skirtas pradėti Kibirkštis „SQL Thrift“serveris yra $HOME/ kibirkštis -taupytas serveris. Kibirkštis Apvalkalas ir taikymas rąstų išvedami į konsolę. Žurnalas konfigūracijos failai yra tame pačiame kataloge kaip kibirkštis -env.sh.

Atsižvelgiant į tai, kaip gauti kibirkštinius žurnalus?

Kibirkštis darbą arba paraišką iš analizės puslapio galite pasiekti rąstų per programos vartotojo sąsają ir Kibirkštis Programos vartotojo sąsaja. puslapyje galite pasiekti rąstų per Kibirkštis Programos vartotojo sąsaja. Taip pat galite papildomai rąstų nustatyti klaidas ir išimtis Kibirkštis darbo ar paraiškos gedimai.

Panašiai, kaip patikrinti verpalų rąstus? Žiūrint a žurnalas failas The rąstų programos pagrindinį failą taip pat galima peržiūrėti naršyklėje išteklių tvarkyklės vartotojo sąsajoje adresu verpalai .resourcemanager.webapp.address}/cluster (https://localhost:8088 viename mazgo „klasteryje“).

Panašiai galima paklausti, kaip gauti vykdytojo žurnalus „Spark“?

Atsakymas

  1. Instrukcijos, kaip gauti „Spark“vykdytojo žurnalus:
  2. „Amabari“– 1) Eikite į „Spark Service“ir „Configs“skirtuką: 2) Raskite įrašą „Advanced spark-log4j-properties“.
  3. „Cloudera“– rinkinys: spark.executor.extraJavaOptions=-Dlog4j.configuration=file:/etc/spark/conf.cloudera.spark_on_yarn/log4j.properties.

Kaip rasti savo spark History serverio URL?

Pavyzdžiui, už istorijos serveris , jie paprastai būtų pasiekiami adresu serveris - url >:18080/api/v1, o veikiančiai programai adresu https://localhost:4040/api/v1. API programa nurodoma jos programos ID [app-id].

Rekomenduojamas: