Sadržaj:

Gdje mogu pronaći varnice?
Gdje mogu pronaći varnice?

Video: Gdje mogu pronaći varnice?

Video: Gdje mogu pronaći varnice?
Video: Zeljko Joksimovic - Varnice - (Audio 2002) HD 2024, April
Anonim

Dnevnik imenike

Zadana lokacija SPARK_WORKER_LOG_DIR je /var/ log / iskra /radnik. Podrazumevano log direktorij za pokretanje Spark SQL Thrift server je $HOME/ iskra - štedljivi server. Spark Shell i aplikacija logs izlaze na konzolu. Dnevnik konfiguracijske datoteke nalaze se u istom direktoriju kao iskra -env.sh.

S obzirom na ovo, kako da nabavim varnice?

Spark posao ili prijavu sa stranice Analiza, možete pristupiti logs preko korisničkog sučelja aplikacije i Spark Korisničko sučelje aplikacije. stranici, možete pristupiti logs preko the Spark Korisničko sučelje aplikacije. Možete i dodatne logs da se identifikuju greške i izuzeci u Spark greške posla ili aplikacije.

Slično tome, kako provjeravate trupce pređe? Pregled a log file The logs glavnog aplikacije se također može vidjeti u pretraživaču u korisničkom sučelju upravitelja resursa na pređe .resourcemanager.webapp.address}/cluster (https://localhost:8088 na jednom čvoru "cluster").

Slično se može pitati, kako da dobijem dnevnike izvršitelja na Sparku?

Odgovori

  1. Upute za preuzimanje Spark executor dnevnika:
  2. Za Amabari -- 1) Idite na Spark Service i karticu Configs: 2) Pronađite unos "Advanced spark-log4j-properties".
  3. Za Cloudera -- Postavite: spark.executor.extraJavaOptions=-Dlog4j.configuration=file:/etc/spark/conf.cloudera.spark_on_yarn/log4j.properties.

Kako mogu pronaći URL svog servera spark historije?

Npr., za server istorije , oni bi obično bili dostupni na server - url >:18080/api/v1, a za pokrenutu aplikaciju, na https://localhost:4040/api/v1. U API-ju, aplikacija je referencirana njenim ID-om aplikacije, [app-id].

Preporučuje se: