INHOUDSOPGAWE:

Waar kan ek vonklogs vind?
Waar kan ek vonklogs vind?

Video: Waar kan ek vonklogs vind?

Video: Waar kan ek vonklogs vind?
Video: WAAR KAN EK DIE NUWE PLATFORM VAN LYDIAN WORLD VIND 2024, Mei
Anonim

Meld dopgehou

Die verstek SPARK_WORKER_LOG_DIR-ligging is /var/ Meld / vonk /werker. Die verstek Meld gids om die Vonk SQL Thrift-bediener is $HOME/ vonk -thrift-bediener. Vonk Dop en toediening logs word na die konsole uitgevoer. Meld konfigurasielêers is in dieselfde gids as vonk -env.sh.

Met betrekking tot hierdie, hoe kry ek vonklogs?

Vonk werk of aansoek vanaf die Analiseer bladsy, kan jy toegang tot die logs via die toepassing-UI en Vonk Toepassing UI. bladsy, kan jy toegang tot die logs via die Vonk Toepassing UI. Jy kan ook addisionele logs om die foute en uitsonderings in te identifiseer Vonk werk of aansoek mislukkings.

Net so, hoe kontroleer jy garinglogs? Bekyk a Meld lêer Die logs van 'n toepassingmeester kan ook in 'n blaaier in die hulpbronbestuurder-UI op https://${ bekyk word gare .resourcemanager.webapp.address}/cluster (https://localhost:8088 op 'n enkele nodus "cluster").

Net so kan 'n mens vra, hoe kry ek eksekuteurslogboeke op Spark?

Antwoord

  1. Instruksies om die Spark eksekuteurslogboeke te kry:
  2. Vir Amabari -- 1) Gaan na die Spark Service en die Configs-oortjie: 2) Soek die "Advanced spark-log4j-properties"-inskrywing.
  3. Vir Cloudera -- Stel: spark.executor.extraJavaOptions=-Dlog4j.configuration=lêer:/etc/spark/conf.cloudera.spark_on_yarn/log4j.properties.

Hoe vind ek my vonkgeskiedenisbediener-URL?

Bv. vir die geskiedenis bediener , sal hulle tipies toeganklik wees by bediener - url >:18080/api/v1, en vir 'n lopende toepassing, by https://localhost:4040/api/v1. In die API word na 'n toepassing verwys deur sy toepassing-ID, [app-id].

Aanbeveel: