Qığılcım jurnallarını haradan tapa bilərəm?

2024 Müəllif: Lynn Donovan | [email protected]. Son dəyişdirildi: 2023-12-15 23:43

Giriş kataloqlar

Defolt SPARK_WORKER_LOG_DIR yeri /var/ log / qığılcım /işçi. Standart log başlamaq üçün kataloq Qığılcım SQL Thrift serveri $HOME/ qığılcım - qənaətli server. Qığılcım Qabıq və tətbiq loglar konsola çıxarılır. Giriş konfiqurasiya faylları ilə eyni kataloqda yerləşir qığılcım -env.sh.

Bununla əlaqədar olaraq, qığılcım jurnallarını necə əldə edə bilərəm?

Qığılcım Analiz səhifəsindən iş və ya proqrama daxil ola bilərsiniz loglar Tətbiq UI vasitəsilə və Qığılcım Tətbiq UI. səhifəsinə daxil ola bilərsiniz loglar vasitəsilə Qığılcım Tətbiq UI. Əlavə edə bilərsiniz loglar səhvləri və istisnaları müəyyən etmək Qığılcım iş və ya proqram uğursuzluqları.

Eynilə, iplik jurnallarını necə yoxlayırsınız? Baxış a log fayl The loglar Tətbiq ustasına https://${ ünvanında resurs meneceri UI-də brauzerdə də baxmaq olar iplik .resourcemanager.webapp.address}/cluster (https://localhost:8088 tək node "klaster" üzərində).

Eynilə soruşa bilər ki, Spark-da icraçı qeydlərini necə əldə edə bilərəm?

Cavab verin

1. Spark icraçı qeydlərini əldə etmək üçün təlimatlar:
2. Amabari üçün -- 1) Spark Service və Configs tabına keçin: 2) "Advanced spark-log4j-properties" girişini tapın.
3. Cloudera üçün -- Qurun: spark.executor.extraJavaOptions=-Dlog4j.configuration=file:/etc/spark/conf.cloudera.spark_on_yarn/log4j.properties.

Qığılcım Tarixi serverinin URL ünvanını necə tapa bilərəm?

Məsələn, üçün tarix serveri , onlar adətən https://< ünvanında əldə edilə bilər server - url >:18080/api/v1 və işləyən proqram üçün https://localhost:4040/api/v1 ünvanındadır. API-də proqrama onun proqram ID-si [app-id] ilə istinad edilir.