Որտեղ կարող եմ գտնել կայծային գերաններ:

2024 Հեղինակ: Lynn Donovan | [email protected]. Վերջին փոփոխված: 2023-12-15 23:48

Մատյան գրացուցակներ

Նախնական SPARK_WORKER_LOG_DIR տեղադրությունը /var/ է գերան / կայծ /աշխատող. Լռելյայն գերան գրացուցակը սկսելու համար Կայծ SQL Thrift սերվերը $HOME/ է կայծ - խնայողություն-սերվեր: Կայծ Կեղև և կիրառություն գերաններ թողարկվում են վահանակ: Մատյան կազմաձևման ֆայլերը գտնվում են նույն գրացուցակում, որտեղ կայծ -նվ.շ.

Ինչ վերաբերում է դրան, ինչպե՞ս կարող եմ կայծային տեղեկամատյաններ ստանալ:

Կայծ աշխատանք կամ դիմում Վերլուծել էջից, կարող եք մուտք գործել գերաններ Application UI-ի միջոցով և Կայծ Հավելվածի միջերես. էջ, կարող եք մուտք գործել գերաններ -ի միջոցով Կայծ Հավելվածի միջերես. Կարող եք նաև հավելյալ գերաններ բացահայտել սխալներն ու բացառությունները Կայծ աշխատանքի կամ դիմումի ձախողումներ:

Նմանապես, ինչպե՞ս եք ստուգում մանվածքի տեղեկամատյանները: Դիտելով ա գերան ֆայլ The գերաններ հավելվածի վարպետը կարող է դիտվել նաև զննարկիչում ռեսուրսների կառավարչի միջերեսում՝ մանվածք .resourcemanager.webapp.address}/cluster (https://localhost:8088 մեկ հանգույցի «կլաստերի» վրա):

Նմանապես մեկը կարող է հարցնել, թե ինչպես կարող եմ ստանալ կատարողի տեղեկամատյանները Spark-ում:

Պատասխանել

1. Spark կատարողի տեղեկամատյանները ստանալու ցուցումներ.
2. Ամաբարիի համար -- 1) Գնացեք Spark Service և Configs ներդիր. 2) Գտեք «Ընդլայնված spark-log4j-properties» մուտքը:
3. Cloudera-ի համար - Սահմանել՝ spark.executor.extraJavaOptions=-Dlog4j.configuration=file:/etc/spark/conf.cloudera.spark_on_yarn/log4j.properties:

Ինչպե՞ս գտնել իմ Spark History սերվերի URL-ը:

Օրինակ, համար պատմության սերվեր , դրանք սովորաբար հասանելի կլինեն սերվեր - url >:18080/api/v1, իսկ գործող հավելվածի համար՝ https://localhost:4040/api/v1: API-ում հավելվածը հիշատակվում է իր հավելվածի ID-ով, [app-id]: