Logo sq.boatexistence.com

Çfarë janë dags në rrjedhën e ajrit?

Përmbajtje:

Çfarë janë dags në rrjedhën e ajrit?
Çfarë janë dags në rrjedhën e ajrit?

Video: Çfarë janë dags në rrjedhën e ajrit?

Video: Çfarë janë dags në rrjedhën e ajrit?
Video: How To Cure Plantar Fasciitis FAST & FOREVER [Heel Pain & Heel Spurs] 2024, Mund
Anonim

DAGs. Në Airflow, një DAG - ose një Grafik Aciklik i Drejtuar - është një koleksion i të gjitha detyrave që dëshironi të kryeni, të organizuar në një mënyrë që pasqyron marrëdhëniet dhe varësitë e tyre.

Si i bëni DAG në Airflow?

Për të krijuar një DAG në Airflow, gjithmonë duhet të importoni klasën DAG Pas klasës DAG, vijnë importet e Operatorëve. Në thelb, për çdo Operator që dëshironi të përdorni, duhet të bëni importin përkatës. Për shembull, ju dëshironi të ekzekutoni një funksion Python, duhet të importoni PythonOperator.

Ku kërkon Airflow për DAG?

Airflow shikon në DAGS_FOLDER-in tuaj për modulet që përmbajnë objekte DAG në hapësirën e tyre globale të emrave dhe shton objektet që gjen në DagBag.

Si i ruan Airflow DAGs?

Baza e të dhënave të meta të dhënave Apache Airflow:

Baza e të dhënave meta të dhënave ruan konfigurimet, të tilla si variablat dhe lidhjet Ajo ruan gjithashtu informacionin e përdoruesit, rolet dhe politikat. Së fundi, Scheduler analizon të gjitha DAG-të dhe ruan meta të dhënat përkatëse, siç janë intervalet e orarit, statistikat nga çdo ekzekutim dhe detyrat e tyre.

A është Airflow një mjet ETL?

Rrjedha e ajrit nuk është një mjet ETL në vetvete. Por ai menaxhon, strukturon dhe organizon tubacionet ETL duke përdorur diçka të quajtur Grafikët Aciklikë të Drejtuar (DAGs). … Baza e të dhënave meta të dhënave ruan rrjedhat e punës/detyrat (DAG).

Recommended: