Jak U偶ywa膰 Variables i XCom w Apache Airflow?

M贸wi si臋, 偶e Apache Airflow to CRON na sterydach. Zdobywa uznanie w艣r贸d narz臋dzi do orchestracji ETL’i. Harmonogramowanie, zarz膮dzanie i monitorowanie zada艅 mu nie straszne. Podstawowym sposobem definiowania zada艅 s膮 acyklicze grafy skierowane (DAG). Zadania w nich musz膮 wymienia膰 si臋 informacjami. We wpisie dowiesz si臋 jak u偶ywa膰 Variables i XCom w Apache Airflow.

Czytaj dalej 鈥濲ak U偶ywa膰 Variables i XCom w Apache Airflow?鈥

Apache Airflow + Kafka – Zbieramy dane GPS komunikacji miejskiej

Dzi艣 przyjrzymy si臋 narz臋dziu, jakim jest Apache Airflow. Spr贸bujemy u偶y膰 dw贸ch operator贸w i zasili膰 kafk臋 danymi z API. Przy okazji rozpoczynam taki “mini projekcik”. Nie wiem jak Tobie, ale najlepiej poznaj臋 r贸偶ne technologie poprzez praktyk臋.

Czytaj dalej 鈥濧pache Airflow + Kafka – Zbieramy dane GPS komunikacji miejskiej鈥