ETL на airflow - Курсы “Школы Больших Данных“ г. Москва
В данном видео показан пример простейшего ETL процесса на платформе Airflow. Для этого реализован DAG, ссылку на код можно видеть ниже. Данные подгружаются с одного источника метеоданных через API, выполняется преобразование данных в нужный формат и далее данные передаются на оператор Load для последующей загрузки в нужное хранилище.
Ссылка на код:
Более подробно вы можете познакомиться с нашими курсами по Apache AirFlow здесь
КУРС DATA PIPELINE НА APACHE AIRFLOW И APACHE HADOOP
КУРС DATA PIPELINE НА APACHE AIRFLOW И ARENADATA HADOOP
Еще видео по Apache Airflow:
Часть 1: Начало работы с apache airflow -
Часть 3: ETL на airflow c postgresql -
По вопросам обучения на курсах машинного обучения приглашаем в нашу «Школа Больших Данных»
Обращаться по телефону:
7 (495) 41-41-121
7 (995) 100-45-63
Чтобы не пропустить информацию о новых курсах, акциях и других событиях Школы Больших Данных, рекомендуем подписаться на нас в социальных сетях:
Телеграм-канал:
Facebook:
Вконтакте:
LinkedIn:
Twitter:
Подписывайтесь и будьте в курсе всех интересных новинок мира Big Data вместе со Школой больших данных -
2 views
603
181
4 months ago 00:18:31 1
Energie libre, ce qu’il faut savoir...
4 months ago 00:06:18 1
DINERS SECRETS Nos VRAIS ENNEMIS ☠️ MACRON RN FRONT POPULAIRE ELECTION LR LFI
4 months ago 00:54:51 1
Le projet de Macron ? Une France à la dérive ! Le débrief de Nicolas Vidal
4 months ago 01:24:55 1
De quelques raisons de ne pas croire aux prédictions du GIEC | Entrevue avec Jean-Claude Pont
4 months ago 01:20:19 1
Etienne Chouard: “Le suffrage universel pour élire des maîtres ? Ils se foutent de notre gueule !“
4 months ago 00:02:18 1
Ils CAMBRIOLENT une MAISON et BATTENT à MORT le pauvre CHIEN
4 months ago 00:12:08 1
MACRON va TUER LFI et le FRONT POPULAIRE mais chuuut ! ELECTION RN CRISE
4 months ago 00:21:14 1
ILS SORTENT NOS POUBELLES POUR 5 EUROS DE L’HEURE ? RENCONTRE AVEC LES GRÉVISTES DE HNET
4 months ago 00:03:43 1
LAURIE DARMON ~ L’ EXIL {HQ 24bit V Remaster}
4 months ago 00:32:51 1
FSB russe protège les élites juives? Loi contre pacifistes en Russie.
4 months ago 00:09:58 1
La conjuration antichrétienne 7 - Ce que fait et dit de nos jours la révolution
4 months ago 02:55:41 1
La Magie Noire : Histoire, croyances et pratiques
4 months ago 00:02:33 1
ILS N’OSERONT PAS ME DESTITUER ! MACRON DEFI LA REPUBLIQUE ? ELECTION RN FRONT POPULAIRE
4 months ago 00:59:36 1
Accept - Hellfest 2024 – ARTE Concert
4 months ago 00:02:51 1
L’ÉTOILE BOHÉMIENNE (chanson russe en français) - МОХНАТЫЙ ШМЕЛЬ (на французском)
4 months ago 00:02:06 5
La Hongrie chassée de l’UE ? Von der Leyen veut punir Orban pour son voyage en Russie
4 months ago 01:24:23 1
Семинар ИКИТ СФУ по анализу данных “Data Science в Красноярске“,
4 months ago 00:59:41 1
“Ils vont se servir dans vos comptes bancaires“ Charles et Emmanuelle Gave expliquent la situation
4 months ago 00:37:52 1
Roswell et les OVNIS : les débris d’une soucoupe volante qui intriguent toujours - L’Heure H
4 months ago 00:42:09 1
Enlevés par des extraterrestres ? L’incroyable histoire de Betty et Barney Hill - L’Heure H OVNIS
4 months ago 00:38:40 1
Affaire Pascagoula : 2 hommes enlevés par un OVNI ? - L’Heure H
4 months ago 00:29:36 1
Juge Napolitano & L. Johnson, LE LANCET annonce 186 000 MORTS à GAZA soit 7 à 8% de la population !
4 months ago 00:20:03 2
Ce Qu’ils Ne Vous Ont Pas Dit Sur Les Personnes À Basse Vibration