ETL на airflow - Курсы “Школы Больших Данных“ г. Москва
В данном видео показан пример простейшего ETL процесса на платформе Airflow. Для этого реализован DAG, ссылку на код можно видеть ниже. Данные подгружаются с одного источника метеоданных через API, выполняется преобразование данных в нужный формат и далее данные передаются на оператор Load для последующей загрузки в нужное хранилище.
Ссылка на код:
Более подробно вы можете познакомиться с нашими курсами по Apache AirFlow здесь
КУРС DATA PIPELINE НА APACHE AIRFLOW И APACHE HADOOP
КУРС DATA PIPELINE НА APACHE AIRFLOW И ARENADATA HADOOP
Еще видео по Apache Airflow:
Часть 1: Начало работы с apache airflow -
Часть 3: ETL на airflow c postgresql -
По вопросам обучения на курсах машинного обучения приглашаем в нашу «Школа Больших Данных»
Обращаться по телефону:
7 (495) 41-41-121
7 (995) 100-45-63
Чтобы не пропустить информацию о новых курсах, акциях и других событиях Школы Больших Данных, рекомендуем подписаться на нас в социальных сетях:
Телеграм-канал:
Facebook:
Вконтакте:
LinkedIn:
Twitter:
Подписывайтесь и будьте в курсе всех интересных новинок мира Big Data вместе со Школой больших данных -
2 views
603
181
4 weeks ago 01:12:32 5
Éducation sexuelle à l’école : « Des enfants de 5 ans sont livrés à des inconnus » – Sophie Audugé
4 weeks ago 00:06:11 1
Je vous parle de Beyrouth - Épisode 4 : Le Liban, comme une tragédie de Racine
4 weeks ago 02:04:57 1
L’affaire P-Diddy est bien pire qu’on ne le pensait | IA reçoit Alex Jordanov et Xavier Raufer
4 weeks ago 00:01:06 1
En 48 secondes, l’amiral Jean-Louis Vichot réduit BHL au silence !
1 month ago 00:12:43 1
Web-TV Anthropo-logiques : un réseau social privé ?!
1 month ago 00:46:53 1
Bertrand SCHOLLER : Quelle Chance que Poutine existe (et d’autres), face aux adorateurs du diable
1 month ago 00:14:31 1
Ils coulent à pic : le gouvernement Barnier explose, Macron sombre !
1 month ago 00:17:16 1
2026 : Pluton en Verseau, le retour de 1789 - Version non censurée
1 month ago 01:31:42 1
25 ANS POUR UN DÉSASTRE : LE GRAND SUICIDE EUROPÉEN ! | JACQUES BAUD, COLONEL HOGARD | GPTV
1 month ago 00:15:21 1
Aymeric Caron dénonce et expose la corruption de BHL
1 month ago 00:04:03 1
Laurie Darmon - L’exil (clip officiel)
1 month ago 00:13:59 1
“LES FRANÇAIS EN COLÈRE : “ILS NOUS PRENNENT POUR DES C*NS !“ | GPTV INTERVIEW
1 month ago 02:37:39 1
Un Voyage FASCINANT vers les Merveilles de l’Univers du télescope James Webb | Documentaire Espace
1 month ago 00:20:09 1
L’atlantide et les annunakis, ont -ils vraiment existé ?
1 month ago 00:18:48 1
“Ils ont tout cassé !“ - la détresse d’une propriétaire abandonnée par l’Etat - Agnès Cambres
1 month ago 00:51:11 1
ILS DÉMOLISSENT DOCTOLIB : LA RÉVOLUTION CROWDBUNKER COMMENCE ! | GÉOPOLITIQUE PROFONDE
1 month ago 00:09:08 1
Trump accuse Biden et Zelensky d’être à l’origine de la guerre en Ukraine
1 month ago 00:02:29 1
Ballade de la bien-aimée
1 month ago 00:08:58 1
СПЕЦЭКСПЕРИМЕНТ: ОПРАВДАНО ЛИ ПРИМЕНЕНИЕ ТОКОПРОВОДЯЩЕЙ ПАСТЫ В ЭЛЕКТРОУСТАНОВКАХ? ЭТЛ ДАСТ ОТВЕТ!
1 month ago 00:42:02 1
Bertrand SCHOLLER : rien n’est détail, tout est lié, partir d’un des faits permet de tout détricoter
1 month ago 00:26:14 1
🛑Bompard fait trembler le gouvernement : Destitution d’Emmanuel Macron et Michel BARNIER?rediffusion
1 month ago 00:51:04 1
SACRILÈGE : ILS VEULENT FAIRE PAYER L’ENTRÉE DE NOS CATHÉDRALES ! | GPTV LE JT
1 month ago 00:38:54 1
DES ÉTATS-UNIS À LA FRANCE : L’EXPLOSION DU CHAOS POLITIQUE
1 month ago 01:10:04 1
Nostalgie Chansons Françaises Mix 2024🌹Claude Barzotti, Joe Dassin, Jacques Brel, Mireille Mathieu