Em bibliotecas aleatórias o objetivo é explorar uma pequena lib (geralmente em Python mas podem ter outras que são só CLIs, etc) e ver o que ela faz, quais suas vantagens e como criar um pequeno código com ela para algum problema que você tenha. Objetivo O objetivo do pyjanitor é criar uma API de … Continue reading Bibliotecas aleatórias #01: PyJanitor
Tag: data engineering
Apache Airflow 02 – Conceitos principais
Os principais conceitos do Airflow que serão explicados neste artigo serão: DAGs, operators, sensors e hooks. O que vou explicar será sobre como eles se encaixam no Airflow e como utilizá-los no seu dia a dia, até mesmo vamos construir nossa primeira DAG. Eu vou tentar ensinar a partir dos partes ao invés de destrinchar … Continue reading Apache Airflow 02 – Conceitos principais