Bootcamp Engenheiro(a) de Dados Cloud - IGTI - Módulo 1

Fundamentos de Arquitetura de Dados em Nuvem

Repositório com códigos e esteiras de deploy para as atividades do módulo 1 do bootcamp Engenheiro de Dados Cloud do IGTI.

Arquitetura da solução:

Arquitetura da solução:

Arquitetura da solução:

Name		Name	Last commit message	Last commit date
Latest commit History 56 Commits
.github/workflows		.github/workflows
airflow		airflow
data		data
etl		etl
img		img
infrastructure		infrastructure
scripts		scripts
.gitignore		.gitignore
EMR-IGTI-Delta-notebook.ipynb		EMR-IGTI-Delta-notebook.ipynb
README.md		README.md
glue_spark_job.py		glue_spark_job.py
ingest_pnadc20203_to_postgres.py		ingest_pnadc20203_to_postgres.py
interact_s3.py		interact_s3.py
job_spark.py		job_spark.py
simulations_to_kinesis.py		simulations_to_kinesis.py