Finalizado em: 17/03/2022
Objetivo: Colocar em prática os conhecimentos de ETL (Extract-Tranform-Load), Python e Banco de Dados integrando um sistema, de forma básica.
Foco: automatizar o seguinte processo.
- Ingestão direta do Banco de Dados SQLite3 - Browser;
- Validação e Transformação dos Dados pelo Python;
- Uso dos Dados Transformados para Data Visualization no Power BI.
Fonte dos Dados: https://www.kaggle.com/shivamb/all-xbox-one-games
Tecnologias Usadas:
- Jupyter Notebook;
- Python;
- Pandas;
- SQLite3;
- Pandera.
- Microsoft Power BI;
- SQLite ODBC Driver.
Entrada:
- Dados de Todos os Jogos Lançados em Xbox One, Xbox Series X|S e Windows.
Saída:
-
Base de Dados dos Jogos entre 2021 e 2022.
-
Base de Dados dos Jogos que Possuem como Plataforma SOMENTE Xbox One.
-
Base de Dados sem valores nulos nos campos.
-
Dashboards com Microsoft Power BI das três bases.