O Desafio
O objetivo deste projeto foi construir um pipeline de dados para extrair, tratar e analisar o histórico musical do Spotify. O foco principal foi a criação de uma estrutura robusta para processar dados JSON e gerar insights via SQL e Python.
Abordagem e Solução
Os dados brutos foram manipulados utilizando Python e PySpark, e posteriormente armazenados em um banco de dados PostgreSQL. Utilizei o DBeaver para consultas SQL e integrei o banco ao Power BI para visualizações adicionais, além de desenvolver uma EDA completa em notebooks para exploração estatística.
Ferramentas Utilizadas
Python
PySpark
SQL
PostgreSQL
DBeaver