Pipeline de Engenharia de Dados desenvolvido para automatizar a extração, validação e carregamento de dados de planilhas distribuídas (Google Sheets) para um Data Warehouse local (SQLite). O projeto utiliza a infraestrutura de nuvem do Google (GCP) para autenticação segura e consumo de dados via API, simulando um cenário real de centralização de dados corporativos (Shadow IT) para um ambiente analítico estruturado.
Pipeline automatizado para ingestão e visualização de dados do mercado financeiro. O projeto coleta dados da API do Yahoo Finance, armazena em um Data Lake Parquet particionado e fornece um dashboard interativo para análise. Serviço contínuo que busca dados de mercado para uma lista de ativos a cada 2 minutos. Os dados são processados para o formato Tidy e salvos com compressão Snappy, particionados por ano, mês e dia.
Você atingiu o limite de visualização de 10 perfis de freelancer por 24 horas.
Procurando por mais freelancers? Publique um projeto sem compromisso ou inscreva-se em uma conta recruiter.