Analista de dados

Atuardodadobrutoatéaentregaparaanalytics, construindoemantendopipelines de ETL/ELT com PythoneSQL , alémdecoletardadosexternosvia webscraping quandonecessário. Ofocoéqualidade, rastreabilidade, automaçãoeconformidade, evitandopipelinesfrágeis.

Responsabilidades

• Desenvolveremanterpipelinesde ETL/ELT com Python e SQL .
• Tratar e padronizar dados, incluindo limpeza, deduplicação, validações, regras de negócio e enriquecimentos.
• Implementar webscraping de fontes públicas, com controle de taxa, reprocessamento, versionamento, logs de tratamento de mudanças no site.
• Estruturar rotinas de coleta com tolerância a falhas, por exemplo retries, backoff e captura de erros.
• Criar camadas de dados para consumo analítico, com documentação e editor de dados.
• Monitorar pipelines, criar alertas, métricas de qualidade, auditoria e reconciliação.
• Trabalhar com stakeholders ...