Leega Consultoria
Apply Now
Engenheiro de dados pleno gcp/dbt
Description
- Conhecimento comprovado em DBT no minimo de 3 anos;
- Domínio de:
- models (staging, intermediate, marts)
- ref() e source()
- macros (Jinja)
- seeds e snapshots
- tests (not null, unique, custom)
- Organização em camadas:
- Staging Transform Mart (Data Warehouse
- Google Cloud Platform (GCP):
- BigQuery: Profundo conhecimento em modelagem de dados, otimização de consultas, particionamento, clustering, carga de dados (streaming e batch), segurança e governança de dados.
- Cloud Storage: Experiência em gerenciamento de buckets, classes de armazenamento, políticas de ciclo de vida, controle de acesso (IAM) e segurança de dados.
- Dataproc: Habilidade em provisionamento, configuração e gerenciamento de clusters Spark/Hadoop, otimização de jobs, e integração com outros serviços GCP.
- Dataflow/Composer/DBT: Conhecimento em ferramentas de orquestração e processamento ...