Arquiteto de Dados

Dadoteca

Vaga encontrada via LinkedIn

PUBLICIDADE
(Espaço reservado pra publicidade em breve.)

Descrição da vaga

Atividades: - Projetar arquiteturas de dados end-to-end, desde a ingestão até o consumo, considerando escalabilidade, segurança, governança, performance e custo. - Definir soluções de Data Lake, Lakehouse e arquitetura Medallion (Bronze, Silver e Gold). - Definir estratégias de ingestão, transformação, integração, armazenamento e disponibilização de dados. - Projetar soluções utilizando Microsoft Azure, Microsoft Fabric e Azure Databricks. - Definir padrões de modelagem dimensional, incluindo Star Schema, Snowflake, Fato, Dimensão, granularidade e SCD. - Definir estratégias de carga Full, Incremental, CDC, Upsert/MERGE, deduplicação e controle de histórico. - Avaliar performance, escalabilidade, disponibilidade e custo, incluindo dimensionamento de clusters e processamento Spark/PySpark. - Definir padrões de segurança, governança, qualidade, metadados e linhagem, considerando LGPD e compliance. - Avaliar integrações com SAP/SAP HANA, bancos relacionais e NoSQL, APIs, arquivos e sistemas SaaS. - Orientar Engenheiros de Dados e equipes de Cloud, DevOps, Segurança, Governança e BI na implementação das soluções. - Produzir documentação, diagramas e decisões arquiteturais, avaliando alternativas tecnológicas e seus impactos técnicos e financeiros. Requisitos: - Formação superior em Ciência da Computação, Engenharia, Sistemas de Informação ou áreas correlatas. - Experiência sólida em Arquitetura de Dados, Data Lake/Lakehouse e arquitetura Medallion. - Domínio de modelagem dimensional, incluindo Star Schema, Snowflake, Fato, Dimensão, granularidade e SCD. - Conhecimento de SQL, Python e/ou PySpark, Apache Spark, Delta Lake e Parquet. - Experiência com ETL/ELT, pipelines de dados e estratégias Full, Incremental, CDC, Upsert/MERGE e processamento distribuído. - Experiência ou conhecimento sólido em Microsoft Azure, Microsoft Fabric e Azure Databricks. - Conhecimento de Azure Data Lake Storage Gen2, OneLake, Fabric Lakehouse e Unity Catalog. - Experiência ou conhecimento em integração com SAP/SAP HANA, bancos relacionais e NoSQL, APIs e arquivos. - Conhecimento de segurança, governança, qualidade, linhagem de dados, LGPD e controle de acesso. - Conhecimento de Azure Data Factory, Fabric Data Factory/Data Pipelines e Databricks Workflows. Competências: - Capacidade de transformar requisitos de negócio em arquiteturas de dados escaláveis, seguras e sustentáveis. - Habilidade para orientar equipes multidisciplinares e conduzir decisões técnicas em projetos complexos. - Capacidade analítica para avaliar trade-offs entre performance, custo, segurança e escalabilidade. - Proatividade na definição de padrões, automação e melhoria contínua das soluções de dados. - Facilidade para documentar e comunicar conceitos técnicos para públicos técnicos e não técnicos. Diferenciais: - Certificações Microsoft relacionadas a Azure/Fabric e certificações Databricks. - Experiência com Azure DevOps, CI/CD e Terraform/IaC. - Experiência com Data Mesh, streaming e arquiteturas orientadas a eventos. - Conhecimento de Power BI, Semantic Models, FinOps e arquiteturas híbridas ou multi-cloud. - Experiência com Machine Learning, MLOps, MLflow, Databricks ML e arquiteturas de dados para IA Generativa. - Experiência em projetos corporativos de grande volume e ambientes críticos.
PUBLICIDADE
(Espaço reservado pra publicidade em breve.)

Informações adicionais

Empresa
Dadoteca
Localização
Rio de Janeiro - RJ
Fonte
LinkedIn

Ao candidatar-se, você será direcionado para o site de origem desta vaga (LinkedIn).

Candidatar-se →