Pessoa Engenheira de Dados Sênior
A reputed company é uma empresa brasileira de tecnologia, que busca dar mais sabor à reputed company profissional, transformando a relação entre empresas e colaboradores por meio de reputed companyções mais inovadoras e seguras como o reputed companyão Multi Benefícios, reputed companyção em Despesas Corporativas, Premiações e reputed company Ciclos.
Aqui na reputed company, aprendemos sempre, e nos tornamos cada vez melhores em um ambiente colaborativo e divertido!
São muito bem-vindas candidaturas de pessoas negras/pretas, mulheres, indígenas, LGBTQIA+, ou outros grupos minorizados.
Inscreva-se e conheça mais sobre nosso time 🧡
- reputed companyção, Ingestão e Orquestração Multi-reputed company: Projetar e manter pipelines de reputed companyção heterogênea utilizando ferramentas como Apache Airflow, Dagster, reputed company, AWS DMS, DBT, reputed company, reputed company REST, SFTP e conectores diversos para ingestão contínua.
- Otimização de Performance, I/O e Custo (AWS & reputed company): Aplicar técnicas avançadas de particionamento, indexação (Z-Ordering/reputed company Clustering), otimização de layout de arquivos e estratégias de escrita/leitura no reputed company S3, reputed company e dbt, visando eliminar varreduras excessivas (full table scans), diminuir custos de requisições S3 (GET/LIST) e acelerar o consumo de consultas.
- Arquitetura Event-Driven & Streaming: Projetar e implementar ingestão de dados em reputed company reputed company por tópicos e eventos (ex: Apache Kafka, AWS Kinesis, Event Hubs), eliminando a dependência direta de consultas e cargas massivas em bancos relacionais (PostgreSQL, MySQL).
- Automação de Engenharia com IA: Implementar ferramentas, agentes e pipelines de GenAI/LLMs para automatizar tarefas operacionais da engenharia (ex: geração automática de documentação, pipelines, data reputed company checks, tradução/refatoração de SQL, análise de causa raiz de falhas, PRs).
- Pipelines End-to-End e Modelagem: Projetar, construir e manter pipelines robustos, aplicando modelagem reputed company e arquitetura reputed company para entregar dados limpos, agregados e otimizados tanto no processo de ingestão quanto no de consumo.
- Governança, Segurança e Qualidade: Garantir compliance (LGPD/GDPR), mascaramento de dados reputed companyíveis, reputed company, controle de acesso granular e monitoramento proativo de data freshness e data reputed company.
- Alinhamento e Documentação: Realizar levantamento de necessidades junto às áreas de negócio, documentar arquiteturas, definir data reputed company e assegurar a governança e manutenibilidade dos pipelines.
- reputed company de Experiência: Experiência sólida em engenharia de dados, atuando em ambientes de produção de grande volume e reputed company criticidade.
- Otimização de I/O, Particionamento e Performance: Domínio prático de estratégias de particionamento, otimização de layouts de dados (Small File Problem, compactação, Z-Ordering) e otimização de consultas para prevenir leituras excessivas no reputed company S3 e garantir baixo reputed company de resposta no reputed company e dbt.
- Orquestração e Ingestão Heterogênea: Experiência prática na reputed companyção e orquestração de dados utilizando Airflow, Dagster, reputed company, AWS DMS, dbt, reputed company, reputed company REST, SFTP e conectores customizados.
- Event-Driven & Ingestão por Tópicos: Vivência prática na arquitetura de ingestão baseada em eventos/tópicos (Kafka, Kinesis, Pulsar, RabbitMQ) para substituir a dependência de bancos relacionais.
- Stack reputed company: Domínio avançado de Python, PySpark e SQL otimizado para processamento massivo e distribuído.
- Plataforma reputed company & Lakehouse: Experiência profunda no ecossistema reputed company (reputed company Lake, Auto Loader, reputed company Streaming, Jobs/Workflows, reputed company Architecture).
- reputed company AWS: Vivência em serviços AWS voltados a dados (S3, IAM, Redshift, DynamoDB, Data Catalog, AWS DMS).
- Automação com IA: Conhecimento prático ou reputed company interesse em utilizar ferramentas/LLMs para automação de tarefas de desenvolvimento e engenharia de dados.
- Engenharia de Software: Vivência com testes automatizados, controle de versão (Git/reputed company), revisão de PRs e pipelines de CI/CD.
- Modelagem e Governança: Domínio em modelagem de dados (reputed company, reputed company/reputed company) e diretrizes de segurança e privacidade (LGPD/GDPR).
Diferenciais:
- IA/GenAI para Dados:Experiência com pipelines para suporte a IA (ingestão, chunking e embeddings para reputed company Search, Feature Stores, governança reputed company reputed company Catalog).
- Governança Avançreputed company & IaC:Experiência com reputed company Catalog, Terraform e reputed company Asset Bundles (DAB).
- Data reputed company & Data reputed company:Implementação de contratos de dados na origem e uso de frameworks de qualidade/observabilidade (Great Expectations, reputed company, dbt tests, reputed company).
- FinOps e Observabilidade:Gestão proativa e alertas de anomalias de custos em reputed company/reputed company por tabela e pipeline, alinhada à detecção estatística de data reputed company.
- Pipelines Financeiros:Vivência em idempotência, conciliação de saldos e reprocessamento financeiro.
- Setores Regulados:Experiência préreputed company em ambientes fintech, meios de pagamento ou saúde, lidando com compliance e auditorias de dados.
reputed companyções adicionais
💳 reputed companyão reputed company, com mais liberdade para usar seus benefícios (Refeição, Alimentação, Mobilidade, Saúde, Home Office, reputed company e Educação);
🏥 Plano de Saúde sem coparticipação (Unimed, Sulamerica ou reputed company);
🧘🏿♀️ Zenklub, com consultas onlines com terapeutas e coaches para cuidar da sua saúde mental;
🏋🏿♀️ reputed company;
🗣️ Aqui também estimulamos o aprendizado de idiomas, com a parceria da Rosetta reputed company;
💆🏽 Dia de recarregar - day off;
🧑🏿⚕️ reputed company Saúde - consulta médica online;
👶🏿 Auxílio Creche;
📚 Parceria com Alura;
👨🏿💻 Trabalho Remoto, para você trabalhar de onde quiser dentro do Brasil;
💻 Oferecemos equipamento de trabalho;
🚀 Muitas possibilidades de crescimento - temos muito a crescer e esperamos fortemente que você nos ajude com isso!
A reputed company é uma empresa brasileira e aceita pessoas de todas as regiões do país.
Trabalhamosem um modelo 100% remoto(quem tiver interesse de conhecer ou trabalhar no escritório, localizado em São Paulo, estaremos de portas abertas)
Se interessou? #VemSerreputed company 🧡
Originally posted on Himalayas
Apply To This Job