数据工程师 - Airflow/AWS
Engenheiro de Dados - Airflow/AWS
在Grupo Stefanini，我们相信协作的力量。我们与客户携手共创创新解决方案，结合前沿技术、人工智能和人类创造力。我们处于商业问题解决的最前沿，为全球带来真正的影响力。
加入Stefanini，您将成为全球转型旅程的一部分。我们致力于不仅在业务上，也在员工生活中创造积极影响。如果您正在寻找一家重视创新、尊重、自主性和合作的企业，寻求职业发展机会，这里就是您的选择！
加入我们，成为变革的一部分！
我们正在寻找一位数据工程师，具备丰富的云环境经验，并在Apache Airflow方面有扎实的实践经验，以加入一个战略性的数据平台转型和现代化项目。该职位将负责构建、演进和维护可扩展的数据管道，与跨职能团队合作，确保信息的可用性、质量和治理。
🚀 工作职责：
🔹 使用Apache Airflow（MWAA）开发、维护和演进数据管道；
🔹 构建数据摄取、转换和分发流程（ETL/ELT）；
🔹 使用Python、Spark和AWS服务开发解决方案；
🔹 实现和维护数据湖、湖仓一体和数据仓库环境中的数据架构；
🔹 进行数据分析和业务需求的数据建模；
🔹 确保处理数据的质量、治理和可观测性；
🔹 监控和优化数据管道和数据处理性能；
🔹 与业务、分析和技术团队合作，推动数据平台的发展；
🔹 支持定义数据生态系统中的最佳实践、标准和持续改进。
🎯 职位要求：
✅ 具备使用Apache Airflow（MWAA）进行数据管道编排的丰富经验；
✅ 使用Python进行ETL/ELT流程的开发；
✅ 精通SQL Server；
✅ 具备使用Apache Spark处理大规模数据的经验；
✅ 熟悉AWS服务，特别是Redshift、S3、Glue和MWAA；
✅ 熟悉分析环境中的数据建模；
✅ 具备数据仓库、数据湖和湖仓一体的经验；
✅ 熟悉银杯架构（Bronze、Silver和Gold）；
✅ 有数据治理和质量方面的实践经验；
查看英文原文
No Grupo Stefanini, acreditamos no poder da colaboração. Co-criamos soluções inovadoras em parceria com nossos clientes, combinando tecnologia de ponta, inteligência artificial e a criatividade humana. Estamos na vanguarda da resolução de problemas de negócios, proporcionando impacto real em escala global.
Ao se juntar à Stefanini, você se torna parte de uma jornada global de transformação. Estamos empenhados em criar impacto positivo não apenas nos negócios, mas também na vida de nossos colaboradores. Se você procura uma oportunidade de crescimento profissional em uma empresa que valoriza inovação, respeito, autonomia e parceria, você encontra aqui!
Junte-se a nós e seja parte da mudança!
Buscamos um(a) Engenheiro(a) de Dados com sólida experiência em ambientes cloud e forte atuação com Apache Airflow para integrar um projeto estratégico de transformação e modernização da plataforma de dados. O profissional será responsável pela construção, evolução e sustentação de pipelines de dados escaláveis, atuando em conjunto com times multidisciplinares para garantir a disponibilidade, qualidade e governança das informações.
🚀 Atividades:
🔹 Desenvolver, manter e evoluir pipelines de dados utilizando Apache Airflow (MWAA);
🔹 Construir processos de ingestão, transformação e disponibilização de dados (ETL/ELT);
🔹 Desenvolver soluções utilizando Python, Spark e serviços AWS;
🔹 Implementar e sustentar arquiteturas de dados em ambientes Data Lake, Lakehouse e Data Warehouse;
🔹 Realizar modelagem de dados para atender demandas analíticas e de negócio;
🔹 Garantir a qualidade, governança e observabilidade dos dados processados;
🔹 Monitorar e otimizar o desempenho dos pipelines e processos de dados;
🔹 Atuar em conjunto com equipes de negócio, analytics e tecnologia para evolução da plataforma de dados;
🔹 Apoiar a definição de boas práticas, padrões e melhorias contínuas no ecossistema de dados.
🎯 Requisitos:
✅ Experiência sólida com Apache Airflow (MWAA) para orquestração de pipelines de dados;
✅ Desenvolvimento em Python para construção e manutenção de processos ETL/ELT;
✅ Conhecimentos avançados em SQL Server;
✅ Experiência com Apache Spark para processamento de grandes volumes de dados;
✅ Vivência com serviços AWS, especialmente Redshift, S3, Glue e MWAA;
✅ Conhecimento em modelagem de dados para ambientes analíticos;
✅ Experiência com Data Warehouse, Data Lake e Lakehouse;
✅ Conhecimento em Arquitetura Medalhão (Bronze, Silver e Gold);
✅ Vivência com governança, qualidade e observabilidade de dados;
✅ Experiência em desenvolvimento, otimização e monitoramento de pipelines de dados.
Informações adicionais
Modelo de Contratação:CLT Stefanini
Modelo de Atuação:100% Remoto
🍛 Vale-alimentação ou vale-refeição;
👨🏼🎓 Desconto em cursos, universidades e instituições de idiomas;
📚 Academia Stefanini — plataforma com cursos on-line, gratuitos, atualizados e com certificado;
🗣 Mentoring;
💉 Clube de vantagens para consultas e exames;
🏥 Assistência médica;
🦷 Assistência odontológica;
💰 Clube de vantagens e descontos nos melhores estabelecimentos;
🛫 Clube de viagens;
🐶 Convênio para pets.
Originally posted on Himalayas