高级数据工程师 GCP(Big Query / DataFlow)
Engenheiro de Dados GCP Sênior (Big Query / DataFlow)
Leega 是一家专注于为客户提供高效且创新服务的公司。
这与我们最重要的动力:人,完全一致!
我们的文化充满启发性,价值观体现在日常工作中:伦理和透明、质量卓越、团队合作、经济、社会和环境责任、人际关系和可信度。
我们寻找富有创新精神、被挑战驱动并注重结果的专业人士。
如果您正在寻找一家充满活力、合作伙伴关系紧密,并通过持续培训投资员工的公司,那么 Leega 就是您的理想选择!
>> Leega 属于每个人,我们非常高兴能有您加入我们的团队。快来加入我们的故事,共同创造我们的未来吧!
立即在我们的职位中注册!
- 在 GCP 环境中设计、构建和维护可扩展且具有弹性的数据管道(BigQuery、Dataflow、Cloud Functions、Cloud Pub/Sub)。
- 提出并实现数据架构的改进方案。
- 开发有效的数据模型以支持复杂分析和自动化报告。
- 实现高效的 ETL/ELT 流程,优化管道性能,确保数据的完整性和准确性。
- 与业务部门和 squads 协作进行需求调研,记录需求并将其转化为可行的技术解决方案。
- 确保数据治理、质量和合规性,应用数据工程的最佳实践。
- 为数据集成问题提供技术支持,确保系统的持续可用性。
- 使 IT 环境与业务需求、标准和行业最佳实践保持一致。
- 积极参与敏捷流程(sprints 和仪式),确保按时交付高质量成果。
行为能力:
· 将数据驱动的文化融入日常工作中。
- 以同理心在团队中协作,善于倾听并被倾听,具备良好的沟通能力。
- 具备强大的分析能力,能够将业务需求转化为可扩展且高效的解决方案。
- 高级水平,至少 5 年在 GCP 上的数据工程相关经验。
- 至少 3 年使用 Databricks 的经验。
- 在 GCP 生态系统(BigQuery、Dataflow、Cloud Functions、Cloud Pub/Sub)中有丰富经验。
- 精通 Python、PySpark 和 Pandas。
- 具有数据集成和探索项目的实际经验。
- 具有
查看英文原文
A Leega é uma empresa focada no atendimento eficiente e inovador em seus clientes.
Isso não poderia ser diferente com o nosso principal combustível: as pessoas!
Nossa cultura é inspiradora e nossos valores estão presentes no dia a dia: ética e transparência, excelência de qualidade, trabalho em equipe, responsabilidade econômica, social e ambiental, relações humanas e credibilidade.
Buscamos profissionais inovadores que sejam movidos por desafios e focados em resultados.
Se você busca uma empresa dinâmica e parceira e que investe em seus colaboradores através de capacitação constante, a Leega é o lugar para você!
>> A LEEGA É PARA TODOS, ficaremos muito felizes em ter você em nosso time. Venha fazer parte da nossa história e da construção do nosso futuro.
Cadastre-se agora mesmo em nossas vagas!
- Projetar, construir e manter pipelines de dados escaláveis e resilientes no ambiente GCP (BigQuery, Dataflow, Cloud Functions, Cloud Pub/Sub).
- Sugerir e implementar melhorias de arquitetura de dados.
- Desenvolver modelos de dados eficazes para suportar análises complexas e relatórios automatizados.
- Implementar processos de ETL/ELT eficientes, otimizando o desempenho dos pipelines para garantir integridade e assertividade dos dados.
- Realizar levantamento de necessidades junto às áreas de negócio e squads, documentando requisitos e traduzindo-os em soluções técnicas viáveis.
- Garantir a governança, qualidade e conformidade dos dados, aplicando boas práticas de engenharia de dados.
- Prestar suporte técnico para problemas de integração de dados, assegurando a disponibilidade contínua dos sistemas.
- Alinhar o ambiente de TI com as necessidades de negócio, padrões e melhores práticas de mercado.
- Participar ativamente de rituais ágeis (sprints e cerimônias), garantindo entregas de qualidade dentro do prazo.
Competências comportamentais:
· Incorporar a cultura data-driven no dia a dia.
- Trabalhar em equipe com empatia, sabendo ouvir e ser ouvido, com boa capacidade de comunicação.
- Fortes habilidades analíticas para transformar requisitos de negócio em soluções técnicas escaláveis e eficientes.
- Nível Sênior, com pelo menos 5 anos de experiência direta em Engenharia de Dados na GCP.
- Pelo menos 3 anos de experiência com Databricks.
- Ampla experiência no ecossistemaGCP (BigQuery, Dataflow, Cloud Functions, Cloud Pub/Sub).
- Domínio emPython, PySpark e Pandas.
- Experiência em projetos de integração e exploração de dados.
- Experiência em desenvolvimento de projetos de Big Data.
- Compreensão da arquitetura Spark e dos desafios de processamento distribuído.
- Conhecimento em Data Warehousing (carga de dados, distribuição de chaves, tuning).
- Modelagem de dados para BI/Data Mart (Star Schema/Snowflake) e modelagem para NoSQL.
- Habilidades avançadas em SQL, com experiência em bancos relacionais e NoSQL.
- Capacidade de atuar em ambiente ágil, colaborando com múltiplas áreas funcionais.
Diferenciais:
- Experiência com AWS (ex: AWS Glue) e ferramentas de ETL/ELT equivalentes.
- GCP Data Studio / Looker ou similar.
- Ferramentas de visualização de dados como Tableau, Power BI.
- Banco de dados Oracle.
- Shell Script, Unix, Linux.
- Certificações relevantes em Google Cloud.
- Experiência anterior em implementação de práticas de governança de dados e conformidade.
- Atuação em áreas de Finanças (Financeiro, Pricing e/ou Controladoria).
Informações adicionais
· INDISPENSÁVEL: 5+ anos de experiência em Engenharia de Dados na GCP e 3+ anos com Databricks.
- Modelo de atuação: 100% Home Office.
- Tipo de contratação: CLT.
Informações adicionais
Na nossa empresa, você encontrará um ambiente colaborativo e um pacote de benefícios que visa o seu crescimento, saúde e qualidade de vida. Confira abaixo os benefícios que oferecemos:
🏥 Convênio Médico Porto Seguro
Cuidado completo para você e sua família, com possibilidade de incluir cônjuge e filhos.
🦷 Convênio Odontológico Porto Seguro
Proteção odontológica para você e seus dependentes.
💰 Participação nos Lucros e Resultados (PLR)
Reconhecimento pelo seu trabalho e contribuição para o sucesso da empresa.
👶 Auxílio Creche
Suporte financeiro para que pais e mães cuidem dos pequenos com tranquilidade.
🍽️ Vale Alimentação e Refeição Alelo
Garantindo refeições práticas e confortáveis no seu dia a dia.
💻 Auxílio Home Office
Incentivo para que você tenha um espaço de trabalho confortável em casa.
📚 Parcerias com Instituições de Ensino
Educação ao seu alcance, com descontos e incentivos em cursos e graduações.
🚀 Incentivo para Certificações, inclusive em Cloud
Avance sua carreira com certificações nas principais tecnologias como: GCP, Azure, AWS entre outras.
🎁 Pontos Livelo
Acumule pontos e use como preferir, com total liberdade de escolha.
🏋️♂️ TotalPass
Incentivo à saúde com planos de academia com desconto para colaboradores e familiares.
🧘♂️Mindself
Incentivo à melhorar a qualidade de vida através de meditação e o Mindfulness.
Originally posted on Himalayas