Ingeniero de Datos Senior 3468
我们寻求一个数据工程师,在 Google 云平台上拥有丰富的经验来设计,实施和维护高影响数据管道和产品。角色要求技术自主性,建筑标准和与企业团队密切合作的能力。如果你控制了 BigQuery,Dataform 和 Python,你将享受解决云环境中的复杂数据挑战,这是你的位置。· 在 Google 云平台上的数据管道设计可扩展和有效,确保质量,可追踪性和流动效率。·从创建到分析消费数据可用性,在 Google 云平台上实施端到端的数据管道。· 维护,监控和优化 Google 云平台上的现有数据管道和产品,确定持续改进的机会。· 主要关注 BigQuery 和 Dataform 的数据模型转型,确保 SQL 和 Python 代码的一致性,效率和维持。· 将外部和内部 API 集成并消耗以实现数据流程中的获取和丰富化。· 积极与企业和软件工程团队合作,以翻译功能要求在强且文档好的技术解决方案中。· 定义并应用数据工程的良好实践:版本化,测试,记录和管理生产线上的依赖性。· 经验与谷歌云平台的服务,包括 Pub/Sub y Cloud Storage,在数据采集,处理和储存环境中。· 在 SQL 前进分析和复杂转型的基础上,管理 Python 先进的数据处理和管道开发。· 用户使用和 API 整合的实践。· 工作能力自主化环境中的数据流动,管理优先事项和可交付内容以自己的标准和不持续监督。原创发表于喜马拉雅山。
查看英文原文
Buscamos un Data Engineer Senior con sólida experiencia en Google Cloud Platform para diseñar, implementar y mantener pipelines y productos de datos de alto impacto. El rol exige autonomía técnica, criterio arquitectónico y capacidad para colaborar estrechamente con equipos de negocio e ingeniería. Si dominás BigQuery, Dataform y Python, y disfrutás resolver desafíos complejos de datos en entornos cloud, esta posición es para vos.
- Diseñar pipelines de datos escalables y eficientes sobre Google Cloud Platform, asegurando calidad, trazabilidad y rendimiento en cada etapa del flujo.
- Implementar pipelines de datos end-to-end sobre Google Cloud Platform, desde la ingesta hasta la disponibilidad de los datos para consumo analítico.
- Mantener, monitorear y optimizar pipelines y productos de datos existentes sobre Google Cloud Platform, identificando oportunidades de mejora continua.
- Desarrollar transformaciones y modelos de datos con foco principal en BigQuery y Dataform, garantizando consistencia, eficiencia y mantenibilidad del código SQL y Python.
- Integrar y consumir APIs externas e internas para la ingesta y el enriquecimiento de datos dentro de los flujos de procesamiento.
- Colaborar activamente con equipos de negocio e ingeniería de software para traducir requerimientos funcionales en soluciones técnicas robustas y bien documentadas.
- Definir y aplicar buenas prácticas de ingeniería de datos: versionado, testing, documentación y gestión de dependencias en pipelines productivos.
Requirements
- 5 o más años de experiencia en ingeniería de datos, con participación comprobable en proyectos productivos de pipelines y arquitecturas de datos.
- Dominio avanzado de BigQuery y Dataform para la construcción y orquestación de modelos y transformaciones de datos a escala.
- Experiencia sólida con servicios de Google Cloud Platform, incluyendo Pub/Sub y Cloud Storage, en contextos de ingesta, procesamiento y almacenamiento de datos.
- Manejo avanzado de Python para automatización, procesamiento de datos y desarrollo de pipelines, junto con SQL avanzado orientado a analítica y transformaciones complejas.
- Experiencia en el consumo e integración de APIs REST para flujos de ingesta y enriquecimiento de datos.
- Capacidad para trabajar de forma autónoma en entornos remotos, gestionando prioridades y entregables con criterio propio y sin supervisión constante.
Originally posted on Himalayas