数据工程师
Data Engineer
🎯 职位目标
支持与DataMarts迁移和停用相关的操作活动的执行,帮助减轻技术团队的操作负担,并确保数据流程的正确执行、验证和持续性。
该职位人员将在技术负责人指导下工作,专注于技术活动的执行和支持,不负责端到端迁移的领导。
🛠️ 主要职责
- 执行和监控ETL/ELT流程和数据管道。
- 进行故障排查并解决与流程和数据流相关的问题。
- 执行数据验证和对账测试,以确保数据质量和一致性。
- 支持DataMarts的迁移和停用操作活动。
- 记录流程、问题、解决方案和技术程序。
- 跟进分配的任务,并向技术负责人报告进展或发现。
- 使用Databricks中的数据处理和转换技术,参与管道的执行、监控和问题解决。
📋 任职要求
- 至少3年数据工程或相关角色经验。
- 熟练掌握SQL。
- 具有ETL/ELT流程和数据管道管理经验。
- 具有使用Databricks的实际经验。
- 具有使用Apache Spark / PySpark进行数据处理和转换的经验。
- 具有使用Delta Lake / Delta Tables的经验,包括数据加载、更新和转换操作。
- 具有使用Lakeflow Declarative Pipelines(以前称为Delta Live Tables / DLT)构建、执行或监控数据管道的经验。
- 具有数据流程故障排查和问题解决经验。
- 具有数据验证和对账经验。
- 能够编写和维护技术文档。
🌟 Archer 的福利
在 ARKHO,我们鼓励持续学习的文化,推动技术创新,并营造灵活、包容和尊重的工作环境,重视职业发展和个人福祉。
📆 每半年一次行政日,最多12个月
🌴 额外5天带薪假期
🎉 庆祝生日!
📚 培训路径
☁ AWS认证
🏡 灵活办公(混合/远程)
💍 结婚礼物 + 5个工作日假期
👶 新生儿礼物
查看英文原文
🎯 Objetivo del Rol
Apoyar la ejecución operativa de las actividades relacionadas con la migración y apagado de DataMarts, contribuyendo a reducir la carga operativa del equipo técnico y asegurando la correcta ejecución, validación y continuidad de los procesos de datos.
La persona trabajará bajo los lineamientos de la Líder Técnica, enfocándose en la ejecución y soporte de actividades técnicas, sin responsabilidad de liderar la migración end-to-end.
🛠️ Funciones Principales
- Ejecutar y monitorear procesos de ETL/ELT y pipelines de datos.
- Realizar troubleshooting y resolver incidencias relacionadas con procesos y flujos de datos.
- Ejecutar validaciones y pruebas de reconciliación de datos para garantizar su calidad y consistencia.
- Apoyar las actividades operativas de migración y apagado de DataMarts.
- Documentar procesos, incidencias, soluciones y procedimientos técnicos.
- Dar seguimiento a las actividades asignadas y reportar avances o hallazgos a la Líder Técnica.
- Trabajar con tecnologías de procesamiento y transformación de datos en Databricks, participando en la ejecución, monitoreo y resolución de incidencias de pipelines.
📋 Requisitos
- Mínimo 3 años de experiencia en Ingeniería de Datos o roles similares.
- Dominio sólido de SQL.
- Experiencia en procesos ETL/ELT y manejo de pipelines de datos.
- Experiencia práctica trabajando con Databricks.
- Experiencia con Apache Spark / PySpark para procesamiento y transformación de datos.
- Experiencia trabajando con Delta Lake / Delta Tables, incluyendo operaciones de carga, actualización y transformación de datos.
- Experiencia con Lakeflow Declarative Pipelines (antes Delta Live Tables / DLT) para la construcción, ejecución o monitoreo de pipelines de datos.
- Experiencia en troubleshooting y resolución de incidencias en procesos de datos.
- Experiencia en validación y reconciliación de datos.
- Capacidad para elaborar y mantener documentación técnica.
🌟 Beneficios del Archer
En ARKHO fomentamos una cultura de aprendizaje continuo, impulsamos la innovación tecnológica y promovemos un entorno de trabajo flexible, inclusivo y respetuoso, que valora tanto el desarrollo profesional como el bienestar personal.
📆 Día administrativo semestral hasta los 12 meses
🌴 Week off: 5 días de vacaciones extra
🎉 ¡Celebra tu cumpleaños!
📚 Path de entrenamiento
☁ Certificaciones AWS
🏡 Flexibilidad (trabajo híbrido/remoto)
💍 Regalo por casamiento + 5 días hábiles libres
👶 Regalo por nacimiento de hijos
🎒 Kit escolar
🤱 Beneficio paternidad
🩺 Seguro complementario de salud
🎁 Bonda (plataforma de descuentos y bienestar)
💰 Aguinaldos
🧘♀ ARKHO Open Door
Originally posted on Himalayas