Data Engineer Chile
我们寻找一个数据工程师，拥有云计算数据基础设施开发的实验，以集成高效影响环境中的100%远程项目。角色包括使用 AWS 生态系统设计，开发和实施数据管道，以投入为重点，实时处理和数据湖架构。如果你喜欢解决复杂的数据问题并在敏捷和多学科的团队工作，这将是你的挑战。·管理和优化数据集成流程，以确保信息的质量，完整性和可用性。·开发实时数据处理管道使用 AWS Kinesis 和 AWS Lambda 等服务。·通过 AWS Step Functions 和 AWS Glue 构建和管理数据组装工作流程。·设计和维护与 AWS Redshift 和 AWS Athena 的数据库存和查询解决方案，确保查询效率和绩效。·与分析，数据科学和工程团队合作，以实现强大的数据需求和文档化的企业解决方案。· 积极参与设备过程的仪式和流程，以敏捷方法促进区域工作流动的持续改善。• 3年的数据工程经验要求；• 在生产环境中设计和实施数据基础设施项目中参与。· 专业化 python 开发脚本，数据转型和自动化进程，包括使用专业图书馆 （Pandas, PySpark 等）. · AWS 服务与基于数据的实践经验：AWS Glue, AWS Step Functions, AWS Kinesis, AWS Lambda, AWS Athena 和 AWS Redshift. · 熟悉数据项目开发的敏捷方法 (Scrum o Kanban). · 能力进行纪录技术解决方案，定义数据质量标准和工作在合作环境中。· 提供至少4个月的项目。· 地址：智利·英语：无需。突出点
查看英文原文
Buscamos un Data Engineer con sólida experiencia en desarrollo de infraestructuras de datos en la nube para integrarse a proyectos de alto impacto en un entorno 100% remoto. El rol combina diseño, desarrollo e implementación de pipelines de datos utilizando el ecosistema de AWS, con foco en ingesta, procesamiento en tiempo real y arquitectura de datalake. Si disfrutas resolver problemas complejos de datos y trabajar en equipos ágiles y multidisciplinarios, este desafío es para ti.
Responsabilidades
- Diseñar, desarrollar, implementar y mantener infraestructuras de datos escalables y confiables orientadas a entornos cloud.
- Gestionar y optimizar los procesos de ingesta de datos hacia el datalake, garantizando la calidad, integridad y disponibilidad de la información.
- Desarrollar pipelines de procesamiento de datos en tiempo real utilizando servicios como AWS Kinesis y AWS Lambda.
- Construir y administrar flujos de trabajo de orquestación de datos mediante AWS Step Functions y AWS Glue.
- Diseñar y mantener soluciones de almacenamiento y consulta de datos con AWS Redshift y AWS Athena, asegurando rendimiento y eficiencia en las consultas.
- Colaborar con equipos de Analytics, Data Science e Ingeniería para traducir necesidades de negocio en soluciones de datos robustas y bien documentadas.
- Participar activamente en ceremonias y procesos de equipos bajo metodologías ágiles, contribuyendo a la mejora continua de los flujos de trabajo del área.
Requirements
- 3 años de experiencia en ingeniería de datos, con participación en proyectos de diseño e implementación de infraestructuras de datos en entornos productivos.
- Dominio de Python para el desarrollo de scripts, transformaciones de datos y automatización de procesos, incluyendo el uso de librerías especializadas (Pandas, PySpark, entre otras).
- Experiencia práctica con servicios de AWS orientados a datos: AWS Glue, AWS Step Functions, AWS Kinesis, AWS Lambda, AWS Athena y AWS Redshift.
- Conocimiento sólido en estrategias de ingesta de datos en la nube (batch y streaming) y arquitecturas de datalake o data lakehouse.
- Familiaridad con metodologías ágiles (Scrum o Kanban) aplicadas al desarrollo de proyectos de datos.
- Capacidad para documentar soluciones técnicas, definir estándares de calidad de datos y trabajar en entornos de trabajo colaborativos y remotos.
- Disponibilidad para proyecto de al menos 4 meses.
- Ubicación: Chile
- Inglés: No requerido.
Highlights
🌎 Proyecto remoto para candidatos ubicados en cualquier país de LATAM.
Originally posted on Himalayas