数据工程师
Data Engineer
作为经验丰富的数据工程师，您将负责：
- 使用 Databricks、Python 和 SQL 设计、开发和维护强大且可扩展的 ETL/ELT 数据管道
- 集成来自多个来源（数据库、文件、API 等）的数据
- 转换和清理数据以确保其质量和一致性
- 自动化数据处理任务以实现高效可靠的执行
- 建立监控和警报流程以确保数据管道的可用性和健康状态
- 与数据分析师和数据科学家合作，了解他们的数据需求并提供高质量的数据
- 清晰简洁地记录数据管道和流程
- 跟踪大数据和数据分析领域的最新技术和趋势
- 计算机科学、数学、统计学或相关专业的学位
- 精通英语，书面和口语表达能力良好
- 至少 5 年数据工程师工作经验
- 精通 Databricks、Python 和 SQL
- 具有数据集成、数据转换和数据清洗的经验
- 对大数据架构有扎实的理解
- 具有批量和流式数据管道开发经验
- 具有建立监控和警报流程的经验
- 优秀的沟通和协作能力
- 能够独立工作并同时管理多个项目
- 具有团队精神，愿意分享知识
您具备出色的客户关系能力和卓越的组织能力，能够协调团队，同时从全局角度审视流程和客户满意度。
要求英语流利
我们 30 年来的使命是什么？在正确的时间出现！
我们的专长是什么？帮助客户吸引用户的注意力，并将短暂的互动转化为难忘的体验。为此，我们协助企业实施和运营数字工具，以创造全新的用户体验。
正确的互动是什么？是在正确的时间、地点抓住我们的注意力，并将其转化为欲望和信任。这是一种微妙的平衡。
查看英文原文
En tant que Data Engineer expérimenté(e), Vous serez responsable de :
- Concevoir, développer et maintenir des pipelines de données ETL/ELT robustes et évolutifs en utilisant Databricks, Python et SQL
- Intégrer des données provenant de sources multiples (bases de données, fichiers, APIs, etc.)
- Transformer et nettoyer les données pour garantir leur qualité et leur cohérence
- Automatiser les tâches de traitement de données pour une exécution efficace et fiable
- Mettre en place des processus de surveillance et d'alerte pour garantir la disponibilité et la santé des pipelines
- Collaborer avec les analystes de données et les scientifiques de données pour comprendre leurs besoins en matière de données et leur fournir des données de haute qualité
- Documenter les pipelines de données et les processus de manière claire et concise
- Rester à jour sur les dernières technologies et tendances en matière de Big Data et d'analyse de données
- Diplôme d'ingénieur informatique, de mathématiques, de statistiques ou d'un domaine connexe
- Maitrise de l’anglais , à l'écrit et à l'oral.
- Minimum 5 ans d'expérience en tant que Data Engineer
- Expertise en Databricks, Python et SQL
- Expérience en matière d'intégration de données, de transformation de données et de nettoyage de données
- Solide compréhension des architectures de données Big Data
- Expérience en matière de développement de pipelines de données batch et streaming
- Expérience en matière de mise en place de processus de surveillance et d'alerte
- Excellentes compétences en communication et en collaboration
Capacité à travailler de manière autonome et à gérer plusieurs projets simultanément
Esprit d'équipe et volonté de partager ses connaissances
Vous êtes doté(e) d’un excellent relationnel client et d’une organisation hors pair, vous permettant de coordonner une équipe, tout en prenant du recul sur les process et la satisfaction client,
Anglais courant exigé
Notre mission depuis 30 ans ? Être présent au bon moment !
Notre expertise ? Accompagner nos clients à capter l’attention de l’utilisateur et transformer cette interaction furtive en une interaction mémorable. C’est dans cette optique que nous accompagnons les entreprises dans la mise en œuvre, et le pilotage de dispositifs digitaux pour une expérience utilisateur réinventée.
La juste interaction, c’est quoi ? C’est capter notre attention au bon moment, au bon endroit et la convertir en envie et en confiance. Un équilibre subtil entre le trop et le trop peu. Entre le trop tôt et le trop tard.
Devenez SQLien et faites partie de cette grande aventure au sein d’une société à taille humaine, mais avec de grandes ambitions. Nous sommes plus de 2200 talents sur plus de 13 pays et 3 continents.
Notre culture ?
Oser et créer.
We #Perceive#Challenge#Deliver#
Originally posted on Himalayas