Databricks 数据工程师
Databricks Data Engineer
我们是微软数据平台卓越中心,专注于微软数据技术的专家。我们拥有所有数据技术趋势的实战经验,包括 Azure Data Factory、Microsoft Fabric、Databricks、Power BI、Purview、SQL Database、Palantir、Oracle 等。我们不断学习新功能并优化我们的流程,持续改进,测试并实施数据和 AI 领域的新创新。
我们的员工对我们至关重要。目前团队已有 40 人,我们在捷克和瑞士都有业务。
我们正在寻找一位中高级数据工程师,具备扎实的 Databricks 知识,将支持一家大型金融机构设计、优化和运营大数据解决方案。这是一份动手实践的职位,适合有经验的专业人士,能够独立工作,负责数据管道的开发与维护。你将成为一个专注于可扩展、可部署的 Databricks、PySpark 和 Delta Lake 解决方案的数据团队成员,注重自动化、CI/CD 和 DevOps / MLOps 最佳实践。
你将负责:
- 使用 PySpark 和 Delta Lake 在 Databricks 上设计、开发和优化数据管道
- 开发和维护高性能、可靠的可扩展大数据解决方案
- 支持使用 Jenkins 实现数据工作流的自动化和编排
- 应用 DevOps / MLOps 原则实现生产环境中的顺畅部署和运维
- 参与生产运维优化,包括成本效益(FinOps)
- 使用 Databricks Asset Bundles 进行标准化和可重复的部署
- 与利益相关者紧密合作,主动澄清需求,并对不明确的任务进行建设性质疑
- 监控、解决和持续改进现有数据管道
我们希望你具备:
- 实际的 Databricks 经验
- 扎实的 PySpark 和 Delta Lake 实践知识
- 对大数据处理、数据管道和生产数据工程的良好理解
- CI/CD 管道和 Jenkins 的经验
- 了解数据工程背景下的 DevOps / MLOps 方法
- 能够独立工作,承担职责并在复杂环境中清晰沟通
- 强大的分析思维和解决问题的能力
加分项:
- 金融或金融服务领域的经验
- 了解 FinOps 或云平台的成本优化
- Databricks 认证(助理或专业级)
你是否认同?太好了!我们会为你提供一切你需要的支持,并给你发光发热的机会!
我们提供:
查看英文原文
Jsme Microsoft Data Platform Competence Center, přední odborníci na Microsoft datové technologie. Máme reálné zkušenosti se všemi trendy datových technologií, jako je Azure Data Factory, Microsoft Fabric, Databricks, Power BI, Purview, SQL Database, Palantir, Oracle a další. Neustále se učíme nové funkce a ladíme naše postupy, tím se stále zlepšujeme, testujeme a implementujeme nové inovace v oblasti dat a AI.
Naši lidé jsou pro nás klíčoví. Je nás už 40 v týmu a působíme jak v Česku, tak ve Švýcarsku.
Hledáme Mid až Senior Data Engineera se silnou znalostí Databricks, který bude podporovat velkou finanční instituci při návrhu, optimalizaci a provozu big-data řešení. Jedná se o hands-on roli, vhodnou pro zkušeného specialistu, který dokáže pracovat samostatně, převzít odpovědnost za datové pipeline. Staneš se součástí datového týmu zaměřeného na škálovatelná, produkčně nasaditelná řešení využívající Databricks, PySpark a Delta Lake, s důrazem na automatizaci, CI/CD a DevOps / MLOps best practices.
Co tě čeká:
- Návrh, vývoj a optimalizace datových pipeline na Databricks pomocí PySpark a Delta Lake
- Vývoj a údržba robustních a škálovatelných big-data řešení s důrazem na výkon a spolehlivost
- Podpora automatizace a orchestrace datových workflow pomocí Jenkins
- Uplatňování DevOps / MLOps principů pro plynulé nasazování a provoz v produkčním prostředí
- Podílení se na optimalizaci produkčního provozu, včetně nákladové efektivity (FinOps)
- Práce s Databricks Asset Bundles pro standardizované a opakovatelné deploymenty
- Úzká spolupráce se stakeholdery, aktivní upřesňování požadavků a konstruktivní zpochybňování nejasných zadání
- Monitoring, řešení problémů a průběžné zlepšování existujících datových pipeline
Jak si tě představujeme:
- Praktická zkušenost s Databricks.
- Silná praktická znalost PySpark a Delta Lake
- Dobré porozumění big-data zpracování, datovým pipeline a produkčnímu data engineeringu
- Zkušenost s CI/CD pipeline a Jenkins
- Znalost DevOps / MLOps přístupů v kontextu data engineeringu
- Schopnost pracovat samostatně, převzít odpovědnost a jasně komunikovat v komplexním prostředí
- Silné analytické myšlení a schopnost řešit problémy
Výhodou:
- Zkušenost z oblasti bankovnictví nebo finančních služeb
- Znalost FinOps nebo optimalizace nákladů v cloudových platformách
- Databricks certifikace (Associate nebo Professional)
Poznáváš se? Skvělé! U nás ti dáme podporu, pro vše, co potřebuješ a příležitost zazářit!
Co nabízíme:
- Možnost pracovat z domova nebo i kanceláře, tak jak ti to vyhovuje (žádné omezování)
- Až 30 dní volna na osobní a firemní rozvoj, školení dle vlastního výběru (MS certifikace, zahraniční konference, školení...)
- Budget na rozvoj
- Moderní, prostorná kancelář v centru Prahy s terasou, grilem a vlastní pípou a možností využití terasy i pro osobní účely a akce
- Ergonomicky vybavené pracovní místo (polohovatelný stůl, nastavitelná a pohodlná židle, velký monitor nebo dva), pracovní místo v tiché místnosti nebo open space, dle preferencí
- Multisport karta
- Navíc ti dáme předplatné Microsoft Visual Studio Enterprise (MPN), včetně cca $100 měsíčně na hraní si v prostředí Azure
- Plnou licenci RedGate SQL Toolbelt
- Žádné přesčasy
- Firemní knihovnu
- Mobilní tarif
- Občerstvení je stále k dispozici (ovoce, káva, čaj, nealko, čokoláda, oříšky, pivo …)
Zaujalo? Skvělé, máme radost.
Pošli nám svůj životopis a Justýna nebo Martina se ti ozvou co nejdříve a domluví se s tebou na online setkání.
Těšíme se!
Originally posted on Himalayas