Data Engineer Microsoft Fabric (Freelance kan)
在此过程中，我与微软 Fabric as central building of the data platform （微软工厂）见面，并开发了 Power BI,Python 在大型数据管道上。我们需要分析数据模型的性能，使 ETL 流程更有效地运用可用的数据资产，以便用户能够重新开放可用的信息。我也对建筑，数据管理，数据质量，保养性和可扩展性的流程提供了实质的意见。在此基础上，我经常与分析师，报告专家，建筑师，技术团队的最终用户会面试。· 我在现代云数据环境中设计，制作，优化和维护可扩展的数据集群。· 我从不同系统中的数据整合实现，例如数据库，API,应用程序中的最佳信息。· 我工作于湖泊，仓库，以及以更好的方式进行数据处理。· 我支持分析环境的报告，以实现一致的数据解决方案。· 监测，记录和改善现有数据流程，不断地进行数据处理。· 我自动对数据项目进行分析，并将设计与设计进行实施。· 我重视企业利益相关者，数据分析师，技术团队以及实践和解决方案。· 我在组织内部提供知识分发的支持。你的个人资料 · 我作为高级数据工程师拥有丰富的经验。· 我在云计算基础数据架构中获得了丰富的体验。· 在 Azure 中，我与微软工厂，特别是通过管道，数据流程和笔记本书进行了集成。· 我有丰富的实践。
查看英文原文
📋 Taken en verantwoordelijkheden
Voor de verdere uitbouw en professionalisering van een modern, cloudgebaseerd dataplatform zoeken we een ervaren data engineer die schaalbare en betrouwbare data-oplossingen ontwerpt, realiseert en beheert.
In deze rol werk je met Microsoft Fabric als centrale bouwsteen van het dataplatform, aangevuld met Power BI, Python en grootschalige datapipelines. Je zet rapporterings- en analysebehoeften om in performante datamodellen, efficiënte ETL-processen en herbruikbare data-assets, zodat gebruikers kunnen rekenen op consistente en bruikbare inzichten.
Je levert ook inhoudelijke input over architectuur, data governance, datakwaliteit, onderhoudbaarheid, lineage en schaalbaarheid. Daarbij stem je regelmatig af met analisten, rapporteringsspecialisten, architecten, eindgebruikers en technische teams.
- Je ontwerpt, bouwt, optimaliseert en onderhoudt schaalbare datapipelines in een moderne cloud data-omgeving.
- Je realiseert data-integraties vanuit uiteenlopende bronsystemen, zoals relationele databanken, API's, bestanden en applicaties.
- Je werkt lakehouse-, warehouse- en medaillonarchitecturen uit en beheert die, met aandacht voor herbruikbaarheid, performantie en datakwaliteit.
- Je vertaalt rapporterings- en databehoeften naar duidelijke datamodellen, betrouwbare datasets en oplossingen die analyticsomgevingen ondersteunen.
- Je ontwerpt en implementeert ETL-processen voor de verwerking van datastromen op schaal.
- Je ondersteunt rapporterings- en analyticsomgevingen met kwalitatieve en consistente data-oplossingen.
- Je monitort, documenteert en verbetert bestaande dataflows, pipelines en dataprocessen voortdurend.
- Je neemt dataprojecten zelfstandig op, van analyse en ontwerp tot implementatie en oplevering.
- Je overlegt met business stakeholders, data-analisten, architecten en technische teams over vereisten, oplossingen en opleveringen.
- Je draagt bij aan standaarden, best practices, CI/CD, versiebeheer en de deployment van data-oplossingen.
- Je helpt de maturiteit van het datalandschap verder te verhogen en ondersteunt kennisdeling binnen de organisatie.
📝 Jouw profiel
- Je hebt aantoonbare ervaring als senior data engineer.
- Je hebt aantoonbare ervaring met cloudgebaseerde data-architecturen en met lakehouse- of warehouseconcepten binnen Azure.
- Je hebt aantoonbare ervaring met Microsoft Fabric, in het bijzonder met pipelines, dataflows en notebooks.
- Je hebt aantoonbare ervaring met data-integratie vanuit meerdere bronsystemen.
- Je hebt aantoonbare ervaring met programmeertalen zoals Python, Java of Scala voor de ontwikkeling van datastromen en ETL-processen.
- Je hebt aantoonbare ervaring met Python binnen data engineering. Ervaring op mediorniveau in deze context is vereist.
- Je beschikt over aantoonbare kennis van SQL en query-optimalisatie.
- Je hebt aantoonbare ervaring met databanken en met Spark of Spark-gebaseerde verwerking.
- Je hebt aantoonbare ervaring met CI/CD, versiebeheer en deployment van data-oplossingen.
- Je hebt aantoonbare ervaring met Power BI en met het ondersteunen van rapporterings- en analyticsomgevingen.
- Je hebt aantoonbare ervaring met medaillonarchitectuur, bijvoorbeeld met bronze-, silver- en gold-lagen.
- Je hebt aantoonbare kennis van data governance, data quality management en lineage.
- Je hebt aantoonbare kennis van datamodellering volgens de Kimball-methodologie.
- Je hebt aantoonbare kennis van lakehouse-, datamesh- of domein-georiënteerde data-architecturen.
- Ervaring binnen een publieke, stedelijke of complexe enterprise-omgeving is belangrijk.
- Je drukt je uitstekend uit in het Nederlands. Taalniveau C2 is vereist.
💼 Aanbod
Je zal deel uitmaken van een groeiende KMO met ruimte voor initiatief en persoonlijke ontwikkeling. Wij zorgen ervoor dat je in een uitdagende maar aangename werkomgeving terecht komt met leuke collega's. Samen met jou stippelen we een carriereplan uit, met aandacht en budget voor bijkomende opleidingingen / certificaties. Je kan rekenen op een motiverend salaris, aangevuld met extralegale voordelen, inclusief bedrijfswagen (of alternatieve vergoeding).
(Freelance is ook mogelijk)
Originally posted on Himalayas