Data Engineering

Als Data Engineer werk ik onder andere met Azure technologie als Azure Storage, Azure Data Factory, Azure Synapse & Azure Databricks. Hierin is hij gewend om door middel van SQL en Spark code de data pipelines te bouwen waarbij grote volumes data, in zowel batch als stream, verplaatst en getransformeerd wordt. Als data engineer ben ik ook verantwoordelijk voor de verwerking en opslag van de data binnen een Data Lake omgeving en de implementatie van het fysieke data model binnen het datawarehouse.