SQL Server Integration Services Experten

Weiterentwicklung der integrierten Kapazitätsmanagement–Plattform InKa

Schieneninfrastruktur

• Power BI Shared Datasets und Berichte per DirectQuery auf Amazon Redshift (Fahrplan-, Bau-, Kapazitätsdaten)
• Automatisierte Berichtstests mit Playwright in Docker-Containern, Versionierung mit GitLab
• Konzept und Umsetzung der Anwenderkommunikation (Infoseite, Changelog, Known Bugs)

Ausgangslage:

Die integrierte Kapazitätsmanagement-Plattform (InKa) ist eine Monitoring- und Analyseplattform für Daten aus Fahrplan und Kapazitätsmanagement: Kundenbestellungen, Infrastruktur, Fahrplanbetrieb, Bau sowie Streckenleistungsfähigkeit und -breite. Die Daten werden in einem strukturierten Data Warehouse abgelegt und miteinander verknüpft. So lassen sich komplexe Kennzahlen über verschiedene Quellsysteme hinweg bilden und die aktuelle und künftige Streckenauslastung sowie das netzweite Baugeschehen darstellen. Ziel ist, die strategische, mittelfristige und unterjährige Planung zu verbessern und den Nutzenden einen niederschwelligen Zugang zu den Auswertungen des Kapazitätsmanagements zu geben.

Maßnahmen:

• Enablement: Einführung von Power BI mit Trainings und Workshops für Entwicklerteams.
• Beratung & Konzeption: Problemanalysen, Konzepte und Lösungsberatung zu Reporting-Anforderungen; Umsetzung der Planungen für Reporting-Lösungen.
• Datenmodell: Entwicklung von Shared Datasets mit DirectQuery auf Amazon Redshift und Import-Tabellen; DAX-Measures für Auslastungs- und Kapazitätskennzahlen.
• Entwicklung: Datenanalyse, Datentransformation und Visualisierung in Power BI; Erweiterung und Migration von Geschäftsanwendungen nach Power BI; KI-gestützte Entwicklung in VS Code mit GitHub Copilot.
• Testautomatisierung: Automatisierte Tests der Power-BI-Berichte mit Playwright; Aufsetzen der Testumgebung in Docker-Containern.
• Anwenderkommunikation: Konzept und Umsetzung einer zentralen Informationsseite mit Hot News, Changelog und Known Bugs, Absprung aus den Berichten mit Berichtsfilter, Aktualisierung per Power Automate.
• Deployment: Verwalten der Power BI Deployment Pipelines über die Umgebungen DEV, TEST und PROD.
• Agile Arbeitsweise: Arbeit im agilen Team nach SAFe (Scaled Agile Framework); Refinement von User Stories und Features inklusive Aufwandsschätzung in Jira; Versionierung mit Git und GitLab.
• Qualität & Dokumentation: Reviews zur Qualitätssicherung, Fehleranalyse und -behebung, technische Dokumentation in AsciiDoc und Confluence.

Technologien: Power BI, DAX, Power Query, DirectQuery, Amazon Redshift, Git / GitLab, Deployment Pipelines, Playwright, Docker, AsciiDoc, Power Automate, Jira, Confluence, VS Code mit GitHub Copilot, SAFe

Ergebnisse:

• Kennzahlen des Kapazitätsmanagements über mehrere Quellsysteme hinweg in einer Plattform
• Transparenz über aktuelle und künftige Streckenauslastung und netzweites Baugeschehen
• Niederschwelliger Zugang zu den Auswertungen für die Nutzenden
• Automatisierte Regressionstests der Power-BI-Berichte
• Umgesetzte Anwenderkommunikation: zentrale Infoseite mit Hot News, Changelog und Known Bugs, direkt aus den Berichten erreichbar

Ich bin ein erfahrener Data Engineer mit Spezialisierung auf durchgängige Datenintegration, Cloud-DWH-Architekturen und hochwertige, gut gesteuerte Datenprodukte.

Als Freiberufler habe ich die folgenden Projekte und Aufträge umgesetzt.

• Datenmigration eines CRM-Systems für AL-FA Objekt Service Gmbh
• Partnerschaft für den Weiterverkauf von Microsoft-Software

Ich suche freiberufliche Aufgaben wie: Freelance Data Engineer Cloud Data Warehouse Architect Data Modeling & Architecture Consultant MDM & Data Governance Specialist BI & Analytics Developer

Technische Schwerpunkte

• Data Engineering & Integration: SQL Server/SSIS, Informatica PowerCenter/IDQ, Talend, Kafka, Azure Data Factory – Delta/CDC/ELT-Muster, robuste Pipelines, Überwachung/Wiederherstellung, Datenherkunft und Auswirkungsanalyse, Medallion-Architektur mit Bronze/Silver/Gold-Schichten
• DWH & Cloud: Azure SQL / Data Lake / Synapse, AWS Redshift/S3, On-Premises SQL/Oracle – skalierbare Data Marts mit starkem Fokus auf Kosten und Nutzen.
• Datenmodellierung: Atomare (Inmon-) und dimensionale (Kimball-)Modelle, Data Vault (Linstedt), Domain-Driven Design, klare Datenherkunft und Verträge.
• MDM & Governance: Informatica MDM, IBM MDM, Stewardship-Prozesse, Datenqualitätsregeln, Survivorship/XREF, Katalog/Glossar, SIF/BES/REST-Veröffentlichung.
• Analytics/BI: Power BI, SSAS, Cognos – businessfähige und wartbare Datenprodukte.

• Festlegung von Architekturstandards für Informatica-Power-Center-Entwicklungsteams
• Wartung, Performance und Zustand von DWH-(Exadata)-Umgebungen
• Architekturstandards für Qlik-Sense-/BO-Berichte
• Umsetzung von Best Practices bei ETL-Aufgaben
• Dokumentation der ETL-Standards in Confluence
• Regeln für die dynamische Datenmaskierung gemäß GDPR/KVKK-Vorschriften mit dem Informatica-DDM-Tool
• DWH-Datenmodell mit Power Designer
• Aktualisierung der Qlik-Sense-Versionen
• Zusammenführung der Repository-Datenbanken aller Informatica-Server in einer Oracle-Datenbank

• Aufbau des Lakehouse: Entwurf und Aufbau der Mitglieder- und Anspruchsberechtigungsdomäne eines Azure-Databricks-Healthcare-Lakehouses. Erfassung von Daten aus SQL Server sowie Datei- und REST/SFTP-Quellen (JSON, CSV, XML, Parquet) über Azure Data Factory in ADLS Gen2.
• Medallion-Pipelines: Transformation von Daten durch die Bronze-, Silber- und Gold-Schichten von Delta Lake mit PySpark und Spark SQL; Einsatz von Delta Live Tables / Lakeflow mit integrierten Erwartungen für deklarative Pipelines mit Qualitätsprüfungen.
• Modernisierung der Plattform: Bereitstellung einer Plattform für den Wechsel von SQL Server in die Cloud: ADF → ADLS Gen2 → Databricks → dbt Core-Modelle → Snowflake → Power BI. Ablösung älterer Berichte durch kontrollierte Analysen.
• Robustes ETL: Aufbau metadatengesteuerter, idempotenter vollständiger und inkrementeller Ladevorgänge sowie Watermark-gesteuerter Ladevorgänge mit Schema-Evolution und Fehlerstatusbehandlung. Verbesserung der Zuverlässigkeit und erneuten Ausführbarkeit.
• Datenmodellierung: Entwurf von Kimball-Sternschemata mit SCD Type 1 & 2-Dimensionen; Optimierung langsamer Abfragen und Pipelines mithilfe von Ausführungsplänen.
• Governance & Sicherheit: Einsatz von Unity Catalog RBAC, Lineage und Audit-Logging sowie Azure Key Vault-Secrets und verwalteten Identitäten zur Erfüllung der HIPAA- und GDPR-Anforderungen.
• Führung & Mentoring: Leitung eines 6-köpfigen Teams (2 Data Engineers, 2 Analysts, BI-Entwickler, QA); Mentoring von Engineers, Festlegung von Lieferstandards und Abstimmung mit internationalen Stakeholdern.
• Bereitstellung & KI-gestützte Arbeit: Durchführung von CI/CD und Aufgabenverfolgung in Azure DevOps; Aufbau von Power-BI-Semantikmodellen mit DAX und RLS; Einsatz von Genie Code, Claude und Copilot zur schnelleren Entwicklung von PySpark/SQL, DAX und Dokumentation.

• Entwicklung von Power-BI-Reports, Measures und KPIs für Vertrieb, Einkauf, Materialwirtschaft, Lager und Produktion
• Analyse der proALPHA-Datenbank (Progress OpenEdge) und performante SQL-Abfragen für Extraktion und Transformation
• Datenmodelle, ETL-Prozesse und Pipelines inkl. automatisierter Aktualisierung über Power BI Service und Data Gateway
• Anforderungsaufnahme und Umsetzung in enger Abstimmung mit den Fachabteilungen

Ausgewählte Projekte:

• Vertriebsreport: Umsatz, Auftragseingang und Auftragsstatus
• Einkaufsreport mit automatisierten Bestellvorschlägen (Power Automate)
• Fehlteileüberwachung für Produktion und Materialwirtschaft
• Produktionsstücklisten auf Microsoft Fabric inkl. Deployment-Pipeline (Dev → Prod)
• Forecast-Vergleichsreport
• Zentrale Power-BI-Apps, die alle Reports je Abteilung bündeln

Technologien: Power BI, DAX, Power Query (M), SQL, proALPHA, Progress OpenEdge, Microsoft Fabric, Power Automate, Python

• Leitete die durchgängige Umsetzung komplexer internationaler kundenorientierter IT- und Systemtransformationsprojekte in den Bereichen Mobility, Retail, Life Sciences und Produktentwicklung.

• Verwaltete Projektchancen und Umsetzungsinitiativen von der Konzeptentwicklung über Planung, Ausführung, Migration, Validierung und Bereitstellung bis zur finalen Kundenabnahme.

• Agierte als zentraler Ansprechpartner für Projektstakeholder und stellte die Abstimmung zwischen Kunden, Geschäftsbereichen, Lieferanten und Umsetzungsteams sicher.

• Stellte durch proaktive Überwachung von Meilensteinen, Liefergegenständen, Abhängigkeiten, Risiken und Ressourcenanforderungen eine termingerechte Projektausführung sicher.

• Leitete und koordinierte globale funktionsübergreifende Teams mit mehr als 20 Mitgliedern über mehrere Zeitzonen hinweg. Diente als zentrale Koordinationsstelle für Projektaktivitäten und stellte Verantwortlichkeiten, Meilensteine, Fortschrittsverfolgung und die zeitnahe Lösung von Problemen über mehrere Stakeholder hinweg sicher. Verwaltete das Status-Reporting mit allen Stakeholdern und lieferte klare und zeitnahe Updates, um die Abstimmung zu den Projektzielen sicherzustellen.

• Übernahm die fachliche Führung, Betreuung, das Coaching und die Unterstützung bei der Problemlösung für Projektteammitglieder. Arbeitete eng mit der Geschäftsleitung und Führungskräften zusammen, um Projektauftrag und Projektumfang, Prioritäten, Meilensteine und Abhängigkeiten festzulegen, Erfolgskriterien zu definieren und Projektziele zu erreichen.

• Arbeitete eng mit der Geschäftsleitung, Business-Stakeholdern, Lieferanten, Betriebsteams und externen Partnern zusammen, um Projektziele zu definieren und eine erfolgreiche Umsetzung sicherzustellen.

• Steuerte die Stakeholder-Kommunikation über Management-Dashboards, KPIs, Governance-Reviews, Sitzungen des Lenkungsausschusses und Projektstatusberichte.

• Erkannte Geschäftsanforderungen frühzeitig und stellte zeitnah effektive technische Lösungen bereit, um die Kundenzufriedenheit zu verbessern.

• Leitete und unterstützte Strukturen für das Management von Teilprojekten und stellte eine konsistente Umsetzung, Berichterstattung und Eskalation über komplexe Initiativen hinweg sicher.

• Verwaltete Lieferantenbeziehungen und Dienstleister, um die Einhaltung vertraglicher Verpflichtungen, Service Levels, Zeitpläne und Qualitätsanforderungen sicherzustellen.

• Unterstützte Lieferantenauswahlprozesse, RFP-Bewertungen, Delivery Governance, Kostenüberwachung und Leistungsbewertungen.

• Kontrollierte Projektbudgets, Prognosen, Ressourcenzuweisungen und Finanzverfolgung, um die Umsetzung innerhalb der genehmigten Rahmenbedingungen sicherzustellen.

• Organisierte Workshops zur Erläuterung der Geschäftsanforderungen, Priorisierung der Projektziele und Steuerung von Änderungen.

• Überwachte Cloud-Migrationen (Azure/ AWS), Datenbankmigrationen/-upgrades, Systemupgrades, die Modernisierung von Infrastruktur und Anwendungen, Datenmanagement, die Ablösung von Altsystemen, AI-Lösungen sowie den Übergangsplan für mehr als 2000 Anwendungen usw.

• Koordinierte Umsetzung, Bereitstellung, Integration, Inbetriebnahme, Datenmigration und Übergabe, um die Produktionsbereitschaft sicherzustellen.

• Leitete ein funktionsübergreifendes Team, verwaltete Abhängigkeiten proaktiv und löste Projektprobleme bis zum Abschluss, während die Liefertermine eingehalten wurden.

• Verwaltete Projektrisiken, Abhängigkeiten, Probleme, Änderungsanfragen und Eskalationen proaktiv, um planbare Projektergebnisse sicherzustellen.

• Stellte die Einhaltung von GxP, ITIL, unternehmensweiten Governance-Standards, Validierungsanforderungen und Audit-Kontrollen sicher.

• Leitete interne und externe Audit-Unterstützungsaktivitäten, Validierungsdokumentation, CAPA-Koordination und Initiativen zur Einhaltung regulatorischer Vorgaben.

• Vorangetriebene Standardisierung von Prozessen, Automatisierung und Verbesserungen der Governance in den Projektabwicklungsfunktionen.

• Leitete Initiativen zur Rationalisierung von Anwendungen, die zur Stilllegung von mehr als 50 Legacy-Anwendungen führten, die operative Effizienz verbesserten und Wartungskosten senkten.

• Treibt derzeit Generative-AI-Initiativen voran, um Projektdokumentation, Reporting, Wissensmanagement und Umsetzungsprozesse zu automatisieren.

• Moderierte Lessons-Learned-Workshops und setzte Maßnahmen zur kontinuierlichen Verbesserung um, um die Effektivität der Projektdurchführung zu steigern.

Als unabhängiger BI-Berater für eine FinTech-SaaS-Plattform tätig, Aufbau und Wartung des gesamten Microsoft-Azure- und Fabric-Analytics-Stacks hinter einem mandantenfähigen Buchhaltungsprodukt, mit dem Geschäftsinhaber ihre eigene finanzielle Entwicklung verfolgen.

• Zusammenarbeit mit Finanz-Stakeholdern, um komplexe Buchhaltungsabläufe in Echtzeit-BI-Dashboards (P&L, Cash Flow, Balance Sheet) zu übersetzen und 2000+ Geschäftsinhabern zu ermöglichen, Cashflow und finanzielle Gesamtsituation einfach zu verfolgen.
• Entwicklung von 10+ interaktiven Dashboards, die jedem Geschäftsinhaber eine personalisierte Echtzeitübersicht über die eigene Vertriebsleistung, die Überfälligkeit von Forderungen und die Betriebskosten bieten.
• Sicherstellung einer strengen Data Governance durch die Implementierung dynamischer Row-Level Security (RLS) mit DAX, um die Daten jedes Geschäftsinhabers innerhalb des gemeinsamen mandantenfähigen Modells zu isolieren.
• Wartung und Erweiterung einer Azure-ELT-Pipeline (Azure Data Factory, Azure SQL Database, Azure Synapse) zur automatisierten Datenaufnahme und -transformation.
• Mitwirkung an der teamweiten Plattformmigration von Azure zu Microsoft Fabric zur Optimierung der Lizenzkosten für die Kapazität.
• Konzeption und Implementierung einer Microsoft-Fabric-ELT-Pipeline (Lakehouse, Pipelines, PySpark) zur automatisierten Datenaufnahme und -transformation als Ersatz für die vorherige Azure-Pipeline.
• Modellierung der bereinigten Daten in einem Star Schema innerhalb des Data Warehouse mit T-SQL als Grundlage für das Power BI Semantic Model.
• Einsatz von KI-Tools, einschließlich Copilot und Claude, als Entwicklungspartner entlang der gesamten ELT-Pipeline, von der Datenaufnahme bis zu KPI-Reporting und Visualisierung.
• Unterstützung agiler Bereitstellungsprozesse mit Jira zur Nachverfolgung von Entwicklungsaufgaben und Confluence zur Pflege technischer und projektbezogener Dokumentation.

• Neuentwicklung einer WebApp zur Verwaltung und Konfiguration von Zählgeräten für Großveranstaltungen
• Technologien: .NET 10, C#, Blazor, MudBlazor, MySQL, Git

Aufbau einer Observability- und Alerting-Lösung für Business Central Job Queue Monitoring

• Aufbau einer zentralen Monitoring-Lösung zur Überwachung der Business Central Job Queue in einer Multi-Organisations-Umgebung in Azure DevOps
• Integration von Azure Application Insights und Log Analytics zur strukturierten Erfassung und Auswertung von Job-Laufzeiten und Fehlerereignissen
• Entwicklung von KQL-Abfragen zur gezielten Analyse fehlgeschlagener Jobs und Erkennung von Fehlermustern
• Anbindung von Grafana und Power BI zur Visualisierung operativer Metriken und Job-Status in Echtzeit
• Implementierung eines automatisierten Alerting-Workflows mit Power Automate – bei fehlgeschlagenem Job wird unmittelbar eine Benachrichtigungsmail ausgelöst
• Sicherstellung der Transparenz über den Zustand produktiver Hintergrundprozesse im laufenden Betrieb

Ergebnis: Vollständige Transparenz über fehlgeschlagene Business Central Jobs · Deutliche Reduzierung der Reaktionszeit durch automatisiertes Alerting per Mail · Stabile Grundlage für proaktiven Betrieb produktiver Hintergrundprozesse

Technologien: Azure DevOps | Application Insights | Log Analytics | KQL | Grafana | Power Automate | Power BI | Business Central | Azure Monitor

• Entwickelte eine Python-Pipeline, die Web-Inhalte aus dem Lektionar in strukturierte tägliche JSON-Daten umwandelt und dabei liturgische Kalenderregeln für eine genaue Abdeckung von Wochentagen und Sonntagen anwendet.
• Stellte eine reine FastAPI-REST-API mit gemeinsamen Pydantic-Modellen bereit und lieferte einen Kirundi-first Web-Client für Browser und Mobile.
• Verantwortete die Datenebene und die Backend-Architektur, arbeitete eng an Systemarchitektur und Schnittstellen mit und automatisierte Aktualisierungen mit GitHub Actions; außerdem validierte ich das ETL mit pytest.
• Impact: Schuf eine verlässliche, API-gestützte Single Source of Truth für tägliche Bibellesungen auf Kirundi und ermöglichte so einen konsistenten Zugriff auf zuvor unstrukturierte Inhalte.

• Leitung der Migration des bestehenden DWHs einschließlich HR-Daten, Bewerbungsprozessen, Projektgeschäft und Zeiterfassung von einer MS SQL Server-Umgebung zu Azure Databricks
• Überarbeitung der bestehenden Datenmodelle und ETL-Prozesse sowie Erweiterung um neue Objekte und Funktionalitäten
• Einsatz von Azure Databricks (Unity Catalog, Notebooks, Spark SQL, Databricks Dataflows) und Power BI
• Technologien: MS SQL Server 2019 (SSMS, SSIS), Power BI, Delta Lake, Azure Databricks

DWH für Kunden- und Finanzdaten

• Erweiterung DWH um neue Datenquellen
• Berichtsentwicklung
• Datenqualitätsmanagement

Vorgehensmodell: Scrum

Werkzeuge: Atlassian Confluence & Jira

Datenbanken: Microsoft SQL Server

Programmiersprachen: SQL, T-SQL

ETL: Microsoft SQL Server Integration Services (SSIS)

Frontend-Plattform: PowerBI, Microsoft Reporting Services

Skalierbare Architektur auf Basis von Microsoft Fabric, Berichte und Dashboards für Geschäftsführung, Gesellschafter und Partner sowie KI-Agenten für die Prozessautomatisierung. Marktlücken durch Wettbewerbsanalysen identifiziert.

• Betreuung/Support und Weiterentwicklung eines komplexen Prozesses zur Erstellung von XML-Dokumenten für elektronische Rechnungen / E-Invoicing (XRechnung, ZUGFeRD)
• Automatisierung von Betriebsabläufen, Prozessentwicklung und –optimierung
• Entwicklung von Frontend-Applikationen mit MS Power Apps
• Portierung SQL Server 2016 auf SQL Server 2022
• Datenbank-Administration SQL Server