Polars-Experten in Deutschland

Erstellung von Workflows zur Erzeugung der Datenbasis für den Artikel-Import eines Webshops: Kombination von Daten aus mehreren Quellen, Analyse der Anforderungen, Entwurf des Ablaufs mit Jupyter Notebooks und Knime. Außerdem Erstellung von Code zur Automatisierung in Python unter Benutzung von Polars und Pandas.

Aufbereitung der Ausgangsdaten, Filtern und Zusammenführen der Ausgangsdateien und Bilden der nötigen Zwischenprodukte, Erstellung der Upload-Dateien, Plausibilitätsprüfungen, Quality Checks.

Eingesetzte Technologien: PyCharm, Python, Jupyter Notebooks, SQL, Knime, Pandas, Polars

• Architektur und Entwicklung einer SaaS-Plattform zur grafischen Definition und Ausführung von Datenverarbeitungspipelines mit pandas
• Entwicklung von POlyglott, einem Open-Source-Python-CLI-Tool für das Übersetzungsworkflow-Management mit PO-Datei-Parsing, Qualitäts-Linting mit Glossar-Vorgaben und DeepL-API-Integration für maschinelle Übersetzung
• Entwicklung einer Webanwendung für das Material-Compliance-Management (EU REACH) mit Django und modernen Webtechnologien
• Aufbau einer automatisierten Infrastrukturplattform mit Proxmox, Terraform und Ansible — VM-Bereitstellung, Konfigurationsmanagement, internes DNS und flottenweites Sicherheits-Hardening über mehrere Subnetze

• Entwickelte und implementierte ein robustes, in Python basiertes Datenverarbeitungs-Framework, das den Wechsel von R zu Python ermöglichte und die Produktivität im Data Science deutlich steigerte, indem es wartbare, standardisierte Module für häufig genutzte Workflows bereitstellte und Coding-Best-Practices sowie DevOps-Prinzipien anwandte
• Bewertete, trainierte und implementierte Machine-Learning-Modelle auf Cloud-Plattformen und Edge-Geräten, wodurch vollständig automatisierte Midinfrared-(MIR)-Datenbewertungspipelines entstanden, die manuelle Analyseschritte überflüssig machten und die Zeit von der Messung bis zur Vorhersage für Kunden und interne Stakeholder deutlich verkürzten
• Analysierte und interpretierte multivariate MIR-Spektraldaten des firmeneigenen Analysators mit R und Python und unterstützte so die zuverlässige Identifizierung und Quantifizierung von chemischen Verbindungen in Lösungen

• Entwurf und Implementierung von DevOps- und CI/CD-Methoden für Data- und Analytics-Teams
• Einführung von Infrastruktur als Code mit Terraform (IaC)
• Einrichtung und Pflege des GCP-Benutzer- und Rechtemanagements mit Terraform in einer Multi-Projekt-Umgebung
• Entwurf und Umsetzung von CI/CD-Pipelines mit GitHub
• Führung und Schulung des Entwicklerteams bei der Einführung von IaC- und CI/CD-Methoden
• Entwicklung und Optimierung von Datenbank-Connectoren mit Apache Arrow für Terabyte-große Datenextraktionen (Oracle, SAP)
• Optimierung der Data-Lake-Speicherung und des Warehouse-Ingests

• Implementierung der spezifizierten DevOps-Lösungen zur Automatisierung der Infrastruktur (Terraform, Bicep, CloudFormation, Ansible) im lokalen Rechenzentrum (Ovirt, Proxmox, Ceph-Cluster, MinIO) und in der Private Cloud.
• Verwaltung, Konfiguration und Umsetzung von CI/CD-DevOps-Pipelines (GitLab, GitFlow) zur Unterstützung des Entwicklungsprozesses (Artifactory, Prometheus, Istio, Service Mesh, Helm Charts, OpenShift (Red Hat Enterprise) / Kubernetes-Cluster), Red Hat Satellite.
• Verwaltung, Einrichtung, Überwachung und Einspielung von Patches der Linux-Infrastruktur auf Basis von Red Hat Enterprise für Dev, Test und QA.
• Einsatz von Scrum- und Kanban-Methoden.
• Verwaltung, Konfiguration und Umsetzung von Sicherheitsstandards für die Bereitstellung in den Dev-, Test-, QA- und Produktionsphasen der neuen ePA-Anwendungen.
• Entwicklung neuer Plugins und Add-ons für die bestehende Infrastruktur.
• Datenbankunterstützung.
• Unterstützung der Datenanalyse (Python, Spark, Pandas, Power BI, Splunk Enterprise).
• Umsetzung von Best Practices für DevSecOps und BizDevOps unter Einsatz von GitOps (ArgoCD), Streamlit-Framework und Semaphore Ansible UI.
• Konfiguration und Test von iperf, uperf, sysbench mit dem Benchmark-Operator für externe Quelldaten und IoT/MDM-Geräte, Erstellung von Berichten über ELK/OpenSearch.
• Aufbau einer neuen Databricks-Plattform zur Sammlung und Analyse von Big Data aus verschiedenen Quellen und IoT-Geräten im Hadoop-Framework (Python, Pandas, PySpark, Power BI, Apache Airflow).
• Aufbau der Backend-Datenaggregation und -verarbeitung zur Automatisierung der Bereitstellung von Konfigurationen zwischen verschiedenen OpenShift-Clustern und dem Big-Data-Framework (Python, Pandas, PySpark, Apache Spark, PostgreSQL, Django 2, Ansible Automation, Jira JSM).
• Aufbau einer neuen ML-Pipeline-Plattform unter Verwendung von Kubeflow, TensorFlow, KServe.
• Extraktion, Transformation und Laden von Daten aus verschiedenen Quellen, einschließlich strukturierter und unstrukturierter Daten, in ein analytisches DWH bzw. Big-Data-Cluster mit Python, Pandas, Polars, Power BI, Django-Backend und PostgreSQL.
• Einrichtung eines neuen DevOps-Test- und QA-HashiCorp-Vault-Clusters für PKI und IAM.
• Konfiguration und Test automatisierter Patches basierend auf CVSS-Bewertungen und SIEM-integrierten CVEs.
• Einsatz von Nexpose und InsightVM zum Scannen von Schwachstellen in Netzwerken, Hosts, Containern und Anwendungen.
• Planung und Umsetzung sicherer und skalierbarer AWS-Architekturen einschließlich VPC, EC2, S3, RDS und Route53 sowie ähnlicher Umgebungen auf Azure und GCP.
• Automatisierte Systembereitstellung und -deployment mit CloudFormation-Vorlagen.
• Konfiguration von IAM-Rollen, Richtlinien und Berechtigungen zur Gewährleistung einer sicheren Zugriffskontrolle.
• Patch-Management, Backup-Automatisierung und Einrichtung der Notfallwiederherstellung in der AWS-Infrastruktur.
• Überwachung und Optimierung der Systemleistung mit AWS CloudWatch und AWS Trusted Advisor.
• Unterstützung von VMware-Diensten (vSphere, Aria, Horizon) und der virtuellen Desktop-Umgebung.
• Entwicklung und Wartung von CI/CD-Pipelines mit Jenkins, GitLab CI/CD und AWS CodePipeline mit Schnittstelle zu Nutanix.
• Konfiguration von AWS CloudWatch zur Überwachung der Anwendungsleistung und Systemereignisse.
• Planung und Durchführung der Migration von On-Premises-Anwendungen zu AWS-Cloud-Plattformen.
• Bereitstellung containerisierter Anwendungen mit Docker und Kubernetes in AWS-Umgebungen.
• Bereitstellung interner Softwarepakete zwischen Verfügbarkeitszonen mit AWS CodeDeploy.
• Erstellen und Bereitstellen von ML-Modellen mit Scikit-Learn, XGBoost und Spark MLlib einschließlich Hyperparameter-Tuning, Modellevaluation und Produktivsetzung.

• Entwarf und implementierte ein produktionsreifes GraphRAG-System mit Neo4j, Embeddings und Multi-Hop-Reasoning für über 120 Mio. Knoten, steigerte die Antwortgenauigkeit um 32 %, verringerte Halluzinationen um 41 % und senkte die Abruflatenz um 38 %.
• Entwickelte und implementierte ein Enterprise-Agenten-Ökosystem mit Model Context Protocol (MCP), das interne APIs, Datenbanken und Services als sichere aufrufbare Tools für autonome Workflows und Systemintegration bereitstellt.
• Konzipierte und setzte einen produktionsreifen E-Mail-Routing-Agenten auf LLM-Basis mit Microsoft Graph API, MCP und Azure OpenAI ein, erreichte 96 % Routing-Genauigkeit, senkte den manuellen Triage-Aufwand um 65 % und verkürzte die Reaktionszeiten von 18 Stunden auf unter 4 Stunden.
• Implementierte Selbstkorrektur-Pipelines für autonome Agenten mittels iterativer Feedback-Schleifen (Ralph Wiggum), was eine zuverlässige Fehlererkennung, automatisierte Behebung und produktionssichere Ausführung ermöglicht.
• Entwickelte eine multimodale semantische Suchplattform mit multimodalen LLMs und Vektor-Embeddings, ermöglichte semantisches Auffinden von über 250 000 Bild- und Video-Assets und verbesserte die Trefferquote um 48 %.

• Pose-Estimierungs-Frameworks auf Wärmebildern mit Infrarotkameras angewendet, um die Temperaturanalyse und Bewertung des thermischen Komforts zu verbessern.
• CFD-Simulationen durchgeführt, um Luftstrom und Temperaturverteilung in geschlossenen Räumen zu analysieren und zu visualisieren, und datenbasierte Erkenntnisse zur Optimierung der HLK-Systemeffizienz geliefert.
• Transfer Learning genutzt, um vortrainierte Deep-Learning-Modelle für verschiedene Aufgaben und Datensätze anzupassen, dadurch die Genauigkeit erhöht und die Trainingszeit verkürzt.
• Große Datensätze gehandhabt und Visualisierungstechniken wie Boxplots, Streudiagramme und andere grafische Werkzeuge angewendet, um Trends zu erkennen, Anomalien zu identifizieren und die Datenqualität zu überprüfen.
• Maschinelle Lernmodelle für Vorhersagen erstellt, z. B. lineare Regression, logistische Regression und Klassifikationsmodelle.
• ML-Modelle und Datenpipelines mit Docker containerisiert und skalierbare Trainings- und Inferenz-Workflows mithilfe von Kubernetes orchestriert.

• Mitwirkung an über 20 erfolgreichen Projekten

• Arbeite im AnoMoB-Projekt und wende homomorphe Verschlüsselung an, um Erkenntnisse aus verschlüsselten Mobilitätsdaten zu gewinnen.
• Untersuchte CKKS- und TFHE-Schemata, Mehrparteienberechnung, Oblivious Transfer und Proxy-Re-Encryption.
• Implementierte verschlüsselte Vergleiche und homomorphe Operationen auf komplexen Zahlen mit CKKS.
• Homomorphe Verschlüsselung mit OpenFHE & TFHE-rs (Rust), SQL-Analyse, ML (Pandas/Polars/Scikit-learn)

• KI-Assistent mit Offline-Modell, der Sprache erkennt und Texte in Echtzeit in Sprache umwandelt.