Amazon SQS Experten in Hamburg

traigo ist die digitale Plattform von VTG für Bahnlogistik und Flottenmanagement. Sie verarbeitet große Mengen an Telemetrie-, Kilometer-, Geofence-, Sensor- und Wagenbewegungs-Events nahezu in Echtzeit und stellt operative Services für Kunden aus der Bahnlogistik in ganz Europa bereit.

Als Teil von Team Customer Selfcare habe ich an Design, Implementierung, Optimierung und Betrieb großer Backend-Services und eventgesteuerter Verarbeitungspipelines gearbeitet — sowohl an der Feature-Entwicklung als auch an der operativen Verantwortung für geschäftskritische Produktionssysteme. Außerdem war ich regelmäßig erster Ansprechpartner bei Produktionsvorfällen, Dateninkonsistenzen und Performance-Analysen über mehrere verteilte Services hinweg.

• Design und Implementierung eventgesteuerter Backend-Services.
• Migration und Ablösung von Legacy-Verarbeitungspipelines.
• Entwicklung von Replay-/Rebuild-Mechanismen für große Event-Datenmengen.
• Asynchrone Event-Verarbeitung mit hohem Durchsatz auf SNS / SQS.
• Datenbank- und Query-Optimierung für PostgreSQL und DynamoDB.
• Design skalierbarer Read-/Write-Modelle und Aggregationspipelines.
• Fehlersuche in der Produktion und operativer Support.
• Performance-Tuning und Skalierung der Infrastruktur.
• Design und Stabilisierung von Integrations- und Systemtests.
• Technische Konzepte, Architektur-Dokumentation und bereichsübergreifende Zusammenarbeit.
• Unterstützung bei der Weiterentwicklung bestehender GitLab CI/CD-Pipelines

Geofence- und Wagenstand-Verarbeitung

• Algorithmus zur Erkennung von Fahrzeugen innerhalb von Geofences (Eintritt, Austritt, Verweildauer).
• Event Sourcing mit garantierter chronologischer Reihenfolge innerhalb des betroffenen Zeitfensters.
• Refactoring der Logik für Geofence-Events und Wagenstand-Verarbeitung für bessere Performance.
• Behebung von Race Conditions und Problemen mit der Event-Reihenfolge in verteilten Services; serverseitiges Filtern, Aggregieren und optimierte Query-Pipelines.
• Reparatur- und Replay-Tools für beschädigte oder inkonsistente Bewegungsdaten.

Flotten-Metadaten & Kilometerstände

• Modernisierung des Services; Migration des Speichers von DynamoDB nach PostgreSQL, um die Nachverfolgbarkeit zu verbessern und neue Features schneller umzusetzen.
• Skalierbare Aggregation von Kilometerständen und Replay-Mechanismen.
• Read-/Write-Modelle und optimierte Queries für Berechnungen mit hohen Datenmengen.

Sensor- & Telematik-Integration

• Integration von Telemetrie- und Sensor-Verarbeitungspipelines.
• Snapshot- und Zustandsberechnungslogik für Sensorsysteme.
• APIs und Persistenzmodelle für Wagensensordaten; Verbesserungen der Datenqualität.
• Weiterentwicklung eines Services mit gRPC für die Kommunikation zwischen Services.

Verarbeitung von Bewegungssegmenten & Routing

• Migration von Services auf neue Event-Streams für Bewegungssegmente.
• Aufbau von Replay- und Rebuild-Tools für Segmentkorrekturen.
• Optimierung von Durchsatz und Zuverlässigkeit bei der Verarbeitung großer Event-Mengen.

Zustandsüberwachung & Wagenanalyse

• APIs und Backend-Services für die Zustandsüberwachung von Wagen.
• Verarbeitung zur Vorhersage von Bremsverschleiß und Funktionen für Wagenanalysen.
• PostgreSQL-Views und optimierte Query-Modelle für operative Dashboards.

Operative Zuverlässigkeit - First Responder

• Analyse von Produktionsvorfällen und Ausfällen verteilter Systeme; DLQ-Analyse, Replay und operative Wiederherstellung.
• Tuning der Datenbank-Performance und der AWS-Infrastruktur unter Produktionslast.
• Verbesserung von Observability, Monitoring und operativen Tools.
• Unterstützung bei Rollout-Strategien, Monitoring und Stabilisierung nach dem Deployment.

Projekt:

• Migration bestehender VB6-Anwendungen nach C# (Web API, Web-App)
• Berichtsentwicklung und Risk-Management-Systeme (C#, API-Schnittstellen, Datenbanken)
• Dokumentenarchiv (API-Schnittstellen, Datenbanken)

Teamgröße: 9 Personen

• Reports für Risk- und Credit Management Entwicklung und Pflege von Berichtsstrukturen zur Unterstützung von Risiko- und Kreditentscheidungen, inklusive Datenmodellierung, Validierung und automatisierter Bereitstellung für Fachabteilungen.
• Migration und Wartung eines Legacy-Systems auf die neueste Version von .NET für das Asset Management System Planung und Durchführung der Modernisierung eines bestehenden Asset-Management-Systems, inklusive Code-Refactoring, Performance-Optimierung, Testautomatisierung und nachhaltiger Wartung nach der Migration.
• Ablösung der COM-basierten Archivanbindung durch eine REST-API Neuentwicklung der Anbindung des Dokumentenarchivs (HYPARCHIV) an eine REST-API auf Basis von OpenAPI/Swagger, inklusive Archivierung mit Index- und Stempelfeldern sowie PDF-Export in das Kundenportal.
• Redesign der Verarbeitung von Geldeingängen Ablösung einer bestehenden Oracle-PL/SQL-Verarbeitung durch eine Neuimplementierung in C# auf Basis eines Fachkonzepts, inklusive fachlicher Abstimmung, Datenmodellierung und Testabdeckung.
• Konzeption und Implementierung von Tests, Erstellung von Deploymentpipelines und Dokumentationen
• Weiterentwicklung und Umsetzung von Change-Requests.
• Durchführung regelmäßiger Code Reviews im Team sowie Optimierung von Skalierbarkeit und Stabilität der Anwendung

Technologien: C#, .NET 10, ASP.NET, Unit of Work, IoC, Three-Tier-Architektur, Entity Framework Core, DB First, Web API, Swagger, OpenAPI, Python, Oracle, HYPARCHIV, Azure, PowerBI, DevOps, AKS (Azure Kubernetes Service), GIT, xUnit, NSubstitute, TypeScript, Vue.js, Pinia,

Methoden: agile Entwicklung nach Scrum

• Einführung Testmanagement mit Solman
• Einführung Testautomatisierung mit TOSCA
• Testfälle analysieren, erstellen, automatisieren
• Aufbau Regressionstest-Portfolio
• Meetings mit Stakeholdern und Abstimmungen
• Finanzmanagement

• Zusammenarbeit mit Entwicklern, Security- und Betriebsteams zur Abstimmung von Anforderungen
• Unterstützung von Product Ownern und Entwicklungsteams beim Einsatz von Logging- und Monitoring-Lösungen auf Basis des Elastic Stacks
• Entwicklung und Vereinheitlichung von Log-Schemata sowie Definition von praktikablen Standards für Observability
• Konzeption und Weiterentwicklung von Logging-Architekturen für komplexe, verteilte Multi-Tenant-Umgebungen
• Anbindung von Applikations- und Infrastruktur-Logs sowie Security-Tools und Metriken
• Optimierung von Datenflüssen und Modellierung für Analyse- und Reporting-Zwecke
• Aufbau automatisierter Infrastrukturen mittels Terraform/Terragrunt und Ansible
• Pflege und Weiterentwicklung von CI/CD-Pipelines in GitLab sowie automatisierte Entwicklungsumgebungen in Hetzner Robot
• Betrieb und Automatisierung von Proxmox-Clustern inkl. Ceph-Storage
• Einrichtung und Betrieb von Kubernetes-(k3s)-Clustern auf Fedora CoreOS inkl. Basisdiensten wie Vault, OpenLDAP und HAProxy
• Umsetzung sicherheitskritischer Infrastrukturen nach BSI-Grundschutz und Absicherung bestehender Systeme
• Unterstützung beim Betrieb von Lösungen in Cloud-Umgebungen (u. a. AWS)
• Mitarbeit in agilen Teams nach Scrum und Kanban
• Technologien/ Anwendungen: Elastic Stack (Elasticsearch, Logstash, Beats/Elastic Agent, Kibana), Terraform, Terragrunt, Ansible, GitLab CI/CD, GitOps, Proxmox, Proxmox Ceph, Kubernetes (k3s), OpenShift, Helm, Kustomize, Vault, OpenLDAP, HAProxy, Hetzner Robot Systeme, AWS, Prometheus, Grafana, Syslog Linux/Windows, Docker, NGINX, Apache Security & Compliance (BSI-Grundschutz, SIEM/SOC)

• Rolle: Entwickler, Architekt
• Technologien: java, typescript, golang, spring (boot, web, security, data), Angular, AWS (OpenSearch, Aurora, SNS/SQS, CloudWatch, EC2, IAM), Kubernetes, Terraform, Helm, OAuth, Keycloak, CI/CD, gradlew, Liquibase, Testgetriebene Entwicklung, Shell-Skripting

• Weiterentwicklung eines Finance Layers zur Abrechnung von Abonnements und Einmalkäufen sowie zur Buchhaltung.
• Technologien: Kotlin, AWS (SQS, S3, ElastiCache, Aurora), React, TypeScript, Coroutines, IntelliJ IDEA, Spring (Boot, Data, WebFlux), JUnit, Testcontainers, Cucumber, Liquibase, PostgreSQL, Webservices (REST), R2DBC, OpenAPI 3, Gradle, GIT, Docker, Netty, GitHub Actions, Jira/Confluence, arc42

• Coaching von Junior-Entwicklern
• Weiterentwicklung und kundenspezifische Erweiterungen einer Standardsoftware (Microservices (DDD) und teilweise Monolith)
• Schnittstellenerweiterungen
• Webservices
• Testautomatisierung
• Konzeption
• Verwendete Technologien: Java8, Java17, TypeScript, Python, PostgreSQL, Spring (Integration, Data, Boot), JPA, AWS (Cloud, Lambda, EC2, SQS/SNS), Microservices, Fitnesse/Cucumber, Gitlab

• Erweiterung des Dokumenten-Management-Systems um eine standardisierte CMIS-Schnittstelle (Content Management Interoperability Services)
• Implementierung von CMIS-Basisdiensten wie Navigation, Zugriffsrechten, Suche, CRUD-Operationen und Versionierung in Java
• Umsetzung basierend auf RESTful/OpenAPI-Services
• Bereitstellung als Fat-JAR und natives Container-Image
• Deployment On-Premises und serverlos als Azure Container Application mit Terraform
• Steigerung der Team-Autonomie durch Infrastruktur-Engineering und kurze Feedback-Schleifen
• Observability mit OpenTelemetry, Azure Monitor und Azure Logic Apps
• Einführung von Terraform- und Trunk-Based-Development-Prozessen
• Qualitätssicherung mit BDD-Tests in C# mit SpecFlow und Testcontainers
• Azure DevOps Pipeline Integrationstests
• Etablierung von Cloud-Deployment-Prozessen
• Schulung der Mitarbeiter in Cloud und Terraform

• Verwalten und Betreiben der Produktdatenimport Services für den Händler Otto
• Weiterentwicklung und Wartung der Backendsysteme
• Optimierung und Wartung der AWS-Infrastruktur
• Aufbau einer neuen Produktdatenimport-API
• Konzeption und Planung von Stories und Features
• Durchführung von Code-Reviews zur Sicherstellung der Codequalität und Best Practices
• Analyse und Behebung von Bugs
• Technologien: Java, Spring Boot, Kafka, AWS, Fargate, Terraform, MongoDB, Mongo Atlas, OpenAPI, GitHub, GitHub Actions, GitHub Copilot, Akhq, Debezium, JUnit, Test Containers, Hexagonale Architektur

• Mitarbeit bei der Realisierung des Redaktionssystems Rubix
• Implementierung diverser Microservices auf Basis von Java, AWS S3, AWS SQS, AWS SNS und Spring Boot mit Deployment auf AWS ECS und AWS Fargate
• Konzeption und Entwicklung von AWS Lambdas auf Basis von Typescript
• Verwendung der Datenbanksysteme PostgreSQL in einem AWS RDS Aurora Cluster sowie AWS DynamoDB
• Continuous Deployment mit GitLab Pipelines
• Aufbau einer Infrastructure-as-Code-Umgebung mit AWS CDK
• Aufbau und Betrieb einer Monitoring-Plattform auf Basis von AWS CloudWatch
• Entwicklung diverser Frontend-Komponenten auf Basis von Vue.js
• Konzeption der Microservice-Architektur unter Anwendung von Domain Driven Design und GraphQL-Schnittstellen

• Lead Drupal 10-Entwickler für mehrere Greenfield-Projekte im Gesundheitsbereich
• Drupal-Architektur in einer Cloud-Umgebung
• Einrichtung und Pflege von GitLab-Pipelines und Kustomize-Skripten für Kubernetes-Deployments
• Entwicklung von Docker-Images
• Entwicklung individueller Drupal-Module für Kunden wie OAuth und FHIR
• Drupal-Frontend-Theming basierend auf Bootstrap 5 und Single Directory Components
• Einrichtung und Pflege automatisierter Playwright-Tests

• Betrieb und Weiterentwicklung des Warenwirtschaftssystems für Buchhändler (Quimus). Es handelt sich dabei um eine Eigenentwicklung von Libri, die an ihre Kunden als Software as a Service verkauft wird. Die Software wird von zwei Entwicklerteams (je ~5 Entwickler) agil entwickelt. Die Software besteht aus ca. 25 Java Microservices, die hauptsächlich über Messaging kommunizieren und ein gemeinsames Angular-Frontend haben. Betrieben wird die Anwendung auf Kubernetes in AWS.
• Eingesetzte Technologien: Java 17 & 21, Spring Boot 2 & 3, Hibernate, MySQL, Spring Cloud AWS, Lombok, AWS SQS, AWS SNS, AWS RDS, AWS S3, DynamoDB, Kubernetes, Docker, OpenSearch, Hibernate Search, Liquibase, Gradle, Terraform, Helm, GitLab CI, Keycloak OAuth2, TypeScript, Angular
• Meine Schwerpunkte bis Dezember 2023: Anbindung weiterer Kassensysteme an das Warenwirtschaftssystem. Anbindung des Data Warehouses für die Anzeige von Reports. Erweiterung bestehender Funktionalitäten (Wareneingänge, Fakturaerstellung, Artikelmanagement, …). Betrieb und DevOps-Tätigkeiten.
• Schwerpunkte ab Januar 2024: Extraktion der Produktsuche aus dem Warenwirtschaftssystem in einen globalen Service, um diesen Service in weiteren Anwendungen zu nutzen. Anbindung der Produktsuche in die Onlineshops der Buchhändler (die ebenfalls von Libri betrieben werden). Import und Bereitstellung von Digital-Artikeln in der Produktsuche.

• Entwicklung eines Greenfield-CRMs zur Verwaltung eingehender Kundenanfragen für einen kommunalen Versorger
• Umsetzung mit PHP/Symfony 5, EasyAdmin, Doctrine ORM und Oracle XE
• Nach der anfänglichen Implementierung planmäßige Übergabe an CiS GmbH

• Spezialisiert auf ereignisgesteuerte Microservice-Architekturen in AWS mit NodeJS, TypeScript und Vue/React/Next im Frontend

• Ein SaaS-Produkt im B2B-Bereich entwickelt

• AWS-Services genutzt: DynamoDB, Lambda, SQS, SES, EventBridge, Cognito; Serverless Framework; REST-API

• Unit-Tests mit Jest und Mocha implementiert

• CI/CD-Pipeline mit GitHub Actions eingerichtet

• Ein SaaS-Produkt für die Organisationsverwaltung entwickelt

• An AWS-Microservice-Architektur und ereignisgesteuertem Design gearbeitet

• CDK, NodeJS-OpenAI-API, React, Vue eingesetzt

• Weiterhin DynamoDB, Lambda, SQS, SES, EventBridge, Cognito, TypeScript verwendet

• CI/CD-Pipeline mit GitHub Actions gepflegt