Hardeep Bhutter-Sr. Data Engineer
Tagessatz prüfen
Erfahrungen
Sr. Data Engineer
Charles Schwab Bank
- End-to-end-Datenpipelines (Batch & Streaming) mit Python, SQL und Apache Spark sowie Databricks auf AWS entworfen und umgesetzt und dabei die ETL-Latenz um 40 % reduziert.
- Serverless, ereignisgesteuerte Ingestion-Pipelines mit AWS Lambda und SQS entwickelt und so die Echtzeitverfügbarkeit der Daten für nachgelagerte Analysen sichergestellt.
- Google Cloud Platform (GCP)-Services wie BigQuery und Dataflow genutzt, um Cloud-übergreifende Data-Warehousing- und Analytics-Integrationen zu steuern.
- Erfahrung mit DMS (CDC, Full Load) und Airflow für skalierbare Automatisierung und Orchestrierung von Datenpipelines.
- Datenpipelines mit Databricks und Airflow verwaltet und angepasst. Automatisierung mit Docker, Kubernetes und Terraform.
- Datenqualitätsprüfungen mit dbt automatisiert, um Transformationen zu modularisieren und eine produktionsreife Data Lineage sicherzustellen, wodurch die Zuverlässigkeit um 30 % verbessert wurde.
- Mit Compliance-Teams zusammengearbeitet, um die Einhaltung von GDPR und SOC2 sicherzustellen. Junior Engineers betreut und bei der Refaktorierung der Architektur für mehr Skalierbarkeit mitgewirkt.
- Dashboards in Power BI erstellt und gepflegt, um umsetzbare Einblicke zu liefern.
Sr. Data Engineer
Hamburg Commercial Bank
- Data-Lake-Lösungen auf AWS mit Glue, S3 und Lambda entworfen.
- Robuste serverless Datenverarbeitungs-Frameworks mit AWS Lambda für automatische Datei-Validierung und Fehlerbehandlung aufgebaut.
- Azure-basierte Datenlösungen mit Azure Data Factory (ADF) und Databricks entwickelt und komplexe ETL-Workflows in einer Multi-Cloud-Umgebung orchestriert.
- Die Performance von Azure Synapse Analytics durch partitionierte Tabellen und materialisierte Views optimiert und so die Abfrageeffizienz verbessert.
- Erfahrung mit DMS (CDC, Full Load) und Airflow für skalierbare Automatisierung und Orchestrierung von Datenpipelines.
- CI/CD für Data-Pipeline-Deployments mit Terraform und GitLab implementiert.
- Datenqualitätsprüfungen und Observability mit dbt-Tests umgesetzt, um die strukturelle Integrität über alle Warehouse-Ebenen hinweg sicherzustellen.
- Ein Team mit 5 Mitgliedern geleitet und das Data Warehouse für das Financial Reporting skaliert. Fein granulare Zugriffsrechte implementiert und so die GDPR-Compliance sichergestellt.
Sr. Data Engineer
Nokia
- Skalierbare Data-Ingestion-Frameworks mit Python und Spark aufgebaut.
- AWS-basierte Integrationskomponenten mit Lambda und Kinesis für die Verarbeitung von Telemetrie-Streams mit hohem Volumen entwickelt.
- Cloud-Ressourcen mit AWS Step Functions orchestriert, um komplexe Daten-Workflows und Recovery-Logik zu steuern.
- Dashboards in Tableau für das Performance-Monitoring entwickelt.
- SQL-/Spark-Jobs und Partitionierungsstrategien optimiert und die Abfrageperformance um bis zu 5x verbessert.
- dbt integriert, um Rohdaten in präsentationsreife Star-Schemas zu modellieren und die SQL-Komplexität für Endnutzer deutlich zu reduzieren.
Data Engineer
MSCI
- ETL-Prozesse von Oracle zu AWS Glue und Redshift migriert. Metadatenverwaltung für Reporting-Pipelines automatisiert.
Data Engineer
Hewlett Packard
- Data-Warehouse-Lösungen für große Enterprise-Kunden entworfen. CI/CD-Pipelines für Daten-Workflows mit Jenkins/Git eingeführt. Komplexe ETL-Pipelines verwaltet und angepasst, Migration auf Oracle Exadata Box sowie Echtzeitdaten mit CDC.
Data Engineer
Trigyn Technologies Ltd
- Entwickelte ETL-Workflows und PL/SQL-Skripte für Analysen. Optimierte Abfragen für große Datensätze und reduzierte die Laufzeit um 40 %.
Sr. DBA
Hewlett Packard
- Verwaltete Oracle-Datenbanken und führte Tuning sowie Optimierungen durch. Unterstützte beim Entwurf des Datenmodells und bei der ETL-Validierung.
DBA
Tata Consultancy Services
- Pflegte und überwachte Oracle-Datenbanken für Bankensysteme. Unterstützte Datenmigrationen und Maßnahmen zur Leistungsoptimierung.
Branchenerfahrung
Sieh, in welchen Branchen dieser Freelancer den Großteil seiner beruflichen Laufbahn verbracht hat.
Erfahren in Bank- und Finanzwesen, Informationstechnologie (IT) und Telekommunikation.
Erfahrung nach Fachbereich
Zeigt, in welchen Abteilungen und Funktionen dieser Freelancer am meisten mitgewirkt hat.
Erfahren in Informationstechnologie (IT) und Business Intelligence.
Sprachen
Ausbildung
University of Bombay
B.sc · Electronics · Mumbai, Indien
University of Bombay
MBA · IT · Mumbai, Indien
Zertifikate & Bescheinigungen
Oracle Certified 11g Admin and SQL Expert
Splunk
Statistiken
Erfahrung
Fachkenntnisse
Qualifikationen
Profil
Häufig gestellte Fragen
Du hast Fragen? Hier findest du mehr.
Tagessatzverteilung
Die angegebenen Tagessätze entsprechen der typischen Marktspanne für Freelancer in dieser Position, basierend auf aktuellen Projekten auf unserer Plattform.
Die tatsächlichen Tagessätze können je nach Dienstalter, Erfahrung, Fachkenntnissen, Projektkomplexität und Auftragsdauer variieren.
Durchschnittlicher Tagessatz für ähnliche Positionen
Die Tagessätze basieren auf aktuellen Projekten und enthalten keine FRATCH-Marge.
Der durchschnittliche Tagessatz ist der Mittelwert aller Tagessätze aus aktuellen Verträgen vergleichbarer Freelancer auf unserer Plattform.
Der Median-Tagessatz ist der mittlere Wert aller Tagessätze – die Hälfte der vergleichbaren Freelancer verlangt weniger, die andere Hälfte mehr. Anders als der Durchschnitt wird er von Ausreißern kaum beeinflusst.
Die tatsächlichen Tagessätze können je nach Dienstalter, Erfahrung, Fachkenntnissen, Projektkomplexität und Auftragsdauer variieren.
Ähnliche Freelancer
Entdecke andere Experten mit ähnlichen Qualifikationen und Erfahrungen
Experten, die kürzlich an ähnlichen Projekten gearbeitet haben
Freelancer mit praktischer Erfahrung in vergleichbaren Projekten als Sr. Data Engineer
Freelancer in der Nähe
Fachkräfte, die in oder in der Nähe von München, Deutschland arbeiten
