Big Data Engineer
FERCHAU GmbH
Hamburg, Germany
4 days ago
Role details
Contract type
Permanent contract Employment type
Full-time (> 32 hours) Working hours
Regular working hours Languages
GermanJob location
Hamburg, Germany
Tech stack
Training Data
API
Artificial Intelligence
Amazon Web Services (AWS)
Computer Vision
Azure
Big Data
Image Analysis
Continuous Integration
Information Engineering
ETL
Python
Machine Learning
Power BI
Cloud Platform System
Backend
GIT
Machine Learning Operations
Code Restructuring
Software Version Control
Databricks
Job description
- Weiterentwicklung und Betrieb einer Azure-basierten Datenintegrationsplattform (u. a. Databricks, Unity Catalog)
- Konzeption, Implementierung und Betrieb von ETL- und Transformationspipelines
- Integration und Anbindung verschiedener Quellsysteme sowie Überführung in ein einheitliches Datenmodell
- Sicherstellung stabiler, skalierbarer und performanter Datenverarbeitungsprozesse
- Refactoring und Weiterentwicklung bestehender Systeme zur Verbesserung von Wartbarkeit und Performance
- Etablierung und Sicherstellung von Standards (Code-Wiederverwendung, konsistente Transformationslogik)
- Erstellung technischer Konzepte und enge Abstimmung mit Fachbereichen
- Entwicklung, Training und Produktivsetzung von ML- und Computer-Vision-Modellen (z. B. zur Vorhersage erneuerbarer Energieerzeugung oder zur Bildanalyse im Netzbetrieb)
- Sicherstellung der Modellqualität durch kontinuierliche Analyse von Trainingsdaten, Fehlerbildern und KPIs
- Integration von ML-Modellen in produktive Backend-Systeme und APIs
- Aufbau und Weiterentwicklung von MLOps-, Deployment- und Monitoring-Prozessen
- Betrieb und kontinuierliche Verbesserung produktiver KI-Services in der Azure-Cloud
- Unterstützung von Fachbereichen bei Auswertungen und Visualisierungen (z. B. Power BI)
- Identifikation und Bewertung neuer KI-Anwendungsfälle sowie Weiterentwicklung bestehender Lösungen
Requirements
- Mehrjährige praktische Erfahrung in Data Engineering, Machine Learning oder KI-Entwicklung
- Sehr gute Programmierkenntnisse in Python
- Fundierte Erfahrung mit Machine-Learning-Modellen, idealerweise auch im Bereich Computer Vision / OCR
- Gute Kenntnisse in Databricks, Datenarchitekturen und modernen ETL-Frameworks
- Erfahrung mit Cloud-Plattformen, vorzugsweise Microsoft Azure (optional auch AWS)
- Erfahrung mit produktiven ML-Systemen und MLOps-Prozessen
- Kenntnisse in CI/CD, Versionskontrolle (Git) und Softwareentwicklungsprinzipien
- Erfahrung in der Integration von APIs und Backend-Systemen
- Idealerweise Kenntnisse in: Power BI, Monitoring-Tools, Authentifizierungslösungen oder mobilen Backends
- Idealerweise Kenntnisse in der Energiewirtschaft, insbesondere im Bereich erneuerbare Energien und Prognosemodelle
- Strukturierte, eigenverantwortliche und lösungsorientierte Arbeitsweise
- Fähigkeit, komplexe technische Sachverhalte verständlich zu kommunizieren
- Erfahrung in der Zusammenarbeit mit technischen und fachlichen Stakeholdern
- Interesse daran, produktive KI- und Datenlösungen mit echtem Business Impact umzusetzen
Benefits & conditions
- Unbefristeter Arbeitsvertrag
- Viel Flexibilität durch die Möglichkeit, mobil zu arbeiten
- Fit bleiben mit einer vergünstigten Mitgliedschaft bei Fitness First
- Spannende und abwechslungsreiche Projekte bei innovativen Unternehmen
- Weiterbildungsangebote unseres Inhouse-Instituts, der FERCHAU Academy (E-learnings, Trainings und Seminare)
- Satte Rabatte mit Einkaufsvergünstigungen, z. B. bei Reisen, Elektronik oder Autos
About the company
Are you inspired by exciting IT projects for well-known customers? Thrilling work at the limit of what's technically feasible? Then come to FERCHAU, the market leader in engineering and IT, with more than 8,400 employees at over 100 sites. Become one of over 2,500 IT consultants and work on IT projects that demand your entire knowledge base and thus also advance your personal development.