Data Engineer - AI Diagnostic Platform (m/w/d)
Aufgaben
- Aufbau einer Log-Ingestion- und Parsing-Pipeline für mehrgigabytegroße Archive (ZIP/XML/JSON/Windows-Event-Logs), um normalisierte Ereignisdaten zu erzeugen
- Ereigniskorrelation und Datenanreicherung (zeitliche Sortierung, korrelierte Events aus unterschiedlichen Quellen, unscharfer Abgleich mit einer Fehler-/FMEA-Wissensdatenbank)
- Entwicklung einer Embedding- und Hybrid-Retrieval-Pipeline (Azure OpenAI Embeddings + Keyword-Suche + Vektor-Suche) mit klar definierten Zielen für Latenz und Durchsatz
- Durchführung von Datenqualitätsprüfungen (Schema-Validierung, Encoding-Checks, Erkennung von Duplikaten) sowie Erstellung einer präzisen technischen Übergabedokumentation
Profil
- Erfahrung in Implementierung von ETL/ELT-Prozessen in Python zur Verarbeitung großer und heterogener Log-Datenmengen
- Kenntnisse Design von Schemas und Datenmodellen für normalisierte Events und Wissensbank-Dokumente (JSON/JSONL + SQL)
- Aufbau/Optimierung von Vektorindex-Sammlungen und Relevanzbewertungen (BM25/TF-IDF + Cosine Similarity)
- Performance-Optimierung (Batching, Caching) und Bereitstellung wartbaren Codes inkl. Tests und Git-Workflow
- Sehr gute Python-Kenntnisse (pandas/NumPy, File I/O, Regex/Textverarbeitung, Performance-Optimierung)
- Praktische Erfahrung mit SQL und Datenmodellierung
- Erfahrung im Parsing von JSON/XML/CSV und im Umgang mit verschiedenen Encodings
- Sichere Zusammenarbeit über Git (Pull Requests, Branching)
- Erfahrung mit Vektor-Datenbanken (z.B. ChromaDB) und/oder Embedding-Pipelines
- Erfahrung mit Azure OpenAI-Integration
- Grundkenntnisse in Information Retrieval
Benefits
- Spannendes Projekt in einem renommiertem Unternehmen mit Startup Charakter
Über Hays
Mit über 15 Jahren Erfahrung in der klassischen Pharmaindustrie, Biotechnologie, Chemie und Medizintechnik kennen wir die entscheidenden Kontaktpersonen, die anspruchsvolle Aufgaben mit Potenzial ausschreiben. Die hohe Personalnachfrage eröffnet spannende Möglichkeiten für engagierte Fach- und Führungskräfte, um sich beruflich zu entwickeln und an der eigenen Karriere zu arbeiten. Als spezialisierte Personalberatung mit einem internationalen Netzwerk bieten wir Ihnen entscheidende Vorteile – und das völlig kostenfrei für Sie. Registrieren Sie sich und profitieren Sie von interessanten und passenden Positionen und Projekten.
Besetzungsprozess für Freelancer
- Analyse der Qualifikationen
- Kennenlernen
- Kontakt mit Kunden
- Vertragserstellung mit Hays
- 1
- 2
- 3
- 4
1. Analyse der Qualifikationen
Anhand Ihres Lebenslaufes, Ihrer Bewerbungsunterlagen und Ihres Profils führen wir eine ausführliche Analyse Ihrer fachlichen Qualifikationen durch.
Kontakt bei Hays
+43 1 5353443 208© Copyright Hays plc, . Das Wort HAYS, die H-Symbole, „Hays Working for your tomorrow" und „Powering the world of work" sowie damit verbundene Logos und Illustrationen sind eingetragene Markenzeichen der Hays PLC. Die H-Symbole sind Originaldesigns, die in vielen Ländern geschützt sind. Alle Rechte vorbehalten.