Data Engineer

Die Position

Als Wachstumstreiber verbindet A11 die ambitioniertesten europäischen Start-ups, Scale-ups und KMUs mit Top-Talenten, die bereit sind, echten Impact zu erzielen.

Tritt dem A11 Ecosystem bei - unser Partnerunternehmen digitalisiert die Beschaffung in einem hochspezialisierten B2B-Segment für den deutschen Mittelstand. Mit einer KI-nativen Plattform kombiniert das Unternehmen tiefes Branchenwissen mit modernster Software und macht manuelle, fehleranfällige Einkaufsprozesse effizienter und skalierbarer. 

Unser Partnerunternehmen erweitert sein Tech-Team und sucht eine(n) (Senior) Data Engineer - Integration (m/w/d), der/die die Data Pipelines, Integrationen und LLM-Workflows mit nach vorne bringt.

Deine Mission: Du baust die Datenpipelines und Integrations-Architektur, die das B2B-Commerce-Geschäft am Laufen hält - von ERP- und Lieferanten-APIs über event-driven Datenflüsse bis zur Anbindung von LLMs in bestehende Prozesse. Du entscheidest, wann Batch- und wann Echtzeit-Verarbeitung gefragt ist, und setzt die Architektur entsprechend auf. Du arbeitest direkt mit dem Technical Lead und den Automation Engineers zusammen.

Wenn du Bock hast, die Daten-Infrastruktur in einem AI-nativen Setup mitzugestalten, ist das hier dein nächster Schritt.

Sei verantwortlich für:

• Integration mit Kern- und Partnersystemen (ERP, CRM etc.)
• Datenmodellierung und Performance-Optimierung in PostgreSQL, Firestore und BigQuery durchführen sowie GCP Cloud Functions entwickeln und deployen
• Event-driven Systeme mit GCP Pub/Sub aufbauen und je nach Use Case zwischen Echtzeit- und Batch-Verarbeitung entscheiden
• Workflow-Orchestrierung mit n8n oder Airflow implementieren sowie robustes Error Handling, Retry-Logik und Monitoring sicherstellen
• LLM-APIs (OpenAI, Anthropic) in Datenpipelines integrieren und RAG-Workflows aufbauen: Daten aufbereiten, chunken, vektorisieren und in Vector DBs laden
• CI/CD-Pipelines mit GitHub Actions / Cloud Build und Infrastructure as Code mit Terraform verwalten sowie AI-Tools (Cursor, Claude Code) effektiv einsetzen

Dein Profil:

• 5+ Jahre Erfahrung als Backend-, Data- oder Integration Engineer mit sehr guten Kenntnissen in Python
• Praxiserfahrung mit dbt (Modellierung, Tests, Dokumentation)
• Erfahrung mit Serverless-Architekturen (Cloud Functions, AWS Lambda o. Ä.) und solides Verständnis von Event-driven Architecture (Pub/Sub, Message Queues, Events)