Data Integration Engineer; m​/w​/d; Schwerpunkt Streaming & Confluent

Die CITTI IT ist das technologische Herzstück der CITTI | CHEFS CULINAR Unternehmensgruppe. Mit über 250 engagierten IT-Expertinnen und
-Experten gestalten wir die digitale Zukunft eines der führenden Großhandelsunternehmen für Food- und Non-Food-Artikel. Von unserem Hauptsitz in Kiel aus betreuen wir sämtliche IT-Belange der gesamten Unternehmensgruppe - von der Softwareentwicklung über die Steuerung und Vernetzung komplexer IT-Systeme bis hin zur Entwicklung und Umsetzung moderner Sicherheitsarchitekturen.

Wir verantworten den reibungslosen Betrieb aller Anwendungen und Systeme in unseren Rechenzentren, unterstützen unsere Kolleginnen und Kollegen im Tagesgeschäft und treiben innovative IT-Strategieprojekte voran. Dabei arbeiten wir eng mit den verschiedenen Geschäftsbereichen zusammen - vom Großhandel über die Einkaufszentren inkl. Einzelhandel bis hin zum internationalen Schiffsausrüster.

Unsere Arbeit ist geprägt von Teamgeist, Innovationsfreude und dem Anspruch, die Digitalisierung der Unternehmensgruppe aktiv mitzugestalten. Wir bieten ein modernes Arbeitsumfeld, spannende Herausforderungen und viel Raum für persönliche Entwicklung. Werde Teil unseres Teams und bringe deine Ideen in eine zukunftsorientierte IT-Landschaft ein!

Zur Verstärkung unseres Teams suchen wir in Vollzeit (38,5 Std./ Woche) zum nächstmöglichen Termin einen Data Integration Engineer
.

Als innovatives Unternehmen treiben wir die Modernisierung und Weiterentwicklung unserer Datenlandschaft konsequent voran. Im Rahmen unseres strategischen Transformationsprogramms bauen wir eine zentrale Daten- und Integrationsplattform auf, die als Single Point of Truth verschiedene Services in der gesamten Unternehmensgruppe bereitstellt. Die Plattform vereint mehrere Capabilities unter einem Dach:
Streaming und Event-Driven Architecture, Lakehousing (als eine der zentralen Komponenten, umgesetzt auf Azure Databricks), Datenbereitstellung für vielfältige Konsument:innen sowie das Fundament für moderne Use Cases - insbesondere KI. Unser Team verantwortet dabei die Anbindung, Integration und Modellierung von (Roh-)Daten aus unterschiedlichsten Quellen und stellt sicher, dass die Plattform den steigenden Anforderungen an Flexibilität, Skalierbarkeit und Echtzeitverarbeitung gerecht wird.

Wir befinden uns im aktiven Aufbau - und suchen dich für einen der ersten Integrationspunkte der Plattform:
Confluent Cloud (Apache Kafka) als zentralen Data Hub für Echtzeit- und Event-Daten. Dein Fokus liegt darauf, Datenquellen an Confluent anzubinden, die zugehörigen Integrationsprozesse von Grund auf zu gestalten, zu standardisieren und von Beginn an zu automatisieren - und diese anschließend im operativen Betrieb zu verantworten. Dabei arbeitest du eng mit Kolleg:innen aus (Business) Data Engineering, Data Architecture, Data Analysis und den Data Ownern zusammen.

Dein Schwerpunkt liegt auf Confluent, du wirst aber auch mit Azure Databricks und weiteren relevanten Technologien der Plattform arbeiten.

• Du bindest Quellsysteme an unseren zentralen Data Hub an - vorrangig über Change Data Capture (CDC) und, wo fachlich sinnvoll, case-basiert über einen Custom Connector, den du mitentwickelst. Zur Anbindung gehört auch die entsprechende Vorbereitung, etwa die Katalogisierung der Quelldaten gemeinsam mit den Data Ownern, um eine saubere, nachvollziehbare Integration sicherzustellen.
• Du konzipierst die Integrationsprozesse rund um diese Anbindungen so, dass sie standardisiert und von Anfang an automatisiert werden - von wiederverwendbaren, konfigurationsgetriebenen Mustern bis hin zu unternehmenseigenen Packages, die die Anbindung neuer Quellen und Topics effizient…