0Инженер по интеграции данных – специализация: потоковая обработка и Confluent. (м/ж/д)
CITTI Handelsgesellschaft mbH & Co. KG | Германия | 24xxx Kiel | Работа на постоянной основе | Полный рабочий день | Опубликовано: 04.09.2026 на stepstone.de

Инженер по интеграции данных – специализация: потоковая обработка и Confluent. (м/ж/д)

Отрасль: Торговля Отрасль: Торговля


CITTI IT является технологическим центром CITTI | CHEFS CULINAR Group. С более чем 250 ИТ-специалистами мы формируем цифровое будущее одной из ведущих оптовых компаний по производству продуктов питания и непродовольственных товаров. От нашей штаб-квартиры в Киле мы поддерживаем все ИТ-задачи всей группы компаний - от разработки программного обеспечения до управления и создания сетей сложных ИТ-систем до разработки и внедрения современных архитектур безопасности. Мы несем ответственность за бесперебойную работу всех приложений и систем в наших центрах обработки данных, поддерживаем наших коллег в ежедневном бизнесе и продвигаем инновационные проекты ИТ-стратегии вперед. Мы тесно сотрудничаем с различными направлениями бизнеса – от оптовых до торговых центров в т.ч. Розничная и международная судовая техника. Для нашей работы характерен командный дух, радость от инноваций и необходимость активно формировать цифровизацию группы компаний. Мы предлагаем современную рабочую среду, захватывающие задачи и много места для личного развития. Станьте частью нашей команды и привнесите свои идеи в ориентированный на будущее ИТ-ландшафт! Чтобы укрепить нашу команду, мы ищем инженера по интеграции данных в полный рабочий день (38,5 часов в неделю) в следующую возможную дату. Как инновационная компания, мы последовательно продвигаем модернизацию и дальнейшее развитие нашего ландшафта данных. В рамках нашей стратегической программы трансформации мы создаем центральную платформу данных и интеграции, которая предоставляет различные услуги по всей группе компаний. Платформа сочетает в себе несколько возможностей под одной крышей: стриминговая и событийная архитектура, Lakehousing (как один из центральных компонентов, реализованный на Azure Databricks), предоставляя данные для различных потребителей, а также основу для современных вариантов использования - особенно ИИ. Наша команда отвечает за подключение, интеграцию и моделирование (грубых) данных из широкого спектра источников и обеспечивает соответствие платформы растущим требованиям к гибкости, масштабируемости и обработке в режиме реального времени. Мы активно строим и ищем одну из первых точек интеграции платформы: Confluent Cloud (Apache Kafka) в качестве центрального узла данных для данных в режиме реального времени и событий. Основное внимание уделяется подключению источников данных к Confluent, разработке, стандартизации и автоматизации связанных с ними интеграционных процессов с самого начала, а затем ответу на них в процессе эксплуатации. Вы тесно сотрудничаете с коллегами из (бизнес) Data Engineering, Data Architecture, Data Analysis и Data Owns. Вы также будете работать с Azure Databricks и другими соответствующими технологиями на платформе. .

Ваши задания • Ваш профиль • Что мы предлагаем

  • ->
  • Подключение источников данных к Confluent Cloud:
  • Вы подключаете исходные системы к нашему центральному концентратору данных - в первую очередь через систему сбора данных об изменениях (CDC) и, где это технически разумно, на основе конкретного случая через пользовательский разъем, который вы разрабатываете. Подключение также включает соответствующую подготовку, такую как каталогизация исходных данных вместе с
  • Владельцами данных, для обеспечения чистой, понятной интеграции. ->
  • Проектирование процессов, стандартизация и автоматизация:
  • Вы проектируете интеграционные процессы вокруг этих соединений таким образом, чтобы вы были стандартизированы и автоматизированы с самого начала - от многоразовых шаблонов, основанных на конфигурации, до пакетов для конкретных предприятий, которые позволяют эффективно и без вмешательства кода подключать новые источники и темы. Вы устанавливаете лучшие практики в области Data Engineering и DataOps. ->
  • Функционирование интеграционных маршрутов:
  • Вы входите в интеграционные траектории и процессы, созданные в процессе эксплуатации, мотивируете стабильность и надежность, анализируете источники ошибок и разрабатываете устойчивые решения. ->
  • Безопасность, конфиденциальность и соблюдение
  • Вы несете ответственность за соответствующие проверки безопасности в контексте вашей интеграции, включая, в частности, выполнение требований по защите данных (GDPR), безопасную обработку конфиденциальных данных и такие темы, как доступ и тайное управление. ->
  • Отчетность и мониторинг как компонент платформы:
  • Вы создаете отчетность и мониторинг интеграционных артефактов как собственный компонент платформы - от мониторинга потребительской нагрузки и трубопровода до тестирования качества данных и сквозной прослеживаемости - и, таким образом, создаете прозрачность о состоянии интеграционных линий. ->
  • Моделирование данных и дальнейшая обработка:
  • Вы поддерживаете передачу интегрированных (событийных) данных в наш Lakehouse и моделирование в соответствии с подходом Data-Vault и тесно сотрудничаете с дальнейшими областями обработки команды. Сотрудничество, DevOps-Reviews & Knowledge
  • Трансфер:
  • Вы тесно сотрудничаете с командой и заинтересованными сторонами, делитесь своими знаниями и поддерживаете команду во всех компонентах платформы во время обзоров DevOps.

  • Мы не ищем универсалов: женщины с многолетним профессиональным опытом, а люди с энтузиазмом и любопытством подходят к новым задачам. Если у вас есть мотивация работать с новыми инструментами и технологиями, вы правы. Недостаток знаний не является препятствием – мы поддерживаем вас в обучении и даем возможность развиваться профессионально и лично. Ваша готовность учиться, ваша приверженность и желание двигаться вместе в команде имеют решающее значение для нас. У вас есть завершенное обучение / завершенное исследование в области (экономической) информатики, математики, естественных наук или сопоставимой квалификации. У вас есть опыт интеграции и обработки данных в режиме реального времени или потоковой передачи данных - в идеале с Apache Kafka (Confluent Cloud) и в среде сбора данных об изменениях (CDC). Знание таких тем, как реестр схем, Avro, Debezium или разработка разъемов, является плюсом. Вы мыслите в процессах:
  • Мы рады проектировать, стандартизировать и автоматизировать интеграционные маршруты, а не создавать индивидуальные решения. Вы осведомлены о проблемах безопасности и защиты данных (например, GDPR) при работе с данными. У вас есть практический опыт интеграции данных, в идеале в среде Data Warehousing, Data Lakehousing или сопоставимых платформ. У вас есть знания о разработке процессов ELT - опыт работы с Azure Databricks и Python (PySpark) является плюсом. У вас есть идеальный опыт в моделировании данных в соответствии с подходом по умолчанию. Вы в безопасности при работе с общими базами данных и облачными технологиями (в идеале Azure) и хорошо понимаете проблемы и возможности современных платформ данных. Вы работаете структурированно, ориентировано на решение и независимо. Вы готовы к командному, сильному общению и любите внедрять новые идеи. Нам нужны хорошие знания немецкого языка, которые обеспечивают безопасное общение в повседневной работе. Поскольку мы работаем на международном уровне, очень хорошие навыки английского языка в слове и письме также являются обязательными.

  • Возможность активно участвовать в создании перспективной платформы данных и интеграции, а также формировать одну из первых центральных точек интеграции. Молодая, мотивированная, междисциплинарная команда с большим количеством пространства для проектирования и короткими путями принятия решений. Различные возможности для профессионального и личного развития, например, через обучение, сертификацию (например, в среде Confluent / Kafka или Databricks) и обмен с экспертами. Деньги на праздники и
  • Рождество, эффективные услуги
  • Помощь в пенсионных программах 30 дней отпуска и гибкое рабочее время и правила скользящего времени
  • Столовая для персонала и бесплатная парковка персонала
  • Сотрудничество со спортивными залами, включая Hansefit
  • Преимущества крупной компании, управляемой владельцем, такие как короткое принятие решений, независимая и независимая работа
  • Велосипедный лизинг с привлекательными условиями
  • Корпоративные преимущества: скидки для сотрудников известных брендов и поставщиков (например, скидки на поездки)
  • Идеально связан с Veloroute 10, собственной железнодорожной станцией и прямым дорожным тренером прямой доступ в торговый центр с более чем 80 магазинами, медицинским центром и скидкой для сотрудников для покупок на рынке CITTI
  • Мы спонсируем ваш рабочий путь с NAH. Билет на работу или немецкий билет. .

Местонахождение

ava CITTI Handelsgesellschaft mbH & Co. KG
24113  Kiel
Германия

Текст этого объявления был переведен с немецкого на русский язык посредством системы автоматического перевода и может содержать как смысловые, так и лексические ошибки. Поэтому он может использоваться только в ознакомительных целях. Для более детальной информации перейдите к тексту оригинального объявления по ссылке ниже.

Для получения дополнительной информации читайте исходное объявление

Постоянная ссылка на это объявление

Идентификатор объявления