Инженер данных (f/m/x)

За последние 20 лет NETCONOMY выросла из стартапа в команду из 500 человек, работающих вместе в 10 местах в Европе. Хитрость и междисциплинарное сотрудничество являются краеугольными камнями нашей рабочей культуры. В творческом контексте люди с разным опытом создают уникальные цифровые решения.

Как инженер по обработке данных, вы играете центральную роль в разработке современных, масштабируемых и мощных решений для обработки данных для наших клиентов. В этой работе вы станете частью нашей растущей команды Data & AI и будете работать с платформой Databricks, чтобы помочь нашим клиентам решать сложные проблемы с данными. Ваша задача включает в себя: Проектирование, разработка и обслуживание надежных конвейеров данных с помощью Databricks, Spark и Python Создание эффективных и масштабируемых процессов ETL для считывания, преобразования и загрузки данных из разных источников (базы данных, API, потоковые платформы) в облачных данных и хранилищах данных Использование экосистемы Databricks (SQL, Delta Lake, Workflows, Unity Catalog) для обеспечения надежных и эффективных рабочих процессов данных Интеграция с облачными сервисами, такими как Azure, AWS или GCP, для обеспечения безопасных и экономически эффективных решений для обработки данных Проектирование моделирования и архитектуры данных для обеспечения согласованности, доступности и долгосрочной жизнеспособности ландшафта данных Обеспечение качества данных посредством процессов проверки и соблюдения политики управления данными Работа с учеными и аналитиками данных для понимания потребностей в данных и предоставления возможных решений Непрерывное обучение в области databricks, Data Engineering и облачных технологий для оптимизации наших инструментов и процессов

Основные навыки: Более 3 лет профессионального опыта работы в качестве инженера по обработке данных с Databricks и Apache Spark Встроенные знания программирования с помощью Python, включая опыт работы с библиотеками манипулирования данными (например, PySpark, Spark SQL) Опыт работы с ключевыми компонентами экосистем Databricks: рабочие процессы Databricks, каталог Unity и таблицы Delta Live Твердые знания о принципах хранения данных, процессах ETL/ELT, моделировании данных и системах баз данных Опыт работы хотя бы с одной более крупной облачной платформой (Azure, AWS или GCP) Отличный SQL Навыки для запросов данных, преобразования данных и анализа Отличные навыки общения на английском и немецком языках (уровень B2) Умение работать самостоятельно и в команде в гибкой среде Полезные навыки: Знания о передовой практике в области управления данными, качества данных и соблюдения Опыт работы с многооблачными средами Kentnisse über DevOps, Infrastructure-as-Code (например, Terraform) und CI/CD Pipelines Интерес или опыт в области машинного обучения или технологий ИИ Опыт визуализации данных Инструменты, такие как Power BI или Looker

Гибкие рабочие модели: ранние восходители или ночные совы? Благодаря нашим гибким рабочим моделям вы начинаете свой рабочий день там, где он вам больше всего подходит. Мы предлагаем вам возможность работать гибридом – вы можете решить, хотите ли вы больше работать в офисе или в домашнем офисе. Карьерное развитие и онбординг: Начните свое путешествие в NETCONOMY со структурированного обучения и наставничества и продолжайте индивидуальные варианты обучения. Наше обучение и развитие Команда поможет вам найти лучшее решение для вас! Обмен профессиональным и личным опытом на нашем ежегодном внутрикорпоративном саммите NETCONOMY! Изюминкой мероприятия является непринужденная атмосфера и обмен с международной командой. Социальные события: устанавливайте новые контакты на наших социальных мероприятиях, таких как вечера пиццы, походы или рождественские вечеринки, и празднуйте вместе вехи. Закуски и благополучие: Используйте наш обед и скидки в ресторанах-партнерах, чтобы укрепить вас в перерывах и зарядить свежей энергией. Поддержка мобильности: пусть машина стоит! Поскольку мы серьезно относимся к нашей ответственности за окружающую среду, мы поддерживаем ваши экологически чистые транспортные расходы. JOBV1_EN