Инженер по обработке данных (м/ж/д)

Добро пожаловать в Rhenus! Rhenus Group является одним из ведущих мировых поставщиков логистических услуг. По всей цепочке поставок мы предлагаем индивидуальные решения для компаний из разных отраслей. От мультимодальных перевозок до идеального хранения, от гладкой таможни до инновационных услуг с добавленной стоимостью: Мы всегда находимся в центре времени и на стороне наших клиентов.

Разработка современной платформы данных Azure: проектирование, создание и оптимизация комплексных решений для обработки данных с помощью Azure Data Factory, Azure Data Lake Storage, Databricks и Azure Synapse Analytics. Создание трубопроводов данных: Концептуализировать и управлять масштабируемыми процессами ETL/ELT в PySpark и Spark, уделяя особое внимание качеству и надежности данных. Захват данных в реальном времени: Внедряйте конвейеры, которые фиксируют изменения системы источников в реальном времени, обрабатывая медленно меняющиеся измерения для поддержания точных исторических данных. Интеграция новых технологий: Оставайтесь в курсе последних тенденций в области облачной инженерии данных, больших данных и аналитики, интегрируя соответствующие инструменты для повышения производительности, эффективности затрат и масштабируемости. Эффективная отчетность с силой BI: Сотрудничайте с командами BI, чтобы оптимально структурировать модели больших данных и разрабатывать эффективные приборные панели. Управление данными и их соблюдение: Обеспечить соблюдение правил защиты данных и внутренних политик безопасности, устанавливая лучшие практики управления метаданными, происхождения данных и контроля доступа.

Опыт работы с Azure Data Factory, Azure Data Lake Storage, Databricks и Azure Synapse Analytics. PySpark и Spark: Всесторонние знания в области разработки распределенных высокопроизводительных решений для обработки данных. ЭТЛ Процессы: Глубокое понимание концепций ETL/ELT и методов SCD/CDC. Навыки SQL: Знание сложных запросов SQL и их оптимизация. Форматы данных: опыт работы с Parquet или Avro. Власть Опыт работы с моделями больших данных и создания визуализаций Power BI. Аналитические навыки: детально-ориентированное, ориентированное на решение мышление с сильными способностями к решению проблем. Языковые навыки: требуется свободное владение английским языком; знание немецкого языка является преимуществом.

Бизнес-расходы: куда-то идти? Мы покрыли вас всесторонней поддержкой расходов на командировки. Отличная команда: Это действительно люди, которые делают разницу - и с нами вы присоединитесь к лучшей команде вокруг. Эксклюзивные скидки: Наслаждайтесь эксклюзивными бонусами: Наша обширная партнерская сеть предоставляет вам доступ к специальным скидкам с различными поставщиками. Home Office: Наслаждайтесь свободой работать из дома. Постоянные контракты: Rhenus - это ваше место. Мы предлагаем безопасность, необходимую для уверенного планирования вашего будущего. Персонализированный рост: Ускорьте свою карьеру с возможностями развития, адаптированными к вашим талантам и интересам. JOBV1_EN