WorkListВойтиОформить подписку
Все вакансии
AM

Senior Data Engineer Moldova

висит 22 мес.
Amdaris · ИТ-услуги
Откликнуться на сайте компании ↗
Опубликована давно; 02.11 она ещё висела у компании.

О вакансии

Откуда можно работать
Молдова
из текста вакансии
Английский
C1
по другим вакансиям компании
Уровень
Senior
указан работодателем
Деньги
≈ $4–7,5 тыс/мес · оценка Worklist
по родственным ролям в мире, данные за август 2026. Это ориентир порядка величины, а не вилка этой роли · Как считаем
Даты
Опубликована 23.12.2024 · видим у компании с 26.10 · у компании видели 02.11
дата публикации от работодателя
Почему в каталоге:В команде есть выходцы из Восточной Европы, Кавказа и Центральной АзииПодробнее о компании →Основание проверено по источнику на карточке компании. Нанимает ли компания из Восточной Европы, Кавказа и Центральной Азии прямо сейчас, мы не знаем.

Описание переведено машинно с английского.

Суть роли

  • Вы сочетаете глубокие знания в области инжиниринга данных, моделирования данных, архитектуры данных и интеграции с пониманием бизнеса и сильными аналитическими навыками, что позволяет вам приносить бизнесу ожидаемую пользу.
  • Вы работаете в команде Data engineers и Data Analysts, выполняя задачи в соответствии с приоритетами и обеспечивая их сдачу в нужные сроки с применением лучших отраслевых практик.
  • Вы реализуете критически важные программы, взаимодействуя с различными заинтересованными сторонами, и выступаете как эксперт по интеграции / Data solution architect, чтобы поставлять сквозное решение.
  • У вас должны быть отличные коммуникативные навыки для работы с техническими аспектами реализации проектов, включая презентацию технических и бизнес-концепций разным бизнес-стейкхолдерам. Когда у бизнес-пользователя возникают серьёзные проблемы, вы подключаетесь, находите причину и предлагаете решение. Кроме того, вы можете влиять на все ключевые технические решения при реализации проектов и улучшении процессов и консультировать по ним (предлагая варианты с плюсами, минусами и рисками).
  • Вы используете лучшие отраслевые практики, чтобы помочь определить и реализовать стратегию глобальной платформы данных, которая поддерживает централизацию, нормализацию и демократизацию обширных хранилищ данных клиента. Вы будете «погружаться в детали» и станете экспертом по нашим наборам данных EPC, глобального управления активами и операций на нефтяных месторождениях.

Что предстоит делать

  • Проектирование и определение потоков данных для сценариев использования big data/data lake
  • Отличное знание реализации полного жизненного цикла принципов управления данными, таких как Data Governance, архитектура, моделирование, хранение, безопасность, мастер-данные и качество.
  • Выступать в роли наставника, предоставлять консультационные услуги и советы data engineers, давая технические указания и обеспечивая соблюдение архитектурных принципов, стандартов проектирования и эксплуатационных требований.
  • Участвовать в форумах Technical Design Authority.
  • Взаимодействовать с аналитическими и бизнес-стейкхолдерами для улучшения моделей данных, питающих BI-инструменты, повышая доступность данных и развивая принятие решений на основе данных во всей организации.
  • Работать с командой data engineers над выполнением задач и достижением недельных и месячных целей, а также направлять команду в следовании лучшим практикам и улучшении результатов работы.
  • Выявлять, проектировать и внедрять улучшения внутренних процессов: автоматизацию ручных процессов, оптимизацию доставки данных, перепроектирование инфраструктуры для большей масштабируемости.
  • Отвечать за оценку размера кластера и количества ядер, мониторинг и устранение неполадок кластера Databricks и сервера анализа, чтобы обеспечить оптимальную мощность для вычислений при загрузке данных.
  • Обеспечивать очистку и улучшение мастер-данных, включая автоматизированные и экономичные решения для обработки, очистки и проверки целостности данных, используемых для анализа.
  • Экспертиза в защите среды больших данных, включая шифрование, туннелирование, контроль доступа и безопасную изоляцию.
  • Руководить созданием и создавать высокоэффективные OLAP-кубы с использованием методов моделирования данных, чтобы покрыть все необходимые бизнес-сценарии и снизить ограничения Power BI в analysis service.
  • Развёртывать и поддерживать высокоэффективные CI/CD devops-конвейеры в нескольких средах, таких как dev, stg и production.
  • Строго следовать гибкому подходу к разработке на основе scrum и работать по выделенным историям.

Требования

  • Всестороннее знание извлечения, преобразования и загрузки данных из различных источников, таких как Oracle, Hadoop HDFS, плоские файлы, JSON, Avro, Parquet и ORC.
  • Опыт определения, внедрения и поддержки глобальной платформы данных
  • Опыт создания надёжных и результативных решений для визуализации данных и обеспечения их внедрения
  • Обширный опыт подключения различных источников данных с использованием потоковой (real-time), пакетной или запланированной загрузки. Источники могут находиться в облаке или on premise, быть SQL DB, NO SQL DB или основанными на API
  • Экспертиза в извлечении данных через JSON, ODATA, REST API, WEBSERVICES, XML.
  • Экспертиза в платформах загрузки данных, таких как Apache Sqoop, Apache Flume, Amazon kinesis, Fluent, Logstash и т. д.
  • Практический опыт работы с Databricks, Pig, SCALA, HIVE, Azure Data Factory, Python, R
  • Опыт эксплуатации технологий и движков Big Data, включая Presto, Spark, Hive и среды Hadoop
  • Опыт работы с различными базами данных, включая Azure SQL DB, Oracle, MySQL, Cosmos DB, MongoDB
  • Опыт поддержки кросс-функциональных команд и работы с ними в динамичной среде.

Навыки

DatabricksPigScalaHiveAzure Data FactoryPythonRPrestoApache SparkHadoopAzure SQL DBOracleMySQLCosmos DBMongoDBApache SqoopApache FlumeAmazon kinesisLogstashPower BI

Подходите ли вы под эту вакансию

Сверка вакансии с резюме доступна тем, кто вошел. Войти