Senior Data Engineer

28 Декабря

Партнерские Вакансии

Город:

Тбилиси

Занятость:

Полная занятость

Компания "Jaxel"

Кого мы ищем:
Компания Jaxel ищет старшего инженера по обработке данных в нашу команду

Что Вы будете делать:

  • Проектирование и создание масштабируемых, эффективных конвейеров данных ETL/ELT с использованием современных инструментов (например, dbt, Airflow, Fivetran, Python).
  • Разработка и поддержка моделей данных, схем и преобразования в Snowflake и других облачных хранилищах данных (например, BigQuery, Redshift).
  • Интеграция данных из различных источников (внутренние системы, API, сторонние поставщики данных).
  • Работа с заинтересованными сторонами, чтобы понять потребности в данных и предоставить надежные, чистые и хорошо документированные наборы данных.
  • Поддержка качества данных и проверка достоверности, чтобы обеспечить высокое доверие к нашим данным.
  • Оптимизация производительности запросов и затрат на хранение в Snowflake и других платформах.
  • Внедрение и поддержка инфраструктуры в виде кода, рабочие процессы CI/CD и управление версиями для конвейеров передачи данных.
  • Обеспечение безопасности данных, контроль доступа и соответствие соответствующим политикам (например, GDPR, HIPAA, если применимо).

Что Вам понадобится:

  • Более 3-х лет опыта работы в качестве инженера по обработке данных или на аналогичной должности.
  • Уверенные навыки работы с SQL и глубокое понимание принципов создания хранилищ данных.
  • Практический опыт работы со Snowflake и, по крайней мере, с одним другим хранилищем данных (BigQuery, Redshift и т.д.).
  • Опыт работы с современными инструментами обработки данных, такими как Airflow, dbt, Fivetran, Dagster, или пользовательскими заданиями на Python/Scala.
  • Владение Python (или другим скриптовым языком) для обработки данных и оркестрации.
  • Опыт создания и поддержки производственных конвейеров ETL/ELT.
  • Знакомство с облачными платформами, такими как AWS, GCP или Azure (например, S3, Lambda, облачные функции).
  • Повышенное внимание к качеству данных, тестированию и документации
  • Дополнительные требования (необязательно)
  • Опыт работы с данными в реальном времени / потоковой передачей (Kafka, Spark Streaming и т.д.).
  • Знакомство с инструментами управления данными, их происхождением и метаданными (например, Amundsen, DataHub).
  • Понимание принципов конфиденциальности данных, соответствия требованиям и безопасности.
  • Знакомство с инфраструктурой в виде кода (например, Terraform) и конвейерами CI/CD (GitHub Actions, GitLab CI и т.д.).
  • Опыт совместной работы в agile-командах и использования таких инструментов, как Jira, Confluence и т.д.

Что мы предлагаем:

  • Конкурентоспособная заработная плата.
  • Возможность удаленной работы.
  • Комфортная работа в вашем часовом поясе.
  • Гибкий график работы.
  • Профессиональный рост и развитие.
  • Мультикультурная рабочая среда.
Похожие вакансии

22 Декабря

Middle QA Engineer (Manual & Automation)

Тбилиси

Компания "Пульсар" Мы — международная компания, разрабатывающая программное обеспечение для страхового рынка США . Наши продукты автоматизируют...

Отправить резюме подробнее

22 Декабря

Data Engineer

Тбилиси

Компания "N1 INTERACTIVE Ltd" N1 Partners Group — это быстрорастущая IT-продуктовая компания, которая всегда рада профессионалам в сфере IT и...

Отправить резюме подробнее

22 Декабря

React Native Senior Developer

Батуми

Компания "Itransition" We are looking for experienced professional who can design and develop complex software systems from scratch, design...

Отправить резюме подробнее

21 Декабря

QA Automation Engineer (UK client)

Тбилиси

Компания "Itransition" We are looking for QA Specialist to join our team, ensuring top-notch software quality, documenting issues, and working...

Отправить резюме подробнее

22 Декабря

Lead Data Engineer / Data Engineering Lead

Тбилиси

Компания "STARTRIBE LTD" Команда разработки внутренних решений для маркетинга ищет Data Engineering Lead. Они развивают хранилище данных и...

Отправить резюме подробнее

Вакансия размещена в отрасли

Информационные технологии / IT / Интернет: