Senior Data Engineer

23 Января

Партнерские Вакансии

Город:

Тбилиси

Занятость:

Полная занятость

Компания "Jaxel"

Кого мы ищем:
Компания Jaxel ищет старшего инженера по обработке данных в нашу команду

Что Вы будете делать:

  • Проектирование и создание масштабируемых, эффективных конвейеров данных ETL/ELT с использованием современных инструментов (например, dbt, Airflow, Fivetran, Python).
  • Разработка и поддержка моделей данных, схем и преобразования в Snowflake и других облачных хранилищах данных (например, BigQuery, Redshift).
  • Интеграция данных из различных источников (внутренние системы, API, сторонние поставщики данных).
  • Работа с заинтересованными сторонами, чтобы понять потребности в данных и предоставить надежные, чистые и хорошо документированные наборы данных.
  • Поддержка качества данных и проверка достоверности, чтобы обеспечить высокое доверие к нашим данным.
  • Оптимизация производительности запросов и затрат на хранение в Snowflake и других платформах.
  • Внедрение и поддержка инфраструктуры в виде кода, рабочие процессы CI/CD и управление версиями для конвейеров передачи данных.
  • Обеспечение безопасности данных, контроль доступа и соответствие соответствующим политикам (например, GDPR, HIPAA, если применимо).

Что Вам понадобится:

  • Более 3-х лет опыта работы в качестве инженера по обработке данных или на аналогичной должности.
  • Уверенные навыки работы с SQL и глубокое понимание принципов создания хранилищ данных.
  • Практический опыт работы со Snowflake и, по крайней мере, с одним другим хранилищем данных (BigQuery, Redshift и т.д.).
  • Опыт работы с современными инструментами обработки данных, такими как Airflow, dbt, Fivetran, Dagster, или пользовательскими заданиями на Python/Scala.
  • Владение Python (или другим скриптовым языком) для обработки данных и оркестрации.
  • Опыт создания и поддержки производственных конвейеров ETL/ELT.
  • Знакомство с облачными платформами, такими как AWS, GCP или Azure (например, S3, Lambda, облачные функции).
  • Повышенное внимание к качеству данных, тестированию и документации
  • Дополнительные требования (необязательно)
  • Опыт работы с данными в реальном времени / потоковой передачей (Kafka, Spark Streaming и т.д.).
  • Знакомство с инструментами управления данными, их происхождением и метаданными (например, Amundsen, DataHub).
  • Понимание принципов конфиденциальности данных, соответствия требованиям и безопасности.
  • Знакомство с инфраструктурой в виде кода (например, Terraform) и конвейерами CI/CD (GitHub Actions, GitLab CI и т.д.).
  • Опыт совместной работы в agile-командах и использования таких инструментов, как Jira, Confluence и т.д.

Что мы предлагаем:

  • Конкурентоспособная заработная плата.
  • Возможность удаленной работы.
  • Комфортная работа в вашем часовом поясе.
  • Гибкий график работы.
  • Профессиональный рост и развитие.
  • Мультикультурная рабочая среда.
Похожие вакансии

12 Января

Senior Backend Python Developer (AI Services)

Тбилиси

Компания "evrone.ru" Привет! Команда Evrone занимается продуктовой разработкой стартапов и помогает в цифровой трансформации бизнеса в России,...

Отправить резюме подробнее

12 Января

Senior QA Automation Engineer (Python)

Тбилиси

Компания "Jaxel" Кого мы ищем: Мы ищем опытного, талантливого и инициативного специалиста на позицию Senior Automation Quality Engineer ,...

Отправить резюме подробнее

12 Января

Senior C++ Developer (в Бильбао, Испания)

Тбилиси

Компания "the_covert" The_Covert — международная группа IT-компаний с более чем 15-летним опытом создания собственных продуктов и сервисов....

Отправить резюме подробнее

06 Января

Middle Analytics Engineer (ThoughtSpot Focus)

Тбилиси

Компания "LeverX International" At LeverX , we have had the privilege of delivering over 1,500 projects for various clients. With 20+ years in...

Отправить резюме подробнее

08 Января

Manual junior/middle QA engineer

Тбилиси

Компания "Новосельцева Вита Евгеньевна" ВАЖНО: на текущий момент мы не можем рассмотреть кандидатов, которые находятся на территории РФ и РБ....

Отправить резюме подробнее

Вакансия размещена в отрасли

Информационные технологии / IT / Интернет: