Data Engineer

26 Июня

Партнерские Вакансии

Город:

Тбилиси

Занятость:

Полная занятость

Компания "TradingView"

Привет! Меня зовут Дмитрий, я возглавляю команду Data Engineering. С ростом количества пользователей увеличивается и нагрузка на сервис, поэтому мы ищем опытного специалиста, который будет принимать участие в проектах по развитию дата платформы.

У нас:

  • более 500Gb cырых Clickstream данных в сутки
  • более 500Gb сырых Operational Data в сутки
  • более 500 витрин данных
  • более 10 видов источников данных

Позиция предполагает высокую степень автономности и самостоятельности, но и вместе с тем плотное взаимодействие с коллегами, аналитиками, ML-engineer’ами и разработчиками.

Задачи

  • Сопровождение и разработка Airflow DAGs
  • Оптимизация/разработка SQL запросов для витрин данных
  • Сопровождение и развитие инфраструктуры дата платформы
  • Разработка dbt моделей. Портирование существующих витрин на dbt модели.
  • Проектирование, разработка и тестирование ETL/ELT процессов
  • Проведение Proof of concept с дальнейшей презентацией и внедрением в продакшен
  • Участвовать в принятии архитектурных решений для дата платформы
  • Описание технических частей итоговой работы в документации
Навыки:
  • Опыт работы инженером данных от 4-5 лет
  • Уверенно владеете Python на уровне написания Airflow DAG’ов.
  • Уверенно владеет SQL на уровне оптимизации запросов. Умеете читать планы запросов и предлагать варианты по улучшению производительности запросов.
  • Имеете опыт работы с Apache Airflow, знаете принципы построения пайплайнов
  • Имеете опыт работы с dbt
  • Знаете, что такое MPP(Massive Parallel Processing) СУБД, и имели опыт работы с подобными(Redshift, Greenplum, Vertica)
  • Уверенный Linux пользователь
  • Умение четко формулировать технические спецификации и отстаивать техническую позицию
  • Умеете выбирать технологии для решения конкретных задач

Будет плюсом:

  • Опыт работы с облачной инфраструктурой AWS для построение дата платформы
  • Если есть опыт работы в области построения архитектуры Lakehouse с использованием Parquet, AWS Athena и других технологий AWS
  • Если вы работали с системами мониторинга(Prometheus + Grafana, Zabbix)
  • Если вы работали с СУБД Postgres, Clickhouse
  • Если вы работали с Apache NiFi
  • Если вы собирали и сопровождали контейнеры Docker

Мы готовы предложить вам:

  • Работа с первым по популярности продуктом в своей отрасли

  • Оформление по ТК Грузии, конкурентную заработную плату

  • Гибкий график, адаптивное рабочее место и пространство для отдыха

  • ДМС, а также 100% компенсацию больничного листа

  • Компенсацию питания и неограниченное количество снеков круглосуточно

  • Компенсацию изучения английского языка, конференции и курсы под спонсорством компании

  • Тимбилдинги и корпоративные мероприятия.

  • Поддержка от HR-партнера, который поможет адаптироваться и решить любые вопросы.

Мы не рассматриваем удаленный формат сотрудничества.

Похожие вакансии

23 Июня

Data Security Engineer/Developer

Тбилиси

Компания "Nitka Technologies, Inc." Nitka Technologies develops software for customers in the US and Europe and brings together about 300...

Отправить резюме подробнее

23 Июня

Oracle HRMS Engineer

Тбилиси

Компания "Andersen" The IT company Andersen invites an Oracle HRMS Engineer to join its team for working with a company from UAE. The...

Отправить резюме подробнее

23 Июня

Senior GCP Data Architect / GCP Data архитектор

Тбилиси

Компания "Social Discovery Ventures" Social Discovery Group (SDG) is the third-largest social discovery company in the world, uniting 60+...

Отправить резюме подробнее

24 Июня

Senior Python engineer

Батуми

Компания "ТРТ" A medical industry company is looking for a Senior Python engineer. The company offers exposure to a variety of industries and...

Отправить резюме подробнее

24 Июня

Senior FullStack QA Engineer

Батуми

Компания "Social Discovery Ventures" Social Discovery Group (SDG) is the third-largest social discovery company in the world, uniting 60+...

Отправить резюме подробнее

Вакансия размещена в отрасли

Информационные технологии / IT / Интернет: