Data Engineer | Инженер данных

18 Октября

Партнерские Вакансии

Компания "Операционное совершенство"

О компании:

Операционное совершенство — компания, разрабатывающая инновационные решения для горнорудной отрасли на основе технологии Интернета вещей (IoT). Наши продукты используют искусственный интеллект (AI), машинное обучение (ML) и анализ больших данных (Big Data) для повышения эффективности и оптимизации процессов.

Задачи:

• Работа на уровне ETL (Extract, Transform, Load) для создания и оптимизации процессов извлечения, преобразования и загрузки данных.
• Устранение неполадок в брокерах сообщений, обеспечивающих обмен данными между различными компонентами системы.
• Поддержка и оптимизация систем управления базами данных (СУБД), включая настройку производительности и управление данными.
• Внедрение и сопровождение фреймворков для обработки и анализа больших данных, что включает настройку и оптимизацию инструментов для обработки больших объемов информации.

• Проведение мониторинга систем для выявления узких мест в производительности.
• Оптимизация запросов к базам данных и структур обработки данных для улучшения общей производительности системы.

• Оценка необходимых ресурсов (сайзинг) для эффективного выполнения задач обработки данных.
• Проведение тестирования функциональности систем обработки данных для подтверждения их работоспособности и производительности.

Ты нам подходишь, если у тебя есть:

• Экспертное знание SQL: опыт разработки хранимых процедур и оптимизации запросов.
• Опыт с Python: уверенное использование инструментов Airflow и NiFi для автоматизации и управления потоками данных.
• Опыт работы с различными источниками данных: умение работать с Kafka, API, а также базами данных NoSQL и SQL.
• Опыт работы с ОС Linux: знание контейнеризации и администрирования сервисов в среде Linux.
• Моделирование данных: навыки создания эффективных структур хранения данных для анализа и обработки информации.

У нас хорошо, потому что у нас есть:

• Программа корпоративных привилегий PrimeZone.
• ДМС.
• Доступ к обучению английскому языку.
• Возможность проходить курсы и тренинги по развитию в сфере вашей специальности.
• Участие в интересных и сложных проектах в области интернета вещей.
• Дружелюбный и поддерживающий коллектив.

Если вы готовы принять вызов и работать над инновационными решениями в горнодобывающей сфере, присылайте свой отклик!