Аналитик DWH

Компания "IBS"

Обязанности:

• Участие в построении хранилища данных (проектирование, определение сущностей, формирование витрин данных)
• Разработка моделей витрин данных
• Разработка и оптимизация процессов выгрузки данных из различных источников
• Разработка процессов обработки данных
• Согласование решений с архитектором и презентация заказчику
• Разработка методов ETL и запуск в работу
• Написание и выполнение тестовых сценариев, поддержка сверок с эталонными данными
• Создание проектной документации (требования, S2T, модели данных, описание логики трансформации

• Опыт работы на проектах развития DWH/ DataLake - от 2-х лет (разработчиком будет преимуществом)
• Опыт работы с реляционными базами данных (PostgreSQL, GreenPlan)
• Глубокие знания в области SQL, включая понимание планов запросов, функций, процедур, индексов, партиций, методов сжатия данных, оптимизации запросов и других аспектов
• Понимание принципов работы с Kafka/системами обмена сообщениями
• Опыт работы с большими нагруженными системами
• Готовность к рефакторингу моделей данных
• Понимание концепций и принципов проектирования хранилищ данных (DWH): слои, витрины, агрегаты, полная-инкрементальная загрузка, Схема звезды, Схема снежинки, Data Vault, Anchor Modeling)
• Data Governance и Data Quality. Понимание принципов управления данными, включая обеспечение качества данных, безопасности и соответствие нормативным требованиям
• Опыт работы по построению хранилищ, витрин, моделей данных
• Опыт владения и понимание внутренних механизмов ETL-инструментов Apache NiFi, Apache SeaTunnel и др.
• Понимание систем оркестрации и планировщиков (Airflow и др.)
• Опыт работы с GIT/Jira/Confluence
• Желательные:

• * Желателен опыт работы в банковской сфере, знание специфики работы с финансовыми данными
  * Опыт проектирования баз данных и оптимизации производительности;
  * Проектирование и реализация структур данных, алгоритмов загрузки и обработки данных в ХД;
  * Опыт работы с Data Vault 2.0;
  * Опыт работы на Python (базовые библиотеки);
  * Практический опыт работы с потоковой обработкой данных (streaming/real-time) и с пакетной обработкой данных (batch);
  * Способность выявлять и анализировать проблемы в данных, предлагать эффективные решения и оценивать их влияние на бизнес.

• Официальное оформление в аккредитованную IT-компанию.
• Система ДМС со стоматологией.
• Собственный учебный центр с тренингами по языкам программирования, soft skills, карьерному росту и пр.
• Участие в крупных отраслевых мероприятиях.
• Cпортивные и well-being мероприятия.
• Корпоративные скидки от компаний-заказчиков и многое другое.

Открыть контакты работодателя

Зарегистрируйтесь или войдите, чтобы открыть контакты работодателя