Аналитик-инженер Наши устройства и другие системы генерируют большие… — Аналитика. Это просто

Аналитика. Это просто@analyticsizzi · 938 subscribers Open in TelegramOpen

Аналитик-инженер

Наши устройства и другие системы генерируют большие объемы данных самого разного рода. Необходимо совместно с командой дата-платформы упорядочить данные, настроить процессы и превратить их в удобный инструмент для анализа и визуализации.
Твои основные заказчки - это аналитики данных.

Что вам предстоит делать?

▶️ Разрабатывать и поддерживать ETL/ELT процессы с использованием dbt/airflow.
▶️ Проектировать и оптимизировать модели в витринном слое.
▶️ Разрабатывать и поддерживать процессы по заполнению мета-данных в дата-каталоге.
▶️ Контролировать качество данных: писать тесты в dbt, осуществлять мониторинг аномалий.
▶️ Документировать данные и процессы (data documentation).
▶️ Адаптировать dbt-core для продуктовых аналитиков.

Мы ожидаем, что вы:

▶️ Знаете dbt-core, имеете опыт доработки core/адаптеров.
▶️ Умеете осуществлять оркестрацию с помощью airflow/dagster.
▶️ Хорошо знаете Python.
▶️ Знаете основы хранения данных, различий между БД.
▶️ Отличное знаете SQL и особенности Clickhouse.
▶️ Работаете с git, s3.

Будет плюсом:

▶️ Опыт разработки Data Vault.
▶️ Опыт работы с BI.

Вакансия на HH