Отчет по результатам стажировки. Direct Service

1.

Отчет по
результатам
стажировки
ПОДГОТОВИЛ: KARNAKSP
НАЗВАНИЕ КОМПАНИИ: DIRECT SERVICE
ДОЛЖНОСТЬ: JUNIOR DATA ENGINEER

2.

О компании Direct
Service
Основная деятельность: проектирование, запуск и развитие
программ лояльности и маркетинговых механик
• Компания выступает аутсорс-экспретом и имеет опыт с разными
по масштабу предприятиями
• Есть офис в Москве и Новосибирске
Корпоративная культура:
• Гибкость и мобильность
• Все взаимодействие в удаленном формате. Раз в месяц в офисе.

3.

Моя должность и
отдел
Junior Data Engineer
Функциональное подразделение/отдел:
Управление данными
Рутинные задачи:
Написание скриптов в Postgresql для построения
витрин данных
Создание и поддержка ETL процессов
Мониторинг работы ETL процессов

4.

Структура
команды и
методология
Структура проектной команды:
Системный аналитик, я (data engineer),
devops.
Методология организации проектной
работы:
Scrum
Основные процессы и инструменты:
Инструменты для разработки и
анализа данных: SQL, pl/plgsql, Python,
batch, PowerBI.

5.

Описание выполненных задач
Примеры задач, выполненных
во время стажировки:
Наименее любимая и наиболее частая – доработка/исправление
витрин
Самая любимая задача – автоматизация etl процесса
Общее количество назначенных задач: 32
Анализ работы:
Количество успешно выполненных задач: 32
Количество задач, возвращенных в выполнение: 24
Среднее время выполнения задачи: 5 ч.
Приобретенные
навыки/качества:
Технические навыки (написание хранимых процедур, функций и
триггеров на plsql/pgsql, миграция данных из Clickhouse, работа с
batch скриптами и планировщиков задач на винде)
Софт скиллы (командная работа, управление временем)

6.

Результаты
стажировки
• Достижения:
Построил DWH и автоматизировал
пайплайн etl для анализа данных
программы лояльности
Благодаря этой работе имеются ежедневно
обновляемые данные, отображаемые на
дашбордах в компаниях-заказчиках

7.

Отчет по
результатам
стажировки
ПОДГОТОВИЛ: KARNAKSP
НАЗВАНИЕ КОМПАНИИ: DIRECT SERVICE
ДОЛЖНОСТЬ: JUNIOR DATA ENGINEER