Консолидация и нормализация данных. ЕСК

1.

ЕСК
Консолидация и нормализация данных

2.

Предыстория
Система
должна
состоять
из
следующих
компонентов:
«Единый справочник клиента» :
o подсистему интеграции;
o подсистему повышения качества данных;
Только ЕСК
Точки актуализации данных
o подсистему управления основными данными;
o подсистему управления запросами.
компонент Карточка клиента (вкл требования из
ФТ);
модель данных для отчетного слоя.
Старт 10.10 – разбор ФТ от ФЗ, результат Закупочное ТЗ
2 недели работ
Но все равно ЕСК –
проектируем в контексте
ИТ-ландшафта и
дальнейшего
использования
(BI, маркетинг)

3.

Заинтересованные лица Актуализировать
ФИО, должность
Сила
возможного
влияния
Степень инф-ти о
проекте, его целях
и тек. состоянии
Доп. усл. при
которых
отношение может
поменяться
ГД
***
*
Геополитическая
ситуация
Чернов,
Коммерческий Директор
**
*
*
***
Аркинд Анна,
ИТ
Отн-ие к
проекту
+
Князева, Никулина,
Управление реализации газа
*
Яна Беликова,
Управление развития сервиса
*
,
Коммерческое управление
*
Андрюшина,
Сводно-аналитическое
управление

4.

Архитектура
САУПГ
Web-интерфейс пользователя
22
Перечень ИС
условный,
требует
расширения и
уточнения.
За рамками:
• МосРег;
• ЕСИА;
• ФИАС;
• ФНС;
• ЕГРЮЛ;
• НОПРИЗ и др.
внешние БД
контрагентов
ЛКК
СУТП
Модель данных
10-14
Ролевая модель
15
Бизнес-правила
3-9
API
16
Маршрутизация
17
Интеграции
18
Поиск дублей
19
Маппинг
20
Уведомления
21
Отчеты (Только после ОПЭ)
Модуль
ИМ
рассылок
Интеграционная шина
(Rabbit MQ)
СЭД
СУМБ
АС МТС
Хранилище данных 23
Elasticsearch
1С
СУВК
PostgreSQL
РПЦ

5.

Этапы проектирования
Работа
1
Определение списка ИС
2
Определение атрибутов Клиента для каждой ИС
2а
Определение «точных» атрибутов
2б
Согласование атрибутов ЕСК с Закачиком
3
Описание правил валидаций (кол-во атрибутов)
4
Описание правил обработки элементов, которые не
прошли валидацию
5
Описание поиска похожих для элементов, прошедших
валидацию
6
Описание правил автоматического обогащения
данных/объединения данных
7
Описание правил ручного маппинга
8
Описание рекомендаций для уточнения данных (КК)
9
Правила настройки бизнес-правила в
административной панели ЕСЛИ - ТО
Срок
Комментарий

6.

Этапы проектирования
Работа
10 Описание справочников
11 ER-схема
12 Диаграмма потоков данных
13 ЖЦ элемента НСИ
14 Правила настройки модели данных
15 Ролевая модель БП Управление данными
16 Описание интеграций с ИС из списка 1
17 Описание настройки правил маршрутизации
обмена данными из ИС в административной
панели
18 Описание настройки интеграций и логирование
обмена данными
19 Описание алгоритма поиска дублей
20 Описание алгоритма маппинга записей из разных
ИС
Срок
Комментарий

7.

Этапы проектирования
Работа
21
Описание правил уведомлений по обработке
22
Описание веб-интерфейса
23
Описание ХД
Срок
Комментарий

8.

ФИАС
Внешний источник
Модель данных
Компонент МДМ
СУМБ
БП актуализации данных из ИС
(без изменений текущих услуг)
АС МТС
Клиентские данные из ИС
ЛКК* – актуализация данных и источник клиентских данных

9.

Кто заполняет данные в источниках?

10.

Риски