576.62K

Ardexa_Tayanch_КП_в2 (2)

1.

ARDEXA
Предложение по созданию
корпоративного хранилища
данных
Построение хранилища данных
для АО “TAYANCH MIKROMOLIYA BANKI”
DWH
2026
ARDEXA
BI
ETL

2.

Скоуп работ
01
RegTech
Модель данных ЦБ (10 доменов)
02
Реестр кредитов
Плоский гранулярный реестр кредитов на уровне договора (~37
полей: анкета, клиент, паспорт, сумма и срок договора, ставка,
количество просрочек, накопительный счёт)
ARDEXA
DWH • BI • ETL

3.

Технологический стек
01
02
03
DWH
ETL
BI & Analytics
Cloudberry 2.1.0
Слои: Raw / Core / PreDM /
DM
Apache Airflow 3.x
dbt Core 1.12.0
Apache Superset - UI и
дашборды
Apache Airflow - генерация
отчётов
SeaweedFS - хранение
готовых форм
Приложение B
Архитектура (подробно) представлена в Приложении C
ARDEXA
DWH • BI • ETL

4.

Целевой результат проекта
115 витрин 1 витрина ~20 витрин
Автоматизация RegTech
отчетности
Автоматизация реестра
кредитов
Автоматизация core
витрин
• Приложение А -детали по отчётам RegTech
ARDEXA
DWH • BI • ETL

5.

Roadmap проекта
Аудит
Месяц 1
Месяц 2
Месяц 3
Проектирование
Месяц 4
Разработка
Внедрение
Месяц 5
Месяц 6
Системный анализ
Архитектура DWH
Инфраструктура и ETL
Витрины и модели данных
Формы отчетности
Обучение и запуск
ARDEXA
DWH • BI • ETL

6.

Стоимость
СТАТЬЯ РАСХОДА
СОСТАВ РАБОТ
СТОИМОСТЬ
Внедрение и разработка DWH с
предоставленным маппингом
Системный анализ. Развёртывание PostgreSQL и слоёв Raw / Core
/ PreDM / DM, CDC-поток Debezium → Kafka, DAG в Airflow и модели
dbt по готовому маппингу, витрины и отчётные формы, Reporting
UI, тестирование
Внедрение и разработка DWH
без предоставленного маппинга
Обследование источников и интервью с бизнесом, реверсинжиниринг структур NCI (АБС), разработка маппинга и модели
данных, далее полный объём работ статьи 1
450 000 000 сум
Работы DevOps
Развёртывание всего контура в инфраструктуре заказчика:
серверы, сеть, CI/CD, мониторинг, резервное копирование
20 000 000 сум
Сопровождение
Поддержка всего разработанного решения: инциденты и SLA,
мониторинг потоков загрузки, доработка регламентных отчётов.
Grace период перед передачей в поддержку – 1 месяц.
8 000 000 сум
350 000 000 сум
единоразово
единоразово
единоразово
ежемесячно
Статьи 1 и 2 — альтернативные варианты. Итого разово: 370 или 470 млн сум + сопровождение 8 млн сум/мес.
ARDEXA
DWH • BI • ETL

7.

Приложение А. RegTech
Вкладок
из них
dim
Строк
Форм
Метрик
Размерн.
Бизнессущностей
Целевых
атрибутов
Кредиты
35
27
2 495
71
1 042
815
16
307
Транзакционные услуги
22
16
1 360
5
396
494
6
87
Структура ПО
32
25
980
4
402
365
15
151
Депозиты
23
17
957
38
247
482
24
95
Прочие фин. активы
16
10
445
1
202
202
4
59
Финансовые показатели
10
4
389
1
190
190
4
28
Прочие нефин. активы
12
6
245
0
101
108
5
35
Денежные средства
12
6
183
2
56
115
1
27
Прочие обязательства
10
3
69
1
16
50
1
12
Производные финансовые
инструменты
9
11
80
1
24
18
3
53
181
125
7 203
124
2 676
2 839
~79
~854
Домен (файл)
ИТОГО
Строк = строк маппинга · ~854 целевой атрибут · ~79 бизнес-сущностей - 79· 2 652 метрики · 2 839 размерность
ARDEXA
DWH • BI • ETL

8.

Приложение B. Reporting Service
Небольшой отдельный сервис: не занимается аналитикой, а
берёт подготовленные данные из слоя DM и формирует
документы строго по утверждённым шаблонам банка. Логика
расчёта показателей остаётся в DWH.
SQL-запросы
Забирают готовые показатели из слоя DM
CORE
DM STAGE
DM
Apache Airflow
По расписанию запускает формирование отчёта
Сервис регламентированной отчётности
Хранят утверждённые .xlsx формы банка
SQL → утверждённый шаблон → XLSX / PDF: Форма 101, Форма
102, управленческая
Report Generator
MinIO
Excel Templates
Подставляет данные в нужные ячейки (openpyxl)
Готовый файл отчёта
Таблица-реестр в DWH
Метаданные и ссылка
API / Scheduler
Запуск вручную или по расписанию из Airflow
Superset
Витрина отчётов: пользователь жмёт ссылку и скачивает файл
ARDEXA
DWH • BI • ETL

9.

Приложение C. Архитектура
ИСТОЧНИК
CDC / СТРИМИНГ
ОРКЕСТРАЦИЯ И ETL
DWH · POSTGRESQL
ОТЧЁТНОСТЬ
Cloudberry
Debezium
Apache Airflow
CDC-коннектор
Оркестрация DAG
NCI (АБС)
Raw
Сырые данные
Core
Модель, бизнес-слой
DM Stage
Ядровые витрины
Oracle Database
Apache Kafka
dbt
Шина событий
Шаблоны потоков
DM
Финальные отчёты
SeaweedFS
Файлы отчётов
Superset
Приложение
Пользователи
Поток данных: Oracle (NCI) → Debezium CDC → Kafka → Airflow + dbt → PostgreSQL DWH (Raw → Core → PreDM → DM) → S3 → Reporting UI
ARDEXA
DWH • BI • ETL

10.

Приложение D. Требования к инфраструктуре
Cloudberry
Параметр
Отдельный app-сервер (Apache Airflow/Superset/SeaweedFS)
Минимум
Рекомендуемая
CPU
8 ядер
16 ядер
RAM
32 ГБ
64 ГБ
Диск под данные
1 ТБ SSD
2 ТБ SSD
Системный диск
500 ГБ SSD
500 ГБ SSD
Сегменты
2-4 primary
4 primary
ARDEXA
Параметр
Минимум
Рекомендуемая
CPU
4 ядра
8 ядер
RAM
16 ГБ
32 ГБ
Диск под систему
200 ГБ SSD
300 ГБ SSD
Диск под
объектное
хранилище
500 ГБ SSD
500 ГБ SSD
DWH • BI • ETL
English     Русский Правила