Коммерческое предложение_Q.BigData, Оркестратор пайплайнов_13

1.

КОММЕРЧЕСКОЕ ПРЕДЛОЖЕНИЕ
ОРКЕСТРАТОР ПАЙПЛАЙНОВ
В СОСТАВЕ ИНФРАСТРУКТУРНОЙ ПЛАТФОРМЫ
DIGITAL Q.BIGDATA

2.

ПАСПОРТ ПРЕДЛОЖЕНИЯ
ЧТО ВЫ ПОЛУЧИТЕ ?
ПРЕДЛАГАЕМ
Приложение ОРКЕСТРАТОР ПАЙПЛАЙНОВ В СОСТАВЕ РЕШЕНИЯ
DIGITAL Q.DATAFACTORY, предназначенное для оркестрации,
планирования и мониторинга сложных конвейеров обработки данных
(ETL/ELT) в виде направленных ациклических графов (DAG).
Визуальный контроль и мониторинг в реальном времени статусов
обработки данных.
Полный контроль над расписанием и порядком вызова обработки
данных через cron-выражения с возможностью выставления
зависимостей между DAG.
Приложение, разработанное в микросервисной архитектуре.
Программное обеспечение, функционирующее на импортонезависимом
технологическом стеке, зарегистрированное в Реестре российского
программного обеспечения.
Приложение, позволяющее заменить такие зарубежные продукты как
Apache Airflow
Внедрить приложение ОРКЕСТРАТОР ПАЙПЛАЙНОВ В
СОСТАВЕ РЕШЕНИЯ DIGITAL Q.DATAFACTORY.
Интегрировать приложение в IT-ландшафт заказчика.
2

3.

ПРЕДЛАГАЕМОЕ РЕШЕНИЕ
Приложение ОРКЕСТРАТОР ПАЙПЛАЙНОВ В СОСТАВЕ РЕШЕНИЯ DIGITAL Q.DATAFACTORY позволяет автоматизировать
управление потоками данных между различными системами и приложениями.
Функциональные свойства:
Возможность запуска пайплайнов для переноса, преобразования и обработки данных, обеспечивая при этом высокий уровень безопасности
и надежности.
Интеграция с различными внешними системами, такими как СУБД (Q.Database, PostgreSQL, MySQL, BigQuery, Snowflake, Redshift),
аналитические СУБД (Greenplum, Clickhouse), брокеры сообщений (Kafka), хранилища (S3, GCS, Azure), ML-платформы (Kubeflow, Mlflow,
SageMaker) и прочие инструменты (dbt, HTTP API, Spark, Slack, Datadog) с возможностью расширения.
Гибкость процессов обработки данных за счет написания их с использованием языка Python и его экосистемы библиотек.
Горизонтальное масштабирование за счет различных механизмов запуска задач, в том числе в кластере k8s.
Пользователями приложения являются:
Аналитик.
Разработчик.
3

4.

ПРЕДЛАГАЕМОЕ РЕШЕНИЕ
Приложение ОРКЕСТРАТОР ПАЙПЛАЙНОВ В СОСТАВЕ РЕШЕНИЯ DIGITAL Q.DATAFACTORY обеспечивает выполнение
следующих бизнес-процессов:
1. Создание пайплайна.
2. Анализ хода выполнения пайплайна.
4

5.

ПРЕДЛАГАЕМОЕ РЕШЕНИЕ
Приложение ОРКЕСТРАТОР ПАЙПЛАЙНОВ обеспечивает выполнение современных требований к Цифровой
трансформации за счёт следующих свойств:
Событийно-ориентированная архитектура. DAG (пайплайн) запускается автоматически при появлении нового файла в S3, сообщении в
Kafka или изменении датасета, что позволяет устранить задержки между возникновением события и его обработкой.
Продвинутая наблюдаемость. Полная видимость DataLineage, централизованные метрики, экспорт логов и единое окно для всех
пайплайнов. Всё это снижает время реакции на инцидент с часов до минут.
Эластичная масштабируемость. Архитектура с выделенными воркерами, поддержка очередей и многопользовательский режим
изолированных рабочих сред для разных команд. Позволяет добиться централизации управления без потери скорости разработки.
Оркестрация AI/ML пайплайнов (MLOps & LLMOps). Оркестратор пайплайнов может управлять циклами обучения моделей,
пайплайнами фич, а также инференсом
Поддержка мультиязычности. Текущая архитектура позволяет писать задачи не только на Python, но и на Go (с планами на Java,
TypeScript и Rust), что позволяет использовать разный стек технологий разными командами.
Богатая экосистема провайдеров для различных источников данных.
Автоматическое сохранение версий DAG, встроенные механизмы для запусков пайплайнов за прошлые периоды, возможность отката
сделанных изменений. Всё это снижает риски внесения изменений логики обработки данных.
Требования к цифровой трансформации: https://q.diasoft.ru/requirements/
5

6.

ПРЕДЛАГАЕМОЕ РЕШЕНИЕ
Для полнофункциональной работы приложения ОРКЕСТРАТОР ПАЙПЛАЙНОВ В СОСТАВЕ РЕШЕНИЯ DIGITAL Q.DATAFACTORY требуется наличие следующих
PBC:
Q.Security, Управление правами и политикой доступа.
Q.Security, Система безопасности аналитической платформы.
При использовании данных PBC сторонних поставщиков возможна интеграция.
Дополнительно возможно интеграция со следующими PBC:
Q.BigData, Каталог метаданных.
Q.BigData, Репозиторий системных метаданных.
Q.BigData, Система распределённой обработки данных.
Q.BigData, MPP-система выполнения SQL-запросов.
Q.Sensor, Дизайнер дашбордов.
Q.Storage, S3 Архипелаг.
6

7.

ПРЕДЛАГАЕМОЕ РЕШЕНИЕ
АРХИТЕКТУРА РЕШЕНИЯ
7

8.

ПРЕДЛАГАЕМОЕ РЕШЕНИЕ
ПРЕДЛАГАЕМАЯ СХЕМА РАЗВЕРТЫВАНИЯ ВАРИАНТ 1*
Инфраструктура размещается на виртуальных машинах (ВМ).
Для отказоустойчивости используется кластерная конфигурация
микросервисных инфраструктурных компонентов.
Требования к ресурсам ВМ и числу нод в кластерах уточняются с
учетом плановой нагрузки на продукты.
Продукты могут быть размещены в инфраструктуре Заказчика
на существующие кластера Openshift, Kubernetes, Kafka, ELK.
* Детальный расчет рекомендуемых аппаратнопрограммных средств представлен в Приложении 3.
9

9.

ПРЕДЛАГАЕМОЕ РЕШЕНИЕ
ПРЕДЛАГАЕМАЯ СХЕМА РАЗВЕРТЫВАНИЯ ВАРИАНТ 2*
Инфраструктура размещается на виртуальных машинах (ВМ).
Отказоустойчивость микросервисных инфраструктурных
компонентов реализуется на уровне системы виртуализации.
Требования к ресурсам ВМ уточняются с учетом плановой нагрузки
на продукты.
Продукты могут быть размещены в инфраструктуре Заказчика на
существующие кластера Openshift, Kubernetes, Kafka, ELK.
* Детальный расчет рекомендуемых аппаратнопрограммных средств представлен в Приложении 3.
10

10.

ПРЕДЛАГАЕМОЕ РЕШЕНИЕ
РЕАЛИЗАЦИЯ ПРОЕКТА (ВНЕСТИ КОРРЕКТИВЫ ДЛЯ ОПИСЫВАЕМОГО PBC)
Согласована методология,
Сформировано ЧТЗ,
Подготовлены ПиМИ.
Выполнены доработки и
настройки системы.
Готовность к тестовой
эксплуатации.
Проведено обучение пользователи.
Проведено функциональное и
интеграционное тестирование (SIT1 и
SIT2).
Месяц 2
Месяц 1
Выполнены и сданы все
настройки. Принято решение о
вводе в промышленную
эксплуатацию.
Проведены
приемочные
испытания (UAT1 и
UAT2)
Месяц 4
Месяц 3
Обследование (разработка методики)
Доработка решения
Настройка решения
Обучение,
SIT1, SIT2
UAT1, UAT2
Запуск
Поддержка
Н1, 2
Контрольные точки
проекта
Н3, 4
Н5, 6
Результаты
этапа
Н7, 8
Этапы проекта с
участием бизнес
подразделений
Заказчика
Н9, 10
Н11, 12
Этапы проекта без
участия бизнес
подразделений
Заказчика
Н13, 14
Комментарий к этапу
Н15, 16
Н17, 18
НN
Длительность
проекта в неделях
11

11.

ПРЕДЛАГАЕМОЕ РЕШЕНИЕ
ПЛАТФОРМА РАЗВИТИЯ Q.UP
(ДАННЫЙ СЛАЙД ВКЛЮЧАТЬ ТОЛЬКО ДЛЯ PBC, ВХОДЯЩИХ В ПЛАТФОРМЫ РАЗВИТИЯ, ВЫДЕЛИТЬ ЦВЕТОМ ОПИСЫВАЕМЫЙ PBC)
Приложение «Управление маркетплейсом» разработано на платформе развития Digital Q.UP Единая цифровая
платформа. Платформа предоставляет дополнительные возможности по развитию бизнеса банков в цифровых каналах.
Цифровые
каналы
Фронт-офис
Кредитный конвейер
Операционный фронт
Кассовое обслуживание
Поддержка принятия
решений
Омниканальные
сервисы
Бизнес сенсор
Управление продажами
Продуктовый каталог
Дистанционный банкинг
Цифровой кабинет
Управление
маркетплейсом
Государственные
сервисы
Управление
клиентами
Управление
взаимоотношениями
с клиентами
Цифровой профиль клиента
Государственные информационные
службы
ЕСИА
Казначейство
Министерства, Государственные
органы и службы внутренних дел РФ
12

12.

СТОИМОСТЬ РЕШЕНИЯ
СТОИМОСТЬ ЛИЦЕНЗИЙ И УСЛУГ
НАИМЕНОВАНИЕ УСЛУГИ
Поставка лицензий*
Внедрение**
Интеграция**
СТОИМОСТЬ
ХХХ ХХХ руб.
ХХХ ХХХ руб.
Услуги по установке и развертыванию
аппаратно-программного комплекса могут
быть предложены по дополнительному
запросу.
ХХХ ХХХ руб.
ИТОГО:
Х ХХХ ХХХ руб.
Сопровождение за 1 год
ХХХ ХХХ руб.
1.
2.
Для определения стоимости лицензии
использовать методику
https://conf.diasoft.ru/pages/viewpage.action?pa
geId=290528676
Наименование Программного Продукта может быть скорректировано при заключении лицензионного договора с полным сохранением функциональных возможностей.
Ставки специалистов могут быть увеличены в одностороннем порядке один раз в год на размер инфляции (индекса роста потребительских цен), публикуемый на официальном сайте
Центрального банка Российской Федерации.
* НДС не облагается на основании применения Исполнителем права на освобождение от обязанностей налогоплательщика НДС в соответствии с пп. 26, п. 2, ст. 149 НК РФ (Удалить, если
не в реестре отечественного ПО!)
* * НДС не облагается на основании применения Исполнителем права на освобождение от обязанностей налогоплательщика НДС по ст. 145.1 НК РФ (участник проекта «Сколково»)
(Удалить не для «Сколково»!)
13

13. СТОИМОСТЬ РЕШЕНИЯ

СТОИМОСТЬ ПОДПИСКИ И УСЛУГ *
НАИМЕНОВАНИЕ УСЛУГИ
Подписка на 1 год*
Внедрение**
Интеграция
ИТОГО:
1.
2.
3.
СТОИМОСТЬ
ХХХ ХХХ руб.
ХХХ ХХХ руб.
Для определения стоимости лицензии
использовать методику
https://conf.diasoft.ru/pages/viewpage.action?pa
geId=290528676
Услуги по установке и развертыванию
аппаратно-программного комплекса могут
быть предложены по дополнительному
запросу.
ХХХ ХХХ руб.
Х ХХХ ХХХ руб.
Стоимость подписки включает ежегодный платеж за право использования и сопровождение - исправление ошибок, услуги горячей линии, получение новых версии. Оплата
производится с момента ввода решения в промышленную эксплуатацию.
Наименование Программного Продукта может быть скорректировано при заключении лицензионного договора с полным сохранением функциональных возможностей.
Ставки специалистов могут быть увеличены в одностороннем порядке один раз в год на размер инфляции (индекса роста потребительских цен), публикуемый на официальном сайте
Центрального банка Российской Федерации.
* НДС не облагается на основании применения Исполнителем права на освобождение от обязанностей налогоплательщика НДС в соответствии с пп. 26, п. 2, ст. 149 НК РФ (Удалить, если
не в реестре отечественного ПО!)
* * НДС не облагается на основании применения Исполнителем права на освобождение от обязанностей налогоплательщика НДС по ст. 145.1 НК РФ (участник проекта «Сколково»)
(Удалить не для «Сколково»!)
14

14. СТОИМОСТЬ РЕШЕНИЯ

ГРАФИК ОПЛАТЫ
При заключении
лицензионного договора*
При заключении договора на
оказание услуг **
По факту подписания акта
выполненных работ**
При заключении договора
сопровождения
100% оплата лицензий
50% аванс по внедрению
50% аванс по интеграции
50% оплаты услуг по внедрению
50% оплаты услуг по интеграции
100% оплата по договору
сопровождения за 1 год
ХХХ ХХХ руб.
ХХХ ХХХ руб.
ХХХ ХХХ руб.
ХХХ ХХХ руб.
ХХХ ХХХ руб.
ХХХ ХХХ руб.
* НДС не облагается на основании применения Исполнителем права на освобождение от обязанностей налогоплательщика НДС в соответствии с пп. 26, п. 2, ст. 149 НК РФ (Удалить, если не в
реестре отечественного ПО!)
* * НДС не облагается на основании применения Исполнителем права на освобождение от обязанностей налогоплательщика НДС по ст. 145.1 НК РФ (участник проекта «Сколково») (Удалить не
для «Сколково»!)
15

15. СТОИМОСТЬ РЕШЕНИЯ

ПОДХОД К ОРГАНИЗАЦИИ РАБОТ
Передает дистрибутив,
документацию и методику
тестирования
Формирует команду проекта
Консультирует по технологии
интеграции с АБС
Устанавливает продукт на стенде
Заказчика
Настраивает бизнес-процессы
Отлаживает интеграцию
Обучает пользователей
Проводит ПСИ
Обеспечивает проведение
тестового дня
Консультирует по переносу
настроек на боевую среду
Поддерживает в процессе
работы
ИСПОЛНИТЕЛЬ
ИСПОЛНИТЕЛЬ
01
ЗАКАЗЧИК
Адаптировать состав работ исполнителя и
заказчик с учетом особенностей PBC
ПОДГОТОВИТЕЛЬНЫЙ
ЭТАП
02
ВНЕДРЕНИЕ
03
ЗАКАЗЧИК
Готовит тестовый контур с
Московской биржей
Выделяет команду и ответственных
Разворачивает стенд для установки
продукта
Тестирует настроенные бизнеспроцессы
Проверяет интеграцию
Проходит обучение работе с
системой
Осуществляет приемку продукта
ЗАПУСК
Проводит тестовый день
Выпускает приказ о вводе в
промышленную эксплуатацию
Переносит настройки на
боевую среду

16.

РЕФЕРЕНСНЫЕ ПРОЕКТЫ
ОПЫТ <реализации, эффективного использования …..>
Интеграция с решением партнеров ВТБ (ПИК, CIAN) в части
ипотечного кредитования.
Интеграция с фронт-энд системой MMF в МС БАНК РУС в части
автокредитования.
Интеграция с системой ФИС в Фольксваген Банк РУС в части
автокредитования.
17

17.

КОМАНДА ПРОЕКТА
Фото сотрудников использовать
из базы маркетинга!!!!!
Руководитель продукта
ФАМИЛИЯ ИМЯ
МЕСТО ДЛЯ
ФОТО
МЕСТО ДЛЯ
ФОТО
ОПЫТ:
13 лет в IT, реализовано более 50
проектов по фронтальным решениям.
Один из значимых проектов – внедрение
кредитного конвейера в части
автокредитования и ипотечного
кредитования в Банке ВТБ.
Директор по проектам
ФАМИЛИЯ ИМЯ
МЕСТО ДЛЯ
ФОТО
ОПЫТ:
14 лет в компании. Управление
стратегическими проектами компании.
Опыт реализации проектов
комплексной замены АБС, внедрение
кредитного конвейера, мобильного
банка, фронт-офисов.
Бизнес-архитектор
ФАМИЛИЯ ИМЯ
РОЛЬ
Руководитель продукта
Х
ОПЫТ:
Архитектор
Х
15 лет в банковских IT на различных
позициях, 4 года в роли IT-архитектора.
Реализовано более10 проектов различного
уровня. Значимые проекты – Росбанк
(PaymentHUB, корпоративное кредитование),
ББР Банк (ДБО ЮЛ), TPBANK.Вьетнам
(Кредитный конвейер ФЛ).
Аналитик
Х
Специалист внедрения
Х
Менеджер проекта
Х
ИТОГО команда внедрения
Х
КОЛИЧЕСТВО
18

18.

ПРИЛОЖЕНИЯ
№
РАЗДЕЛ
НАИМЕНОВАНИЕ ПРИЛОЖЕНИЯ
НАИМЕНОВАНИЕ ФАЙЛА
1
Предлагаемое решение
Описание продукта <НАИМЕНОВАНИЕ PBC С
ПЕРВОГО СЛАЙДА>
Приложение 1. Digital Q. «Управление
маркетплейсом» (опция Депозиты).docx
2
Предлагаемое решение
Рекомендуемый аппаратно-программный комплекс
Приложение 2. Sizing. xlsx
3
Предлагаемое решение
Состав и трудоемкость работ
Приложение 3. Состав работ.xlsx
4
Стоимость услуг
Расчет стоимости
Приложение 4. Расчет стоимости.xlsx
Требования к квалификации администраторов
Приложение 5. Требования к квалификации
администраторов Diasoft FA#, FLEXTERA и
Digital Q.docx
5
Предлагаемое решение
19

19.

СПАСИБО
Россия, 127018, Москва
ул. Полковая, д. 3, стр. 14
Т: +7 (495) 780 7575; 789 9339
info@diasoft.ru, www.diasoft.ru
Подготовил: Иванов Иван
Адресовано: Акционерное общество «Всероссийский банк развития регионов»
Дата подготовки: 30.10.23 г.
Срок действия: до 31.12.23 г.

20. спасибо

СВЕДЕНИЯ О КОМАНДЕ
Заказчик:
отвечает по вопросу цели создания PBC
Менеджер проекта:
Команда Дизайн-спринта:
архитектор PBC – ФИО
дизайнер GUI – ФИО
системный архитектор (дизайнер микросервисов) – ФИО
Команда Производственная:
из справочника «Управление командами»

21.

БЭКЛОГ НА ОТКРЫТИЕ
Основные работы и функциональность, планируемые к реализации:
№
перекрестного
Норматив
Трудозатраты
(ч/ч)
ИТОГО (ч/ч):
ИТОГО (ч/д):
детальный бэклог (если есть): вложить в виде файла

22.

СТАТУС ПРОЕКТА И ТИПОВЫХ ЗАДАЧ
Статус проекта:
Бюджет
исчерпан, %
Бюджет
факт, ч/д
Бюджет
утв., ч/д
Чек-лист на закрытие с подтверждениями: (ссылка. Запросить в группе Сопровождение MVP)
Статус готовности типовых задач: (скриншот из отчета по MVP-проектам)
Дата начала
проекта
Дата окончания
проекта план
Дата окончания
проекта факт

23.

БЭКЛОГ НА ЗАКРЫТИЕ
Выполненные работы и реализованная функциональность:
(скопировать из бэклога на открытие и указать статус и добавить новые задачи, если были сделаны по ходу проекта)
детальный бэклог (если есть): вложить в виде файла
Статус
да/нет/доп

24.

СТАТУС НА РАЗВИТИЕ PBC
Инвестиционная деятельность по PBC: продолжается/приостановить/завершить
указать одно из доступных значений и если инвест. деятельность планируется продолжить (открыть проект на развитие), тогда заполнить таблицу ниже
Основные работы и функциональность, планируемые к реализации в рамках проекта развития:
детальный бэклог (если есть): вложить в виде файла

25.

СВЕДЕНИЯ О ПРОГРАММЕ ПРОДВИЖЕНИЯ
Обновлен Landing page на портале – Да/Нет
Маркетинговые материалы/активности, подлежащие выпуску или обновлению:
продуктовая новость на сайте diasoft.ru
рассылка через Горячую линию
технологический комитет / вебинар
другое

26.

ВОРОНКА ПРОДАЖ
Потенциальные клиенты для продвижения PBC:
Перечислить основных. Обязательно для Платформ развития. Согласовать с Деп. продаж (Щетинин Дмитрий)
1.
2.
3.
4.
5.
6.
полная версия воронки продаж (с учетом всех клиентов): вложить в виде файла