Проблемы создания и размещения big data-центров

1.

guap.ru
Санкт-Петербургский Государственный Университет Аэрокосмического
Приборостроения
Кафедра №33
Презентация
На тему «Проблемы создания и размещения big data-центров»
Выполнил
Научный руководитель
студент гр. 3136
кандидат экономических наук, доцент
Санкт-Петербург, 2023
А.А. Афоничев
Я.О. Сумбарова
1

2.

Big Data
guap.ru
Big Data - это структурированные или неструктурированные массивы данных
большого объема
2

3.

Где используется Big Data?
guap.ru
• Сегодня сфера применения Big Data: технологии хранения и анализа больших
данных востребованы не только в торговле, рекламе и индустрии развлечений, но
и в сфере безопасности, медицине, сельском хозяйстве, промышленности,
энергетике, науке, государственном управлении.
3

4.

Какие задачи решает Big Data?
guap.ru
• Big
Data
решает
задачи
хранения, сбора информации и
её последующего анализа
• Анализ происходит путём Data
Mining (поиск нетривиальных
закономерностей
для
описательного
или
предсказательного
моделирования)
4

5.

Основные проблемы Big Data центров
guap.ru
• Актуальность информации
• Огромные материальные и
временные затраты
• Неструктурированность
данных
5

6.

Актуальность информации
guap.ru
• Со
временем
информация
хранящаяся в Big Data теряет
свою актуальность
• Работа с Big Data, как с обычной
базой данных не рациональна,
потому что обработка данных
займёт время, несопоставимое с
актуальностью
полученной
информации
6

7.

Неструктурированность данных Big Data
guap.ru
Данные в Big Data могут собираться из разных источников, а значит будут иметь совершенно разную
структуру. Для анализа данных внутри одной компании требуется чтобы информация была записана в
одинаковом виде, чтобы было чёткое понимание где и что хранится. Если происходит так, что данные
имеют разный вид и приходят из разных источников, то задача по построению общей структуры для всех
данных становится актуальной
7

8.

Материальные и временные затраты
guap.ru
• Компания заранее не знает
сколько и каких будет данных,
поэтому трудно предугадать
какие технологии и в каких
количествах потребуются для
Data центра
• Проблема актуальности данных
вытекает
из
проблемы
актуальности информации, ведь
пока
одни
данные
будут
обрабатываться,
они
могут
потерять свою актуальность
8

9.

Хранение Big Data
guap.ru
• Big data обычно хранится в распределенных
файловых системах
• Распределенная файловая система - совокупность
взаимосвязанных автономных компьютеров и
процессоров
• Элементы внутри системы взаимодействуют между
собой для обмена данными и координации
действий
9

10.

Облачные сети для хранения Big Data
guap.ru
Облачные сервисы – это предоставляемые в
аренду ресурсы для вычислений и хранения
данных. Облачный вендор предлагает
клиенту виртуальные машины, диски и
ресурсы для serverless-вычислений, забирая
на себя целый комплекс технических
мероприятий по их развертыванию и
поддержке.
Клиент же получает не только
непосредственно ресурс или услугу, но и
возможность принципиально по-новому
подходить к масштабированию и
оптимизации затрат на железо и софт.
Такие услуги могут быть полезны для
решения множества задач
10

11.

Итоги
guap.ru
• Big Data помогает компаниям анализировать потребности своих клиентов и улучшать
качество предоставляемых услуг/товаров. Но при этом внедрение технологий Big Data в
компанию является довольно сложным процессом, имеющим ряд своих проблем.
11

12.

guap.ru
Спасибо за внимание!