Введение в современные БД и СУБД (лекция)

1.

Лекция
Введение в современные БД и СУБД
1. Системы файлов и системы баз данных.
2. Технологии баз данных.

2.

1.Системы файлов и системы баз данных

3.

Особенности файловых хранилищ данных
• разделение и изоляция данных;
• дублирование данных;
• зависимость от данных;
• несовместимость файлов;
• фиксированные запросы/быстрое
увеличение количества приложений.

4.

5.

База данных представляет
собой поименованную,
структурированную
совокупность данных,
относящихся к конкретной
предметной области и
находящихся под
централизованным
программным управлением

6.

Уровни архитектуры БД

7.

8.

http://proglib.io
https://freelance.today

9.

10.

11.

12.

13.

Виды архитектуры приложений с БД

14.

2. Технологии баз

15.

БД учета
товара
БД учета
продаж
БД учета
договоров
Хранилище данных
БД учета
клиентов/
поставщиков
Агрегированные
данные:
- Суммы;
- Средние;
- Min/Max;
- Количество.
Администратор
Системный аналитик
Бизнес-аналитик
ЛПР – руководитель

16.

Большие данные.
6 109 бит – объем генетической памяти человека.
Из них только 108 бит – объем оригинальной генетической памяти человека.
1 млн Тбит информации может хранить человеческий мозг.
До 11 Мбит/с принимают органы чувств.
Из них в среднем всего 16 бит/с составляет осознанный человеком
информационный поток.
Из них кратковременная память хранит только 5–9 фактов в течение 20 секунд.
Из них не более 20% информации остается в долговременной памяти.
В результате считается, что человек использует 5–10% объема доступной
долговременной памяти.

17.

18.

NoSQL
Представление данных в виде агрегатов

19.

20.

21.

22.

23.

NoSQL

24.

Blockchain

25.

Blockchain

26.

Blockchain

27.

MapReduce

28.

MapReduce
Word Count
Обработка логов рекламной системы

29.

Hadoop
Состав платформы:
Hadoop Common;
Hadoop YARN;
Hadoop Distributed File System (HDFS);
Hadoop MapReduce