Big Data. Эксгумация больших данных

1. Big Data

Эксгумация больших данных
Руслан Габбасов

2. Что такое большие данные?

24TB
24TB

3. Что такое большие данные?

48TB
36TB

4. Что такое большие данные?

5. Это когда проще отправить код к данным

6. Это когда проще отправить код к данным

7. Это когда проще отправить код к данным

8. Это когда проще отправить код к данным

9.

10. Экосистема Hadoop

11. Big Data — зоопарк: слоны, свиньи и т.д.

■ Hadoop — экосистема, набор библиотек и утилит для работы с
большими распределенными данными
■ HDFS — файловая система для блочного хранения больших
файлов с поддержкой репликации
■ YARN — утилита для планирования, координации и управления
вычислительными ресурсами кластера
■ Spark — фреймворк для распределенной обработки
неструктурированных и слабоструктурированных данных

12. HDFS

13. YARN

14. YARN

15. MapReduce

16. MapReduce

17. Spark

18. Spark

19. Spark

20. Руслан Габбасов

Руководитель центра разработки
в г. Уфа
Gabbasov_RI@directum.ru