Dataset consideration pres

1. Обзор статьи Dataset Condensation with Distribution Matching Bo Zhao, Hakan Bilen School of Informatics, The University of

Edinburgh
Выполнили: Логунов Даниил, Шерышев Егор, Сенаторов Александр

2. POI (Points of interest)

• Introduction
• Dataset Condensation Problem
• Dataset Condensation with Distribution Matching
• Training Algorithm
• Conclusion

3. Introduction

• Проблема: В силу объемности датасета для нормального
обучения современных моделей требуется большие
вычислительные мощности
• Сложность уже предложенных методов решения проблемы
• Подход создания синтетического датасета

4. Introduction

5. Dataset Condensation Problem

• Постановка задачи:
Dataset Condensation with gradient matching :

6. Dataset Condensation with Distribution Matching

• Методология MMD для решения задачи:
• Достоинства в сравнении с методом gradient matching

7. Training Algorithm

8. Results

9. Results

10. Conclusion

• Получилось использовать для TinyImageNet и ImageNet-1K
• Метод работает в 45 раз быстрее
• Удалось сгенерировать большие объемы синтетических данных
(до 1250 изображений на класс для CIFAR10).