chat_analysis_presentation

1.

Анализ
технических чатов
Частотный анализ сообщений и
выявление проблемных систем
1

2.

Идея и цель
Частотный анализ
Практическая польза
Проведение частотного
(повторяемостного) анализа
сообщений из технических чатов
Выявление систем, которые чаще всего
сообщают об ошибках, и оценка
эффективности принятых мер
База для долгосрочного
анализа
Обеспечение базы для долгосрочного
анализа инцидентов
2

3.

Технологическая база
Python
NLTK
Язык разработки
инструмента
Библиотека обработки
естественного языка
NetworkX
Open Source
Построение и анализ графов
взаимодействий
Все библиотеки open source,
внешних зависимостей нет.
Отправная точка — статья
на Хабре
3

4.

Функциональность
Частые слова
Облако тегов
Список самых частых слов в
чате
Визуализация ключевых тем
обсуждений
Граф взаимодействий
Профиль пользователя
Карта связей внутри чата
Общая информация по
каждому пользователю и топ
его слов
4

5.

Безопасность и интерфейс
Локальная обработка
Локальный сервер
Данные обрабатываются
локально на основе JSONфайла из Telegram
Запуск локального сервера
127.0.0.1:8000
Интерфейс
Универсальность
Интуитивно понятный
интерфейс
Поддержка RU / EN языков;
подходит для технических и
общих чатов
5