Как спарсить приватную телеграм группу или канал? Скраппинг через MTProto

• Алекс рассказывает о своем эксперименте по парсингу приватного телеграм-чата.  

• Вспоминает, что на предыдущем месте работы использовал телеграм для маркетинговых целей.  

• Решил собрать статистику по количеству сотрудников, отмечающих годовщины работы в компании.  

• Обнаружил, что статистика не всегда соответствует ожиданиям.  

• Решил создать аналог корпоративного канала для анализа.  

• Основная задача - извлечь нужные сообщения из большого количества данных.  

• Рассмотрел использование бота, но это не подходит для приватных каналов.  

• Подумал о веб-версии телеграмма, но столкнулся с проблемами изменения DOM.  

• Решил использовать протокол MTProto для создания собственного клиента.  

• Создал папку проекта и инициализировал npm.  

• Установил библиотеку MTProto и создал файл конфигурации.  

• Импортировал необходимые переменные и настроил аутентификацию.  

• Авторизовался в приложении и получил все чаты пользователя.  

• Нашёл нужный канал и получил его ID.  

• Использовал метод getMessages для получения всех сообщений из канала.  

• Получил все сообщения из канала и отфильтровал нужные.  

• Записал сообщения в файл и обработал их с помощью JSON.  

• Отфильтровал сообщения с текстовым содержимым и эмодзи с числом "1".  

• Используем метод match для поиска имен и фамилий в сообщении.  

• Применяем регулярное выражение для поиска совпадений.  

• Пропускаем букву "е" для подсчета количества вхождений.  

• Делим каждое сообщение на строки по переносу.  

• Отправляем каждую строку в функцию для поиска имен и фамилий.  

• Выносим функционал парсинга имен и фамилий в отдельную функцию.  

• Парсим сообщения по переносу строки для получения объекта со строками.  

• Определяем количество лет работы сотрудников по наличию эмоций в строке.  

• Создаем переменную для групп в зависимости от наличия эмоций.  

• Заменяем if на let для оптимизации.  

• Записываем итоговый результат в конкретную группу.  

• Выносим подсчет количества имен в отдельную функцию.  

• Выводим результат в консоль после исправления ошибок.  

• Проверяем, существует ли массив с именами.  

• Добавляем логику для обработки пустого объекта.  

• Результат работы скрипта виден в консоли.  

• Призываем подписаться на телеграм-канал и другие каналы автора.  

• Прощаемся и благодарим за внимание.