Простой парсинг сайтов на Python | requests, BeautifulSoup, csv

• Автор объясняет, что он решил сделать и записать видео как видеоурок, так как ему нужно было написать парсер на Python для финансовых сайтов.  

• Он объясняет, что это видео подразумевает, что зрители знакомы с языком программирования Python на уровне понимания синтаксиса и основных понятий, таких как переменные, функции и импорт модулей.  

• Автор импортирует две библиотеки: requests и BeautifulSoup.  

• Он объясняет, что первая библиотека используется для работы с запросами, а вторая - для разбора HTML-страниц и создания объектов.  

• Он также объясняет, что константы можно записывать в коде или запрашивать в терминале.  

• Автор объясняет, как он будет парсить информацию с сайта и создавать CSV-файл для дальнейшей работы.  

• Он также показывает, как можно настроить константы и импортировать CSV-модуль для создания файла.  

• Автор объясняет, как получить содержимое страницы и использовать его для парсинга данных.  

• Он также объясняет, как использовать функцию для получения аштемеля и как использовать второй модуль, чтобы распарсить аштемель и получить нужные данные.  

• Автор объясняет, как использовать второй модуль, "бьютифул суп", для распарсивания аштемеля и получения нужных данных.  

• Он также показывает, как использовать этот модуль для получения конкретных элементов страницы, таких как карты.  

• Автор объясняет, как использовать полученные данные для создания массива карт и как использовать цикл для пробега по этим картам.  

• Он также показывает, как использовать функцию для вывода объекта атомс, чтобы показать, что находится внутри этих карт.  

• Функция получает данные с сайта и возвращает их в виде списка.  

• Функция использует функцию get_asthemel для получения данных с сайта.  

• Функция также использует функцию get_text для получения текста из элементов сайта.  

• Функция парсера получает объект HTML и записывает его в файл.  

• Функция проверяет код ответа и записывает его в консоль.  

• Если код ответа не равен 200, функция выводит сообщение об ошибке.  

• Функция парсинга данных запускается отдельно и может быть использована как ключ к выполнению всего парсинга.  

• Функция получает количество страниц для парсинга и может быть расширена для работы с разными страницами.  

• Функция парсинга данных собирает данные с каждой страницы и сохраняет их в списке.  

• Функция использует метод экстенд для добавления данных в список.  

• Функция парсинга данных может быть протестирована с помощью указания количества страниц для парсинга и страницы для начала.  

• Данные могут быть выведены в консоль или сохранены в файл с помощью функции принт.  

• Создание функции "сейф-док", которая будет принимать два параметра: данные для сохранения и путь к файлу.  

• Функция открывает файл для записи, указывает формат файла и добавляет файл в файл.  

• Функция "сейф-док" интегрируется в глобальную функцию "парсер", которая будет запускать сохранение данных после получения статуса ответа и считывания параметров.  

• Парсер сохраняет данные в файл "кар цсв", который создается в папке "кар цсв".  

• Парсер успешно сохраняет данные с 11 страниц, включая название продукта, ссылку на продукт и изображение карты.