Обучение парсингу на Python / Зарабатываем на фрилансе автоматизируя Хабр

⭐ Сервис с прокси: ⬆️ Промокод на скидку 10% — ZProger ⭐ Курс ООП и Приват канал: ⭐ Телеграм канал: qp8Pj0AML2k0MTEx ⭐ Исходный код: Выполняем задание на фрилансе по автоматизации Хабра. Необходимо выполнить парсинг всех страниц определенной категории. Будем делать всё асинхронно, использовать asyncio, aiohttp и bs4. Также в этом задании будет использовать прокси в связке с aiohttp сессией. 📁 Github: 📁 Все плейлисты с уроками: 📁 Связаться со мной: zproger777@ 📁 Поддержать канал: Тайм-коды: 0:00 - Важная информация и описание проекта 1:13 - Подключаем зависимости и извлекаем категории 2:10 - Парсим прокси из файла 2:36 - Какой сервис прокси используется в видео? 3:27 - Асинхронная функция для отправки запросов 4:17 - Проверяем работоспособность прокси 4:30 - Запускаем асинхронные задания параллельно (asyncio gather) 5:05 - Извлекаем количество страниц из сайта 6:25 - Как формируются страницы на сайте? 6:55 - Парсим статьи внутри каждой категории 7:30 - Извлекаем название статьи и ссылку 8:25 - Записываем результаты в файл и сдаем проект 9:07 - 1000 лайков - новые видео о фрилансе #фриланс #парсинг #requests #python #scraping #webscraping
Back to Top