Энциклопедия · Языки программирования · Python · Парсинг на Python
Scrapy и Playwright
Scrapy — фреймворк для обхода сайтов и извлечения данных, а Playwright — инструмент управления настоящим браузером.
- 5 минЧтение:
- 14Разделов:
- 14Примеров кода:
Что вы узнаете
- Что умеет каждый инструмент
- Когда применять связку
- Установка и создание проекта
- Настройка settings.py
- Первый обычный Scrapy-паук
Отрывок
Их связка нужна, когда сайт строит содержимое с помощью JavaScript: Scrapy организует обход и обработку данных, а Playwright открывает страницу, выполняет скрипты и позволяет нажимать кнопки, заполнять формы и ждать появления элементов.
Полный текст статьи открывается по подписке.
- Интерактивные уровни с проверкой ответов
- Прогресс и повторение терминов сохраняются
- Тренажёры Linux, SQL, Git и Docker в браузере