Энциклопедия · Языки программирования · Python · Парсинг на Python

Scrapy и Playwright

Scrapy — фреймворк для обхода сайтов и извлечения данных, а Playwright — инструмент управления настоящим браузером.

  • 5 минЧтение
  • 14Разделов
  • 14Примеров кода

Что вы узнаете

  • Что умеет каждый инструмент
  • Когда применять связку
  • Установка и создание проекта
  • Настройка settings.py
  • Первый обычный Scrapy-паук

Отрывок

Их связка нужна, когда сайт строит содержимое с помощью JavaScript: Scrapy организует обход и обработку данных, а Playwright открывает страницу, выполняет скрипты и позволяет нажимать кнопки, заполнять формы и ждать появления элементов.

Полный текст статьи открывается по подписке.

  • Интерактивные уровни с проверкой ответов
  • Прогресс и повторение терминов сохраняются
  • Тренажёры Linux, SQL, Git и Docker в браузере

Войти и открытьТарифы

Вселенная ИТ — практика IT на русском

Уроки с проверкой, энциклопедия, тренажёры и квизы на одной платформе. Всё работает в браузере, без установки.