• B правой части каждого сообщения есть стрелки и . Не стесняйтесь оценивать ответы. Чтобы автору вопроса закрыть свой тикет, надо выбрать лучший ответ. Просто нажмите значок в правой части сообщения.

  • 🔥 Бесплатный курс от Академии Кодебай: «Анализ защищенности веб-приложений»

    🛡 Научитесь находить и использовать уязвимости веб-приложений.
    🧠 Изучите SQLi, XSS, CSRF, IDOR и другие типовые атаки на практике.
    🧪 Погрузитесь в реальные лаборатории и взломайте свой первый сайт!
    🚀 Подходит новичкам — никаких сложных предварительных знаний не требуется.

    Доступ открыт прямо сейчас Записаться бесплатно

Как скрапить динамические сайты?

  • Автор темы Автор темы Andrei_
  • Дата начала Дата начала
  • Теги Теги
    scrapy

Andrei_

Green Team
04.08.2020
67
2
Доброго времени суток, есть потребность скачивать первые 2000 фотографий по одному запросу с гугл картинок, используется фреймворк scrapy
В этом фреймворка опыта разработки у меня нет, поэтому прошу помощи:
Как скрапить динамические сайты?
Ведь на Гугл картинках грузятся лишь первые несколько десятков фото, остальные догружаются по мере прокрутки страницы
Как это обойти?
 
Мы в соцсетях:

Взломай свой первый сервер и прокачай скилл — Начни игру на HackerLab