Вопросы по теме 'scrapy-splash'

Установить геолокацию для браузера Splash (Scrapy/Python)
Я пытаюсь установить геолокацию браузера, чтобы, когда я захожу на веб-сайт, он распознавал мое местоположение, поскольку страница не будет загружаться, если у меня не установлена ​​геолокация. Кто-нибудь знает, как установить его в заставке? Я...
123 просмотров
schedule 18.04.2024

Очень простой проект Scrapy+Splash
Я разрабатываю очень простой проект Scrapy + Splash для сканирования веб-сайтов javascript. Это мой код: splashtest.py: import scrapy from scrapy_splash import SplashRequest class SplashSpider(scrapy.Spider): name = 'splash_spider'...
2705 просмотров

Scrapy с Splash по-прежнему дает DEBUG: Crawled (200)
Я новичок в scrapy и не могу понять, почему у меня возникает эта проблема, когда я запускаю свой код. Я закодировал это из простого учебника, а затем добавил Splash. Splash запущен и работает. Это код: livros.py from scrapy.spiders import...
213 просмотров
python scrapy scrapy-splash splash-js-render
schedule 05.09.2022

Scrapy Splash: нажатие кнопки не открывает следующую страницу
У меня возникли проблемы с выполнением кнопки Click с помощью Scrapy-Splash. Веб-сайт, который я пытаюсь очистить, это:...
159 просмотров

Как я могу получить ссылку из javascript.void (0), используя скрап с всплеском?
Я хочу получить URL-адрес следующей страницы этого сайта:...
224 просмотров
schedule 20.10.2023

Селектор xpath scrapy-splash работает в оболочке, но не с пауком
Проблема: я использую scrapy-splash, чтобы очистить страницу с видео на YouTube. Однако кажется, что xpath не возвращает никаких элементов, кроме элемента keywords . (xpath копируются прямо из Chrome) Что я пробовал: Сначала я подумал,...
339 просмотров
schedule 15.05.2024