Парсер wildberries
16.11.2024
14.05.2025
202
0
0
0
0
Интерфейс терминальной строки
Парсер
Описание
Это базовый пример парсера такого онлайн магазина wildberries. Который избегает обнаружения и блокировок используя ротацию прокси и динамически собирая данные используя Selenium.
Медиа файлы
Похожие инструменты
Его суть в том что он может проверять прокси по различнмы URL, и присваивать им определённый вес, реализован ввиде python скрипта. Вес зависит от того насколько часто удавалось связаться с целевым сайтом через прокси. Реализован в многопоточном режиме на python.
Это однопоточный парсер любых страниц фильтраций и пагинаций кинопоиска. То есть тех страниц в адресе которых присутствует list слаг. Парсит данные через прокси, возможно подойдёт киноманам.
Это простой парсер как статических, так и динамических страниц с сайтов. Для примера, я решил парсить изображения, ибо именно они являются объектом оптимизации для статически-созданных сайтов. Использует декораторы.
Отзывы
(0)