Парсер бесплатных прокси
11.09.2024
15.04.2025
68
0
0
0
0
Интерфейс терминальной строки
Парсер
Описание
Это бесплатный скраппер прокси из бесплатных источников. С обходом блокировок при помощи всё тех же прокси и ротации пользовательских агентов в многопоточном режиме. С возможностью фильтровать и группировать прокси по странам и протоколу.
Медиа файлы
Похожие инструменты
Парсер сайта про пиво с использованием рендеринга и API сайта. Данный парсер был разбит на два более мелких парсера, чтобы выжить максимум из этого сайта.
Этот инструмент работает в режиме командной строки. Его суть в том что он может проверять прокси по различнмы URL, и присваивать им определённый вес. Вес зависит от того насколько часто удавалось связаться с целевым сайтом через прокси. Реализован в многопоточном режиме на python.
Это простой парсер как статических, так и динамических страниц с сайтов. Для примера, я решил парсить изображения, ибо именно они являются объектом оптимизации для статически-созданных сайтов. Использует декораторы.
Этот парсер написан на питоне с минимальными зависимостями. Он парсит поисковую выдачу от гугла используя его официальный API.
Отзывы
(0)