Инструменты связанные со следующими тегами: Статический парсер. Страница 1
Коллекция полезных инструментов, которые я когда-либо создавал. Они были связаны и сгруппированы по следующим тегам: Статический парсер. Страница 1
На русском/
Инструменты/
Страница 1, Статический парсер,
Это простой парсер как статических, так и динамических страниц с сайтов. Для примера, я решил парсить изображения, ибо именно они являются объектом оптимизации для статически-созданных сайтов. Использует декораторы.
Его суть в том что он может проверять прокси по различнмы URL, и присваивать им определённый вес, реализован ввиде python скрипта. Вес зависит от того насколько часто удавалось связаться с целевым сайтом через прокси. Реализован в многопоточном режиме на python.
Этот парсер парсит доступный контент на сайте в многопоточном режиме с ротацией пользовательских агентов. Простой пример.
Этот парсер парсит все вопросы в форуме в многопоточном режиме. Ничего особенного просто пример.
Форма обратной связи
Подписка на рассылку
...
