Search by WMSN

Случайно нашел вариант парсинга сайтов без прокси, на 50 потоках спарсил без проблем 2кк страниц с сайтов, которые ранее после 10 страниц выдавали каптчу. Подсказка: юзайте сервисы анализа сайтов.

Answers:

Че за сервисы ?

Антон Клонов, которые анализируют твой сайт (код ответа, титл, кейвордс, время загрузки и т.д. и т.п.)

если контент, то яндекс rca =))