По наводке из блога СоНоты, нашёл большой список доменов в зоне ру. Теперь надо придумать, как его грамотно импортировать к себе в базу, если засасывать в один поток проверяя что домен хотя бы резолвится, то это займёт где-то 10 дней безостановочной работы. Это кстати намёк людям, которые по форумам пишут, что у них курл или fsockopen медленно работают – не там смотрите. :) Тормоза с резолвом по моему опыту создают половину всех проблем со скачиванием чего либо. Если надо что-то качать со многих сайтов, то большая часть проблем – это медленный или зависающий резолв хоста.

Похожие посты

    Нет похожих постов