Сделал темопалительный краулер. Скрипт обходит сайты по ссылкам и выкусывает оттуда всякие циферки, типа адсенс ид, урчин ид и т.п. На данный момент он обходит сайты .ru, .su, .ua, .by и .name и то что введено вручную с другими тлд. Работает довольно шустро, не нагружая сервер засасывает по 6000 сайтов в час. С каждого сайта считывается [...]