Не все знаю, но все ссылки из ДМОЗ можно официально получить с сайта, вот отсюда. Если кто-то собиратся писать парсер ДМОЗа – не тратьте время зря. :) Главный файл довольно увесистый, больше 300 мегабайт. В качестве контента его использовать бессмысленно, потому что это уже делается другими, но вытянуть оттуда урлы для каких то своих целей – очень даже можно.

P.S.: пробуем шпионскую базу OwnerSpy.

Похожие посты