Услуги программирования на php и javascript, системного и сетевого администрирования Linux | Работы Петр М [peter23]

На русском

Portfolio

< > ×

parse_sites_dmoz

Разработка скриптов для сбора данных по нескольким миллионам сайтов из каталога DMOZ. Среди собираемых данных как показатели поисковых систем (Google PageRank, Alexa Rank и др.), так и характеристики самого сайта (кодировка, мета-теги и др.), а также данные whois (регистратор, владелец и т.д.). Скрипт конечно же поддерживает многопоточность и списки прокси.

I'm online: