Внимание! AQA.рейтинг

Сегодня перебрал первые 2 страницы рейтинга.
Проверка показала, что большинство сайтов, зовущих себя нашими друзьями, относятся к нам ... мягко говоря плохо, закрывая ссылки на нас тегами (что бы поисковики не нашли AQA.ru у них).
В итоге были удалены из рейтинга и всего сайта ссылки более чем на 30 околоаквариумных ресурса, в том числе, и несколько известных и рекомендуемых нами

Имена и ссылки не указываем, избавлю их от дополнительной рекламы.

меня техническая сторона этого дела интересует, т.к. у самого сейчас схожая трабла назревает. руками проверяли, или скриптом? если скриптом, то может подскажете в каком направлении двигаться?
т.е. технологию я себе примерно представляю, а вот как пазлинки в голове увязать... вот над этим и думаю
саму страницу я сейчас file_get_contents выцепляю, ссылку stristr дергаю.
а вот как изящней обрамление ноиндексами выцепить...
до робот.тхт пока не добирался, но может и про него спрошу ))

Я полускриптом При обращении к кнопи единожды выкачивалась страница (только код) и без параметров, сохранялась. Так было в течении 2 дней, в итоге собрал пару сотен страниц. Потом просто распарсил их по некоторым признакам и вуаля. Оказалось, что из первых 30 сайтов - 20 используют "черные" методы. Ниче, яндекс до них доберется
Да и при следующем апе доля нашего тИЦ с них повалится ... ибо нех.

сообщение Volcan0
Потом просто распарсил их по некоторым признакам и вуаля.

Грубоватое, но безошибочное.
так как не всегда конструкций , а может и


тут мы

короче pregom я неасилил... и сделал тупой счетчик - если открыли больше чем закрыли к моменту как наш счетчик попался - в бан сайт и в ад вебмастера