Записная книжка
Записки чтоб не забыть

Атака клонов

1st November 2007 в рубрике Поисковики, Yandex

Сегодня ночью образовалась на мои сайты, о которых я писал, что они выпали из индекса Яндекса, своеобразная атака.

Командовал атакой индексирующий робот Яндекса Yandex/1.01.001 (compatible; Win16; I) .

Перечитал абсолютно всё.

Интересно, это ОН так Хеллоуин празднует? Напугать надумал?

Посмотрим сколько времени понадобится, чтоб сайт после индексации в индекс попал…

Мой блог находят по следующим фразам

Мой блог находят по следующим фразам


Пожалуйста, зарегистрируйтесь для комментирования.

Коды ответа http-сервера

Всё время забываю где искать эти коды. А иногда они очень нужны, например для того чтоб послать какого нибуть паука используя файл .htaccess

100 Continue
101 Switching Protocols

Successful 2xx
200 OK
201 Created
202 Accepted
203 Non-Authoritative Information
204 No Content
205 Reset Content
206 Partial Content

Redirection 3xx
300 Multiple Choices
301 Moved Permanently
302 Found
303 See Other
304 Not Modified
305 Use Proxy
306 (Unused)
307 Temporary Redirect

Client Error 4xx […]

Коды ответа http-сервераПредыдущая запись

Список поисковых ботов

Решил найти имена поисковых ботов, чтоб знать всех “в лицо”.

Список вышел неполный - буду пополнять.

Yandex/1.01.001 (compatible; Win16; H) зеркальщик Яндекса, т.е. робот, определяющий зеркала сайтов.

Yandex/1.01.001 (compatible; Win16; I) индексирующий робот Яндекса.

Yandex/1.01.001 (compatible; Win16; P) индексатор картинок Яндекса.

Yandex/1.03.000 (compatible; Win16; M) подсветчик, робот, обращающийся к странице по ссылке “Найденные слова” и “подсвечивающий” слова запроса в ее тексте.

Yandex/1.03.003 (compatible; Win16; D) робот, […]

Список поисковых ботовСледующая запись