Robots.txt

Поисковы боты Яши

Опубликовано 24 Авг 2009 в рубрике «Robots.txt»

*Yandex/1.01.001 (compatible; Win16; I) — главный бот, который индексирует сайт.
*Yandex/1.01.001 (compatible; Win16; P) — робот, который идексирует изображения.
*Yandex/1.01.001 (compatible; Win16; H) — бот, который находить зеркала основного сайта.
*Yandex/1.02.000 (compatible; Win16; F) — робот, который уделяет внимание символам вроде favicon и им подобным.
*Yandex/1.03.003 (compatible; Win16; D) — робот, обращающийся к странице при добавлении ее [...]

Метки:
Читать полностью 3 комментария

Что такое Robots.txt

Опубликовано 23 Авг 2009 в рубрике «Robots.txt»

Все поисковые боты при заходе на web-сайт, во-первых, обращают внимание на файл robots.txt. Если вы – хотите стать хорошим сеошником, то обязаны знать назначение и правельное написание  файла robots.txt.Так что же такое robots.txt:

Метки: Robots.txt
Читать полностью Комментарии отключены
работе служат качественные инструменты имеющиеся:)дешевые детские праздники:)где купить дешевые угги:)