Rose debug info
---------------

Тег: robots.txt

1 заметка

Robots.txt и Яндекс

Яндекс теперь поддерживает маски в robots.txt, т. е. символы «$» и «*» в «disallow» и «allow» (да, теперь ещё и «allow» поддерживается

 Нет комментариев    12   2007   robots.txt   seo   яндекс