You are here: Re: robots.txt « HTML « IT news, forums, messages
Re: robots.txt

Posted by windandwaves on 11/22/73 11:37

Toby Inkster wrote:
....

> No. Most robots do not support globbing, except for the special case
> of "User-agent: *"

Would it work for Google? They do support globbing, but I am not sure if
the syntax is correct.

Cheers

Nicolaas

 

Navigation:

[Reply to this message]


Удаленная работа для программистов  •  Как заработать на Google AdSense  •  England, UK  •  статьи на английском  •  PHP MySQL CMS Apache Oscommerce  •  Online Business Knowledge Base  •  DVD MP3 AVI MP4 players codecs conversion help
Home  •  Search  •  Site Map  •  Set as Homepage  •  Add to Favourites

Copyright © 2005-2006 Powered by Custom PHP Programming

Сайт изготовлен в Студии Валентина Петручека
изготовление и поддержка веб-сайтов, разработка программного обеспечения, поисковая оптимизация