| Goodwine | Дата: Четверг, 02.07.2009, 18:42 | Сообщение # 1 |
 Сержант
Группа: Пользователи
Сообщений: 29
Награды: 0
Репутация: 0
Статус: Offline
| Как правильно составить файл robots txt? Особенно для форума, слышал, что туда попадает только 500 страниц. Но на форуме их гораздо больше. Как составить файл robots txt?
|
| |
| |
| DanilKA | Дата: Понедельник, 10.08.2009, 16:49 | Сообщение # 2 |
 Лейтенант
Группа: Проверенные
Сообщений: 57
Награды: 0
Репутация: 0
Статус: Offline
| User-Agent: *
Allow: / тогда в него попадут все страницы сайт, а если вы хотите убрать из поиска некоторый страниы, надо под User-Agent: * написать адрес страницы, например /admin
Webtor-world.ru - все создании, раскрутке и оптимизации сайта, и главное- все БЕСПЛАТНО!!!!
|
| |
| |
