wmmail.ru – cервис почтовых рассылок на главную
написать письмо
карта сайта

С чего начать?РекламодательПравилаFAQСтатистикаБиржа статейTOP100ФоткиКонтакты
Логин:
Пароль: 
Регистрация   Забыли пароль?
WMLogin
Пользователей всего:

542631

Пользователей сегодня:

30

Пользователей online:

125

Выплачено ($): 7`602`728,89
Выплат: 8`111`912
Писем прочитано: 1`024`933`246

 
 
Online 0
Все ответы
 
 

Вопрос #36105

Внимание! В разделе вопрос-ответ запрещается:

  • Мат, оскорбления, флуд, реклама
  • Сообщения, не являющиеся вопросами/ответами
  • Нарушение законодательства РФ
  • Попрошайничество в любой форме

Выделите текст и нажмите для цитирования  #  
+1   [22.10.2011 23:00] robmast Рейтинг 0.00     Стена пользователя robmast +221

Закрытый вопрос от пользователя robmast Что будет если я загружу этот роботс.тхт на свой сайт

User-agent: *
Disallow:


Host: site.ru

Sitemap: http://site.ru/sitemap.xml.gz

И какую лучше кодировку выбрать?UTF-8 стоит у меня теперь


если у меня на сайте будет такой роботс то сайт будут индексировать все поисковики?

Что еще мне посоветуете добавить к моему роботсу?
Раздел: Программирование, последний комментарий: 23.10.2011 04:24
Вопрос закрыт автором
Проголосовали: #895188

Ответы
Ответов всего: 6  вопрос закрыт 
Выделите текст и нажмите для цитирования  #  
+2   [22.10.2011 23:05] #1041232   Все ответы пользователя

Т.к. расширение txt, то,конечно, лучше в текстовом.:wink2:
Проголосовали: robmast, #895188
Выделите текст и нажмите для цитирования  #  
+1   [22.10.2011 23:05] #939448   Все ответы пользователя

короче создаешь к примеру на рабочем столе блокнотовский файл с названием и расширением robots.txt в ним пишешь что тебе там нада у меня к примеру вот так выглядит:

User-agent: *
Disallow: /a/
Disallow: /stat/
Disallow: /index/1
Disallow: /index/2
Disallow: /index/3
Disallow: /index/5
Disallow: /index/7
Disallow: /index/8
Disallow: /index/9
Disallow: /main/
Disallow: /admin/
Disallow: /secure/
Disallow: /informer/
Disallow: /mchat

User-agent: *
Disallow: /
потом заливаешь в корневую папку сайта и все.
Проголосовали: robmast, #884793, #895188
Выделите текст и нажмите для цитирования  #  
+1   [22.10.2011 23:07] robmast Рейтинг 0.00     Стена пользователя robmast +221  Все ответы пользователя robmast

#939448 пишет короче создаешь к примеру на рабочем столе блокнотовский файл с названием и расширением robots.txt в ним пишешь что тебе там нада

Ну а если, просто в корне создать?Это не одно и тоже самое?
Проголосовали: #895188
Выделите текст и нажмите для цитирования  #  
+2   [22.10.2011 23:34] Orenpoker Рейтинг 0.00     Стена пользователя Orenpoker +23  Все ответы пользователя Orenpoker

robmast пишет Ну а если, просто в корне создать?Это не одно и тоже самое?

Тоже самое.. Disallow это страницы, которые ты не хочешь индексировать. типа страница админки итд.

Добавляй страницы которые закрываешь к индексации и все в принципе

Забыл. И пути к сайтмэпам пропиши в конце вида

Sitemap: http://site.ru/путь к сайтмэп
Проголосовали: #895188, robmast
Выделите текст и нажмите для цитирования  #  
+2   [22.10.2011 23:47] #884793   Все ответы пользователя

#939448 пишет короче создаешь к примеру на рабочем столе блокнотовский файл с названием и расширением robots.txt в ним пишешь что тебе там нада у меня к примеру вот так выглядит:

User-agent: *
Disallow: /a/
Disallow: /stat/
Disallow: /index/1
Disallow: /index/2
Disallow: /index/3
Disallow: /index/5
Disallow: /index/7
Disallow: /index/8
Disallow: /index/9
Disallow: /main/
Disallow: /admin/
Disallow: /secure/
Disallow: /informer/
Disallow: /mchat

User-agent: *
Disallow: /
потом заливаешь в корневую папку сайта и все.

Смотря какие папки у вас на хосте....
Проголосовали: robmast, DOBREC
Выделите текст и нажмите для цитирования  #  
+1   [23.10.2011 04:24] Santaz Рейтинг 1135.32     Стена пользователя Santaz +252  Все ответы пользователя Santaz

Проголосовали: robmast

Видеоурок

Вопрос-ответ

НОВОСТИ
21.02.2024QIWI
подробнее>>
31.12.2023С Новым 2024 Годом!
подробнее>>

© 2004-2024 «WMMAIL» Пользовательское соглашение