Веб-мастеру

Информация о пользователе

Привет, Гость! Войдите или зарегистрируйтесь.


Вы здесь » Веб-мастеру » Раскрутка и продвижение » Что такое robot.txt


Что такое robot.txt

Сообщений 1 страница 15 из 15

1

Видел много статей но так и понял что это.У меня почему то его нет в фаловом менеджере и связано ли это с карантином юкоза? http://www.kolobok.us/smiles/icq/unknown.gif

0

2

robots.txt — файл ограничения доступа к содержимому роботам на http-сервере. Файл должен находиться в корне сайта (то есть иметь путь относительно имени сайта /robots.txt). При наличии нескольких субдоменов файл должен располагаться в корневом каталоге каждого из них. Данный файл дополняет стандарт Sitemaps, который служит прямо противоположной цели: облегчать роботам доступ к содержимому (Wikipedia).
Инными словами говоря он влияет положительно на индексацию сайта в поисковых системах.

В корень сайта системы uCoz его надо добавлять самому, создав на компьютере с помощью блокнота обычный тестовой документ, или воспользоваться сторонними ресурасами создания robots.txt.

uCoz ввел ограничение около месяца на поисковую оптимизацию новых сайтов созданных в  системе, чтобы пользователи покупали премиум-аккаунты, поэтому, если ты создал новый сайт, хостинг тебе не даст ничего подоьного сделать для поисковых машин.

Этот файл может настраивать поиск , как тебе угодно, исключая ненужные страницы, которые ты желал бы скрыть от сторонних глаз. Или, если у тебя
имеется два домена, например один домен стандартный uCoz'a, второй твой, купленный, ты раскрутил когда-то давно свой старый, и много пользователей заходит по старому, но в то же время ты хочешь, чтобы поиск находил новый, указываешь в файле комманду и... твой сайт теперь проиндексирован по двум доменам.

0

3

Артем, спасибо за информацию.А на счёт то что можно снять ограничения с помощью пользователей скоко надо пользователей набрать?

0

4

raul01 написал(а):

А на счёт то что можно снять ограничения с помощью пользователей скоко надо пользователей набрать?

месяц вроде, пользователи не проканают http://www.kolobok.us/smiles/icq/sad.gif

0

5

Админ а как надо сделать robot.txt чтобы индексировался токо форум и всё что на нём?

0

6

raul01, а сколько существует твой сайт?

0

7

а это имеет значение?где то неделю может меньше но запрет на индексацию я уже снял

0

8

этого мало. Запрт на истечение запрета индексации составляет месяц

0

9

Я оплатил платный пакет услуг запрета больше нет

0

10

raul01, теперь заходи сюда, там дополнительная информация + автоматическое создание robots.txt

0

11

User-agent: *

Disallow: /cgi-bin
Disallow: /css
Disallow: /js
Disallow: /images/
Disallow: /load
Disallow: /news
Disallow: /publ
Disallow: /photo
Disallow: /qb
Host: http://mobilephone.do.am/
Sitemap: http://mobilephone.do.am/sitemap.xml

Правильно?

0

12

raul01, да, но не http://mobilephone.do.am/sitemap.xml, а http://mobilephone.do.am/sitemap-forum.xml

0

13

Ошибка в яндексе что она может значит?
HTTP-статус: Ресурс не найден (404) 1
Загружено роботом:1
Исключено роботом:1
Страниц в поиске:0
http://www.kolobok.us/smiles/icq/sad.gif

0

14

хз, я с эти как-то не разбирался, времени не было. была такая же проблема сначала и у меня с форумом, потом, через некоторое время проблема устранилась. Лучше всего зарегистрировать себе домен второго уровня в зоне .ru, т.к. индексация, говорят, лучше производится именно на таких доменах, к тому же Яндекс не берет станадртные домены, скорее всего ошибка в этом http://www.kolobok.us/smiles/icq/sad.gif

0

15

Так я хотел купить положил деньги на телефон пришёл хотел заплатить а с телефона там комиссия 50%  http://www.kolobok.us/smiles/icq/sad.gif

0


Вы здесь » Веб-мастеру » Раскрутка и продвижение » Что такое robot.txt