[ Поиск ] - [ Пользователи ] - [ Календарь ]
Полная Версия: Помогите составить robot.txt
star10
Здраствуйте уважаемые програмисты! Я хотел у вас попросить помочь мне, у меня доска объявлений на скрипте JBoard 3.0, доску добавил в поисковики, но много страниц не индексируются. Помогите составить правельный robot.txt? Вот мой:
User-agent: *
Disallow: /*ru
Disallow: /*en
Disallow: /*city
Disallow: /*login
Disallow: /*register
Disallow: *new
Disallow: /*search
Disallow: /*goto
Disallow: /*cpanel
Disallow: /*profile
Disallow: /*logout
Disallow: /*print
Disallow: /*vip
Disallow: /*note
Disallow: /*noteprint
Disallow: /*contacts
Sitemap: http://mfsseoedit.ru/upload/sitemap.xml
sergeiss
Ты еще и словами опиши, что хотел сделать. И что именно не индексируется. И как ты сделал вывод что не индексируется.

_____________
* Хэлп по PHP
* Описалово по JavaScript
* Хэлп и СУБД для PostgreSQL

* Обучаю PHP, JS, вёрстке. Интерактивно и качественно. За разумные деньги.

* "накапливаю умение телепатии" (С) и "гуглю за ваш счет" (С)

user posted image
star10
Вот что пишет гугл: Когда мы проверили несколько URL из вашего файла Sitemap, то обнаружили, что файл robots.txt для сайта блокирует доступ к некоторым URL. Если вы не планируете заблокировать некоторые URL, содержащиеся в файле Sitemap, воспользуйтесь нашим инструментом для анализа файла robots.txt, чтобы убедиться в том, что робот Google может перейти по отправленным вами URL. Все доступные URL будут по-прежнему отправляться.

Sitemap: mfsseoedit.ru/upload/sitemap_index.xml
URL: /newlist.html

Нужно весь переписывать блокируя только некоторые папки типа админ и др. Иначе очень много не индексируется!
star10
А вот что пишет Яндекс 66 страниц исключил:/?op=search&query=авто
inner
-
/?op=search&query=автомат
inner
-
/?op=search&query=аутотренинг
inner
-
/?op=search&query=бара
inner
-
/?op=search&query=брюки
inner
-
/?op=search&query=витрины
inner
-
/?op=search&query=выключатель
inner
-
/?op=search&query=гипсокартон
inner
-
/?op=search&query=глазами
inner
-
/?op=search&query=года
inner
-
/?op=search&query=групповой
inner
-
/?op=search&query=знакомства
inner
-
/?op=search&query=интернете
inner
-
/?op=search&query=кафе
inner
-
/?op=search&query=контактор
inner
-
/?op=search&query=концевой
inner
-
/?op=search&query=концевык
inner
-
/?op=search&query=краска
inner
-
/?op=search&query=ктпв
inner
-
/?op=search&query=легинсы
inner
-
/?op=search&query=магазина
inner
-
/?op=search&query=материал
inner
-
/?op=search&query=музыкальный
inner
-
/?op=search&query=настольные
inner
-
sergeiss
Я не совсем понял, что же ты ХОЧЕШЬ получить smile.gif

Disallow: ... - это то, что НЕ разрешено для индексирования. Ты действительно хочешь запретить всё перечисленное? Или ты просто перечислил папки, не думая о последствиях?

На всякий случай дам ссылку https://help.yandex.ru/webmaster/controllin...#allow-disallow

_____________
* Хэлп по PHP
* Описалово по JavaScript
* Хэлп и СУБД для PostgreSQL

* Обучаю PHP, JS, вёрстке. Интерактивно и качественно. За разумные деньги.

* "накапливаю умение телепатии" (С) и "гуглю за ваш счет" (С)

user posted image
star10
Для этих папок что перечислил в Яндексе пишет вот что: Документ запрещен в файле robots.txt
Быстрый ответ:

 Графические смайлики |  Показывать подпись
Здесь расположена полная версия этой страницы.
Invision Power Board © 2001-2025 Invision Power Services, Inc.