[ Поиск ] - [ Пользователи ] - [ Календарь ]
Полная Версия: Запрет на индексирование сайта поисковыми роботами
Ledov
Подскажите здесь прописан запрет на индексирование сайта поисковыми роботами?


//send 404 for missing pages if configured or ID has special meaning to bots
if(!$INFO['exists'] &&
($conf['send404'] || preg_match('/^(robots\.txt|sitemap\.xml(\.gz)?|favicon\.ico|crossdomain\.xml)$/',$ID)) &&
($ACT == 'show' || (!is_array($ACT) && substr($ACT,0,7) == 'export_')) ){
header('HTTP/1.0 404 Not Found');
}



Спустя 22 минуты, 9 секунд (3.03.2011 - 13:44) Игорь_Vasinsky написал(а):
на скока я вижу ни где. здесь прописано что вслучае отсутствия страницы на которую зашёл юзер или бот - вывести ему карту сайта


так же там мелькает robots.txt - вот в нём может быть прописан запред на индексацию.

Спустя 24 минуты, 6 секунд (3.03.2011 - 14:08) Ledov написал(а):
Цитата (Игорь_Vasinsky @ 3.03.2011 - 10:44)
на скока я вижу ни где. здесь прописано что вслучае отсутствия страницы на которую зашёл юзер или бот - вывести ему карту сайта


так же там мелькает robots.txt - вот в нём может быть прописан запред на индексацию.

robot.txt правильно написан. Когда вводишь адресную строку сайта в Xenu's Link (Программа для проверки корректности гипертекстовых ссылок) она сразу выдает:
HTTP/1.1 404 Not Found
и сайт не листает.
Удаляешь эти строки, пролистывает сайт

Спустя 26 минут, 25 секунд (3.03.2011 - 14:35) Игорь_Vasinsky написал(а):
Цитата
Подскажите здесь прописан запрет на индексирование сайта поисковыми роботами?

и
Цитата
Когда вводишь адресную строку сайта в Xenu's Link


ты простым сёрфингом по сайту передвигаешься ? страницы отображаются



Спустя 6 минут, 25 секунд (3.03.2011 - 14:41) VELIK505 написал(а):
Зачем робота на карту сайта направлять если он сам автоматом на неё заходит?
И всё что запретить надо всё в robots.txt укажи!

Спустя 8 минут, 5 секунд (3.03.2011 - 14:49) Ledov написал(а):
Цитата (VELIK505 @ 3.03.2011 - 11:41)
Зачем робота на карту сайта направлять если он сам автоматом на неё заходит?
И всё что запретить надо всё в robots.txt укажи!

Это не я писал, сейчас пытаюсь разобраться какую фунцию выполняют эти строки в файле.
Зачем мне эти строки прописали и какую цель преследовали. Случайно это произошло или специально.

А в PHP я ноль

Спустя 31 минута, 31 секунда (3.03.2011 - 15:21) Игорь_Vasinsky написал(а):
ну удали этот код.

Спустя 17 минут, 2 секунды (3.03.2011 - 15:38) Ledov написал(а):
так и сделал biggrin.gif , но суть интересна, какая команда в нем заложена? из-за чего бот не видит сайт?
обычно в robots.txt пишут запрет на индексирование, а в моем варианте код прописан в файле index.php

Спустя 3 часа, 41 минута, 26 секунд (3.03.2011 - 19:19) Игорь_Vasinsky написал(а):
кто тебе сказал что бот не видит? Логи посмотри.

Это твоя прога не видит.

Спустя 2 минуты, 25 секунд (3.03.2011 - 19:22) Игорь_Vasinsky написал(а):
ух ты - прям тема двоиник http://forum.donapex.net/viewtopic.php?f=18&p=189230

Спустя 31 секунда (3.03.2011 - 19:22) Игорь_Vasinsky написал(а):
А почему бы у разработчиков не спросить что сие дело подразумевает?

Спустя 2 минуты, 7 секунд (3.03.2011 - 19:24) Игорь_Vasinsky написал(а):
дословный перевод

/ / отправить 404 пропавших страниц, если настроен или ID имеет особое значение для ботов

Спустя 4 часа, 48 секунд (3.03.2011 - 23:25) Guest написал(а):
Цитата (Игорь_Vasinsky @ 3.03.2011 - 16:22)
А почему бы у разработчиков не спросить что сие дело подразумевает?

По сайту проходили не только этой прогой, а и другими сервисами, ответ был однозначный: 404


Разработчики как всегда делают круглые глаза, говорят ошибочка вышла. Программа автоматом прописала.
Но когда им сказали, что денег они не получат, все заработало, хотя этот скрипт остался.

Так, что тема закрыта. Троянский конь где-то в другом месте был спрятан.
Огромное спасибо за ответы biggrin.gif



Быстрый ответ:

 Графические смайлики |  Показывать подпись
Здесь расположена полная версия этой страницы.
Invision Power Board © 2001-2024 Invision Power Services, Inc.