Страница-заглушка "В разработке"

[BirviZ]

Вопрос следующего характера.

При создании страницы-заглушки "в разработке" нужно посылать какие либо заголовки, как при создании страницы 404? или это просто страница и поисковиками она нормально обрабатывается?

[wwt]

Одни считают что нужно посылать 503, а другие что 200. Тут много спорных моментов.

 

ЗЫ Мое мнение что нужно соблюдать спецификации и отдавать 503. Плюс к этому Retry-After заголовок.

 

Кстати сказать некоторые практикуют отдачу 503 для поисковых ботов, а юзерам отдают under costruction с кодом 200.

[afdw]

Информация про 503.

[BirviZ]

Насколько я понял, нужно в файле robots.txt сгенерировать ошибку 503, а для людей сделать редирект на файл maintance.htm или .php.

Вообще задача заключается в следующем. Сайт я еще не доделал, а хостинг с доменом уже есть. И чтобы не было простоя, хочу поместить соответствующую страничку с информацией о том, что сайт в разработке и указать некоторые контакты. Чтобы сайт уже, якобы, "работал".

Edited July 5, 2015 by BirviZ

[afdw]

нужно в файле robots.txt сгенерировать ошибку 503

 

Да нет!

index.php:

<?phpfunction is_robot(){$robots = array(	"Accoona-AI-Agent",	"AOLspider",	"BlackBerry",	"bot@bot.bot",	"CazoodleBot",	"CFNetwork",	"ConveraCrawler",	"Cynthia",	"Dillo",	"discoveryengine.com",	"DoCoMo",	"ee://aol/http",	"exactseek.com",	"fast.no",	"FAST MetaWeb",	"FavOrg",	"FS-Web",	"Gigabot",	"GOFORITBOT",	"gonzo",	"Googlebot-Image",	"holmes",	"HTC_P4350",	"HTML2JPG Blackbox",	"http://www.uni-koblenz.de/~flocke/robot-info.txt",	"iArchitect",	"ia_archiver",	"ICCrawler",	"ichiro",	"IEAutoDiscovery",	"ilial",	"IRLbot",	"Keywen",	"kkliihoihn nlkio",	"larbin",	"libcurl-agent",	"libwww-perl",	"Mediapartners-Google",	"Metasearch Crawler",	"Microsoft URL Control",	"MJ12bot",	"T-H-U-N-D-E-R-S-T-O-N-E",	"voodoo-it",	"www.aramamotorusearchengine.com",	"archive.org_bot",	"Teoma",	"Ask Jeeves",	"AvantGo",	"Exabot-Images",	"Exabot",	"Google Keyword Tool",	"Googlebot",	"heritrix",	"www.livedir.net",	"iCab",	"Interseek",	"jobs.de",	"MJ12bot",	"pmoz.info",	"SnapPreviewBot",	"Slurp",	"Danger hiptop",	"MQBOT",	"msnbot-media",	"msnbot",	"MSRBOT",	"NetObjects Fusion",	"nicebot",	"nrsbot",	"Ocelli",	"Pagebull",	"PEAR HTTP_Request class",	"Pluggd/Nutch",	"psbot",	"Python-urllib",	"Regiochannel",	"SearchEngine",	"Seekbot",	"segelsuche.de",	"Semager",	"ShopWiki",	"Snappy",	"Speedy Spider",	"sproose",	"TurnitinBot",	"Twiceler",	"VB Project",	"VisBot",	"voyager",	"VWBOT",	"Wells Search",	"West Wind",	"Wget",	"WWW-Mechanize",	"www.show-tec.net",	"xxyyzz",	"yacybot",	"Yahoo-MMCrawler",	"yetibot",);foreach($robots as $robot){ 	if(stristr($_SERVER["HTTP_USER_AGENT"],$robot)){ 		$from_spider=true;		break;	} }  if($from_spider==true){	return true;}else{	return false;}}if(is_robot()){  http_response_code(503);}else{  echo "сайт в разработке";}?>

Edited July 5, 2015 by afdw

[BirviZ]

Спасибо. Оказалось все еще проще)))))

А в массиве - это набор ботов примерный или полностью рабочий?

Всмысле мне его еще нужно дополнять?

[afdw]

А в массиве - это набор ботов примерный или полностью рабочий? Всмысле мне его еще нужно дополнять?

 

Не знаю. Эту функцию я нашёл в интернете. Но судя по тому, что здесь нет Яндекса, надо. А можно просто найти более полную функцию.

[BirviZ]

Кстати, http_response_code() работает только на php 5.4 и выше.

Сейчас попробую переписать скрипт при помощи функции header().

Если получится, то работать будет на php 5.3 и ниже)

[afdw]

header("HTTP/1.1 503 Service Unavailable");

[BirviZ]

http://www.user-agents.org/index.shtml

Чтото мне подсказывает, что проще перебирать массив с браузерами, чем с ботами. Тем самым если браузер не известный - значит бот.

[afdw]

Да какая разница? Сделайте только основных ботов, всё равно с других люди заходить не будут! Google, Yandex, Bing, Rambler и хватит.

[wwt]

Было бы не плохо ещё добавлять

header('Retry-After: 7200');

Данный заголовок указывает как долго сервис будет не доступен. Значение можно выставлять в виде даты(формат для http) или количеством секунд.

[BirviZ]

Было бы не плохо ещё добавлять

header('Retry-After: 7200');

Данный заголовок указывает как долго сервис будет не доступен. Значение можно выставлять в виде даты(формат для http) или количеством секунд.

В моем случае может не подойти, так как я не знаю когда доделаю сайт.

А если станицу сделать следующим образом:

header("HTTP/1.1 503 Service Unavailable");echo{$maintance_content};

[wwt]

 

Было бы не плохо ещё добавлять

header('Retry-After: 7200');

Данный заголовок указывает как долго сервис будет не доступен. Значение можно выставлять в виде даты(формат для http) или количеством секунд.

В моем случае может не подойти, так как я не знаю когда доделаю сайт.

А если станицу сделать следующим образом:

header("HTTP/1.1 503 Service Unavailable");echo{$maintance_content};

Да как и со страницей 404 или 403 вы можете оформить 503 как пожелаете.

 

Вообще я вначале написал что есть спорные моменты.

 

Если ваш сайт уже в какой-то степени живет в сети, то для технических работ или каких-либо простоев лучше использовать 503 и Retry-After. Указывать Retry-After желательно ибо поисковый бот увидя такой заголовок определит когда же снова ему посетить вашу страницу. Но если сайт очень долго будет выдавать 503 даже с Retry-After ваш сайт может быть исключен из поискового индекса как недоступный. Поэтому использовать 503 на длительное время не рекомендуется. Если ваш сайт еще не готов и в плане сео вам нечего терять, то можете смело отдавать 503. Или вообще сказать ботам чтобы не индексировали ваш сайт через robots.txt.

 

С тем же успехом вы можете отдавать и страницу с кодом 200 и некой информацией о том что скоро тут будет сайт. Разница лишь в том что поисковые боты её проиндексируют. А уж хорошо это или плохо решать вам.