Обсуждение MediaWiki:Robots.txt

Материал из Википедии — свободной энциклопедии
Перейти к навигации Перейти к поиску
Документация

В этом системном сообщении находятся местные директивы robots.txt, добавляемые в конец файла ru.wikipedia.org/robots.txt. Документация: mw:Manual:Robots.txt.

Альтернативные методы: исключение целого пространства имён (через запрос разработчикам) и использование ключевого слова (подробнее см. Категория:Неиндексируемые страницы).

== К удалению ==
{{editprotected}}

Просьба очистить эту страницу в связи с обсуждением на форуме, по итогам которого было решено разрешить индексацию страниц "К удалению" внешними поисковиками: Википедия:Форум/Общий#Индексация Гуглом страниц обсуждений ВП:КУ. См. также Обсуждение шаблона:ВПКУ-Навигация#Индексация поисковиками. Trycatch 11:31, 19 сентября 2009 (UTC)[ответить]

✔ Сделано. — putnik 20:06, 28 сентября 2009 (UTC)[ответить]

Индексация подстраниц участников[править код]

перенесено с Обсуждение участника:Alex Smotrov#Итог обсуждения на форуме
продолжение обсуждения Википедия:Форум/Архив/Общий/2009/11#Запрет индексации подстраниц участников

Возражений против полного запрета индексации подстраниц участника (но не обсуждений) не поступило. Думаю, можно использовать MediaWiki:Robots.txt. Остальное - опросом. Pessimist 20:07, 22 ноября 2009 (UTC)[ответить]

В принципе я не против, но хотелось бы подождать хотя бы до архивирования соответствующей темы: и уверенность будет, что возражений действительно нет, и при правке robots.txt можно будет дать работающую ссылку на заархивированное обсуждение. — AlexSm 06:34, 23 ноября 2009 (UTC)[ответить]
  • Хмм, причем же здесь robots.txt, когда речь всю дорогу шла о запрете на индексацию _подстраниц_ участников, но не самих страниц участников? Trycatch 09:28, 23 ноября 2009 (UTC)[ответить]
А что - и этого robots.txt понять не может? Pessimist 12:29, 23 ноября 2009 (UTC)[ответить]
OK, моя вина. Т.к. и Гугл, и Яндекс поддерживают примитивные регулярные выражения в Disallow, то можно запретить и только подстраницы. (а вот рамблер не поддерживает, но кого интересует рамблер?) Trycatch 12:46, 23 ноября 2009 (UTC)[ответить]

Честно говоря, мне больше нравился вариант запрета индексации всего пространства участников, с возможностью разрешения отдельных страниц (которые тогда будут видны в Категория:Индексируемые страницы. Я не против внесения предложенного «жёсткого» запрета на подстраницы (после архивации темы на общем форуме), раз против него никто не возразил, но надеюсь альтернативный вариант будет предложен в планируемом опросе. — AlexSm 15:21, 23 ноября 2009 (UTC)[ответить]

Разумеется. В опрос я планирую включить все варианты: начиная от жёсткого запрета всего на свете кроме статей до простановки noindex на отдельные страницы. Pessimist 18:32, 23 ноября 2009 (UTC)[ответить]

✔ СделаноAlexSm 19:37, 17 декабря 2009 (UTC)[ответить]

Закрыть индексацию статей Инкубатора[править код]

Просьба закрыть от индексирования "Википедия:Проект:Инкубатор/Статьи/*" на уровне robots.txt (noindex и nofollow). Samal 20:36, 10 декабря 2009 (UTC)[ответить]

✔ Сделано, если я ничего не напутал. Про nofollow ничего сказать не могу, подозреваю оно тут вообще не при чём. — AlexSm 20:48, 10 декабря 2009 (UTC)[ответить]
Спасибо. Кста, там звездочку в конце не надо? Википедия:Проект:Инкубатор/Статьи/*. А про nofollow.. собственно, во многом именно ради него и затевается.. просто по __NOINDEX__ и так закрыто через шаблон {{В инкубаторе}}. Нужно спамеров и раскрутчиков нафиг отсечь.. ведь подразумевается, что статьи и месяц в Инкубаторе висеть могут.. вот, чтоб всякий спам "не волновал", его и прикрыть.. и пусть хоть "обраскручиваются" :) Или фраза про nofollow была о другом? Samal 21:10, 10 декабря 2009 (UTC)[ответить]
При взгляде на en:MediaWiki:Robots.txt у меня появляется ощущение, что * в конце не нужна. А en:nofollow, как я слышал, уже применён в Википедии по умолчанию ко всем внешним ссылкам, и вообще про какую-либо связь nofollow и en:Robots exclusion standard я вроде бы нигде не читал. — AlexSm 21:16, 10 декабря 2009 (UTC)[ответить]
Про звездочку - где бы узнать достоверно :). А про nofollow... говорят, что это хорошо для Гугла, но не работает для Яндекса, чем спамеры и пользуются.. Немного есть тут и тут. Т.е. если я правильно понял, то от Гугла внешние ссылки защищены через rel="nofollow" (любые внешние ссылки действительно обернуты этим тегом, можно любую страницу глянуть), а вот от Яндекса - не защищены... Samal 21:37, 10 декабря 2009 (UTC)[ответить]
"Почитал мат.часть" :) Из интересного две ссылки от Яндекса: [1] и [2]. Выводы: 1) Nofollow - действительно ни при чем, "виноват, погорячился" :). 2) Судя по "Анализ robots.txt" - все работает, Инкубатор надежно закрыт :). Еще раз спасибо. Samal 22:45, 10 декабря 2009 (UTC)[ответить]

Википедия:Запросы, связанные с OTRS[править код]

Прошу добавить Википедия:Запросы, связанные с OTRS. На этой странице регулярно добавляется непубличная информация - email, имена и т.п. --Максим Підліснюк 11:03, 29 мая 2016 (UTC)[ответить]