Размещал на форуме wwwmdm151.6bb.ru платные ссылки. все было Ок но дня 3 назад они перестали индексироваться setlinks.ru. В службе поддержки ответили "Запрещено закрывать для индексации сайт. У вас запрещено в robots.txt" Можно ли как то это исправить?
robots.txt
Сообщений 1 страница 19 из 19
Поделиться2Пн, 28 Янв 2008 16:40:31
Насколько я понял, сервис размещения рекламы запрещает запрещение индексации любой из поисковых машин (Яндексом). Индекснуть майбб форум в Яндексе нельзя из-за тех. проблем, поэтому ответ - нельзя.
Поделиться3Пн, 28 Янв 2008 17:25:25
Яндексом проиндексировано более 300 страниц. В поисковом индексе только главная страница. До этого всё было нормально, просто что то изменилось.
Поделиться4Пн, 28 Янв 2008 17:33:43
До этого всё было нормально, просто что то изменилось.
Я думаю на этот вопрос может ответить только лично Admin
p.s. у меня на форуме недели две назад перестал работать скрипт бегущей строки в строке состояния браузера хотя раньше всё было норм.. сегодня он снова заработал Admin часто экспериментирует включая и выключая различные функции..
Отредактировано DezmonD (Пн, 28 Янв 2008 17:34:40)
Поделиться5Пн, 28 Янв 2008 18:16:01
Ещё пару дней и мой форум забанят... Админ тут бывает?
Поделиться6Пн, 28 Янв 2008 18:22:06
Ещё пару дней и мой форум забанят... Админ тут бывает?
Бывает. пиши ему ссылку на эту тему в личку.
Поделиться7Пн, 28 Янв 2008 20:15:51
Яндексом проиндексировано более 300 страниц. В поисковом индексе только главная страница. До этого всё было нормально, просто что то изменилось.
Выскажу свое предположение... все было так как есть, просто админы рекламного сервиса вручную проверяют форумы, при этом не проверяют в поисковиках, а смотрят в роботс.тхт, где яндекс запрещен... Собственно вот и прикрыли твой форум.
Поделиться8Пн, 28 Янв 2008 20:21:03
Кстати раз уж речь зашла о robots.txt давайте всё выясним.. хорошо ли админ его оптимизировал для поисковиков.. я слышал правильно написанный robots.txt это уже половина успеха хорошего развития ресурса в интернете!
Вот мой http://prizrak.3bb.ru/robots.txt
User-agent: Slurp
Disallow: /User-Agent: scooter
Disallow: /User-agent: msnbot
Disallow: /User-agent: aport
Disallow: /User-agent: Webalta
Disallow: /User-agent: *
Disallow: /admin
Disallow: /all
Disallow: /click
Disallow: /delete
Disallow: /edit
Disallow: /help
Disallow: /login
Disallow: /messages
Disallow: /misc
Disallow: /moderate
Disallow: /online
Disallow: /poll
Disallow: /positive
Disallow: /post
Disallow: /profile
Disallow: /register
Disallow: /respect
Disallow: /restore
Disallow: /send
Disallow: /statistic
Disallow: /userlist
Disallow: /vote
Разбирающиеся люди объясните что есть что в этом файле
Поделиться9Пн, 28 Янв 2008 20:31:26
Разбирающиеся люди объясните что есть что в этом файле
1) Полностью запрещает апорту, вебальте, мсну и еще хз чему индексировать форум.
2) Закрывает всем поисковикам доступ к таким функциям, как голосование, постинг, модерация, редактирование, администрирование, изменение репы и т.п.
плз, допишите туда дизаллоу еще и для ие...
Поделиться10Пн, 28 Янв 2008 20:35:12
1) Полностью запрещает апорту, вебальте, мсну и еще хз чему индексировать форум.
это не есть хорошо не понимаю зачем админ это сделал.. ведь так хуже для форумов и вообще для сервиса т.к. раскрутка тормозиться.
Поделиться11Пн, 28 Янв 2008 20:39:07
не понимаю зачем админ это сделал..
ясен пень, техпроблемы. не нужно же ему это делать, чтобы повышать интерес раскрутки
Поделиться12Пн, 28 Янв 2008 20:39:39
DezmonD
Супер-мега поисковик Апорт, вебальта и мсн))
Поюзал как-то вебальту, проидексировано ей в разы меньше страниц, чем гуглем, да и пользуются ей единицы.
Поделиться13Пн, 28 Янв 2008 21:34:49
Разбирающиеся люди объясните что есть что в этом файле
Это ваще ацкий robots.txt.... Спасибо админу...
Админ Максим, ты зачем это сделал? Мсн, апорт и вебальта вместе дают 10-15% приходов с поисковиков. То есть это недополученная выгода с кликов по рекламе.
З.Ы. Кстати апорт плевать хотел на этот запрет. Проверьте свою статистику.
Отредактировано budda (Пн, 28 Янв 2008 22:01:23)
Поделиться14Пн, 28 Янв 2008 23:10:32
Когда-то admin писал, что поисковики сильно грузят сервер. Будет ли разрешен доступ Google к индексации форумов?
Видимо в связи с "Сервис временно не доступен", "504 Gateway Time-out" и прочими ошибками связанными с перегрузкой форума была отключена индексация в не самых популярных поисковиках. Главное, что бы гугл не отрубил (вот тогда кранты ).
Отредактировано risografist (Пн, 28 Янв 2008 23:12:40)
Поделиться15Пн, 28 Янв 2008 23:12:07
надеюсь с переездом сервиса админ откроет все запреты
Поделиться16Пн, 28 Янв 2008 23:14:05
с переездом
со времени объявления скорого "переезда", уже пешком можно было бы все перенести.
Поделиться17Вт, 29 Янв 2008 08:00:59
Мсн, апорт и вебальта вместе дают 10-15% приходов с поисковиков.
Вот статистика по переходам с этих поисковиков на все форумы сервиса за декабрь (запрета не было)
Aport 0.3%
Yahoo 0.3%
MSN 0.1%
Webalta 0.1%
Altavista 0.0%
В сумме это 0.8%.
Запрещены только эти неудачные поисковики. Всем остальным индексация открыта.
Продажу ссылок никто не обещал. Из-за таких форумов будут только проблемы.
Мне они не нужны.
Поделиться18Вт, 29 Янв 2008 09:02:00
со времени объявления скорого "переезда", уже пешком можно было бы все перенести.
Это точно
+
Поделиться19Вт, 29 Янв 2008 10:20:24
Admin
Ясно. Тогда другое дело.
Продажу ссылок никто не обещал. Из-за таких форумов будут только проблемы.
Я имел ввиду клики по рекламе сервиса. На свой форум я никакую другую рекламу ставить не собираюсь.
Кстати такой ужасающе низкий процент заходов с заблокированных поисковиков можно объяснить тем, что большинство просто не знают о том что такое раскрутка форума и не добавляют ссылки на морды в соответствующие addurl'ы. А просто так сами по себе они могут и не придти. Они такие...
Отредактировано budda (Вт, 29 Янв 2008 13:26:12)
Похожие темы
что это такое запрещенной к индексации файлом robots.txt! | Корзина | Пт, 15 Авг 2008 |
как изменить robots.txt | Форум для новичков | Вт, 25 Авг 2020 |
Документ запрещен в файле robots.txt | Корзина | Пт, 3 Сен 2010 |
Нужно изменить файл robots.txt | Административный архив | Ср, 14 Ноя 2012 |
robots.txt | Продвижение и раскрутка форумов | Вс, 10 Ноя 2013 |