PDA

Просмотр полной версии : �?ндексация доров


Prime
26.12.2009, 14:56
Пробую делать доры под яндекс. Тенденция такова - дор залит и добавлен в Я через addurl 9.12, морда вылезла 15.12 и по сегодня�?ний ап (26.12) в индексе только морда. На более свежих дорах намечается нечто похожее.
Подскажите из своего опыта, индексация должна происходить быстрее?
Доры на ру�?ках на хостинге Hostia.net. Возможно стоит сменить хостинг? (выбрал его анализируя выдачу - вроде неплохо лезли у людей).
Пнёте в нужную сторону - с меня виртуальный пивас, на серч плз не отсылать))

Кабасик
26.12.2009, 16:36
Если б ты еще дором кинулся в нас, было б проще...

1cv7
26.12.2009, 17:16
Prime (https://arbadoor.ru/member.php?u=2), мне кажется дело здесь в и добавлен в Я через addurl 9.12. Может я и не прав, но заметил, что addurl мало что дает, доры после него долго лезут.
Ссылки значительно ускоряют индексацию (например Sape)

Кабасик
26.12.2009, 18:58
Может я и не прав, но заметил, что addurl мало что дает, доры после него долго лезут.
Ссылки значительно ускоряют индексацию (например Sape)

Морда влезла, а с помощью чего - уже не важно. Важно, что через несколько АПов ничего не добавилось. Здесь уже попахивает АГС или автобаном, у меня часто после бана 1 страница висеть остается. От хостера тоже много зависит.

it.netov
26.12.2009, 20:35
У меня аналогично и на дорах трамплиненных через sape. Не на всех, но и не мало. Либо АГС так хоро�?о работает, то ли дело в хосте (у меня бывало подвисали все последнее время - вот может и совпало так).

Смени хост попробуй и вгони дор с помощью сапы.

Prime
26.12.2009, 22:10
да, совсем забыл, на дор я ссылку с трастового реса ставил - не сапа но всёже. Так понимаю нужно пробовать другой хостинг.

it.netov
26.12.2009, 22:33
Prime (https://arbadoor.ru/member.php?u=2), попробуй в сапе с морды новостного сайта, на котором пасется быстроробот, поставить ссылку. Тиц от 300 должен быть. Сегодня и завтра пробуй ставить, в понедельник если только глубоким утром (бот херова начинает ходить).

В итоге через несколько часов, по-хоро�?ему, должен прискокать индексатор, съесть страницу и пройтись как минимум по ссылкам на этой странице, а если повезет, то несколько сотен сожрет.

Prime
26.12.2009, 23:06
Вот смотрю по логам - I бот долбится в роботс и никуда боль�?е не ходит. роботс корректный. Сегодня наверно поставлю пару ссылочек с сапы на карту, а то не знаю что и думать

unix4k
26.12.2009, 23:18
пропи�?и все линк на доры в роботс:congratulate:

it.netov
26.12.2009, 23:19
Prime (https://arbadoor.ru/member.php?u=2), какой ip бота? Может быстроробот.

Prime
26.12.2009, 23:32
пропи�?и все линк на доры в роботс
Всмысле? явно указать все страницы дора? но зачем если они не запрещены в роботсе к индексации.

какой ip бота? Может быстроробот.
Ходит исключительно отсюда 77.88.28.246. Кроме роботса ещё rss сожрал и всё

it.netov
26.12.2009, 23:52
Prime (https://arbadoor.ru/member.php?u=2), нормальный бот.

Prime
27.12.2009, 00:12
чтож ему скоту тогда надо? ведь я правильно понимаю - фильтр на не посещённые ботом страницы не может быть наложен в принципе?
Вобщем ссылок сёдня проставлю посмотрю на результат

Кабасик
27.12.2009, 00:46
В принципе, попробуй в роботс добавить ссылку на карту сайта:

Sitemap: http://mydor.ru/sitemap.html

К примеру, Джако автоматом так проставляет, к тому же, яндексоиды настойчиво советуют. Если все равно бот будет тупо стучаться в роботс, тогда уж меняй хостера...

it.netov
27.12.2009, 01:45
Кабасик (https://arbadoor.ru/member.php?u=2), я точно не уверен, но не на xml формат ли там ставить надо урл в роботсе? �?ли бот и html карту схавает? Кстати, если так, то ее надо как-то по правилам составлять?

Prime
27.12.2009, 01:51
катят оба варианта. если html то никаких особых правил не надо. конкретно у меня проставлен вариант с xml картой

Кабасик
27.12.2009, 02:35
Кабасик, я точно не уверен, но не на xml формат ли там ставить надо урл в роботсе? �?ли бот и html карту схавает? Кстати, если так, то ее надо как-то по правилам составлять?

Да, там xml, это я по запарке html накалякал. Хотя может Я�?а и правда html также хавает... Гуглю, к примеру, вообще пох - он и txt жрет.