1

Тема: Вопрос по Robots.txt

Всем доброго дня! Сайт на  DLE. Сделал по советам изложенным в блоге через engine.php Но вопрос такой, помимо самой страницы новости, Google проиндексировал еще эту же новость, но через ТОП новости(она у меня там висит), и по запросу, помимо самой страницы новости в выдаче вообще все новости, категории и пр. Та же ситуация с картинкой из этой новости, в Гугл Картинках, висит картинка из новости, но с ссылкой на другую новость
Что прописать в engine.php , чтобы этого избежать? Как запретить индексацию Топ новости.

2

Re: Вопрос по Robots.txt

Это прям ребус какой-то, чтобы ответить на вопрос нужно его разгадать, честно говоря,  я пыталась, даже перечитала 3 раза, но вообще ничего не поняла smile

3 (17.04.2015 07:58 отредактировано vsehnahposlav)

Re: Вопрос по Robots.txt

svetlana пишет:

Это прям ребус какой-то, чтобы ответить на вопрос нужно его разгадать, честно говоря,  я пыталась, даже перечитала 3 раза, но вообще ничего не поняла smile

Mea culpa, попробую еще раз. Есть новость №1, Гугл ее успешно проиндексировал. Но если искать эту новость №1 по ключевым словам, в поисковой выдаче Гугла, помимо этой новости№1, Гугл выдает абсолютно все новости сайта, (1,2,3,4), категории, подкатегории и т.д. Поскольку, эти ключевые слова содержатся в title статьи в блоке ТОП Новости (topnews.tpl) идущим через весь сайт.
Про картинку, если искать по ключевым словам, в Гугл Картинках, выдается картинка из новости№1, но ссылка к картинке ведет к новости №2. Опять же видимо из-за того что, блок ТОП Новости у меня с картинками, и робот взял видимо картинку из блока, а не из новости №1

Но это ведь нехорошо и вот как этого избежать?

4

Re: Вопрос по Robots.txt

Ну однозначно судить сложно т.к. причин этому может быть множество.

Может новости плохо оптимизированы или наоборот, что для поисковика ваш топ интереснее чем все остальное.
С картинками вообще непонятки, как у вас вообще получилось (даже с топом) что берется картинка из одной новости а ведет в другую.

Надо искать причину, так просто из-за топа такого не должно быть.
Ну как минимум закройте блок и ссылки в нем

<noindex>
ваш топ и ссылки в нем
<a href="#" rel="nofollow">ссылка</a>
</noindex>

5 (18.04.2015 11:57 отредактировано vsehnahposlav)

Re: Вопрос по Robots.txt

svetlana пишет:

<noindex>
ваш топ и ссылки в нем
<a href="#" rel="nofollow">ссылка</a>
</noindex>

Получается если я в шаблоне отредактирую свой topnews.tpl таким образом:

<noindex>
<li>
    <a href="{link}" rel="nofollow" title="{title}">{title}<br />
    <img src="{image-1}" alt="{title}" style="max-width: 180px;" /></a>
    <p>{text limit="100"}</p>
</li>
</noindex>

а relatednews.tpl таким образом

<noindex>
<div class="relatednews">
<a href="{link}" rel="nofollow"><img class="imagestory" src="{image-1}" alt="{title}"/><br/>{title}</a>
</div>
</noindex>

Эти блоки уже индексироваться не будут?

6 (18.04.2015 19:37 отредактировано svetlana)

Re: Вопрос по Robots.txt

в topnews.tpl и relatednews.tpl
лучше только  rel="nofollow" добавить, а в <noindex> лучше обернуть теги, которые их выводят т.е. <noindex>{related-news}</noindex> и <noindex>{topnews}</noindex>
Дабы не плодить эти noindex_ы

Ну что там у вас выйдет покажет время, но выводиться инфа из этих блоков в выдачу не должна будет.

7

Re: Вопрос по Robots.txt

svetlana пишет:

Ну что там у вас выйдет покажет время, но выводиться инфа из этих блоков в выдачу не должна будет.

Поглядим, пощупаем...  спасибо за помощь.