Как noindex комментировать / отвечать в Drupal 7

Я использую Drupal 7 и пытаюсь использовать метатег noindex для предотвращения индексации http://example.com/comment/reply/43/738 поисковыми системами.

Страница комментариев / ответов индексируется, хотя я использовал следующую роль в файле robots.txt:

Disallow: /comment/reply/

В какой файл шаблона мне нужно будет включить метатег noindex для / comment / reply / pages?

Вы можете использовать любой из этого кода в robots.txt:

User-agent: *
Disallow: /*comment

Это будет игнорировать каждый URL, который содержит комментарий .

Вы также можете использовать следующее, чтобы пренебрегать каждым URL, содержащим / комментарий .

User-agent: *
Disallow: /comment/reply

User-agent: *
Disallow: /comment

После этого проверьте, работает ли он или нет, с помощью средства проверки Google Robots.txt .

В template.php вашей темы или в page.tpl.php вы можете проверить URL страницы, чтобы увидеть, является ли страница страницей комментариев, а затем добавить код, который будет вставлять метатег.

Вы можете сделать это в функции template.php YOURTHEME_preprocess_html () или вставить ее где-нибудь в верхней части page.tpl.php. Код для добавления будет выглядеть примерно так:

    <?php
      $element = array(
        '#tag' => 'meta', 
        '#attributes' => array(
          'property' => 'robots',
          'content' => 'noindex',
        ),
      );
    drupal_add_html_head($element, 'robots');
?>

Смотрите drupal_add_html_head () .

Обновление : работает следующее, печатает <meta name="robots" content="noindex,follow" />в разделе заголовка все страницы, к которым осуществляется доступ, начиная с пути comment. Это нужно для того, чтобы обойти тот факт, что страница, подобная comment / 3, внутренне несет в качестве аргументов node / nid, как указывалось выше в jmarkel.

<?php
function metarobots_comment_help() {
  $url_components = explode('/', request_uri());
  if ($url_components[1] == 'comment') {
    $elements = array(
      '#tag' => 'meta',
      '#attributes' => array(
        'name' => 'robots',
        'content' => 'noindex,follow',
      ),
    );
   drupal_add_html_head($elements, 'robots');
  }
}

С помощью полезного комментария к функции arg .

Надеемся, что в конечном итоге это будет решено модулем мета-тегов - есть запрос на добавление функции , но пока не ясно, хочет ли автор модуля поддержать это.

[Мой предыдущий комментарий] Я просто хотел добавить, что использование robots.txt не является ответом - как вы уже заметили, ссылки продолжают появляться в результатах поиска, несмотря на использование Disallow: /comment. Это ожидаемо, поскольку robots.txt говорит боту не сканировать эти страницы, но не говорит Google не индексировать его. Как объяснено в SEOmoz Robots.txt и Meta Robots Best Practices для поисковой оптимизации :

В большинстве случаев мета-роботы с параметрами «noindex, follow» должны использоваться как способ ограничения сканирования или индексации.

Блокировать с помощью Robots.txt - Это говорит механизмам не сканировать данный URL, но говорит им, что они могут сохранить страницу в индексе и отобразить ее в результатах.

Блокировать с помощью Meta NoIndex - это говорит механизмам, которые они могут посетить, но им не разрешено отображать URL в результатах. (Это рекомендуемый метод) Итак, метатег noindex, который вы ищете, действительно то, что вам нужно.