Author Topic: Как скрыть поисковых ботов?  (Read 11022 times)

0 Members and 1 Guest are viewing this topic.

progressive

  • Full Member
  • ***
  • Posts: 13
Как скрыть поисковых ботов?
« on: October 26, 2016, 02:14:04 PM »
Привет всем!
Как убрать? в ожидающих посетителей: Поисковых ботов, GoogleBot, YandexBot итд

faf

  • Mibew Staff Member
  • Native
  • *****
  • Posts: 951
    • Mibew Messenger
Re: Как скрыть поисковых ботов?
« Reply #1 on: October 26, 2016, 04:28:26 PM »
Можно написать плагин, фильтрующий посетителей, например, по заголовку User-agent.

Ссылку на proof of concept для схожего по функционалу плагина можно посмотреть здесь: https://mibew.org/forums/index.php/topic,192030.msg199368.html#msg199368



PretorianetZ

  • Jr. Member
  • **
  • Posts: 4
Re: Как скрыть поисковых ботов?
« Reply #2 on: October 02, 2017, 11:40:40 AM »
Так не прокатит ?


в основную папку положить robots.txt в нем прописать

User-agent: *
Allow: /

User-agent: Yandex
Allow: /

User-agent: YandexBot
Allow: /

User-agent: Googlebot
Allow: /

User-agent: *
Disallow: /mibew/