Если нужно, то как закрыть форум от ботов

[кот]

Например Гугл и Яндекс нужен, Бинг и Яхо вроде тоже, а вот такие как Робот: Proximic нужны?
Если нет, то как правильно закрыть от индексации от ненужных ботов, может у кого либо есть список

 

[Hope]

Все роботы для чего-то нужны и все они повышают общий рейтинг сайта.

 

[Jumuro]

robots.txt в помощь
Примерно так:

User-agent: Proximic
User-agent: Другой_робот
User-agent: Еще_один_другой_робот
Disallow: /

User-agent: *
Disallow: /find-new/
...другие записи...
...