Стоит ли закрывать комментарии в robots.txt от индексирующих роботов?
Стоит ли закрывать комментарии от индексации, при том что в основном комментарии такого типа: спасибо, спасибо, :) но есть и редкие исключения вида дополнения к статье или вопроса и ответа на него.
Заранее всем спасибо!