Правильное использование метатега ROBOTS для поисковых систем
Гугл разъяснил вопросы о том, как поисковый бот трактует метатег ROBOTS. Множественные значения content-параметра Рекомендуется заключать все значения параметра content в один метатег. Это сделает его более удобным для чтения и уменьшит вероятность противоречий. Например: <META NAME="ROBOTS" CONTENT="NOINDEX, NOFOLLOW"> Если страница содержит несколько ...