Якщо значення суперечать один одному, до уваги буде прийнятий найбільш строгий. Так, якщо сторінка містить метатеги
то бот підкориться значенням NOINDEX.
Зайві значення content-параметра
За замовчуванням Гугл-бот буде індексувати сторінку і всі посилання на неї. Тому немає ніякої необхідності позначати сторінки значеннями content-параметра INDEX або FOLLOW.
Націлювання метатега ROBOTS безпосередньо на Google-бота
Щоб надати інструкції для всіх пошукових систем, встановіть назву метатега як "ROBOTS". Щоб вказати інструкції тільки для Гугл-бота назвіть метатег як "GOOGLEBOT". Якщо Ви хочете створити різні інструкції для різних пошукових систем, то краще використовувати спеціальні метатеги для кожної пошукової системи, а не загальний метатег ROBOTS в поєднанні зі специфічними для конкретної пошукової машини.
Google-бот розуміє будь-яку комбінацію верхнього і нижнього регістрів. Тому кожен з наступних метатегов інтерпретується їм однаково:
Якщо у Вас є кілька значень content-параметра, то між ними потрібно поставити кому, але при цьому неважливо, додасте Ви також прогалини чи ні. Тому такі метатеги інтерпретуються однаково:
Якщо ви використовуєте і файл robots.txt, і метатеги ROBOTS
Якщо між параметрами файлу robots.txt і метатегів є протиріччя, то Гугл-бот піде найбільш суворим з них. Якщо конкретніше, то:
Валідниє значення параметра content метатега ROBOTS
Кілька слів про значення "NONE"
Як визначено в robotstxt.org, наступне означає NOINDEX, NOFOLLOW:
Розумне вкладення в ваше майно, а також гармонія дизайну і надійність конструкції - все це автоматичні гаражні ворота мансардні від компанії «ELITVOROTA». Також пропонуються автоматичні шлагбауми та ролети з дистанційним управлінням.