Проверка запрета индексации в метатегах
Сегодня решил дописать свой скрипт для чеканья Дженах, добавив к нему еще и проверку на запрет индексации в мета тегах. Как известно при закрытии индексации прописывают что-то вроде этого
<meta name=»robots» content=»noindex,follow» />