Мне нужно запретить /variable_dir_name/directory через robots.txt Я использую: Запретить: */каталог Noindex: */каталог это правильно?

Я случайно поместил index.html с «noindex,nofollow» на свой веб-сервер и оставил его на несколько дней. Теперь я изменил его на «index,follow», добавил sitemap.xml и добавил веб-страницу в веб-мастер Google. Что я могу сделать, чтобы заставить...

Мы поняли, что у нас есть большое количество повторяющихся страниц нашего сайта электронной коммерции, проиндексированных в Google, особенно большое количество фасетных URL-адресов, таких как цветные страницы, страницы с ценами и т. Д. Они уже...

У меня есть сайт разработки joomla 3.3 и рабочий сайт. Я делаю всю разработку на сайте разработки, и каждый раз, когда разработка переходит в производство, мне нужно убедиться, что я меняю noindex,nofollow на index, follow. В любом случае, я могу...

Я читаю шаблон html5 extend.md и в нем говорится: По словам Хизер Чэмп, бывшего менеджера сообщества Flickr, вы не должны позволять поисковым системам индексировать вашу страницу «Свяжитесь с нами» или «Жалобы», если вам дорого ваше...

Я создал новый веб-сайт и не хочу, чтобы он сканировался поисковыми системами и не отображался в результатах поиска. Я уже создал robots.txt User-agent: * Disallow: / У меня есть html-страница. я хотел использовать <meta...

Я искал, но не нашел совсем то, что мне нужно. То, что я пытаюсь сделать, это не индексировать папки плагинов. Google по какой-то причине проиндексировал кучу таких URL, например: /wp-content/plugins/LayerSlider/static/public Все, что...

Я пытаюсь сделать так, чтобы мой сайт индексировался поисковыми системами. Согласно этому, что-то из Wordpress вставляет метатег, который не позволяет поисковым системам сканировать мой сайт:...

Я всегда запрещал Google индексировать мой сайт с помощью файла robots.txt. Недавно я прочитал статью сотрудника Google, в которой он заявил, что вы должны делать это с помощью метатегов. Означает ли это, что Robots.txt не будет работать? Поскольку...