если я правильно понимаю, вы можете указать Google сканировать или не сканировать файлы PDF только через robots.txt. я хочу, чтобы Google сканировал файлы, но не отображал их на страницах результатов поиска.
Это возможно?
если я правильно понимаю, вы можете указать Google сканировать или не сканировать файлы PDF только через robots.txt. я хочу, чтобы Google сканировал файлы, но не отображал их на страницах результатов поиска.
Это возможно?
Вы можете добавить директивы robots в любой файл через http-заголовок x-robots-tag. Установив значение noindex, Follow звучит так, как вы хотите.
Я не уверен, но разве это: <meta name="robots" content="noindex">
не хорошее решение вашей проблемы?