1
Чи слід блокувати сторінки архіву Wordpress з пошукових систем?
Я використовую WordPress та /sample-post/URL-адреси для своїх публікацій та /yyyy/mm/архівів. Google повністю індексував сайт. Оскільки в архівах наразі відображаються повні публікації, я подумав, що я не повинен дозволити Google індексувати сторінки архіву, оскільки вони містять повні публікації, і це буде дублювати вміст. Таким чином, мій robots.txt містить: Disallow: /2009/ Disallow: …