Хороший інструмент для сканування мого сайту та допоможе мені знайти мертве посилання та від’єднані файли [закрито]

У мене досить великий спадковий сайт з буквально тисячами PDF-файлів, які іноді обліковуються в базі даних, але часто це лише посилання на сторінку і зберігаються в більшості всіх каталогів на сайті.

Я написав сканер php, щоб переходити за всіма посиланнями на своєму сайті, а потім я порівнюю це з дампами структури каталогів, але чи є щось простіше?

Я використав Xenu's Link Sleuth . Це працює досить добре, просто не забудьте самостійно DOS!

Якщо ви використовуєте Windows 7, найкращим інструментом є SEO Toolkit 1.0 IIS7. Це безкоштовно, і ви можете завантажити його безкоштовно.

Інструмент просканує будь-який сайт і підкаже, де знаходяться всі мертві посилання, які сторінки потрібно тривати для завантаження, які сторінки мають відсутні заголовки, дублюючі заголовки, однакові для ключових слів та описів та які сторінки зламали HTML.

Спробуйте відкритий код інструменту W3C з відкритим кодом Link Checker . Ви можете використовувати його в Інтернеті або встановити локально

Я великий шанувальник linklint для перевірки великих статичних сайтів, якщо у вас є командний рядок unix (я використовував на Linux, MacOS та FreeBSD). Інструкції з установки див. На їхньому сайті. Після встановлення я створюю файл, який називається check.llі робити:

linklint @check.ll

Ось як виглядає мій файл check.ll

# linklint
-doc .
-delay 0
-http
-htmlonly
-limit 4000
-net
-host www.example.com
-timeout 10

Це виконує сканування www.example.comта генерування HTML-файлів із перехресними звітами про те, що порушено, пропущено тощо.

Існує декілька продуктів від Microsys , особливо їх генератор Sitemap A1 та аналізатор веб-сайтів A1, який сканує ваш веб-сайт та повідомляє про все, що ви можете про нього уявити.

Це включає непрацюючі посилання, а також перегляд таблиці всіх ваших сторінок, щоб ви могли порівняти такі речі, як ідентичні <title> та мета-теги опису, посилання на наступні нижче, meta noindex на веб-сторінках та безліч захворювань, на які просто потрібно гострий погляд і швидка рука для виправлення.

Link Examiner - це дійсно хороша безкоштовна безкоштовна програма для ваших потреб.