Инструкция
1
Если вам надо увидеть список всех доступных для просмотра страниц, воспользуйтесь возможностями поисковой системы Google. Введите в строке поиска имя интересующего вас сайта в формате: site:имя_сайта. Например, если вы хотите посмотреть список страниц сайта МГУ, введите в поисковик следующую строку: site:msu.ru/ В выданном поисковиком списке вы увидите все проиндексированные страницы.
2
Существуют и специализированные онлайн сервисы, позволяющие определить структуру сайта. Одним из лучших является сервис http://defec.ru/scaner/ Введите имя интересующего вас сайта – например, для приводившегося выше примера с сайтом МГУ необходимо ввести msu.ru. Затем введите проверочный код и нажмите кнопку «SCAN». В открывшемся окне вы увидите достаточно полную картину структуры интересующего вас сайта.
3
Помимо онлайн сервисов, для определения структуры сайта существуют и специализированные программы. Например, очень неплохими возможностями обладает программа SiteScaner. Она существует как в консольной версии, так и с привычным для пользователей Windows оконным интерфейсом. Программа сканирует нужный вам сайт и выводит список найденных страниц.
4
Найдите SiteScaner в интернете, перед работой внимательно прочитайте файл read me - в нем описан порядок работы с приложением. Следует отметить, что установленный на компьютере антивирус может заблокировать SiteScaner как нежелательную программу. Если это происходит, просто отключите его на время работы со сканером.
5
Очень неплохими возможностями для анализа структуры сайта обладает программа Semonitor. Это целый программный комплекс, позволяющий собрать о сайте всю возможную информацию. В состав программы входят несколько анализаторов, она незаменима при раскрутке сайта и его оптимизации. Демоверсию программы вы можете найти на сайте разработчика: http://semonitor.ru/