Лекция: Web-спайдер Teleport Pro
Программа Teleport Pro представляет собой мощный инструмент для офлайнового просмотра Web-сайтов, создания зеркальных копий Web-сайтов и извлечения из Интернета файлов с полезными ресурсами. Программа Teleport Pro обеспечивает полностью автоматический режим работы, причем одновременно нескольких копий программы (это свойство называется многопоточностью), функционируя подобно пауку, перемещающемуся в сети Web по ссылкам на Web-сайте. Программы, обладающие последним из указанных свойств, на компьютерном сленге называются «слайдерами» — от английского слова «spider» — паук.
Такие Web-спайдеры способны безо всякого участия пользователя «ползать» по сети Web в поисках «жертвы» — файла с нужной информацией. А чтобы определить, нужен ли вам встреченный при поиске файл, спайдер использует специальные критерии, заданные пользователем. Спайдер Teleport Pro умеет делать следующие вещи.
• Загружать Web-сайты целиком для последующего просмотра в офлайновом режиме.
• Создавать точные копии Web-сайта, полностью сохраняющие структуру каталогов вместе с хранимыми файлами.
• Выполнять поиск на Web-сайте файлов определенного типа.
• Автоматически загружать список файлов с Web-сайта.
• Исследовать любой Web-сайт, связанный с центральным Web-сайтом.
• Производить поиск на Web-сайте по ключевым словам.
• Создавать список всех страниц и файлов на Web-сайте.
Все эти возможности Teleport Pro очень полезны для хакинга, поскольку позволяют вместо утомительного ручного поиска по Web нужной информации, щелчков на ссылках и просмотра страниц автоматически загружать нужные файлы и без всякой спешки тщательно изучать их на своем компьютере.
Для работы с Teleport Pro вы должны создать файл проекта, содержащий несколько адресов файлов, хранимых в сети Web. В файле проекта следует также указать несколько правил выбора гиперссылок, по которым должны выполняться переходы слайдера, и файлов для загрузки из Web. Далее командой меню Start (Старт) запускается работа слайдера — и вы можете просто подождать результата, пока Teleport Pro прочитает файлы с указанными адресами, извлечет их из Web, прочитает гиперссылки из загруженных файлов Web-страниц, перейдет по ссылкам на другие файлы, и так далее до завершения.
При создании файла проекта вы можете задать режим извлечения из сайта Web файлов только определенного типа и следования по ссылкам также только определенного типа. Например, можно заставить Teleport Pro извлекать из Web только графические файлы и выполнять переходы только внутри домена по указанному стартовому адресу, или же указать «глубину» следования по ссылкам. Так что наш Web-спайдер может вести себя достаточно интеллектуально, не покидая того уголка сети Web, в который его поместили.
Рабочее окно программы Teleport Pro представлен на Рис. 13.
Рис. 13. Рабочее окно Teleport Pro напоминает окно проводника Windows
Для реализации всех описанных выше возможностей пользователю Teleport Pro предоставляется мастер создания проектов, к описанию работы которого мы и перейдем.