Chilkat Spider ActiveX загрузить

Компоненты используются для сканирования сайта паутины.

"Паук-компонент используется для сканирования веб-сайта".
indir.biz Редактора: Spider свойств компонента
-Сканирование веб-сайта.
Исходящие ссылки на другие веб-накопления для сканирования.
Кэш-страницы могут быть проданы с тем чтобы будущие сканирует кэш.
Robots.txt совместимо. каждая страница
Fetch HTML-содержания сканирования.
-Able HTTPS для сканирования страниц.
Определить "S для предотвращения предотвратить некоторые шаблон шаблоны.
Определить "исходящим ссылкам, которые соответствуют шаблону, чтобы избежать избежать.
чтение и подключения таймаут.
URL, чтобы избежать наиболее максимальный размер URL растет.
-Максимальный размер слишком велик или реагировать на страницы с содержанием, чтобы предотвратить бесконечное.
-Ветер-вниз страниц, устанавливать ограничение на индексацию сайта пунктам. Теперь вы можете скачать бесплатную Chilkat Spider ActiveX 2.2.2.