Spidr

komut tek bir sayfada, web sitesi, birden çok etki ya da non-stop çalıştırabilirsiniz.
Spidr hızlı ve kullanımı kolay olacak şekilde tasarlanmıştır

Özellikler :.

• önceki oturumdan spidering kuyruğu ve geçmişi geri yükleme .
• Özel User-Agent dizeleri.
• Özel proxy ayarlarını.
• HTTPS desteği.


• Şöyledir:
• etiketleri.
• iframe etiketleri.
• çerçeve etiketleri.
• Çerez korumalı bağlantılar.
• HTTP 300, 301, 302, 303 ve 307 Yönlendirmeler.
• Meta-Refresh yönlendirmeler.
• HTTP Basic Auth korumalı bağlantılar.

Dayalı
• Kara liste veya beyaz liste URL'ler:
• URL şeması.
• Sunucu adı
• Port numarası
• Tam bağlantı
• URL uzantısı


• için çağrı arkaları sağlar:
• Her ziyaret Sayfa.
• Her ziyaret URL.
• Belirtilen desenle eşleşen her ziyaret URL.

Bir bağlantı
• Her kökeni ve hedef URI.
• başarısız Her URL ziyaret edilecek.


• eylem yöntemleri sağlar:
• Pause spidering.
• sayfaların işlenmesini yap.
• bağlantıların işlenmesini yap.

Bu sürümdeki yeni Nedir:

• OpenSSL :: SSL yakalayın :: SSLError istisnalar başlatıldığında HTTPS Oturumlar.