httrack website kopyalama çok uzun sürüyor başka bir şekilde nasıl daha hızlı kopyalayabilirim
link taraması her zamann çoğalıyor
link taraması her zamann çoğalıyor
httrack website kopyalama çok uzun sürüyor
- Konuyu başlatan W3xdy
- Başlangıç tarihi
Merhaba, HTTrack ile çok büyük bir siteyi (142k+ dosya) çekiyorsun ve bu yüzden süreç aşırı uzun sürüyor (10 saat sadece yarısı tamamlanmış). Bu tamamen normal, çünkü: HTTrack her dosyayı tek tek indiriyor. Tek bağlantı (1 connection) kullanıyor, yani paralel indirme yok. Sunucuya çok sayıda küçük istek gönderildiği için yavaş ilerliyor.
Daha hızlı kopyalama için yapabileceklerin:
HTTrack’te Options > Flow Control kısmından Max connections / Max transfer rate değerlerini yükseltebilirsin. Örn: 1 yerine 10 bağlantı açarsan, indirme hızı ciddi şekilde artar. Ancak bazı siteler fazla bağlantıyı engelleyebilir (ban riski var). Tüm siteyi indirmek yerine (HTML, CSS, JS, resim, pdf vs. hepsi), sadece belirli dosya türlerini çek. Örn: +*.html +*.jpg +*.png -ad.doubleclick.net/* gibi filtrelerle.
Linux/Windows’ta wget -m -c -np -k http://site .com komutuyla recursive mirroring yapabilirsin. (site.com kısmında aradaki boşluğu silerek)
Bazen komple siteyi klonlamak yerine, dosya dizinlerine doğrudan erişim mümkün oluyor (örneğin /images/, /docs/ klasörleri). Böyle durumlarda tek seferde toplu indirmek çok daha hızlı olur.
Çok dosya varsa IDM toplu indirme ile HTTrack’ten kat kat hızlı olabilir.
