Merhaba arkadaşlar kali linux ta google üzerinden bir sitenin veya birden fazla sitenin indexlenmiş urlelerini nasıl çekebilirim yani googlede site:siteadresi.com yazdığında sitenin google üzerindeki tüm indexli sayfa urleleri çıkıyorya ben bunları nasıl çekerim kalide
Kali Linux Google site urlelerini çekme yardım
- Konuyu başlatan tekdost22
- Başlangıç tarihi
- Konuyu başlatan
- #2
Arkadaşlar konu güncel ben alttaki kodları kullanıyorum fakat sadece ilk sayfa urllerini alabiliyorum bunu tüm urlleri almak için nasıl geliştirebilirim yada farklı bir yöntem olan söyleyebilirmi.
Kod:
function google { Q="$@"; GOOG_URL='https://www.google.de/search?tbs=li:1&q='; AGENT="Mozilla/4.0"; stream=$(curl -A "$AGENT" -skLm 10 "${GOOG_URL}${Q//\ /+}" | grep -oP '\/url\?q=.+?&' | sed 's|/url?q=||; s|&||'); echo -e "${stream//\%/\x}"; }
Kod:
root@kali:~# google site:siteadresi.com
