siteden xml çekme
- Konuyu başlatan 66hckr66
- Başlangıç tarihi
Selenium ile giriş yaparsın sonra oturum çerezini alıp requests ile XML veya JSON’ı çekersin. Sana vereceğim kodları deneyip denemediğini bilmiyorum.
Ya Da playwright ile kullanıcı gibi davranan bir script yazarsın. Claudflare Bot Korumasını Aşarsın
Bu Kaynağı Da İnceleyebilirsin:
https://www.zenrows.com/blog/playwright-cloudflare-bypass
Gelişmiş Python Kod: Selenium + Request
(Bu Kod İçin ChromeDriver İndirmen Lazım kod ip install selenium requests ile çalışıyor)
Eğer Program Diyorsan Octoparse Senin İçin En İyisi Olacaktır...
İyi Günler Dilerim...
from selenium import webdriverimport requestsdriver = webdriver.Chrome()driver.get("https://examplesites.com/login")cookies = driver.get_cookies()driver.quit()session = requests.Session()for cookie in cookies: session.cookies.set(cookie['name'], cookie['value'])response = session.get("https://examplesites.com/products.xml")print(response.text)Ya Da playwright ile kullanıcı gibi davranan bir script yazarsın. Claudflare Bot Korumasını Aşarsın
pip install playwrightplaywright installfrom playwright.sync_api import sync_playwrightwith sync_playwright() as p: browser = p.chromium.launch(headless=False) context = browser.new_context() page = context.new_page() page.goto("https://examplesites.com") html = page.content() print(html) browser.close()Bu Kaynağı Da İnceleyebilirsin:
https://www.zenrows.com/blog/playwright-cloudflare-bypass
Gelişmiş Python Kod: Selenium + Request
(Bu Kod İçin ChromeDriver İndirmen Lazım kod ip install selenium requests ile çalışıyor)
from selenium import webdriverfrom selenium.webdriver.chrome.options import Optionsimport requestsimport timechrome_options = Options()chrome_options.add_argument("--headless")chrome_options.add_argument("--disable-blink-features=AutomationControlled")driver = webdriver.Chrome(options=chrome_options)driver.get("https://www.examplesites.com/login")time.sleep(5)# Oto Login:# driver.find_element("id", "email").send_keys("[email protected]")# driver.find_element("id", "password").send_keys("password")# driver.find_element("id", "login-button").click()# time.sleep(5)cookies = driver.get_cookies()driver.quit()session = requests.Session()for cookie in cookies: session.cookies.set(cookie['name'], cookie['value'])headers = { "User-Agent": "Mozilla/5.0", "Referer": "https://www.examplesites.com",}xml_url = "https://www.examplesites.com/products.xml"response = session.get(xml_url, headers=headers)if response.status_code == 200: with open("products.xml", "wb") as f: f.write(response.content) print("XML Succesfuly Save!")else: print("Error:", response.status_code)Eğer Program Diyorsan Octoparse Senin İçin En İyisi Olacaktır...
İyi Günler Dilerim...
