Python ile Web Scraping: Adım Adım Veri Çekme ve İşleme Rehberi

Adım 1: Python Ortamını Kurma

Adım 2: Gerekli Kütüphaneleri Yükleme

pip install beautifulsoup4

pip install requests

pip install selenium

Adım 3: Web Sayfasını İnceleme ve Veriyi Çekme

import requests
from bs4 import BeautifulSoup

url = 'https://www.orneksite.com'
response = requests.get(url)
soup = BeautifulSoup(response.content, 'html.parser')

# Başlıkları çekme
for heading in soup.find_all('h2'):
    print(heading.text.strip())

` etiketlerini bulur ve başlıkları ekrana yazdırır. Burada `

` etiketini, sayfadaki başlıkları temsil eden etikete göre değiştirebilirsiniz.

Adım 4: Çekilen Verileri İşleme

import csv

with open('haberler.csv', mode='w', newline='', encoding='utf-8') as file:
    writer = csv.writer(file)
    writer.writerow(['Başlık'])  # Başlık satırı
    for heading in soup.find_all('h2'):
        writer.writerow([heading.text.strip()])

Adım 5: İleri Düzey Web Scraping Teknikleri

from selenium import webdriver

# Tarayıcıyı açıyoruz
driver = webdriver.Chrome(executable_path='/path/to/chromedriver')
driver.get('https://www.orneksite.com')

# Sayfa yüklendikten sonra veri çekme
soup = BeautifulSoup(driver.page_source, 'html.parser')
for heading in soup.find_all('h2'):
    print(heading.text.strip())

# Tarayıcıyı kapatıyoruz
driver.quit()

Sonuç