Web Scraping · Proxynet Blog – Sayfa 3
Yayın tarihi
Web Scraping ve API Farkı: Hangisini Seçmeli?
API, sağlayıcının paylaştığı veriyi sabit bir biçimde verir; web scraping ise sayfanın kendisini okur. İkisini karşılaştırıp aynı veriyi iki yoldan çektik.
Yazar:
Acar Diveroli
Yayın tarihi
Web Scraping (Veri Kazıma) Nedir ve Nasıl Çalışır?
Web scraping (veri kazıma), web sayfalarındaki verinin bir programla otomatik toplanmasıdır: HTML indirilir, alanlar ayıklanıp kaydedilir. Nasıl çalışır?
Yazar:Acar Diveroli
Yayın tarihi
Cheerio ile Node.js'te Web Scraping: Adım Adım Rehber
Cheerio, Node.js'te HTML'i jQuery tarzı seçicilerle ayrıştırır. Sayfalama, eşzamanlılık sınırı, yeniden deneme ve proxy içeren test edilmiş bir scraper kurun.
Yazar:Acar Diveroli
Yayın tarihi
Kazınan Veri Pandas ile Nasıl Temizlenir? Python Rehberi
Kazınan veriyi pandas ile temizleyin: önce metni, sonra türleri, yinelenen kayıtları, eksik ve aykırı değerleri düzeltin, kaydetmeden doğrulayın.
Yazar:Acar Diveroli
Yayın tarihi
PDF'den Veri Çıkarma: Tablolar, Metin ve OCR
Önce PDF'te metin katmanı olup olmadığına bakın. Varsa Excel ya da pdfplumber tabloları okur; taranmış sayfalar OCR ister. Test edilmiş Python kodu yazıda.
Yazar:Acar Diveroli
Yayın tarihi
Kazınan Verilerde Kişisel Veri (PII) Nasıl Yönetilir?
Kazınan veriler çoğu zaman kişisel veri taşır: adlar, profil linkleri, metindeki e-posta ve telefonlar. Bunları bulma, azaltma, maskeleme ve saklama yolları.
Yazar:Acar Diveroli
Yayın tarihi
Kazınan Veri CSV, JSON ve SQLite'a Nasıl Kaydedilir?
Kazınan satırları tablolar için CSV'ye, sürekli eklenen kayıtlar için JSON Lines'a, tekrarsız ve artımlı çalışmalar için SQLite'a kaydedin. Kodlar test edildi.
Yazar:Acar Diveroli
Yayın tarihi
Veri Ayrıştırma (Parsing) Nedir? Parser Türleri ve Hataları
Veri ayrıştırma; HTML, JSON, CSV veya log gibi ham girdiyi kodunuzun kullanabileceği kayıtlara çevirir. Parser nasıl çalışır, türleri ve sık hatalar.
Yazar:Acar Diveroli
Yayın tarihi
ETL Nedir? Çıkarma, Dönüştürme, Yükleme ve Python Örneği
ETL, veriyi bir kaynaktan çıkarıp sabit bir yapıya göre temizleme ve veritabanına yükleme işidir. Nasıl çalışır, ETL ile ELT farkı ve denenmiş bir Python işi.
Yazar:Acar Diveroli
Yayın tarihi
Python Requests ile POST ve JSON: cURL Karşılıkları
Python Requests ile JSON POST etmek için requests.post(url, json=data) yazın; Content-Type header'ını Requests ekler. data=, params= ve cURL karşılıkları.
Yazar:Acar Diveroli
Yayın tarihi
Python ile Web Crawler Nasıl Yazılır? Adım Adım Örnek
Python web crawler, başlangıç adresinden bulduğu bağlantıları kuyruğa alır ve her sayfayı bir kez açar. Kuyruğu, derinlik sınırını ve kapsamı kodla kuruyoruz.
Yazar:Acar Diveroli
Yayın tarihi
BeautifulSoup Nedir ve Python'da Nasıl Kullanılır?
BeautifulSoup, indirilen HTML'i aranabilir bir ağaca çeviren Python kütüphanesidir. Ayrıştırıcı seçimini, find_all ve select farkını, tablo okumayı anlatıyoruz.
Yazar:Acar Diveroli
Web Scraping ve API Farkı: Hangisini Seçmeli?
Yazar: Acar DiveroliKarşılaştırmaYayın tarihi
Web Scraping (Veri Kazıma) Nedir ve Nasıl Çalışır?
Yazar: Acar DiveroliWeb ScrapingYayın tarihi
Cheerio ile Node.js'te Web Scraping: Adım Adım Rehber
Yazar: Acar DiveroliNasıl YapılırYayın tarihi
Kazınan Veri Pandas ile Nasıl Temizlenir? Python Rehberi
Yazar: Acar DiveroliNasıl YapılırYayın tarihi
PDF'den Veri Çıkarma: Tablolar, Metin ve OCR
Yazar: Acar DiveroliNasıl YapılırYayın tarihi
Kazınan Verilerde Kişisel Veri (PII) Nasıl Yönetilir?
Yazar: Acar DiveroliWeb ScrapingYayın tarihi
Kazınan Veri CSV, JSON ve SQLite'a Nasıl Kaydedilir?
Yazar: Acar DiveroliNasıl YapılırYayın tarihi
Veri Ayrıştırma (Parsing) Nedir? Parser Türleri ve Hataları
Yazar: Acar DiveroliWeb ScrapingYayın tarihi
ETL Nedir? Çıkarma, Dönüştürme, Yükleme ve Python Örneği
Yazar: Acar DiveroliWeb ScrapingYayın tarihi
Python Requests ile POST ve JSON: cURL Karşılıkları
Yazar: Acar DiveroliNasıl YapılırYayın tarihi
Python ile Web Crawler Nasıl Yazılır? Adım Adım Örnek
Yazar: Acar DiveroliWeb ScrapingYayın tarihi
BeautifulSoup Nedir ve Python'da Nasıl Kullanılır?
Yazar: Acar DiveroliWeb ScrapingYayın tarihi
Eşleşen yazı yok
Yayın tarihi
Yayın tarihi