Web Scraping · Proxynet Blog
Yayın tarihi
IP İtibarı Nedir, Proxy Neden Engellenir?
IP itibarı, bir adresin geçmişinden ve ağ türünden üretilen puandır. Neyi ölçtüğünü, proxy'nin neden engellendiğini ve puanın nasıl düzeldiğini anlatıyoruz.
Yazar:
Acar Diveroli
Yayın tarihi
Google Sıra Takibi için Proxy: Konum Neden Önemli?
Google her ülke, şehir, dil ve cihaz için farklı bir sonuç sayfası kurar; bu yüzden bir sıra kontrolü ancak yapıldığı yer kadar doğrudur. Kontrolün gerekleri.
Yazar:Acar Diveroli
Yayın tarihi
Python ile Web Scraping ve Rotating Proxy Kullanımı
requests ya da httpx'i rotating gateway'e bağlayın, 429'u backoff ile yeniden deneyin, eşzamanlılığı sınırlayın ve çıkış IP'sini doğrulayın. Test edilmiş kod.
Yazar:Acar Diveroli
Yayın tarihi
Web Scraping ve API Farkı: Hangisini Seçmeli?
API, sağlayıcının paylaştığı veriyi sabit bir biçimde verir; web scraping ise sayfanın kendisini okur. İkisini karşılaştırıp aynı veriyi iki yoldan çektik.
Yazar:Acar Diveroli
Yayın tarihi
Web Scraping (Veri Kazıma) Nedir ve Nasıl Çalışır?
Web scraping (veri kazıma), web sayfalarındaki verinin bir programla otomatik toplanmasıdır: HTML indirilir, alanlar ayıklanıp kaydedilir. Nasıl çalışır?
Yazar:Acar Diveroli
Yayın tarihi
Cheerio ile Node.js'te Web Scraping: Adım Adım Rehber
Cheerio, Node.js'te HTML'i jQuery tarzı seçicilerle ayrıştırır. Sayfalama, eşzamanlılık sınırı, yeniden deneme ve proxy içeren test edilmiş bir scraper kurun.
Yazar:Acar Diveroli
Yayın tarihi
Kazınan Veri Pandas ile Nasıl Temizlenir? Python Rehberi
Kazınan veriyi pandas ile temizleyin: önce metni, sonra türleri, yinelenen kayıtları, eksik ve aykırı değerleri düzeltin, kaydetmeden doğrulayın.
Yazar:Acar Diveroli
Yayın tarihi
PDF'den Veri Çıkarma: Tablolar, Metin ve OCR
Önce PDF'te metin katmanı olup olmadığına bakın. Varsa Excel ya da pdfplumber tabloları okur; taranmış sayfalar OCR ister. Test edilmiş Python kodu yazıda.
Yazar:Acar Diveroli
Yayın tarihi
Kazınan Verilerde Kişisel Veri (PII) Nasıl Yönetilir?
Kazınan veriler çoğu zaman kişisel veri taşır: adlar, profil linkleri, metindeki e-posta ve telefonlar. Bunları bulma, azaltma, maskeleme ve saklama yolları.
Yazar:Acar Diveroli
Yayın tarihi
Kazınan Veri CSV, JSON ve SQLite'a Nasıl Kaydedilir?
Kazınan satırları tablolar için CSV'ye, sürekli eklenen kayıtlar için JSON Lines'a, tekrarsız ve artımlı çalışmalar için SQLite'a kaydedin. Kodlar test edildi.
Yazar:Acar Diveroli
Yayın tarihi
Veri Ayrıştırma (Parsing) Nedir? Parser Türleri ve Hataları
Veri ayrıştırma; HTML, JSON, CSV veya log gibi ham girdiyi kodunuzun kullanabileceği kayıtlara çevirir. Parser nasıl çalışır, türleri ve sık hatalar.
Yazar:Acar Diveroli
Yayın tarihi
ETL Nedir? Çıkarma, Dönüştürme, Yükleme ve Python Örneği
ETL, veriyi bir kaynaktan çıkarıp sabit bir yapıya göre temizleme ve veritabanına yükleme işidir. Nasıl çalışır, ETL ile ELT farkı ve denenmiş bir Python işi.
Yazar:Acar Diveroli
IP İtibarı Nedir, Proxy Neden Engellenir?
Yazar: Acar DiveroliProxy 101Yayın tarihi
Google Sıra Takibi için Proxy: Konum Neden Önemli?
Yazar: Acar DiveroliKullanım AlanlarıYayın tarihi
Python ile Web Scraping ve Rotating Proxy Kullanımı
Yazar: Acar DiveroliWeb ScrapingYayın tarihi
Web Scraping ve API Farkı: Hangisini Seçmeli?
Yazar: Acar DiveroliKarşılaştırmaYayın tarihi
Web Scraping (Veri Kazıma) Nedir ve Nasıl Çalışır?
Yazar: Acar DiveroliWeb ScrapingYayın tarihi
Cheerio ile Node.js'te Web Scraping: Adım Adım Rehber
Yazar: Acar DiveroliNasıl YapılırYayın tarihi
Kazınan Veri Pandas ile Nasıl Temizlenir? Python Rehberi
Yazar: Acar DiveroliNasıl YapılırYayın tarihi
PDF'den Veri Çıkarma: Tablolar, Metin ve OCR
Yazar: Acar DiveroliNasıl YapılırYayın tarihi
Kazınan Verilerde Kişisel Veri (PII) Nasıl Yönetilir?
Yazar: Acar DiveroliWeb ScrapingYayın tarihi
Kazınan Veri CSV, JSON ve SQLite'a Nasıl Kaydedilir?
Yazar: Acar DiveroliNasıl YapılırYayın tarihi
Veri Ayrıştırma (Parsing) Nedir? Parser Türleri ve Hataları
Yazar: Acar DiveroliWeb ScrapingYayın tarihi
ETL Nedir? Çıkarma, Dönüştürme, Yükleme ve Python Örneği
Yazar: Acar DiveroliWeb ScrapingYayın tarihi
Eşleşen yazı yok
Yayın tarihi
Yayın tarihi