وبلاگ Proxynet – صفحه 10

تاریخ انتشار
وب اسکرپینگ چیست و چگونه کار میکند؟
وب اسکرپینگ جمعآوری خودکار داده از صفحههای وب است: برنامه HTML را دریافت میکند، فیلدها را بیرون میکشد و ذخیره میکند. سازوکار و کاربردهای آن.
نویسنده:
Acar Diveroli
تاریخ انتشار
پروکسی واتساپ: روشن و خاموش کردن در اندروید و آیفون
پروکسی واتساپ در تنظیمات > فضای ذخیرهسازی و دادهها روشن میشود. مسیر اندروید و آیفون، خاموش کردن آن و اینکه چرا پروکسی HTTP یا SOCKS5 آنجا کار نمیکند.
نویسنده:
Acar Diveroli
تاریخ انتشار
وب اسکرپینگ با Cheerio در Node.js: آموزش گامبهگام
Cheerio کد HTML را در Node.js با انتخابگرهای شبیه jQuery تجزیه میکند. یک اسکرپر آزموده با fetch، صفحهبندی، محدودیت همزمانی، تلاش مجدد و پروکسی بسازید.
نویسنده:
Acar Diveroli
تاریخ انتشار
پاکسازی دادههای اسکرپینگ با pandas در Python
پاکسازی دادههای اسکرپینگ با pandas: اول متن، بعد نوع ستونها، ردیفهای تکراری، مقادیر گمشده و دادههای پرت، و اعتبارسنجی پیش از ذخیره؛ با اسکریپت آزموده.
نویسنده:
Acar Diveroli
تاریخ انتشار
استخراج داده از PDF: جدول، متن و OCR
نخست ببینید PDF لایه متنی دارد یا نه. اگر دارد، Excel یا pdfplumber جدولها را مستقیم میخوانند و صفحههای اسکنشده به OCR نیاز دارند. همراه با کد آزموده.
نویسنده:
Acar Diveroli
تاریخ انتشار
مدیریت دادههای شخصی (PII) در مجموعهدادههای اسکرپشده
دادههای اسکرپشده اغلب داده شخصی دارند: نام، لینک پروفایل، ایمیل و شماره تلفن در متن آزاد. روش یافتن، کاستن، پوشاندن و نگهداری امن آنها را بخوانید.
نویسنده:
Acar Diveroli
تاریخ انتشار
ذخیره دادههای اسکرپینگ در CSV، JSON و SQLite
دادههای اسکرپشده را برای صفحهگسترده در CSV، برای لاگهای رو به رشد در JSON Lines و برای اجراهای بدون تکرار در SQLite ذخیره کنید. همراه با کد آزموده Python.
نویسنده:
Acar Diveroli
تاریخ انتشار
تحلیل احساسات با پایتون: VADER در برابر Hugging Face
تحلیل احساسات در پایتون به متن برچسب مثبت، خنثی یا منفی میدهد. نظرهای محصول را با VADER از NLTK و یک مدل Hugging Face امتیاز میدهیم و مقایسه میکنیم.
نویسنده:
Acar Diveroli
تاریخ انتشار
دادههای جایگزین چیست؟ منابع، کاربردها و ریسکها
دادههای جایگزین اطلاعاتی بیرون از گزارشهای رسمی شرکتاند، مانند قیمتهای وب، آگهیهای شغلی، پنلهای کارت و تصاویر ماهوارهای. منابع، کاربردها و الزامات.
نویسنده:
Acar Diveroli
تاریخ انتشار
credential stuffing چیست؟ راههای تشخیص و جلوگیری
credential stuffing یعنی آزمودن خودکار نام کاربری و رمزهای نشتکرده در سایتهای دیگر. سازوکار آن، نشانههایش در لاگها و راههای جلوگیری را بخوانید.
نویسنده:
Acar Diveroli
تاریخ انتشار
تجزیه داده (parsing) چیست؟ انواع تجزیهگر، خطاها و نمونه
تجزیه داده ورودی خام مثل HTML، JSON، CSV یا لاگ را به رکوردهای ساختاریافته برای کد شما تبدیل میکند. طرز کار تجزیهگر، انواع آن و خطاهای رایج.
نویسنده:
Acar Diveroli
تاریخ انتشار
ETL چیست؟ استخراج، تبدیل و بارگذاری داده با مثال پایتون
ETL یعنی استخراج داده از یک منبع، تمیز کردن آن در قالبی ثابت و بارگذاری در پایگاه داده. طرز کار، تفاوت ETL و ELT و یک کار آزموده در Python.
نویسنده:
Acar Diveroli
وب اسکرپینگ چیست و چگونه کار میکند؟
نویسنده: Acar Diveroli
وب اسکرپینگتاریخ انتشار
پروکسی واتساپ: روشن و خاموش کردن در اندروید و آیفون
نویسنده: Acar Diveroli
آموزشهاتاریخ انتشار
وب اسکرپینگ با Cheerio در Node.js: آموزش گامبهگام
نویسنده: Acar Diveroli
آموزشهاتاریخ انتشار
پاکسازی دادههای اسکرپینگ با pandas در Python
نویسنده: Acar Diveroli
آموزشهاتاریخ انتشار
استخراج داده از PDF: جدول، متن و OCR
نویسنده: Acar Diveroli
آموزشهاتاریخ انتشار
مدیریت دادههای شخصی (PII) در مجموعهدادههای اسکرپشده
نویسنده: Acar Diveroli
وب اسکرپینگتاریخ انتشار
ذخیره دادههای اسکرپینگ در CSV، JSON و SQLite
نویسنده: Acar Diveroli
آموزشهاتاریخ انتشار
تحلیل احساسات با پایتون: VADER در برابر Hugging Face
نویسنده: Acar Diveroli
آموزشهاتاریخ انتشار
دادههای جایگزین چیست؟ منابع، کاربردها و ریسکها
نویسنده: Acar Diveroli
کاربردهاتاریخ انتشار
credential stuffing چیست؟ راههای تشخیص و جلوگیری
نویسنده: Acar Diveroli
مبانی پروکسیتاریخ انتشار
تجزیه داده (parsing) چیست؟ انواع تجزیهگر، خطاها و نمونه
نویسنده: Acar Diveroli
وب اسکرپینگتاریخ انتشار
ETL چیست؟ استخراج، تبدیل و بارگذاری داده با مثال پایتون
نویسنده: Acar Diveroli
وب اسکرپینگتاریخ انتشار
نوشتهای پیدا نشد
تاریخ انتشار
تاریخ انتشار


