وبلاگ Proxynet – صفحه 10

  1. تاریخ انتشار

    وب اسکرپینگ چیست و چگونه کار می‌کند؟

    وب اسکرپینگ جمع‌آوری خودکار داده از صفحه‌های وب است: برنامه HTML را دریافت می‌کند، فیلدها را بیرون می‌کشد و ذخیره می‌کند. سازوکار و کاربردهای آن.

    نویسنده: Acar Diveroli
  2. تاریخ انتشار

    پروکسی واتساپ: روشن و خاموش کردن در اندروید و آیفون

    پروکسی واتساپ در تنظیمات > فضای ذخیره‌سازی و داده‌ها روشن می‌شود. مسیر اندروید و آیفون، خاموش کردن آن و اینکه چرا پروکسی HTTP یا SOCKS5 آنجا کار نمی‌کند.

    نویسنده: Acar Diveroli
  3. تاریخ انتشار

    وب اسکرپینگ با Cheerio در Node.js: آموزش گام‌به‌گام

    Cheerio کد HTML را در Node.js با انتخابگرهای شبیه jQuery تجزیه می‌کند. یک اسکرپر آزموده با fetch، صفحه‌بندی، محدودیت همزمانی، تلاش مجدد و پروکسی بسازید.

    نویسنده: Acar Diveroli
  4. تاریخ انتشار

    پاک‌سازی داده‌های اسکرپینگ با pandas در Python

    پاک‌سازی داده‌های اسکرپینگ با pandas: اول متن، بعد نوع ستون‌ها، ردیف‌های تکراری، مقادیر گمشده و داده‌های پرت، و اعتبارسنجی پیش از ذخیره؛ با اسکریپت آزموده.

    نویسنده: Acar Diveroli
  5. تاریخ انتشار

    استخراج داده از PDF: جدول، متن و OCR

    نخست ببینید PDF لایه متنی دارد یا نه. اگر دارد، Excel یا pdfplumber جدول‌ها را مستقیم می‌خوانند و صفحه‌های اسکن‌شده به OCR نیاز دارند. همراه با کد آزموده.

    نویسنده: Acar Diveroli
  6. تاریخ انتشار

    مدیریت داده‌های شخصی (PII) در مجموعه‌داده‌های اسکرپ‌شده

    داده‌های اسکرپ‌شده اغلب داده شخصی دارند: نام، لینک پروفایل، ایمیل و شماره تلفن در متن آزاد. روش یافتن، کاستن، پوشاندن و نگهداری امن آن‌ها را بخوانید.

    نویسنده: Acar Diveroli
  7. تاریخ انتشار

    ذخیره داده‌های اسکرپینگ در CSV، JSON و SQLite

    داده‌های اسکرپ‌شده را برای صفحه‌گسترده در CSV، برای لاگ‌های رو به رشد در JSON Lines و برای اجراهای بدون تکرار در SQLite ذخیره کنید. همراه با کد آزموده Python.

    نویسنده: Acar Diveroli
  8. تاریخ انتشار

    تحلیل احساسات با پایتون: VADER در برابر Hugging Face

    تحلیل احساسات در پایتون به متن برچسب مثبت، خنثی یا منفی می‌دهد. نظرهای محصول را با VADER از NLTK و یک مدل Hugging Face امتیاز می‌دهیم و مقایسه می‌کنیم.

    نویسنده: Acar Diveroli
  9. تاریخ انتشار

    داده‌های جایگزین چیست؟ منابع، کاربردها و ریسک‌ها

    داده‌های جایگزین اطلاعاتی بیرون از گزارش‌های رسمی شرکت‌اند، مانند قیمت‌های وب، آگهی‌های شغلی، پنل‌های کارت و تصاویر ماهواره‌ای. منابع، کاربردها و الزامات.

    نویسنده: Acar Diveroli
  10. تاریخ انتشار

    credential stuffing چیست؟ راه‌های تشخیص و جلوگیری

    credential stuffing یعنی آزمودن خودکار نام کاربری و رمزهای نشت‌کرده در سایت‌های دیگر. سازوکار آن، نشانه‌هایش در لاگ‌ها و راه‌های جلوگیری را بخوانید.

    نویسنده: Acar Diveroli
  11. تاریخ انتشار

    تجزیه داده (parsing) چیست؟ انواع تجزیه‌گر، خطاها و نمونه

    تجزیه داده ورودی خام مثل HTML، JSON، CSV یا لاگ را به رکوردهای ساختاریافته برای کد شما تبدیل می‌کند. طرز کار تجزیه‌گر، انواع آن و خطاهای رایج.

    نویسنده: Acar Diveroli
  12. تاریخ انتشار

    ETL چیست؟ استخراج، تبدیل و بارگذاری داده با مثال پایتون

    ETL یعنی استخراج داده از یک منبع، تمیز کردن آن در قالبی ثابت و بارگذاری در پایگاه داده. طرز کار، تفاوت ETL و ELT و یک کار آزموده در Python.

    نویسنده: Acar Diveroli
  1. وب اسکرپینگ چیست و چگونه کار می‌کند؟

    وب اسکرپینگ

    تاریخ انتشار

  2. پروکسی واتساپ: روشن و خاموش کردن در اندروید و آیفون

    آموزش‌ها

    تاریخ انتشار

  3. وب اسکرپینگ با Cheerio در Node.js: آموزش گام‌به‌گام

    آموزش‌ها

    تاریخ انتشار

  4. پاک‌سازی داده‌های اسکرپینگ با pandas در Python

    آموزش‌ها

    تاریخ انتشار

  5. استخراج داده از PDF: جدول، متن و OCR

    آموزش‌ها

    تاریخ انتشار

  6. مدیریت داده‌های شخصی (PII) در مجموعه‌داده‌های اسکرپ‌شده

    وب اسکرپینگ

    تاریخ انتشار

  7. ذخیره داده‌های اسکرپینگ در CSV، JSON و SQLite

    آموزش‌ها

    تاریخ انتشار

  8. تحلیل احساسات با پایتون: VADER در برابر Hugging Face

    آموزش‌ها

    تاریخ انتشار

  9. داده‌های جایگزین چیست؟ منابع، کاربردها و ریسک‌ها

    کاربردها

    تاریخ انتشار

  10. credential stuffing چیست؟ راه‌های تشخیص و جلوگیری

    مبانی پروکسی

    تاریخ انتشار

  11. تجزیه داده (parsing) چیست؟ انواع تجزیه‌گر، خطاها و نمونه

    وب اسکرپینگ

    تاریخ انتشار

  12. ETL چیست؟ استخراج، تبدیل و بارگذاری داده با مثال پایتون

    وب اسکرپینگ

    تاریخ انتشار