آموزش تراشیدن اولین صفحه وب خود با پایتون

بررسی اجمالی دوره Course Overview

• بررسی اجمالی دوره Course Overview

شروع با تراشیدن وب Getting Started with Web Scraping

• بررسی اجمالی ماژول Module Overview

• پیش نیازها و طرح کلی دوره Prerequisites and Course Outline

• درخواست ها و پاسخ های HTTP HTTP Requests and Responses

• تراشیدن وب Web Scraping

• کتابخانه های مشتری HTTP HTTP Client Libraries

• ساخت درخواستهای GET با استفاده از httplib2 Making GET Requests Using httplib2

• ساخت گزینه های OPTIONS ، POST ، PUT با httplib2 Making OPTIONS, POST, PUT Requests with httplib2

• مدیریت هدایت ها با httplib2 Handling Redirects with httplib2

• ایجاد درخواستهای HTTP و تجزیه URL ها با استفاده از urllib Making HTTP Requests and Parsing URLs Using urllib

• دریافت و ارسال درخواست ها با استفاده از کتابخانه درخواست ها GET and POST Requests Using the Requests Library

• مدیریت هدایت ها با کتابخانه درخواست ها Handling Redirects with the Requests Library

• خلاصه ماژول Module Summary

کار با درخت پارس در BeautifulSoup Working with the Parse Tree in BeautifulSoup

• بررسی اجمالی ماژول Module Overview

• درخت تجزیه HTML The HTML Parse Tree

• سوپ زیبا برای تجزیه HTML Beautiful Soup for HTML Parsing

• معرفی سوپ زیبا Introducing Beautiful Soup

• استخراج عناصر خاص صفحه Extracting Specific Page Elements

• فیلتر کردن عناصر با استفاده از Find and Find All Filtering Elements Using Find and Find All

• جستجو و فیلتر کردن با استفاده از توابع سفارشی Searching and Filtering Using Custom Functions

• استخراج پیوندها از یک صفحه Extracting Links from a Page

• استفاده از صافی سوپ برای تجزیه زیر مجموعه ای از یک سند Using a Soup Strainer to Parse a Subset of a Document

• خلاصه ماژول Module Summary

انتخاب عناصر با استفاده از پوسته Scrapy Selecting Elements Using the Scrapy Shell

• بررسی اجمالی ماژول Module Overview

• تجزیه محتوای وب Parsing Web Content

• معرفی اسکرپی Introducing Scrapy

• شروع با اسکرپی Getting Started with Scrapy

• معرفی Scrap Shell Introducing the Scrapy Shell

• انتخاب عناصر با استفاده از انتخابگرهای CSS Selecting Elements Using CSS Selectors

• گزینه های پیشرفته با استفاده از انتخابگرهای CSS Advanced Selections Using CSS Selectors

• انتخاب عناصر با استفاده از XPath Selectors Selecting Elements Using XPath Selectors

• خلاصه ماژول Module Summary

تراشیدن سایت های وب با استفاده از عنکبوت های Scrapy Scraping Web Sites Using Scrapy Spiders

• بررسی اجمالی ماژول Module Overview

• اسكراپي چگونه كار مي كند How Scrapy Works

• ایجاد اولین عنکبوت سفارشی Creating Your First Custom Spider

• نوشتن محتوای خراشیده شده در یک پرونده Writing Scraped Contents to a File

• کاوش موارد با استفاده از پوسته تراپی Exploring Items Using the Scrapy Shell

• استفاده از موارد برای ذخیره محتوای استخراج شده Using Items to Store Extracted Content

• استفاده از Loaders مورد و پردازنده های ورودی و خروجی برای داده های خراشیده شده Using Item Loaders and Input and Output Processors for Scraped Data

• استفاده از خطوط لوله برای تبدیل داده های خراشیده شده Using Pipelines to Transform Scraped Data

• خلاصه ماژول Module Summary