Web_Scraping_with_Python_and_Scrapy

فرض کنید برای انجام یک پروژه‌ مجبور هستید اطلاعات یا داده را از روی صفحه وب استخراج کنید. اگر این داده ها در مقیاس بزرگ باشند کار کمی مشکل ساز می شود. با افزایش حجم داده و توسعه وب، نیاز به تکنیک هایی که بتوانند دستیابی به داده ها و استخراج آنها را فراهم کنند پدیدار می شوند.

در این آموزش ویدئویی با استخراج داده با استفاده از Python و فریمورک Scrapy آشنا می شوید.

یکی از روش هایی که می توان به کمک آن به راحتی انواع داده را از صفحات وب استخراج کرد استفاده از فریمورک Scrapy است که به زبان پایتون نوشته شده است.

این فریمورک تمام ابزارهای مورد نیاز برای استخراج داده ها از وب سایت ها، پردازش آنها به شکل دلخواه و ذخیره آنها در ساختار و فرمت مورد نظر را فراهم می کند.

استخراج داده با scrapy css و second spider

 

استخراج داده با first spider

 

استخراج داده با مصورسازی و Scrapy HTML

 

استخراج داده با تجزیه scrapy imdb spider

 

استخراج داده با راه اندازی و تعریف scrapy

 

استخراج داده با آیتم های scrapy و imdb scraper

 

استخراج داده با scrapy items و selectors

 

استخراج داده با scrapy third spyder