نمونه کار استخراج اطلاعات فروش املاک از یک سایت ایرانی با استفاده از Web Scraping

در این پروژه، نمونه‌ای از استخراج داده (Web Scraping) از بخش املاک سایت دیوار، مخصوص شهر تهران، در jupyter notebook پیاده‌سازی شده است. فرایند استخراج اطلاعات با استفاده از API دیوار انجام گرفته و ابتدا اطلاعات مربوط به پست‌های املاک تنها برای یک صفحه دریافت شده است. سپس این قابلیت توسعه یافته تا بتوان اطلاعات را از تعداد صفحات دلخواه جمع‌آوری کرد. در این نمونه‌کار، امکان تغییر پارامترهای مختلف نظیر تعداد پست‌های موردنیاز، ناحیه جغرافیایی، نوع ملک، و سایر فیلترهای قابل پشتیبانی فراهم شده است. داده‌های استخراج‌شده شامل اطلاعاتی مانند عنوان آگهی، قیمت، ، موقعیت و سایر جزئیات مهم مربوط به هر پست هستند. این اطلاعات در یک بازه زمانی ثابت از سایت دیوار رگفته شده است. این پروژه می‌تواند پایه‌ای برای تحلیل بازار مسکن، مصورسازی داده‌های املاک، یا ساخت داشبوردهای هوشمند در حوزه مشاورین املاک باشد.