web scraping(وب اسکرپینگ)

توضیحات پروژه من یک فروشگاه Shopify دارم که لباس‌های مخصوص مراسم زنانه را از یک تامین‌کننده می‌فروشد. تامین‌کننده stock API ندارد که بتوانیم به طور خودکار موجودی(stock) محصولات را در وب‌سایت Shopify خود به‌روز کنیم. اما وب‌ سایتی دارند که داده‌های stock (موجودی) را دارد و ما در حال حاضر از آن استفاده می‌کنیم تا به صورت دستی موجودی را به‌روز کنیم. ما نیاز به شخصی داریم که این داده‌ها رااز وب‌سایت تامین‌کننده جمع‌آوری کرده، به فرمت API تبدیل کرده و بعد به فروشگاه Shopify ما متصل کند. هدف این کار داشتن موجودی(stock) محصولات به‌روز به صورت خودکار و real-time و بدون تاخیر (یا حداقل دو بار در روز) در کل وب سایتمان برای کل محصولات و بدون نیاز به مداخله دستی انجام شود. توضیح پروژه این پروژه و روند اجراییش به طور کامل و جامع از زبان chat gpt : این پروژه به به‌روزرسانی موجودی محصولات در فروشگاه ما در Shopify اختصاص دارد و شامل مراحل زیر است: 1. **جمع‌آوری داده**: ابتدا، شما نیاز دارید که اطلاعات موجودی محصولات از وبسایت تامین‌کننده را جمع‌آوری کنید. این اطلاعات می‌تواند شامل تعداد موجودی هر محصول باشد. 2. **تبدیل داده به فرمت API**: سپس، شما باید اطلاعات جمع‌آوری شده را به فرمت مناسبی تبدیل کنید که به عنوان ورودی برای API در Shopify قابل استفاده باشد. این ممکن است شامل تهیه یک پایگاه داده محلی(local database) و نگهداری به‌روز آن با اطلاعات تامین‌کننده باشد. 3. **اتصال به فروشگاه Shopify**: سپس، شما باید از API تامین‌کننده به فروشگاه Shopify ما اتصال برقرار کنید. این اتصال باید امکان به‌روزرسانی موجودی محصولات در فروشگاه Shopify در زمان واقعی(real-time) (یا حداقل دو بار در روز) را فراهم کند. 4. **تست و عیب‌یابی**: پس از ایجاد اتصال، شما باید فرآیند را تست کنید تا از صحیح عمل کردن آن اطمینان حاصل کنید. همچنین،باید مکانیزمی برای مدیریت هر گونه خطا یا مشکل در فرآیند به‌روزرسانی موجودی ایجاد کنید. 5. **پیاده‌سازی و بهره‌برداری**: پس از اطمینان از عملکرد صحیح، آن را برای سایت ما فعال کنید تا به‌طور مداوم و به‌صورتخودکار موجودی محصولات را به‌روز کند. هدف این پروژه از بین بردن نیاز به دخالت دستی در به‌روزرسانی موجودی محصولات و ایجاد یک فرآیند به‌روزرسانی خودکار و در زمان واقعی در فروشگاه Shopify است. این توضیحی که دادم درواقع شرح جزئیات و روند کار پروژه بود که chat gpt برام نوشت و فقط برای این بود که جزئیات کاری که میخام دستتون بیاد. بازم شما به هر روشی که فکر میکنید بهتر و درست تره انجامش بدید