پروژه های برنامه نویسی

# عنوان پروژه **طراحی سیستم خودکار استخراج اطلاعات آگهی‌های List.am و ذخیره در Excel/Database** ## توضیحات پروژه به یک برنامه‌نویس باتجربه در **Python، Web Scraping و Data Extraction** نیاز دارم تا سیستمی برای جمع‌آوری خودکار و منظم اطلاعات آگهی‌ها* طراحی کند. هدف این است که سیستم بتواند تعداد زیادی آگهی را پردازش کرده، اطلاعات موردنیاز را استخراج و به‌صورت ساختاریافته در Excel/CSV یا Database ذخیره کند. ### اطلاعات موردنیاز برای هر آگهی موارد زیر استخراج شود: * لینک آگهی * عنوان * دسته‌بندی * نام فروشنده یا آژانس * شماره تلفن * شماره WhatsApp در صورت وجود * شماره Viber در صورت وجود * قیمت * موقعیت / آدرس * توضیحات آگهی * تاریخ آگهی در صورت وجود * تاریخ و زمان استخراج اطلاعات ## اتوماسیون سیستم باید تا حد امکان **Automated** باشد و نیاز به Copy/Paste دستی هر آگهی نداشته باشد. کاربر بتواند یک **Category / Search URL / مجموعه‌ای از URLها** به برنامه بدهد و سیستم به‌صورت خودکار صفحات و آگهی‌ها را پردازش کند. سیستم باید قابلیت پردازش تعداد زیادی آگهی و چندین صفحه را داشته باشد و در صورت امکان به‌صورت زمان‌بندی‌شده اجرا شود. ## شماره تلفن و محدودیت‌های سایت استخراج شماره‌های تماس یکی از مهم‌ترین بخش‌های پروژه است. برنامه‌نویس باید ابتدا بررسی کند شماره تلفن و سایر اطلاعات در List.am چگونه نمایش یا بارگذاری می‌شوند و بهترین روش پایدار برای استخراج اطلاعات قابل دسترس را طراحی کند. ممکن است هنگام اتوماسیون با محدودیت‌هایی مانند **Rate Limit، CAPTCHA، Cloudflare، Session Expiration یا سایر Anti-Bot mechanisms** مواجه شویم. در این صورت، فریلنسر باید مشکل را بررسی کرده و **راهکار فنی مناسب، پایدار و مجاز** برای ادامه کار پیشنهاد و پیاده‌سازی کند؛ برای مثال استفاده از API رسمی/مجاز در صورت وجود، مدیریت صحیح Session، Rate Limiting، Browser Automation، یا در صورت نیاز قرار دادن مرحله‌ای برای حل CAPTCHA توسط کاربر و سپس ادامه خودکار پردازش. هدف این است که سیستم در صورت مواجهه با CAPTCHA یا محدودیت مشابه، صرفاً Crash یا Stop نشود و بتواند مشکل را تشخیص دهد، به کاربر اطلاع دهد و پس از انجام مرحله لازم، پردازش را ادامه دهد. **شکستن یا دور زدن غیرمجاز CAPTCHA، Cloudflare، کنترل‌های دسترسی یا سایر مکانیزم‌های امنیتی موردنظر نیست؛ اما مدیریت عملی این محدودیت‌ها و ارائه راهکار قابل اتکا برای ادامه قانونی و پایدار سیستم بخشی از پروژه است.** ## پایداری سیستم سیستم باید برای استفاده مداوم طراحی شود و شامل موارد زیر باشد: * Error Handling و Logging * Retry برای خطاهای موقت * Rate Limiting مناسب * Resume بعد از توقف * جلوگیری از Duplicate * استانداردسازی شماره تلفن‌ها * تشخیص آگهی‌های جدید * ذخیره وضعیت پردازش * امکان ادامه بدون شروع مجدد ساختار کد باید طوری باشد که اگر HTML، Selector یا ساختار معمول صفحات سایت تغییر کرد، اصلاح Scraper ساده باشد. ## خروجی اطلاعات باید در **Excel / CSV** ذخیره شوند؛ هر آگهی در یک ردیف و هر فیلد در ستون جداگانه. استفاده از SQLite/PostgreSQL برای نگهداری داده‌ها و سپس Export به Excel نیز قابل قبول است. ## تحویل پروژه * Source Code کامل * فایل اجرایی یا روش ساده اجرای Python * Excel/CSV Export * Requirements * راهنمای نصب و استفاده * Logging و Error Handling * تست روی تعداد قابل‌توجهی آگهی ## پشتیبانی به دلیل احتمال تغییر ساختار سایت، **حداقل ۶ ماه پشتیبانی** موردنظر است. اگر طی این مدت تغییرات معمول سایت مانند HTML Structure، Selector یا روش نمایش اطلاعات باعث اختلال در سیستم شود، فریلنسر باید کد را به‌روزرسانی کند. ## هنگام ارسال پیشنهاد لطفاً اعلام کنید: 1. چه روشی برای استخراج خودکار اطلاعات List.am پیشنهاد می‌کنید؟ 2. استخراج شماره‌های تماس قابل دسترس را چگونه انجام می‌دهید؟ 3. در صورت مواجهه با CAPTCHA، Cloudflare یا Rate Limit چه راهکار مجاز و پایداری پیشنهاد می‌کنید؟ 4. حدوداً چه تعداد آگهی در ساعت/روز قابل پردازش است؟ 5. برای Duplicate Prevention و Resume چه روشی پیشنهاد می‌کنید؟ 6. آیا تجربه Scraping در مقیاس بالا دارید؟ 7. زمان و قیمت نهایی پروژه چقدر است؟ 8. آیا **۶ ماه پشتیبانی** برای تغییرات معمول سایت ارائه می‌دهید؟ هدف ساخت یک اسکریپت یک‌بارمصرف نیست؛ به دنبال یک **ابزار پایدار، خودکار و قابل نگهداری برای جمع‌آوری اطلاعات آگهی‌ها در مقیاس بالا** هستیم.

اندیکاتوری به‌نام Blackflag ATR- Swingarm در لیست اندیکاتورهای تریدینگ‌ویو موجود هست که بر اساس دو متغیر ATR Period و ATR factor کار می‌کنه ولی تنظیمات ATR factor بصورت اعداد صحیح ۱، ۲، ۳ ، ... قابل تنظیم هست و تنظیم اعشاری نداره. مثلا نمیشه عدد ATR factor رو روی ۱.۵ تنظیم کرد. دنبال یک برنامه‌نویس می‌گردم که بتونه این قابلیت رو به تنظیمات این اندیکاتور اضافه کنه و برام شخص‌سازی کنه.

⚠️ لطفاً قبل از ارسال رزومه، کل آگهی را تا انتها مطالعه کنید. پاسخ دقیق به تمام موارد و سؤالات این آگهی شرط بررسی رزومه است. رزومه‌ای که بدون پاسخ به موارد خواسته‌شده یا به‌صورت کلی ارسال شود، در گروه رزومه‌های ردشده قرار خواهد گرفت. شرح پروژه به دنبال یک متخصص ارشد و باتجربه در معماری نرم‌افزار، سیستم‌های Enterprise و هوش مصنوعی برای طراحی و اجرای صفر تا صد یک پلتفرم جامع و یکپارچه خدمات خودرویی هستیم. این پروژه طراحی وب‌سایت یا نرم‌افزار مدیریتی ساده نیست. هدف، طراحی یک اکوسیستم نرم‌افزاری جامع، ماژولار، مقیاس‌پذیر و مبتنی بر AI برای مدیریت یکپارچه فعالیت‌های صنعت خودرو است؛ از جمله: خرید و فروش خودرو، مدیریت Stock، واردات و صادرات، اجاره، Leasing، Financing، مدیریت ناوگان، تعمیرگاه، سرویس، قطعات و انبار، بیمه، CRM، مشتریان، قراردادها و اسناد، امور مالی و حسابداری، Workflow، مدیریت کاربران و سطوح دسترسی، داشبورد مدیریتی، BI، گزارش‌گیری و تحلیل داده. سیستم باید قابلیت اتصال و یکپارچه‌سازی با APIها و سرویس‌های خارجی از جمله Payment، بانک و اعتبارسنجی، بیمه، VIN و Vehicle Data، Marketplaceها، سیستم‌های مالی و سایر سرویس‌های موردنیاز را داشته باشد. هوش مصنوعی منظور از AI صرفاً Chatbot یا اتصال ساده به API مدل‌های زبانی نیست. هدف، استفاده عملیاتی از AI Agents، Automation و Data Intelligence برای اتوماسیون فرایندها، تحلیل اطلاعات، پردازش اسناد، مدیریت و پیگیری وظایف، تحلیل مشتریان، Workflow، گزارش‌های هوشمند مدیریتی و Agentهای تخصصی است. قیمت‌گذاری، سیاست‌ها و مدل تجاری بر عهده مجموعه ما خواهد بود. چه افرادی موردنظر نیستند؟ طراح وب‌سایت، WordPress Developer و افرادی که سابقه آنها عمدتاً شامل سایت، فروشگاه اینترنتی، اپلیکیشن یا پنل‌های مدیریتی ساده و پروژه‌های کوچک است، لطفاً پیشنهاد ارسال نکنند. به دنبال سابقه واقعی و قابل اثبات در حوزه‌هایی مانند: Enterprise Architecture، ERP، DMS، Fleet Management، CRM، Automotive Platforms، Marketplace، FinTech، Leasing/Financing، Microservices، Distributed Systems، SaaS، API Integration، Data Engineering، AI و AI Agents هستیم. اطلاعات الزامی رزومه لطفاً موارد زیر را دقیقاً اعلام کنید: 1. نام و نام خانوادگی 2. رشته و مقطع تحصیلی 3. دانشگاه محل تحصیل/فارغ‌التحصیلی 4. سال فارغ‌التحصیلی 5. تعداد سال سابقه حرفه‌ای مرتبط 6. تخصص اصلی فعلی پروژه‌های مستند حداکثر ۳ پروژه بزرگ، قوی و مرتبط یا هم‌تراز با پروژه ما معرفی کنید. از معرفی سایت‌ها و پروژه‌های کوچک و غیرمرتبط صرف‌نظر کنید. برای هر پروژه حتماً بنویسید: • نام و نوع پروژه • صنعت/کارفرما • Scope و ابعاد پروژه • سمت دقیق شما • تاریخ شروع و پایان همکاری • مدت حضور در پروژه • تعداد اعضای تیم • مسئولیت مستقیم و شخصی شما • دقیقاً چه بخش‌هایی را شخصاً طراحی یا پیاده‌سازی کردید؟ • معماری و تکنولوژی‌های اصلی • نقش AI در پروژه • وضعیت فعلی پروژه • لینک، Demo، مستندات یا مدرک قابل ارائه ⚠️ از عباراتی مانند «مشارکت در پروژه»، «عضو تیم»، «همکاری در توسعه»، «نقش مؤثر» و عبارات کلی مشابه بدون بیان مسئولیت دقیق شخصی استفاده نکنید. صرف حضور در یک پروژه برای ما سابقه قابل ارزیابی محسوب نمی‌شود. باید مشخص باشد دقیقاً چه کاری انجام داده‌اید و خروجی شما چه بوده است. سؤالات الزامی پاسخ سؤالات زیر را همراه رزومه ارسال کنید: 1. پیچیده‌ترین سیستم Enterprise که روی آن کار کرده‌اید چه بوده و نقش دقیق شما چه بوده است؟ 2. آیا معماری یک سیستم بزرگ را از صفر طراحی کرده‌اید؟ نمونه مشخص ارائه کنید. 3. تجربه شما در Microservices، Distributed Systems و Multi-tenant SaaS چیست؟ نمونه واقعی ذکر کنید. 4. بزرگ‌ترین پروژه AI که شخصاً طراحی یا پیاده‌سازی کرده‌اید چیست؟ 5. آیا AI Agent عملیاتی ساخته‌اید که فراتر از Chatbot بوده و Workflow یا عملیات واقعی انجام دهد؟ توضیح دهید. 6. تجربه شما در اتصال APIهای بانکی، پرداخت، مالی، بیمه، Automotive Data یا سرویس‌های خارجی چیست؟ 7. آیا تجربه ERP، DMS، Fleet Management، Leasing، Financing، Marketplace یا Automotive Software دارید؟ پروژه و مسئولیت دقیق خود را ذکر کنید. 8. برای طراحی این سیستم از صفر، معماری کلان پیشنهادی شما چیست؟ مختصر و فنی توضیح دهید. 9. برای جلوگیری از ایجاد یک Monolith غیرقابل مدیریت و حفظ مقیاس‌پذیری چه روشی پیشنهاد می‌کنید؟ 10. AI Agents را در چه بخش‌ها و لایه‌هایی از این سیستم قرار می‌دهید و چرا؟ 11. کدام بخش‌های پروژه را شخصاً قادر به انجام هستید و برای کدام قسمت‌ها به متخصص یا تیم دیگری نیاز دارید؟ شرط بررسی پاسخ به تمام موارد فوق الزامی است. رزومه‌های عمومی، کلی‌گویی، فهرست بلند تکنولوژی‌ها یا رزومه‌های فاقد پروژه مستند و هم‌سطح بررسی نخواهند شد. طولانی بودن رزومه امتیاز نیست؛ سابقه واقعی، مستند و قابل اثبات اهمیت دارد. ارسال رزومه و پاسخ‌ها