توسعه نرم‌افزار Interactive Floor تمرینات حرکتی با Unity

ما در حال توسعه یک سیستم Interactive Floor برای اجرای تمرینات و تسک‌های حرکتی هستیم. ایده کلی پروژه این است که با استفاده از یک ویدئوپروژکتور، محرک‌های بصری مختلف مانند اشکال، رنگ‌ها، اعداد، مسیرها و الگوها روی زمین نمایش داده شوند و کاربر با حرکت دست یا پا با این محرک‌ها تعامل داشته باشد. یک Depth/Motion Camera مانند Kinect نیز برای تشخیص موقعیت و حرکت کاربر استفاده خواهد شد. نرم‌افزار باید بتواند داده‌های دوربین را به‌صورت Real-Time دریافت کرده و آن را با فضای Projection هماهنگ کند تا مشخص شود کاربر در چه موقعیتی قرار دارد و آیا وارد محدوده یک هدف مشخص شده است یا خیر. برای مثال، چند دایره رنگی روی زمین نمایش داده می‌شود و بر اساس منطق یک Task، کاربر باید در زمان مشخص روی یک رنگ یا شکل خاص قرار بگیرد. سیستم باید ورود کاربر به محدوده هدف را تشخیص دهد، پاسخ صحیح یا غلط را مشخص کند، زمان واکنش را محاسبه کرده و محرک یا مرحله بعدی Task را اجرا کند. هدف پروژه در این مرحله، ساخت یک Proof of Concept قابل اجرا و قابل توسعه است و نمونه‌ای مشابه از نوع تعامل موردنظر نیز برای درک بهتر در اختیار برنامه‌نویس قرار خواهد گرفت. ### امکانات مورد انتظار در فاز اول: * اتصال و دریافت داده از Depth/Motion Camera * اتصال نرم‌افزار به Projector * Calibration و هماهنگ‌سازی مختصات دوربین و فضای Projection * تشخیص موقعیت و حرکت کاربر در محدوده مشخص * تشخیص تعامل پا یا دست با نواحی مشخص‌شده روی زمین * نمایش محرک‌های بصری مانند دایره، مربع، مثلث، رنگ، عدد، مسیر و الگو * اجرای Taskها به‌صورت Real-Time و Interactive * تشخیص پاسخ صحیح و غلط * محاسبه Reaction Time * امکان تعریف و اجرای حداقل ۲ تا ۳ Task نمونه * ثبت و نمایش نتایج پایه هر Session * امکان Start / Stop / Reset کردن تمرین * طراحی ساختار نرم‌افزار به‌گونه‌ای که در مراحل بعد بتوان Taskهای بیشتری به آن اضافه کرد. ### توانایی های موردنظر: ترجیحاً Unity و C# به همراه SDK مناسب Depth Camera. تجربه کار با Kinect، Depth Camera، Motion Tracking، Computer Vision، OpenCV، Projection Mapping یا سیستم‌های Interactive مزیت محسوب می‌شود. در صورتی که برای عملکرد بهتر سیستم، انتخاب سخت‌افزار یا تکنولوژی دیگری پیشنهاد می‌شود، ارائه پیشنهاد فنی از طرف برنامه‌نویس قابل بررسی است. ### خروجی مورد انتظار: یک نرم‌افزار Desktop قابل اجرا روی Windows که بتواند ارتباط بین Depth Camera، Projector و منطق Task را برقرار کرده و چند تمرین تعاملی شناختی–حرکتی را به‌صورت Real-Time اجرا کند. سورس کد و فایل‌های پروژه نیز باید در پایان فاز اول تحویل داده شود. این پروژه در حال حاضر یک Proof of Concept است و در صورت موفقیت، امکان ادامه همکاری برای توسعه Taskهای بیشتر، Task Builder، گزارش‌گیری و توسعه نسخه تجاری وجود خواهد داشت.