ردیابی VR تمام بدن متا را فقط با هدست Quest تماشا کنید

Meta Reality Labs با ترکیب یادگیری ماشینی (ML) با داده‌های حسی هدست‌های Quest VR برای نمایش کل بدن شما، از جمله بازوها، پاها، بالاتنه و سر، گام‌های بزرگی در رندر آواتار برداشته است. نتیجه، نمایشی بسیار واقعی و دقیق از ژست‌ها و حرکات فردی است که هدست Quest 2 بر سر دارد.

این بسیار شگفت انگیز است زیرا فقط موقعیت ها و جهت گیری های هدست Quest VR و دو کنترلر آن برای تخمین حرکت و موقعیت پاها استفاده شده است. هیچ باند ردیابی روی پاها و هیچ دوربین خارجی برای این سیستم قابل توجه استفاده نشده است. محقق متا الکساندر وینکلر چندین ویدیو را به همراه پیوندهایی به مقاله علمی arXiv و یک ویدیوی YouTube با جزئیات بیشتر در توییتر به اشتراک گذاشت.

در اصطلاح علمی، این به عنوان ردیابی حرکت حسگر پراکنده شناخته می شود، و ML به ویژه در استخراج اطلاعات معنی دار از تعداد بسیار کمی مهارت دارد، در صورتی که وابستگی کافی بین چیزهای شناخته شده و ناشناخته وجود داشته باشد. از آنجایی که هنگام راه رفتن و دویدن، دست‌هایمان را برای تعادل می‌چرخانیم، حرکت بازوها نشان‌دهنده خوبی از کاری است که پاها معمولاً انجام می‌دهند. همراه با کج شدن سر و جهت، سیستم ML می تواند اکثر حرکات انسان را با دقت بسیار زیادی پیش بینی کند.

روش‌های سنتی‌تر برای ردیابی اندام‌ها به سخت‌افزار اضافی متکی هستند، مانند برچسب‌های انعکاسی که روی پاها و نیم تنه شما قرار می‌گیرند که توسط دوربین‌های خارجی شناسایی می‌شوند، یا نوارهایی با چراغ‌های بی‌سیم که در مکان‌های مختلف روی پاهای شما برای انتقال داده‌ها در مورد موقعیت و حرکت استفاده می‌شوند.

اگرچه این روش‌ها کار می‌کنند، اما معمولاً به عنوان لوازم جانبی فروخته می‌شوند که هزینه بیشتری دارند و در اکثر برنامه‌ها و بازی‌ها به خوبی پشتیبانی نمی‌شوند. اگر متا بتواند این کار را با هدست Quest 2 به خوبی انجام دهد، توسعه دهندگان تمایل بیشتری به ایجاد ردیابی بدن در بازی ها و برنامه های خود خواهند داشت.

با وجود این پیشرفت قابل توجه، Meta Reality Labs تشخیص می دهد که کار بیشتری باید انجام شود. اگر به اندازه کافی سریع حرکت کنید، مدل ML نمی تواند وضعیت شما را به درستی شناسایی کند. ارزیابی وضعیت های غیرمعمول برای کامپیوتر دشوار است و اگر محیط مجازی موانعی داشته باشد که در واقعیت وجود ندارند، حرکت با هم مطابقت نخواهد داشت. با این حال، جلوه کلی بسیار خوب به نظر می رسد، و ارتقای خوبی خواهد بود که بتوانید به جای نیم تنه شناور هنگام چت با دوستان در VR، یک بدن کامل را ببینید.

امیدواریم این فناوری به زودی برای راه اندازی آماده شود. با توجه به اینکه انتظار می‌رود تا چند هفته دیگر هدست Meta’s Quest Pro معرفی شود، زمان برای آواتارهای تمام بدن عالی به نظر می‌رسد. Meta Quest Pro می‌تواند حرکات چشم و حالات صورت را ردیابی کند و حس حضور بهتری را برای دوستان، خانواده و همکاران شما فراهم کند که می‌تواند در آینده نزدیک بسیار بهبود یابد.

توصیه های سردبیران