من از یک برنامه برای ایجاد مدل های سه بعدی شگفت انگیز با آیفون خود استفاده کردم

میزان نوآوری در تصویربرداری هوش مصنوعی خارق العاده است. یکی از شرکت‌ها – Luma Labs – نمونه‌ای عالی از استفاده عملی و در عین حال بسیار سرگرم‌کننده از آخرین فناوری به کار رفته در تصویربرداری سه‌بعدی ارائه می‌کند.

هوش مصنوعی Luma در حال آزمایش بتا بر روی آیفون است و در نهایت برای اندروید در دسترس خواهد بود. من وارد گروه آزمایش بتا شدم و می‌توانم اطلاعاتی در مورد عواملی که این برنامه شگفت‌انگیز را ایجاد می‌کند و دریافت نتایج شگفت‌انگیز آسان است، به اشتراک بگذارم.

هوش مصنوعی لوما چیست؟

Luma AI یک اپلیکیشن و سرویس است که توسط Luma Labs توسعه یافته است. تصاویر سه بعدی را با استفاده از تکنیکی به نام Neural Radiance Fields (NeRF) می گیرد. این شبیه به تکنیک ردیابی پرتو است که باعث می شود گرافیک در بازی های سطح بالا بسیار واقعی به نظر برسد.

NeRF ها چندین سال است که وجود داشته اند، اما تا همین اواخر بیشتر در مراکز تحقیقاتی وجود داشته اند. با انفجار تصویربرداری هوش مصنوعی، که توسط رندرهای واقعی از Dall-E رهبری می شود، NeRF ها توسط مخاطبان بسیار گسترده تری شروع به کاوش می کنند. موج اول نرم‌افزار جدید NeRF نیازمند مهارت‌های توسعه‌دهنده و نصب بسته‌های نرم‌افزاری از GitHub و سپس آموزش هوش مصنوعی بر روی مجموعه‌ای از عکس‌ها است. برای مردم عادی کم بود.

Luma Labs با اپلیکیشن Luma AI خود این فرآیند را به طرز چشمگیری آسان‌تر می‌کند. از ابتدا تا انتها، کل فرآیند را می توان از طریق آیفون کنترل کرد و نتیجه نهایی نیز مقرون به صرفه تر است.

سازگاری با آیفون با هوش مصنوعی Luma

از آنجایی که اپل قصد داشت قابلیت‌های اندازه‌گیری عمق سه بعدی حسگرهای LiDAR را نشان دهد، ممکن است انتظار داشته باشید که هوش مصنوعی Luma به گران‌تر نیاز داشته باشد. آیفون 14 پرو یا آیفون 14 پرو مکس برای گرفتن مدل های سه بعدی. با این حال، توسعه دهندگان باهوش در Luma Labs به جای آن از هوش مصنوعی استفاده می کنند. این باعث می شود این فناوری با آیفون هایی به قدمت آیفون 11 سازگار باشد.

در آینده، این برنامه برای اندروید در دسترس خواهد بود و در حال حاضر یک نسخه وب در آزمایش بتا وجود دارد. مدیر عامل شرکت Luma Labs، آمیت جین در مصاحبه ای گفت که انتظار می رود اپلیکیشن آیفون تا چند هفته دیگر برای انتشار عمومی آماده شود.

نحوه استفاده از Luma AI

برای استفاده از هوش مصنوعی Luma، کافی است به آرامی در اطراف یک شی در سه ارتفاع مختلف راه بروید. یک پوشش AR شما را از طریق این فرآیند راهنمایی می‌کند، که چند دقیقه طول می‌کشد و پس از چند بار تلاش آسان‌تر می‌شود و با فرآیند آشنا می‌شوید. خیلی زود، می توانید در عرض چند دقیقه از یک شی با اندازه متوسط ​​مانند صندلی عکس بگیرید.

یک شی با هر اندازه ای را می توان پردازش کرد زیرا برای Luma AI فقط یک سری عکس است – مهم نیست که جسم چقدر بزرگ باشد. اگر یک فنجان، مجسمه یا ساختمان را احاطه کنید، ایده کلی یکسان می ماند.

زمانی که تصاویر به اندازه کافی وجود داشته باشد، برنامه به شما اطلاع می دهد و هنگامی که این اتفاق می افتد دکمه Finish ظاهر می شود. همچنین می توانید به دایره و ادامه دهید پر کردن شکاف‌های ابر AR از حلقه‌ها و مستطیل‌هایی که نشان‌دهنده عکس‌های گرفته شده تا کنون هستند. وقتی مقدار ایده‌آل عکس جمع‌آوری شد، برنامه به‌طور خودکار تصویربرداری را متوقف می‌کند. همچنین یک حالت آزاد وجود دارد که به شما امکان می دهد حتی عکس های بیشتری را در زوایای مختلف و فواصل مختلف ثبت کنید. شما می توانید روند را در ویدیوی YouTube که در زیر ایجاد کردم مشاهده کنید. این یک برنامه آیفون است، بنابراین یک ویدیوی پرتره است.

پردازش مرحله بعدی است که در سرورهای Luma Labs اتفاق می افتد. پس از حدود یک ساعت، NeRF تمام شده به چندین شکل مختلف در برنامه در دسترس خواهد بود. اولین نمای ارائه شده یک ویدیوی تولید شده است که در آن یک شیء در محیط طبیعی آن در حال پرواز است. یک نسخه تعاملی دنبال می‌شود که به شما امکان می‌دهد با کشیدن انگشت یا ماوس خود روی تصویر، نمای را بچرخانید.

مهمتر از همه، موضوع عکس استخراج شده از پس زمینه نیز در دسترس است. با استفاده از این نمایش، می توانید شی 3 بعدی را بر روی هر محوری بچرخانید و برای مشاهده دقیق تر آن را بزرگنمایی کنید. وضوح بستگی به تعداد عکس‌های جمع‌آوری شده و میزان کند و پیوسته شما در طول فرآیند عکس‌برداری دارد.

من همیشه در حال بهبود هستم

Luma Labs برنامه و سرویس را با سرعت قابل توجهی به روز می کند. در عرض یک هفته پس از دریافت دعوت نامه تست بتا، دو ویژگی جدید قدرتمند اضافه شد که امکانات را بسیار گسترش می دهد. اولین گزینه یک گزینه آپلود وب است که به شما امکان می دهد بدون برنامه فیلم بگیرید، سپس آن را برای پردازش در وب سایت Luma Labs آپلود کنید. نتایج به صورت آنلاین و در برنامه نمایش داده می شوند.

این بدان معناست که می‌توانید از هر یک از حالت‌های دوربین آیفون استفاده کنید، با دوربین اختصاصی فیلم بگیرید یا حتی با عینک‌های واقعیت افزوده مانند Ray-Ban Stories فیلم بگیرید. برای مثال، زمانی که بتوانید حرکت را صاف کنید و بعد از فرود آمدن خود تغییر جهت دهید، یک ویدیوی هواپیمای بدون سرنشین حماسی‌تر می‌شود. آزمایشگاه Luma در این توییت نمونه خوبی را به اشتراک گذاشت که نمای هوایی از برگ های پاییزی را نشان می دهد.

پاییز در پالو آلتو زیباست! 🍂 https://t.co/EwNkiv0DQV pic.twitter.com/hdd7iBLYgV

— Luma AI (@LumaLabsAI) 22 اکتبر 2022

ویژگی جدید دیگر امکاناتی را برای ویرایش سه بعدی، طراحی و چاپ سه بعدی باز می کند. مش های سه بعدی را می توان با بافت هایی در فرمت OBJ یا GLTF صادر کرد. آنها بهینه نیستند، اما می توان با بافت های دست نخورده حتی با یک بیننده آنلاین مانند وب سایت رایگان و منبع باز Online3DViewer مشاهده کرد.

همچنین می‌توان فایل‌های سه‌بعدی را در یک ویرایشگر مش مانند MeshLab رایگان و منبع باز باز کرد تا هرگونه مصنوع سرگردانی که به‌عنوان حباب‌های شناور ظاهر می‌شوند را حذف کرد و همچنین مدل را قبل از صادرات به فرمت‌های مختلف تمیز و ساده کرد. مجسمه ای که در بالا نشان داده شده است حدود سه اینچ قد دارد و توسط همسرم تریسی برای تجارتش ALittleCharacter مجسمه سازی شده است. هوش مصنوعی Luma جزئیات قابل توجهی را در مجسمه و سیاهه‌ای که روی آن قرار داشت ثبت کرد. گزارش ممکن است انتخاب شده و از MeshLab نیز حذف شده باشد.

مزایا و معایب اسکن سه بعدی

کایل بروکسل دمویی از یک دسر از یک مهمانی را به اشتراک گذاشت و اشاره کرد که از بزرگسالان خواسته است منتظر خوراکی‌هایشان باشند تا بتواند آن را به‌عنوان یک دیورامای دیجیتال ثبت کند.

استفاده شده @LumaLabsAI در یک جشن تولد دیشب، گروهی از بزرگسالان را وادار کردم که دسر نخورند تا بتوانم با تلفنم دور میز قدم بزنم تا هوش مصنوعی سه بعدی را به عنوان یک فرد بسیار باحال در خواب ببیند. pic.twitter.com/sP0vVPB3yx

— کایل راسل (@kylebrussell) 30 اکتبر 2022

اگرچه هوش مصنوعی Luma می تواند ویدیو را پردازش کند، اما برای ساخت یک صحنه سه بعدی به تصاویر ثابت متکی است. این بدان معناست که اگر سوژه در حال حرکت باشد، ممکن است کیفیت یا وضوح تصویر را کاهش دهد. همانطور که در توییت آلبرت بوزسان نشان داده شده است، یک تصویر سه بعدی از یک فرد نشسته، خوب خواهد بود. در همان توییت، دومین شات از یک مجسمه نشان می دهد که وقتی حرکت در صحنه وجود دارد چه اتفاقی می افتد. پس‌زمینه افرادی را نشان می‌دهد که به صورت اشکال تحریف شده به شی نزدیک می‌شوند.

دو تا گرفت @LumaLabsAI #NeRFs امروز در کنار دریاچه ای باواریا راهی عالی برای ثبت خاطرات، شبیه گزارش اقلیت است. #Tegernsee pic.twitter.com/HLC0ekF7uD

— آلبرت بوزسان (@AlbertBozesan) 30 اکتبر 2022

قیمت و در دسترس بودن هوش مصنوعی Luma

هوش مصنوعی Luma در حال حاضر در مرحله آزمایش بتا است و دعوت نامه ها به صورت دوره ای از طریق این شرکت ارائه می شود توییتر حساب. اگر یک آیفون سازگار دارید و به این فناوری علاقه مند هستید، ممکن است بتوانید زودتر به آن دسترسی داشته باشید. همچنین یک لیست انتظار در وب سایت Luma Labs وجود دارد.

مدیر عامل شرکت Luma Labs، Jain اشاره کرد که قیمت هنوز مشخص نیست و بستگی به این دارد که پایگاه کاربر چقدر گسترده است و نتایج اسکن چگونه استفاده می شود. بر اساس این ادعاها، ممکن است یک اشتراک حرفه ای با ویژگی های پیشرفته تر و یک اشتراک شخصی با هزینه کمتر وجود داشته باشد. در حال حاضر، استفاده از آن رایگان خواهد بود.

توصیه های سردبیران