این سنسور کوچک قرار است دوربین گوشی شما را برای همیشه تغییر دهد
ما معتقدیم که یک فرصت واقعی برای توسعه و استفاده از دوربین طیفی در گوشی هوشمند وجود دارد. علیرغم تمام پیشرفت هایی که با دوربین های مختلف و قدرت محاسباتی یک گوشی هوشمند انجام شده است، هیچ کس واقعا نمی تواند رنگ واقعی یک عکس را تشخیص دهد.
وینسنت مورت، مدیر عامل Spectricity اینگونه است که در مصاحبه اخیر ماموریت این شرکت در دیجیتال تو و همچنین دلیل ساخت یک حسگر تصویر طیفی مینیاتوری را که برای گوشی های هوشمند آماده است، توصیف کرده است. اما سنسور طیف دقیقا چیست و چگونه کار می کند؟ به نظر می رسد که می تواند خیلی بیشتر از گرفتن رنگ های زیبا انجام دهد.
آیا تا به حال این رنگ را دیده اید؟
قبل از اینکه به همه این موارد بپردازیم، اجازه دهید در مورد کاری که سنسور تصویر چند طیفی Spectricity S1 برای دوربین ها انجام می دهد صحبت کنیم. اکثر دوربینهای گوشی از سنسورهای سه رنگ RGB (قرمز، سبز و آبی) استفاده میکنند، اما حسگر Spectricity S1 بیشتر به نور مرئی و محدوده نزدیک به فروسرخ نگاه میکند تا رنگهای طبیعیتر و یکدستتر را تولید کند، همراه با بهبود قابل توجه تعادل سفید.
Mouret گفت: «دوربین استاندارد ادغام شده در تلفن هوشمند دارای یک حسگر RGB است که قرمز، سبز و آبی را می بیند. ما فیلترهایی را برای ایجاد حداکثر 16 تصویر مختلف با رنگهای مختلف، طول موجهای مختلف نور، نوری که از منابع مختلف میآید و نور منعکس شده از جسم موجود در صحنه اضافه میکنیم. به لطف این تصاویر متفاوت در مقایسه با RGB استاندارد، می توانید ویژگی های مختلفی را شناسایی کنید.
این بدان معناست که بدون در نظر گرفتن شرایط نوری، تصاویر گرفته شده توسط یک گوشی با سنسور S1 رنگهای ثابت تری در سراسر آن خواهند داشت، همانطور که در تصویر نمونه زیر مشاهده میکنید. در طول مکالمه ما، من یک نسخه نمایشی زنده دیدم که بازتولید رنگ و بافتی را که در مثال مشاهده میکنید، بازتولید میکند، اما شایان ذکر است که سنسور توسط رایانه کنترل میشود، نه یک گوشی هوشمند.
با دوربین های شیائومی، سامسونگ، اپل و هواوی خواهید دید که رنگ ها در شرایط نوری مختلف بسیار متفاوت هستند. در همان صحنه ای که با دوربین طیفی ما گرفته شده است، تفاوت های کوچکی وجود دارد، اما قابل توجه نیست. رنگ های تصاویر رنگ هایی هستند که با چشم غیر مسلح قابل مشاهده هستند. می بینید که همه گوشی های هوشمند رنگ های بسیار متفاوتی تولید می کنند.
این دقت رنگ همچنین توانایی دوربین گوشی های هوشمند را برای بازتولید بهتر رنگ پوست های مختلف بهبود می بخشد. در تصویر نمونه دیگری، به نظر می رسد سنسور S1 در اینجا نیز پیشرفت های قابل توجهی را نشان می دهد.
Mouret خاطرنشان کرد: می توانید ببینید که رنگ پوست بسته به شرایط نور کاملاً متفاوت است. راه حل این است که از یک دوربین طیفی برای تجزیه و تحلیل شرایط نور استفاده کنید تا واقعاً لحن مناسبی ارائه دهید. این تنها راه است. می توانید هوش مصنوعی زیادی پشت آن قرار دهید، اما کافی نیست. شما باید سخت افزار اضافی داشته باشید.
متأسفانه، Mouret یک تلفن پیکسل Google در دسترس نداشت تا حسگر S1 را با فناوری محاسباتی Real Tone Google مقایسه کند، که قول می دهد چیزی مشابه را فقط با استفاده از پیشرفت های نرم افزاری انجام دهد.
سنسور هست یا دوربین؟
مزایای حسگر تصویر طیفی مانند S1 واضح به نظر می رسد، و چه کسی تراز سفیدی موثرتر و رنگ های طبیعی و ثابت در عکس های خود را نمی خواهد؟ اما نحوه توصیف Moure از قابلیت های S1 باعث می شود که صدای آن بیشتر شبیه دوربین باشد تا حسگر. او کیست آیا واقعاً می تواند در گوشی هوشمند جا شود؟ اگر چنین است، چه تغییراتی لازم است؟
مهندس اپلیکیشن Spectricity، Michael Jacobs، که نسخه ی نمایشی را که من تماشا کردم را بازی کرد، توضیح داد که S1 در واقع چیست.
او تایید کرد: “این واقعا یک سنسور همراه است، بسیار شبیه به یک حسگر عمق یا یک سنسور سه بعدی که با دوربین RGB استفاده می شود.”
با این حال، آن را انجام می دهد از نظر فنی همانطور که Mouret توضیح داد، عکس بگیرید، اما نه عکس هایی که بخواهید به صورت جداگانه استفاده کنید:
سنسور تصویر ما دارای وضوح VGA، 800 در 600 پیکسل است. شما باید این تصویر طیفی کمتر را با یک تصویر RGB ترکیب کنید. خود ماژول در واقع بسیار کوچک است. این به گونه ای طراحی شده است که در یک گوشی هوشمند ادغام شود. بنابراین، 5 میلی متر در 5 میلی متر در 6 میلی متر است. او توضیح داد: «این آسان نیست، اما من میتوانم بگویم هیچ چیز پیچیدهای نیست. از نظر هزینه کل، واحد کامل همان قیمت یک دوربین استاندارد با حجم بالا خواهد بود.
در حال حاضر، این سنسور با یک پردازنده سیگنال تصویر استاندارد (ISP) که توسط پردازندههای گوشیهای هوشمند Qualcomm و MediaTek استفاده میشود یکپارچه میشود، اما برای کار کردن به نرمافزار اضافی نیاز دارد.
سنسور تصویر چندطیفی S1 یک تسویه حساب ساده نیست و در واقع دارای ویژگی دوم جالبی است که در آن می تواند نشانگرهای زیستی پوست را شناسایی و تجزیه و تحلیل کند. این بدان معنی است که می تواند تشخیص دهد که آیا یک شخص واقعی را می بیند، که می تواند برای برنامه های امنیتی مورد استفاده قرار گیرد – برای مثال دانستن اینکه آیا فردی برای پنهان کردن هویت خود ماسک زده است یا خیر – مراقبت از پوست و حتی در برنامه های مراقبت های بهداشتی وقتی با هوش مصنوعی ترکیب شود. و نرم افزارهای دیگر همچنین می توان از آن برای بهبود عکس ها در حالت پرتره استفاده کرد.
چه زمانی در گوشی استفاده می شود؟
مدتی است که سازندگان برای بهبود بازتولید رنگ در تلفنها کار میکنند و به LG G5 2016 برمیگردیم که از یک سنسور طیف رنگی اختصاصی در کنار حسگر فوکوس خودکار لیزری خود برای بهبود عملکرد رنگ استفاده میکرد. هوآوی رویکرد متفاوتی در پیش گرفت و در تلاش برای بازتولید بهتر رنگ ها و بهبود عملکرد در نور کم، سنسور RGB P30 Pro را به جای سنسور RYYB کنار گذاشت. Olympus و Imec همچنین با حسگرهای RGB نزدیک به مادون قرمز برای کاربردهای مختلف آزمایش کرده اند.
سنسور Spectricity S1 برای اولین بار در جهان است و در مسیری متفاوت از این نمونه ها حرکت می کند. بر اساس نسخه نمایشی و تصاویر نمونه، نوید قابل توجهی را نشان می دهد – اما چه زمانی می توانیم انتظار داشته باشیم که آن را روی یک تلفن ببینیم؟
مور گفت: «این گوشی در ابتدا به گوشی های رده بالا معرفی خواهد شد. در سال 2024 حجم کم، در سال 2025 حجم بالاتر خواهد بود و سپس از سال 2026 گسترش بیشتری خواهد یافت.
Mouret همچنین انتظار دارد که اولین نمونهها از سازندگان چینی گوشیهای هوشمند به جای شرکتهایی مانند سامسونگ و اپل باشد. با این حال، Mouret انتظار دارد که این در آینده تغییر کند و در بیانیه مطبوعاتی CES 2023 برای سنسور S1، او از انتظارات خود عقب نشینی نکرد و گفت:
ما انتظار داریم اولین مدلهای گوشی هوشمند S1 در سال 2024 عرضه شوند و انتظار داریم که همه گوشیهای هوشمند در سالهای آینده از فناوری ما استفاده کنند.»
آره همه گوشی های هوشمند. این یک هدف بزرگ است، اما اگر عملکردی که در نسخه ی نمایشی دیدیم همان چیزی باشد که در نهایت از دوربین گوشی با S1 در کنار آن خواهیم دید، تولیدکنندگان کمی دوست خواهند داشت که از آنها عقب بمانند.
توصیه های سردبیران