فناوری جدید اپل کیفیت تصاویر تاریک را متحول می‌کند

به گزارش gsxr، برای مقابله با این محدودیت، محققان اپل و دانشگاه پردو مدلی به نام «DarkDiff» توسعه داده‌اند. در این رویکرد، به جای استفاده از هوش مصنوعی در مرحله پس‌پردازش، مدل متن‌باز «Stable Diffusion» که بر میلیون‌ها تصویر آموزش دیده است، به گونه‌ای هدایت می‌شود که جزئیات واقعی در نواحی تاریک تصویر شناسایی و بازسازی شوند و این فرآیند مستقیماً در مسیر پردازش سیگنال تصویر گنجانده می‌شود.

در این روش، هوش مصنوعی با بازسازی محتوا، تصویر را به شکل کامل تغییر می‌دهد، در حالی که واحد پردازش تصویر (ISP) دوربین همچنان وظیفه پردازش اولیه داده‌های خام حسگر، شامل تراز سفیدی و حذف تداخل رنگی، را بر عهده دارد. سپس «DarkDiff» تصویر RGB خطی را پردازش کرده، نویز آن را حذف و مستقیماً نسخه نهایی sRGB را تولید می‌کند.

«DarkDiff» همچنین از تکنیکی به نام مسیریابی بدون طبقه‌بندی‌کننده استفاده می‌کند که میزان تأثیرگذاری مدل در بازسازی تصویر نسبت به فرضیات بصری از پیش‌آموخته شده را کنترل می‌کند. کاهش جهت‌گیری باعث تولید الگوهای نرم‌تر و افزایش آن به تولید بافت‌های واضح‌تر و جزئیات دقیق‌تر منجر می‌شود، هرچند این کار ممکن است احتمال ایجاد بخش‌های ناخواسته یا محتوای جعلی را نیز افزایش دهد.

لازم به ذکر است که در این مطالعه اشاره‌ای به زمان عرضه فناوری «DarkDiff» برای آیفون‌ها نشده است.