Video synthesis from stereo videos with iterative depth refinement

ما یک الگوریتم پالایش نقشه های عمق جدید را پیشنهاد می کنیم و توالی های ویدئویی چندبعدی را از توالی های ویدئویی دوتایی برای نمایشگر اتونستروسکوپی مدرن تولید می کنیم. به منظور تولید محتوای واقعی برای نمایش های مجازی، نقشه های عمیق با کیفیت بالا برای نتایج سنتز نظر بسیار حیاتی هستند. بنابراین، پردازش نقشه های عمقی، مشکل اصلی چالش در کار است. ما یک الگوریتم پالایش عمق تکراری، از جمله تشخیص خطا و تصحیح خطا، برای اصلاح خطاها در نقشه عمق پیشنهاد می کنیم. تشخیص خطا به دو نوع خطا اهمیت می دهد: خطا در تناقض در عمق رنگ و خطای ناچیز عمق رنگ محلی در سراسر مشاهده. سپس، پیکسل خطا بر اساس کاندیداهای محلی نمونه برداری اصلاح می شود. یک فیلتر سه جانبه که شرایط اصطکاک شدید، فضایی و زمانی را به وزن فیلتر تبدیل می کند به منظور افزایش قوام فضایی و زمانی در فریم ها استفاده می شود. بنابراین دیدگاه های مجازی می تواند بهتر با توجه به نقشه های عمیق سنتز شده است. برای ترکیب هر دو تصاویر پیچیده، درونیابی دیدگاه مبتنی بر اختلاف به منظور رفع مصنوعات شفاف معرفی شده است. در نهایت یک فیلتر جهت دار برای کاهش آلیاژ در اطراف مرزهای شی مورد استفاده قرار می گیرد تا بتواند چند نمایش مجازی با کیفیت بالا بین دو دید را تولید کند. ما با استفاده از الگوریتم پیشنهادی بر روی روش های سنتز حالت نمایش از طریق تجربیات روی داده های تصویری و داده های ویدئویی، کیفیت تصویر برتر نمایش های مجازی را نشان می دهیم.