(تصویر با حسن نیت از Metro Goldwyn Mayer Pictures)
کلمه "نویز" در زبان انگلیسی یک چیز خنده دار است. معمولاً زمانی استفاده می‌شود که بیشتر به صدایی اشاره می‌کند که نمی‌خواهید بشنوید. اما این همچنین در مورد تصاویری که مصنوعاتی در آن‌ها وجود دارد و نمی‌خواهید ببینید، اعمال می‌شود، به‌خصوص در پروژه‌های انیمیشنی و جلوه‌های بصری سطح بالا، که در آن پاک کردن تمام نویزهای انیمیشن‌های کامپیوتری به زمان و هزینه بیشتری نیاز دارد.
تراشه ساز اینتل INTC بخش نرم‌افزار ویدیویی چالش پاک‌سازی نویز در نرم‌افزار جلوه‌های بصری را به عنوان بخشی از کار Cinesite بر روی ویژگی انیمیشن MGM The Addams Family 2 که در ماه اکتبر در سینماها عرضه شد، حل کرد.
مهندسان اینتل با یک سوال به ظاهر مبهم اما به‌طور شگفت‌انگیز اساسی در ایجاد تصاویر جذاب فیلم سر و کار داشتند: چگونه سریع‌تر یک نسخه «به‌اندازه کافی خوب» از یک صحنه نمایش داده شود تا در مورد ادامه رندر کردن آن با کیفیت بالا، یا دستکاری و تغییر تصمیم گیری شود. سعی کنید صحنه را بهبود بخشید این یک سوال ساده نیست و تاثیرات آن می تواند به معنای تفاوت در متحمل شدن میلیون ها دلار در هزینه های تولید و تاخیر باشد.
چالش‌ها همه با نحوه ایجاد نرم‌افزار انیمیشن مدرن شروع می‌شوند و سپس تصاویر پیچیده‌ای را بر روی صفحه نمایش می‌دهند که واقعاً نحوه عملکرد نور در جهان را به تصویر می‌کشد و نحوه برخورد پرتوهای نور از انواع سطوح، از فولاد ضد زنگ گرفته تا آب متحرک تا پوست نیمه شفاف را تقلید می‌کند.
منظره‌ای کنار جاده از خانواده ADDAMS 2. بافت‌ها و بازتاب‌پذیری متفاوت یک آسمان نیمه ابری … [+] و انواع مختلف سنگ، فلز و پارچه، همگی بر رندر تصاویر تأثیر می‌گذارند.
هنک دریسکل، رئیس جهانی CG برای انیمیشن های بلند مستقر در Cinesite در مونترال می گوید: «ردیابی مسیر (همچنین به عنوان ردیابی پرتو شناخته می شود) راهی برای ایجاد تصاویر بصری بسیار جالب تر است.
اما حتی برای رایانه‌های قدرتمند، ردیابی همه آن پرتوها، به‌ویژه زمانی که بخشی از آن گم می‌شود یا از دید مسدود می‌شود، می‌تواند یک سیستم رایانه‌ای را به سمت سوراخ خرگوش تکنولوژیکی بفرستد. اینجاست که ابزارهای نویز زدایی وارد می شوند.
چیزی که در چهار یا پنج سال گذشته واقعاً به‌طور چشمگیری تغییر کرده است این است که حذف نویز همیشه چیزی بود که (انیماتورها) می‌خواستند یا مورد نیاز بودند، اما استفاده از ردیابی پرتوی به نمونه‌برداری مونت کارلو نیاز دارد، تصادفی‌سازی فرآیند شما، بنابراین نمی‌توانید آن را دقیق کنید. جیم جفرز، مهندس اصلی و مدیر ارشد اینتل، موتورهای رندر پیشرفته و تجسم گفت: در مورد هر چیز خاصی.
جفرز گفت: "با گذشت زمان، شما بهترین اطلاعات را به سریع ترین روش ممکن جمع آوری می کنید." این رویکرد بهترین عملکرد را به جز یک اخطار دارد. این به شما امکان می دهد از تکنیک های دیجیتال برای تعیین اینکه چه زمانی به آن نقطه بهینه رسیده اید استفاده کنید. هشدار این است که ممکن است برای رسیدن به آنجا نیاز به 10 میلیون پاس داشته باشید. این به زمان محاسباتی نیاز دارد.»
مانند قبل، ممکن است یک ماشین سطح فوق العاده کامپیوتری یک هفته و نیم طول بکشد تا یک صحنه 5 ثانیه ای را به طور کامل ارائه دهد. این برای یک پروژه سینمایی بزرگ با بودجه و جدول زمانی دقیق کار نخواهد کرد.
Driskill گفت که دریافت "افکت های نورانی و چیزهایی که در طبیعت می بینید" با ردیابی پرتو امکان پذیر است، "اما نتیجه نهایی این است که پیکسل های پر سر و صدای زیادی دریافت می کنید. در نهایت شما می توانید آن را حل کنید اگر اجازه دهید (رایانه) اجرا و اجرا شود و اجرا شود. اما اگر در حال ساخت فیلم های انیمیشن هستید، فرصت ندارید هر یک از آن فریم ها را برای یک هفته اجرا کنید.
به گفته جفرز، اینتل رویکرد متفاوتی را در پیش گرفت و یک الگوریتم هوش مصنوعی را آموزش داد تا فرآیند حذف نویز پاکسازی تصاویر را کوتاه کند. چند سالی است که صدازداها با انیمیشن های تلویزیونی با چرخش سریع استفاده می شوند.
فناوری De-noiser با پروژه‌های ویژگی متحرک بلند و جلوه‌های بصری مانند The Addams Family 2 ، بسیار سنگین‌تر شده است. که نیاز به تولید سطح بسیار بالاتری از کیفیت تصویر برای نمایش در بزرگترین صفحه نمایش دارند.
جفرز گفت: «فقط برای این فرآیندی که ما اعمال می‌کنیم معلوم می‌شود، فقط تصاویر بهتری ایجاد می‌کند. می‌تواند یاد بگیرد که کجای تصویر را نگاه کند تا روی بهبود آن قسمت تمرکز کند. این هوشمندی را ایجاد می کند که بگوییم این منطقه مشکل ساز خواهد بود."
جفرز گفت که در ابتدا در مورد توانایی هوش مصنوعی برای حل مشکلات نویز زدایی شک داشت. حالا او تبدیل شده است.
جفرز می‌گوید: «این روزها، دستگاه‌های حذف‌کننده صدا می‌آموزند که با میان‌برهایی که به‌احتمال زیاد نتیجه را می‌دهند، کیفیت را در آنجا باقی می‌گذارند». الگوریتم فقط نقاطی را انتخاب می کند که به احتمال زیاد نویز دارند. مزیت واقعی دستگیره هایی است که می توانید برای نزدیک شدن به آن (محصول نهایی) بچرخانید تا بتوانید فریم نهایی را دقیقاً همان چیزی که تصور می کنید بسازید. این یک هدف بزرگ از کاری است که تیم من انجام می دهد. ”
رویکرد جدید همچنین حالت «بهترین حدس» را تقویت می‌کند که در آن هوش مصنوعی بهترین تکرار تصادفی یک تصویر را با یک پاس، به جای هزاران یا حتی میلیون‌ها تخمین می‌زند.
شما می توانید (نتیجه) را در چند میلی ثانیه ببینید. جفرز گفت: قبل از اینکه یک دقیقه تمام شود.
Driskill گفت: "اگر آن (افکت های رندر) را زودتر تمیز کنید، می توانید روند رندر را خیلی زود متوقف کنید.
اینتل تا حدودی به پروژه خانواده آدامز ملحق شد و کد نهایی را ارائه کرد که می‌توان از آن در تصویر استفاده کرد. دریسکل گفت، حتی آن مشارکت جزئی نیز بسیار مفید بود.
Driskill گفت: "تخمین نهایی ما این است که ما حدود 20 درصد پس انداز کرده ایم که بخشی از پروژه است." هدف این است که زمان های رندر را به نصف کاهش دهیم. می‌توانید خیلی سریع یک تصویر پر سر و صدا دریافت کنید، سپس به مرور برطرف می‌شود. شما می توانید خیلی سریع چیزی را دریافت کنید که مطمئناً برای قضاوت اولیه خوب است."
چهارشنبه آدامز و مورتیشیا آدامز در آبشار خانواده آدامز 2. گرفتن نور خاموش … [+] آب، مه، و صخره مانند این صحنه چالشی برای رندر کردن کامپیوترها برای مدیریت کارآمد و سریع است.
از آنجایی که Cinesite از این ابزار در تمام طول عمر پروژه استفاده می کند، آموزش هوش مصنوعی کارآمدتر و پیشرفته تر می شود و هنرمندان آن در استفاده از آن مهارت بیشتری پیدا می کنند، Driskill گفت Cinesite ممکن است به این هدف بلندپروازانه برسد.
همانطور که Driskill خاطرنشان کرد، "نیز خوب در مورد یک سیستم مبتنی بر (یادگیری ماشینی) مانند اینتل، در تشخیص آنچه مهم است و آنچه که باید حذف شود بهتر و بهتر می شود."
Driskill گفت، جنبه انسانی این فرآیند نیز بهبود خواهد یافت، زیرا انیماتورها در استفاده از ابزار حذف نویز برای کمک به آزمایش خلاقانه خود در عین ساختن محصول نهایی سریعتر، بهتر می شوند.
دریسکیل گفت: «این تفکر خلاق را تغییر می‌دهد، نه در فریم نهایی، بلکه برخی از مواردی که حذف نویز اجازه می‌دهد. «می‌توانید تصویر را برای مدت کوتاهی اجرا کنید، نویزکننده را اجرا کنید، و سپس می‌توانید در طول مسیر چند تماس قضاوتی واقعاً مهم برقرار کنید.»
همانطور که Driskill اشاره می کند، فناوری مفید حداقل یکی از دو کار را انجام می دهد: یا شما را در کاری که قبلا انجام می دهید کارآمدتر می کند یا به شما کمک می کند کاری را انجام دهید که قبلاً نمی توانستید انجام دهید.
Driskill گفت: «در حرفه من، بیشتر اوقات (با فناوری جدید) معلوم می شود که می توان به جای سه بار، شش بار میل لنگ را در یک تلاش خلاقانه بچرخانید. اگرچه در عمل، این ترکیبی از میل لنگ بیشتر و زمان کوتاه‌تر است. هر زمان که بتوانید به انیماتورها اجازه دهید یک بار دیگر آن میل لنگ را بچرخانند، آن را دوست دارند."
دریسکل گفت: Cinesite در حال حاضر از این فناوری در پروژه‌های دیگر استفاده می‌کند، از جمله یک محصول دیزنی و یک فیلم انیمیشن بر اساس داستانی از برکلی تنفس، کاریکاتوریست برنده جایزه پولیتزر به نام Hitpig.
اینتل با غول نرم افزار گرافیکی Autodesk شریک شد ADSK برای گنجاندن نویز کننده در نرم افزار رندر آرنولد خود ، که Cinesite قبلاً از آن استفاده می کند. جفرز گفت، و De-noiser به موتور رندر متن باز Blender اضافه شده است که به دموکراتیک کردن استفاده از آن در فروشگاه های کوچکتر انیمیشن و جلوه ها و سازندگان انفرادی کمک می کند.
به طور جداگانه، جفرز گفت که ابزارهای حذف نویز طیف وسیعی از کاربردهای فراتر از سرگرمی دارند، اگرچه نیاز این بخش هم به راندمان بالا و هم کیفیت تصویر مناسب است.
جفرز گفت: "تجسم علمی حوزه دیگری است" که این فناوری در آن کاربرد دارد. ما همچنین کارهای زیادی را با بنتلی، شرکت فولکس‌واگن انجام داده‌ایم و با آنها کار کرده‌ایم تا مشتریان بتوانند خودروهایی را که قرار است برایشان بسازند ببینند.»
به طور گسترده تر، این دوره نوآوری و دگرگونی فزاینده در دنیای جلوه های بصری است که بخشی از آن توسط سرمایه گذاری های عظیم در تجربیات همهجانبه و چشم انداز فراگیر یک Metaverse یا Omniverse از فضاهای غوطه ور به هم پیوسته تغذیه می شود.
یونیتی، شرکت بزرگ ابزار توسعه‌دهنده‌ای که بیشتر به‌خاطر استفاده گسترده‌اش در بازی‌سازی شناخته می‌شود، به تازگی Weta Digital پیتر جکسون را به قیمت 1.63 میلیارد دلار خریداری کرده است، و قصد دارد «مسیری را برای هر هنرمندی در هر صنعتی ایجاد کند … تا از این ابزارهای خلاقانه باورنکردنی استفاده کند. ”
و نتفلیکس به تازگی Scanline را خریداری کرده است ، شرکتی که جلوه‌های بصری را روی بازسازی لایو اکشن پخش‌کننده Cowboy Bebop و فصل‌های 3 و 4 Stranger Things با برنامه‌هایی برای «سرمایه‌گذاری در خط لوله، زیرساخت‌ها و نیروی کار اسکن‌لاین برای پیشبرد تولید مجازی استریمر» خریداری کرد. ”
اسکن لاین علاوه بر نتفلیکس با سایر مشتریان به کار خود ادامه خواهد داد NFLX و دارای آثاری از جمله شانگ چی دیزنی و افسانه ده حلقه و بازی تاج و تخت WarnerMedia، گودزیلا علیه کونگ، و لیگ عدالت زک اسنایدر است.

source