این مدل هوش مصنوعی، کیفیت ویدیوهای قدیمی را افزایش می‌دهد! [تماشا کنید]

شرکت تاپاز لبز (Topaz Labs)، سازنده نرم‌افزارهای قدرتمند بهبود عکس و ویدیو، به‌تازگی از یک مدل هوش مصنوعی جدید رونمایی کرده که به‌طور خودکار کیفیت فیلم‌های قدیمی، از مجموعه ویدیوهای خانگی شما گرفته تا محتوای آرشیوی که ممکن است با گذشت زمان روی رسانه‌های سنتی تخریب شده باشد را بهبود می‌بخشد.

در مجموعه‌ای از نمونه‌ها، فیلم‌های بازیابی‌شده به‌طور چشمگیری بهبود یافته به نظر می‌رسند، با جزئیات بیشتر و کاهش نویز و مصنوعات! این اولین مدل انتشار (Diffusion) ساخته شده برای این منظور است و برای اصلاح ویدیوهایی که به آن داده شده‌اند، نیازی به ورودی دستی ندارد.

این شرکت می‌گوید پروژه استارلایت، همانطور که این مدل نامیده می‌شود، از ابتدا با یک معماری مدل جدید، با بیش از ۶ میلیارد پارامتر ساخته شده و از آخرین سخت‌افزار NVIDIA استفاده می‌کند. برای مقایسه، مدل زبانی بزرگ چشمگیر GPT-4o اوپن‌ای‌آی که در می ۲۰۲۴ منتشر شد و قابلیت پذیرش متن، صدا، تصویر و ویدیو به عنوان ورودی را دارا بود، به ۸ میلیارد پارامتر نیاز داشت.

تاپاز لبز وعده می‌دهد که این مدل “جزئیات را به طور دقیق بازیابی می‌کند” و “بازیابی بی‌نظیر جزئیات را همراه با پایداری زمانی بی‌نظیر” ارائه می‌دهد. این شرکت می‌گوید این بخش آخر همان چیزی است که مدل جدیدش در مورد آن است: بهبود چندین فریم برای دستیابی به نتایج بازیابی با کیفیت بالا بدون مصنوعات حرکتی یا ناهماهنگی بین فریم‌ها و اشیاء.

بازیابی کاملاً خودکار: مدل ما به‎‌طور خودکار نویز را حذف می‌کند، تاری را برطرف کرده، کیفیت را افزایش می‌دهد و از آلایزینگ جلوگیری می‌کند. به سادگی فیلم خود را وارد کنید و تماشگر تبدیل آن باشید!

بدون تنظیمات دستی، بدون تنظیم پارامتر.

مدل ما می‌تواند فیلم‌های ثبت‌شده در دوربین‌های حرفه ای را بازیابی کند.

توییت: Topaz Labs (@topazlabs) February 6, 2025

مدل‌های انتشار با نگاه کردن به یک تصویر با کیفیت بالا، اضافه کردن تدریجی نویز بیشتر به آن و یادگیری نحوه تخریب آن کار می‌کنند. آنها همچنین برعکس این کار را انجام می‌دهند، از یک تصویر پر سر و صدا شروع کرده و پیش‌بینی می‌کنند که قبل از اضافه شدن همه آن نویز چگونه بوده است.

پروژه استارلایت همچنین به طور خودکار، نویز، تاری، افزایش کیفیت و حذف آلایزینگ فیلم را به صورت درخواستی انجام می‌دهد که نشان می‌دهد برای استفاده از آن نیازی به حرفه‌ای بودن در ویدیو نخواهید داشت.

این شرکت بیش از دو دهه در تجارت نرم‌افزار تصویربرداری بوده است و برنامه‌های محبوبی برای ویرایش و افزایش کیفیت عکس‌ها و ویدیوها دارد. در سال ۲۰۲۰، یک یوتیوبر از Gigapixel AI تاپاز لبز و سایر ابزارها برای احیای یک فیلم کوتاه صامت کلاسیک اواسط دهه ۱۸۹۰ استفاده کرد و آن را با کیفیت 4K و سرعت ۶۰ فریم در ثانیه ارائه کرد.

ویدیوها امروز چگونه بازیابی می‌شوند؟

زنده کردن ویدیوی قدیمی شامل چندین فرآیند است، از جمله افزایش کیفیت، تصحیح و درجه‌بندی رنگ، درون‌یابی فریم، ترمیم آسیب و بازیابی صدا. ابزارهای مجهز به هوش مصنوعی برای کمک به هر یک از این موارد وجود دارد، اما انسان‌ها در حال حاضر باید برای بهترین نتیجه بر همه آنها نظارت داشته باشند.

شایان ذکر است که Tensorpix، رقیب تاپاز لبز، نیز یک ابزار بهبود ویدیوی مبتنی بر یادگیری ماشین ارائه می‌دهد که وعده می‌دهد فیلم‌های قدیمی را اصلاح کند. اما مطالب این شرکت به استفاده از مدل‌های انتشار، که بخشی از شاخه خاصی از یادگیری ماشین هستند، اشاره‌ای نمی‌کند.

پروژه استارلایت چقدر خوب کار می‌کند؟

در نمونه‌های بالا، می‌توانید ببینید که پروژه استارلایت در بیشتر موارد عملکرد بسیار خوبی دارد. کلیپ مربوط به فضانورد و کلیپ دیگر که شامل یک طوطی قرمز است، به ویژه خوب از آب درآمده‌اند. با این حال، دقت در کلیپ مسابقه بوکس، چیز زیادی برای مطلوب بودن باقی می‌گذارد. فریم‌هایی وجود دارند که شبیه نقاشی‌های لکه‌دار به نظر می‌رسند، مشابه نتایج ناامیدکننده از مدل‌های قدیمی‌تر تولید ویدیوی هوش مصنوعی.

پروژه استارلایت امکانات جدیدی را برای جریان کار خلاقانه شما باز کرده و لحظات تاریخی نمادین را با جزئیات شفاف زنده می‌کند. از ویدیوهای قدیمی خانه گرفته تا پروژه‌های حرفه‌ای، آینده بازیابی ویدیوهای هوش مصنوعی اینجاست!

توییت: Topaz Labs (@topazlabs) February 6, 2025

تاپاز لبز می‌گوید که شما می‌توانید ویدیوهایی تا ۱۰ ثانیه را به صورت رایگان بازیابی کنید، در حالی‌که کلیپ‌های تا ۵ دقیقه به حداکثر 1080p می‌رسند و نیاز به استفاده از اعتبار دارند. یک نسخه سازمانی از ویدیوهای طولانی‌تر و خروجی‌ها با وضوح بالاتر پشتیبانی می‌کند. هنوز خبری از اینکه آیا پروژه استارلایت می‌تواند به صورت محلی اجرا شود یا در سایر برنامه‌های این شرکت ادغام خواهد شد، وجود ندارد.

منبع: Newatlas