Новата технология за мащабиране на Adobe използва изкуствен интелект за подобряване на разделителната способност на видеото

Повечето от новите функции и изживявания, обявени наскоро от Adobe, включват AI, като добавяне и премахване на обекти в Premiere Pro и създаване на текстови изображения във Photoshop. И сега компанията разкри VideoGygaganекспериментална AI функция, която казва, че може да увеличава мащаба на видео осем пъти без обичайните ефекти като трептене или изкривяване. ръбът споменати.

VideoGigaGAN превъзхожда други методи за видео супер-резолюция (VSR), защото избягва обичайните артефакти и трептене, предлагани от GAN (общи противопоставящи се мрежи), според Adobe. В същото време добавя яснота и детайлност – където повечето други системи не успяват да направят и двете едновременно.

Разбира се, системата създава несъществуващи детайли от цял ​​плат, така че това не би било подходящо за неща като криминалистично подобряване на видео, Подобно на не Криминални предавания в стил CSI. Но детайлите, които добавя, изглеждат впечатляващо реални, като текстурата на кожата и меката коса, Детайл от лебедови пера И още.

Моделът се основава на мащабен усилвател на изображения, наречен GigaGAN, според изследователите на Adobe. Предишните VSR модели имаха трудности при генерирането на богати детайли в резултатите, така че Adobe се ожени за „временно внимание“ (намаляване на артефактите, които се натрупват с времето), дифузия на функциите (добавяне на детайли там, където ги няма), антиалиасинг и така нареченото „високо честотна совалка“ (Совалката разполага с висока честота), за да създадете крайния резултат.

Ако се добави към продукти като Premiere Pro или After Effects, това може да позволи на продуцентите на видеоклипове да направят кадрите с ниска разделителна способност да изглеждат много по-добре, въпреки че използването на AI за подобряване на хората е противоречива практика. Все още няма информация дали Adobe планира да направи това (в момента клиповете са кратки и се възпроизвеждат само с 12 кадъра в секунда), но много компании, включително NVIDIA, Microsoft, Blackmagic Design и други, също работят върху технологията за мащабиране на AI.