Mesterséges Intelligencia az Adobe Premiere Pro programban

Becsült olvasási idő 7 perc

Bevezetés

2024. áprilisában az Adobe bemutatta a következő generációs videó szerkesztő programját, ahol már a mesterséges intelligencia segít a komplex feladatok egyszerűvé tételében.

Az Adobe Premiere Pro új verziója tartalmazza szinte az összes MI lehetőséget, ami az elmúlt rövid időszakban megjelent: Képgenerálás, InPaint objektum generálás, Videógenerálás, Hanggenerálás, Szöveg alapján felírat készítése, stb… Mindezek beépítve a videó szerkesztésébe. Pl. új elemet vehetünk fel a filmbe, vagy az oda nemillő tárgyakat törölhetjük ki.

Az új mesterséges intelligencia funkciók egyik különlegessége, hogy nemcsak az Adobe Firefly videó-generáláló motort, hanem olyan külső fejlesztők programjait is használhatjuk, mint a Runway, Pika vagy az OpenAI Sora.

Adobe Premiere Pro mesterséges intelligencia funkciók

Objektum hozzáadása

2024-re már természetessé vált, hogy a mesterséges intelligenciát kérjük arra, hogy egy képre új objektumot rajzoljon (InPaint). Az Adobe Premiere Pro viszont videó szerkesztő program. Ezért az MI-generált részek is a videóhoz illeszkedő, azzal együtt mozgó elem lesz.

Ha azt szeretnénk, hogy pl. a szereplő kezében legyen egy banán, akkor azt ezentúl a mesterséges intelligencia rá tudja rajzolni minden egyes képkockára úgy, hogy a szereplővel együtt mozog.

Adobe Premiere Pro - Objektum hozzáadása
Adobe Premiere Pro – Objektum hozzáadása

Objektum eltávolítása

Ahogyan a mesterséges intelligencia új objektumot tud rajzolni ami a videóval együtt mozog, ugyan úgy el is tud tüntetni. Ha valami zavaró maradt a filmen, akkor azt egyszerűen ki lehet törölni.
Az eltávolítandó részeket pedig nem kell körberajzolni, a program intelligensen felismeri és kijelöli.

Adobe Premiere Pro - Objektum eltávolítása
Adobe Premiere Pro – Objektum eltávolítása

Objektum csere

A mesterséges intelligencia segítségével nemcsak új elemeket tehetünk a képre, vagy régieket távolíthatunk el. Hanem a már meglévőket is átalakíthatjuk.

Néhány kattintással megváltoztathatjuk a szereplő óráját, ruházatát, autóját, de akár azt is, hogy mi legyen a csomagjában.
Vagy magát a karaktert is!

Adobe Premiere Pro - Objektum csere
Adobe Premiere Pro – Objektum csere

Generatív kiterjesztés

Ha a videó hossza nem elegendő, a mesterséges intelligencia képes új képkockákat generálni. A program elemzi, és értelmezi a meglévő képkockákat, és ahhoz illeszkedő új képeket fog generálni. Így könnyebben tudjuk a klippeket egymáshoz illeszteni, szinkronizálni.

Adobe Premiere Pro - Generatív kiterjesztés
Adobe Premiere Pro – Generatív kiterjesztés

Generatív B-roll

Talán az egyik legidőigényesebb munka a megfelelő B-rollok megtalálása. Rengeteg perc, vagy akár óra mehet el arra, hogy a rövid felvételek között böngésszünk. És sokszor nem is lelünk olyat, ami valóban tetszik.

Mostantól egy egyszerű szöveges utasítással generálhatunk olyan videóklipeket, amelyek tökéletesen illeszkednek a történet hangulatába. Létrehozhatnak felvételeket, amelyek nehezen rögzíthetők vagy fantasztikus koncepciókat illusztrálnak.

Adobe Premiere Pro - Generatív B-roll
Adobe Premiere Pro – Generatív B-roll

Szövegalapú vágás

A szövegalapú vágás (Text-Based Editing) automatikus átiratot (Transcript) készít a videóról.
Ettől kezdve a videót úgy lehet szerkeszteni, mintha csak szöveg lenne. Finomíthatjuk, átrendezhetjük, kivághatjuk a kellemetlen szüneteket és töltelék szavakat.

Ez a funkció jelentősen egyszerűsíti és felgyorsítja a szerkesztési folyamatot, különösen a beszélgetős vagy interjú típusú videók esetén.

Adobe Premiere Pro - Szövegalapú vágás
Adobe Premiere Pro – Szövegalapú vágás

MI-alapú hang kategorizálás

A mesterséges intelligencia felismeri, hogy a hang anyag milyen típusú: zene, párbeszéd, hangeffekt, vagy háttérhang. Utána automatikusan kategorizálja őket.

Így sokkal könnyebben átlátjuk a hang anyagainkat, és sokkal gyorsabban tudunk dolgozni.

Adobe Premiere Pro - MI-alapú hang kategorizálás
Adobe Premiere Pro – MI-alapú hang kategorizálás

Beszédből szöveggé alakítás

A világ felgyorsult és globális lett. Fontos, hogy egy videó minél több embert érjen el. Ehhez pedig feliratozás szükséges. Csakhogy a szöveg elkészítése és időzítése rengeteg időt igényel.

Az Adobe Premiere Pro Speech to Text funkciója ezt automatikusan megcsinálja.
A program több, mint 18 nyelvet ért meg. E mellett felismeri, hogy melyik szereplő beszél a videóban. A létrehozott szöveg illeszkedik a videó ritmusához és beszédmintához.

Így a videó tartalma sokkal élvezhetőbb lesz, és a közönségi médiában is vonzóbb.

Adobe Premiere Pro - Beszédből szöveggé alakítás
Adobe Premiere Pro – Beszédből szöveggé alakítás

Feljavított beszéd

Az Enhance Speech funkcióval eltávolítható a háttérzaj és javítható a párbeszéd minősége, mintha egy profi stúdióban vették volna fel.

Adobe Premiere Pro - Feljavított beszéd
Adobe Premiere Pro – Feljavított beszéd

Jelenetszerkesztés észlelése

Amikor egy hosszabb videóból új szerkesztést kell készítenünk, az egyik első lépés az eredeti rövidebb klipek szétválasztása.
Viszont a jelenetátmenetek megtalálása és ezeknek a vágásoknak a manuális elhelyezése fárasztó lehet, de a Scene Edit Detection funkcióval az Adobe Premiere Pro automatikusan vágja a jeleneteket helyettünk.
Kattintsunk a jobb gombbal egy klipre az idővonalon, válasszuk a Scene Edit Detection (Jelenetszerkesztés-felismerés) lehetőséget, és válasszuk ki, hogy szeretnénk-e vágásokat hozzáadni, új al-klipekből álló tárolót létrehozni, vagy klipjelzőket elhelyezni az egyes vágási pontoknál.

Adobe Premiere Pro - Jelenetszerkesztés észlelése
Adobe Premiere Pro – Jelenetszerkesztés észlelése

Automatikus szín

A kreatív munkából rengeteg időt vesz el az, amikor a videók színkorrekcióit végezzük.

De ennek nem többé így lennie! Az Auto Color funkcióval minden eddiginél gyorsabban tudjuk az alap korrekciókat elvégezni, mint pl. az Expozíció , Kontraszt vagy a Fehér-egyensúly

Adobe Premiere Pro - Automatikus szín
Adobe Premiere Pro – Automatikus szín

Összekapcsolódás más MI videó generáló programokkal.

Az új mesterséges intelligencia funkciók egyik különlegessége, hogy nemcsak az Adobe Firefly videó-generáláló motort, hanem olyan külső fejlesztők programjait is használhatjuk, mint a Runway, Pika vagy az OpenAI Sora.

További mesterséges intelligencia funkciót az Adobe Premiere Pro programban

Morph Cut

  • Leírás: A Morph Cut segít a vizuális folytonosság fenntartásában, és sima átmeneteket biztosít a klippek között.
  • Előnyök: Javítja a videók vizuális minőségét, különösen interjúk és beszélgetős videók esetén.

Color Match

  • Leírás: A Color Match azonnal összehangolja a különböző videóklippek színeit, eltávolítva a különböző jelenetek közötti színbeli eltéréseket.
  • Előnyök: Egységes megjelenést biztosít a videóknak, figyelembe véve a bőrtónusokat és kifejezéseket.

Remix

  • Leírás: A Remix funkcióval összehangolhatja a zenét a videó ritmusával.
  • Előnyök: Megspórolja azokat az órákat, amelyeket a videó és az audio manuális szinkronizálásával töltenének.

Auto Ducking

  • Leírás: Az Auto Ducking automatikusan csökkenti a háttérzene hangerőt, amikor párbeszéd hallható, hogy a beszéd érthetőbb legyen.
  • Előnyök: Harmonikus hangzást biztosít anélkül, hogy manuálisan kellene állítgatni a hangerőt.

Auto Reframe

  • Leírás: Az Auto Reframe azonosítja a képkockák fókuszpontját, és megőrzi azt változó képarányok között.
  • Előnyök: Különösen hasznos, ha széles képarányú videót szeretne közösségi médiára szabott formátumban megosztani.

Future Vision

2023. áprilisában az Adobe egy videót mutatott be, ahol a tervezett funkciókat mutatták be. Remélhetőleg ezek is tényleg megvalósulnak, és hamarosan az Adobe Premiere Pro programban találkozhatunk velük.

Zene és hang effekt generálás

Ahogyan a videóra új objektumokat teszünk, a jövőben várhatóan zenét és hang effekteket is készíthet nekünk a mesterséges intelligencia.

Továbbfejlesztett színkorrekció

A mesterséges intelligencia segítségével talán elfelejthetjük végre a csúszkákat. Csak elég lesz azt beírni, hogy milyen színhangulata legyen a videónak, melyik elem legyen sötétebb vagy világosabb. A program pedig automatikusan kikeveri a legjobb színeket.

Látványos szöveg címkék generálása

Az Adobe Premiere Pro egy jövőbeli változata a videó szövegét felismerve szöveggé alakíthatja.
Igen, ezt már a 2024. áprilisban megjelent verzió tudja. Csakhogy a szövegből látványos címkéket tehet a videóra, amitől az érdekesebb vagy jobban érthető lehet.

Animált szöveg generálása

2024-ben még mindig az MI egyik legnagyobb kihívása, ha olvasható szöveget kell generálni. Az Adobe Firefly viszont a betűre rajzolja rá a kért képet. Így garantálja, hogy a szöveg tényleg szöveg legyen.

Várhatóan a jövőbeli Adobe Premiere Pro programban animációt is készíthetünk a feliratokra.

Automatikus B-roll

Az automatikus készített átiratot (Transcript) felhasználva a jövőben az Adobe Premiere Pro automatikusan generálhatja a B-roll-okat. Nem nekünk kell kitalálni, hogy milyen rövid filmrészletek lennének a legjobbak a videóhoz.

Storyboard generálás

A jövőbeli Adobe Premiere Pro programba várhatóan érkezik egy olyan funkció, ahol a film forgatóját lehet beolvasni. A program pedig ebből elkészíti a vizuális Storyboard-ot.

Videó:

Adobe Future Vision: Ezeket a funkciókat tervezte az Adobe 2023. áprilisában.

PixelRita

Loading