Hur AI-uppskalning kunde göra bättre foton

Innehållsförteckning:

Hur AI-uppskalning kunde göra bättre foton
Hur AI-uppskalning kunde göra bättre foton
Anonim

Key takeaways

  • Nya framsteg för att förstora bilder kan hjälpa till med allt från familjefoton till medicinsk bildbehandling.
  • Googles forskare meddelade att de hade gjort genombrott när det gäller att använda AI för att öka fotoupplösningen.
  • Men en expert säger att uppskalningsprogramvara kanske inte är nödvändig för stillfotografer.
Image
Image

Nya tekniker som förstorar bilder med AI kan förbättra allt från foton till videospelsgrafik, säger experter.

Google-forskare diskuterade nyligen genombrott de har gjort när det gäller att öka bildupplösningen. Forskarna använde en maskininlärningsmodell för att förvandla ett lågupplöst foto till en detaljerad högupplöst bild. Det är en del av en växande trend att använda AI för att förbättra bilder.

"Vi ser en ökning av AI-driven uppskalning, särskilt i spel, där tekniker som NVIDIA DLSS använder maskininlärning för att återskapa en mycket högre upplösning, som konkurrerar med och ibland överträffar kvaliteten på de inbyggda bilderna, " sa bildexperten Ionut-Alexandru Popa till Lifewire i en e-postintervju.

"Den här typen av uppskalning fungerar utmärkt i datorspel, där den lyckas använda färre resurser än att direkt rendera en bild med högre kvalitet."

Creating Pixel

Google har undersökt ett sätt att uppskala foton med en metod som kallas diffusionsmodeller.

Företaget hävdar att denna teknik förbättrar befintlig teknik när människor ombeds att bedöma resultaten. En metod som Google använde kallas SR3, eller Super-Resolution via Repeated Refinement.

"SR3 är en superupplöst diffusionsmodell som tar en lågupplöst bild som input och bygger en motsvarande högupplöst bild från rent brus", skrev Google-forskare i blogginlägget."Modellen är tränad på en bildkorruptionsprocess där brus successivt läggs till en högupplöst bild tills bara rent brus återstår."

Uppskalningstekniker är inte nya och används ofta i fotoredigeringsprogram, sa Popa.

"Det finns många situationer när du behöver en bild med högre upplösning, så uppskalning används för att skapa pixlar mellan befintliga", tillade han. "De flesta inser inte, men när de tittar på TV på sin 4K-skärm, skalas 1080p-videosignalen automatiskt upp för att täcka hela skärmen. Detta görs automatiskt av din TV."

Många nuvarande tekniker används för att "gissa" innehållet i de nya pixlarna så att den resulterande bilden ser bra ut, sa Popa.

"För närvarande är de mest använda algoritmerna för bilduppskalning bilinjära och bikubiska metoder, som säkerställer en kontinuerlig övergång mellan intilliggande pixlar, med gradvis skiftande färg, men denna metod resulterar ofta i förlust av skärpa", tillade han."Detta kompenseras delvis genom att en skärpa över den uppskalade bilden."

Det finns många situationer när du behöver en bild med högre upplösning, så uppskalning används för att skapa pixlar mellan befintliga.

Bilduppskalning är avgörande för hur underhållning, media och internet fungerar, sa fotografen Sebastien Coell till Lifewire i en e-postintervju.

"Till exempel, snarare än att behöva ha flera bildstorlekar för en webbsida, som i, en för användning på en telefon, en för en surfplatta," sa han, "om du kan skala upp den 1080p-bilden till 2k eller 4k och den där telefonbilden till en surfplatta och 1080p, du har plötsligt minskat antalet bilder som behövs från 6 ner till 2."

"Du kommer också att spara det filutrymme som behövs från de stora 2k- och 4k-filerna så att din totala fillagringsstorlek som behövs med cirka 70-90 % kommer att minska."

Inte bara för TV

Fotouppskalning kan också öka kvaliteten på foton och kan till och med hjälpa till med medicinsk bildbehandling. Mjukvaruutvecklare säger att uppskalning kan öka bildernas upplösning utan att försämra kvaliteten.

Men Matic Broz, grundaren av fotowebbplatsen Phototutorial, sa till Lifewire i en e-postintervju att de faktiska resultaten beror på vilken programvara som används.

"Nyligen har AI hittat sin väg till bilduppskalning, även om jag inte är imponerad av det än så länge", tillade han.

Broz sa att den bästa uppskalningsmjukvaran han har använt är AI Image Enlarger av Vance AI.

Image
Image

"Även deras 8x bilduppskalare introducerar inget signifikant brus (det är en 64x ökning av upplösningen)," sa han. "Jag förväntar mig att algoritmerna bara kommer att bli bättre under de följande åren, vilket möjliggör ännu större uppskalning."

För stillfotografer sa Broz att det är en öppen fråga om bilduppskalare är nödvändiga.

"Kamerautvecklare förbättrar ständigt upplösningen för kamerasensorer, nu även med 100 MP+ upplösning", tillade han. "Personligen har jag använt 24MP och ungefär 50MP, och jag har aldrig känt behov av större bilder, inte ens för stora utskrifter."

Rekommenderad: