Hva er et AI-kamera, og hvordan fungerer AI-fotoredigering?

Innholdsfortegnelse:

Anonim

Kunstig intelligens (AI) er overalt, og hvis du ennå ikke har en AI-drevet smarttelefon, vil du sannsynligvis snart gjøre det. Selv telefonens programvare bruker AI for å ta avgjørelser på dine vegne. Adobes Photoshop-kamera, nettopp lansert, bruker AI for å identifisere objekter og scener i bildene dine og foreslå 'linser' (digitale effekter) for komisk og kreativ innvirkning.

Er alt bare markedsføringshubris, eller er AI i en smarttelefon - og spesielt i kameraet - noe vi alle bør strebe etter å ha? Med begrepet AI i økende grad brukt, ikke bare i kameratelefoner, men i alle slags kameraer, lønner det seg å vite hva AI faktisk gjør for bildene dine.

AI har uskarpt grensene mellom bildeopptak, bildeforbedring og bildemanipulering. Den brukes til fotoredigering, for å smelte, forbedre og 'forstørre' virkeligheten, for å gjøre mer intelligente objektvalg, for å matche prosesseringsparametere til motivet og for å hjelpe deg med å finne bildene automatisk basert på hva som er i bildene dine i stedet for manuelle nøkkelord og beskrivelser. Den ser allerede på hva du fotograferer og tar egne beslutninger om hvordan du skal håndtere det.

Velkommen til den modige nye verdenen av AI-kameraer.

Hva er AI?

AI er en datavitenskapssjanger som undersøker om vi kan lære en datamaskin å tenke eller i det minste lære. Det er vanligvis delt inn i delmengder av teknologi som prøver å etterligne hva mennesker gjør, for eksempel talegjenkjenning, tale-til-tekst-diktering, bildegjenkjenning og ansiktsskanning, datasyn og maskinlæring.

Det er en hel klynge med moteord rundt dette emnet. 'AI', 'dyp læring', 'maskinlæring' og 'nøytrale nettverk' er flettet sammen i denne nye teknologigrenen.

Hva har det med kameraer å gjøre? Beregningsfotografering og tidsbesparende fotoredigering, det er det. Og stemmeaktivering.

Stemmeaktiverte kameraer

Evnen til en datamaskin til å forstå menneskelig tale er en form for AI, og den har sneket seg inn på kameraer de siste årene.

Smarttelefoner har tilbudt Google Now og Siri i noen år, mens Alexa går inn i hjemmene via Amazon Echo-høyttalerne. Actionkameraer har hoppet på den vognen de siste årene, med GoPro-actionkameraene og til og med dash-kameraer som kan utføre handlinger når du uttaler enkle setninger som 'start video', 'ta bilde' og så videre.

Alt er fornuftig, spesielt for actionkameraer der håndfri betjening gjør dem mye enklere å bruke, men er det virkelig AI? Teknisk sett er det det, men inntil nylig ble stemmeaktiverte dings bare referert til som 'smarte'. Noen lar deg nå si ganske spesifikke ting som 'ta sakte film' eller 'ta bilde med lite lys', men et AI-kamera trenger å gjøre litt mer enn det som er verdig navnet.

AI-programvare

AI handler om nye typer programvare, i utgangspunktet for å kompensere for smarttelefoners mangel på zoomlinser. "Programvare blir mer og mer viktig for smarttelefoner fordi de har fysisk mangel på optikk, så vi har sett fremveksten av beregningsfotografering som prøver å gjenskape en optisk zoom," sier bildeanalytiker Arun Gill, senior markedsanalytiker i Futuresource Consulting. . "Topp-smarttelefoner har i økende grad dobbeltkameraer, men Google Pixel 3 bruker et enkelt kameralins med beregningsfotografering for å replikere en optisk zoom og legge til forskjellige effekter."

Siden Pixel 3 har flerkameramatriser og beregningsbilder blitt slått sammen for å produsere en hybridteknologi som replikerer mange av dybdeskarpheten og linseffekter du får fra større kameraer. En kameratelefon er ikke lenger bare et kamera. Det er en kalkulerende, analyserende, "tenkende" enhet som ikke bare fanger scenen som den er, men hvordan den tror du vil at den skal være, eller hvordan den mener at du burde ønske at den skal være …

AI kan være som å ha en kunnskapsfull assistent. Etter en stund kan du begynne å lure på hvem som faktisk har ansvaret.

Verden er ikke nødvendigvis klar for de fulle implikasjonene av AI-kameraer. Google brukte AI på sitt bærbare kamera fra Google Clips, som brukte AI til å fange og beholde bare spesielt minneverdige øyeblikk. Den brukte en algoritme som forsto det grunnleggende om fotografering, slik at den ikke kastet bort tid på å behandle bilder som definitivt ikke ville gjøre det endelige kuttet av et høydepunkt. For eksempel slettet den automatisk fotografier med en finger i rammen og bilder som ikke var i fokus, og favoriserte de som overholder det generelle tredjedelsregelen om hvordan man rammer inn et bilde.

Skumle og kontrollerende? Noen trodde det. Under alle omstendigheter trakk Google kameraet i 2022-2023. Spørsmålet er ikke om AI er kraftig nok til å gjøre de tingene vi ønsker, men om vi ennå er klare til å levere så mye strøm til en maskin … eller til selskapet som eier og driver AI-algoritmene bak.

Hva er beregningsfotografering?

Beregningsfotografering er en digital bildebehandlingsteknikk som bruker algoritmer for å erstatte optiske prosesser, og den søker å forbedre bildekvaliteten ved å bruke maskinsyn for å identifisere innholdet i et bilde.

"Det handler om å ta studioeffekter som du oppnår med Lightroom og Photoshop og gjøre dem tilgjengelige for folk ved å klikke på en knapp," sier Simon Fitzpatrick, Senior Director, Product Management i FotoNation, som gir mye av beregningsteknologien til kameramerkene.

"Så du er i stand til å glatte ut huden og bli kvitt flekker, men ikke bare ved å gjøre den uskarphet - du får også tekstur." Tidligere har teknologien bak 'glatt hud' og 'skjønnhetsmodus' i hovedsak handlet om å uskarpe bildet for å skjule mangler. "Nå handler det om å skape troverdige utseende, og AI spiller en nøkkelrolle i det," sier Fitzpatrick. "For eksempel bruker vi AI for å trene algoritmer om funksjonene i ansiktene til folk."

Så langt tilbake som LG V30S ThinQ-telefonen har LG brukt AI til bildebehandling. Det lar brukeren velge et profesjonelt bilde på Graphy-appen og bruke samme hvitbalanse, lukkerhastighet, blenderåpning og ISO. LG introduserte også Vision A, en bildegjenkjenningsmotor som bruker et nevralt nettverk trent på 100 millioner bilder, som anbefaler hvordan du stiller inn kameraet. Den oppdager til og med refleksjoner i bildet, skuddvinkelen og mengden tilgjengelig lys.

Dybdesensorer og uskarpe bakgrunner

De siste årene har vi sett mange telefonlinsekameraer med flere linser bruker to eller flere linser for å produsere estetisk tiltalende bilder som har en uskarp bakgrunn rundt hovedmotivet. Folk (og derfor Instagram) elsker uskarpe bakgrunner, men i stedet for å bruke kameraer med to objektiv eller plukke opp en speilreflekskamera og manuelt manipulere dybdeskarpheten, kan AI nå gjøre det for deg.

Vanligvis kalt 'bokeh' -effekten (japansk for uskarphet), identifiserer maskinlæring motivet og slør resten av bildet. "Vi kan nå simulere bokeh ved hjelp av AI-baserte algoritmer som segmenterer mennesker fra forgrunnen og bakgrunnen, slik at vi kan skape en effekt som begynner å ligne veldig på et portrett tatt i et studio," sier Fitzpatrick. De nyeste smarttelefonene lar deg gjøre dette for bilder tatt med enten det bakre eller det fremre (selfie) kameraet.

“Folk omtaler det som bokeh, men du får ikke den sanne uskarpheten du får med en DSLR der du kan endre dybden; med en telefon kan du bare uskarpe bakgrunnen, sier Gill. "Men et lite og økende antall fotografer er veldig imponert over det og bruker en iPhone X til hverdagsfotografering, og bare når de er på profesjonelle jobber, får de ut sin speilreflekskamera."

AI-kameraer kan automatisk blande HDR-bilder i sterkt lys, bytte til en fotograferingsmodus for flere bilder i svakt lys og bruke magien ved beregningsbilder for å skape en trinnløs zoomeffekt med to eller flere kameramoduler.

Hva med speilreflekskameraer og andre 'riktige' kameraer?

Automatisk fjerning av røde øyne har vært i DSLR-kameraer i årevis, det samme har ansiktsgjenkjenning og i det siste til og med smilregistrering, hvorved en selfie blir tatt automatisk når motivet knekker. Alt dette er AI. Vil slike som Nikon og Canon noen gang bruke mer avansert AI for sine flaggskip DSLR-er? Tross alt tok det mange år for WiFi og Bluetooth å vises på DSLR-er.

Mens vi venter, vil et Kickstarter-finansiert 'smart camera assistant' tilbehør som heter Arsenal fylle gapet. "Arsenal er et tilbehør som tillater trådløs kontroll av et kamera med utskiftbart objektiv (f.eks. En DSLR) fra en mobil enhet, med maskinlæringsalgoritmer som brukes til å ta det perfekte bildet," sier Gill. "Det den gjør er å sammenligne den nåværende scenen med tusenvis av tidligere bilder, ved å bruke bildegjenkjenning for å gjenkjenne et bestemt motiv og bruke de riktige innstillingene, for eksempel en rask lukkerhastighet hvis den gjenkjenner dyrelivet."

Canon har i mellomtiden støttet seg kraftig på AI-teknologi for det nyeste autofokussystemet i EOS-1D X Mark III. Eller, for å være mer presis, "dyp læring". Kompleksiteten i algoritmene er den samme (systemet er trent ved hjelp av profesjonelle fotografier), men dyp læring er sluttresultatet … kunstig intelligens er evnen for en maskin til å fortsette å lære seg selv.

Det kan imidlertid være vanskelig å skille ekte AI fra sofistikert automatisering. I mange år har kompakte kameraprodusenter tilbudt forskjellige motivorienterte scenemodi som kan velges automatisk av kameraet. Er det 'intelligens', eller rett og slett en litt mer avansert implementering av eksponeringsmåling, motivbevegelse og fokusavstand? Multimønstersmålesystemer bruker vanligvis en kompleks måling av lysfordeling basert på tusenvis av virkelige bilder og har brukt en "dyp læringsprosess" før begrepet ble oppfunnet.

Hvem er AI-fotografering for?

Alle sammen. For det første handler det om å demokratisere fotografering. "Tidligere var fotografering domenet til de som har ekspertisen til å bruke en speilreflekskamera for å lage forskjellige typer bilder, og det AI har begynt å gjøre er å gjøre effektene og mulighetene til mer avansert fotografering tilgjengelig for flere mennesker," sier Fitzpatrick. .

Så betyr dette at Adobes Photoshop og Lightroom snart vil være avviklet? Absolutt ikke; AI er en komplementær teknologi, og gjør allerede fotoredigering mye mer automatisert. En av FotoNations partnere er Athen Tech, hvis ‘Perfectly Clear’ AI-baserte teknologi utfører automatiske batchkorreksjoner som etterligner det menneskelige øye. Et plugin for Lightroom, det er spesielt rettet mot å redusere hvor lenge fotografer sitter foran datamaskiner og redigerer manuelt. "Profesjonelle fotografer tjener penger når de er ute og tar bilder, ikke når de behandler bilder," sier Fitzpatrick. "AI gjør profesjonelle kreative effekter mer tilgjengelige for smarttelefonbrukere, og det hjelper profesjonelle fotografer med å maksimere deres evne til å tjene til livets opphold."

AI blir raskt et overbruk av begreper i fotograferingsverdenen. Akkurat nå gjelder det i stor grad smarttelefonkameraer, men de utrolige algoritmene og det rene nivået av automatisert programvare som teknologien tillater, vil snart vise seg å være uimotståelig for de fleste av oss. Det er kanskje ikke på tide å kaste ut DSLR ennå, men AI ser ut til å endre hvordan vi tar bilder.

Ikke bare det, men det kan snart ta ansvar for redigering og kurering av våre eksisterende fotografibiblioteker. Den prosessen har allerede startet. Lightroom CC bruker Adobes serverbaserte Sensei objektgjenkjenningssystem for å identifisere bilder etter emne, slik at du ikke lenger trenger å bruke timer på å legge til søkeord manuelt. AI kan være en overdreven betegnelse og ofte en forkortelse for det som ikke er noe mer enn den nyeste, største avanserte programvaren, men AI lover å gjøre noe utrolig for fotografer; det vil frigjøre mer av tiden din, slik at du kan ta flere og bedre bilder.

Hvorfor har noen telefoner to kameraer på den ene siden? Dual-kamera-design forklart

Skylum Software er en av lederne innen AI-drevet fotoredigeringsprogramvare. Det har introdusert AI Sky Replacement i Luminar for å eliminere all manuell maskering som trengs for å gjøre dette manuelt, AI Augmented Skies for å legge til skyer, planeter, lyn og mer til bildene dine, AI-portrettforbedringsverktøy som autonomt kan identifisere menneskelige funksjoner og AI-struktur å legge til definisjon bare i de områdene av et bilde der det er passende.

Bruken av utvidet virkelighet i fotografering kan likevel vise seg å være kontroversiell. Helt siden oppfinnelsen av bildeditorer har det vært mulig å forvride, vri og 'finne opp' virkeligheten, men AI lover å gjøre dette så enkelt og så overbevisende at det ikke krever noen spesiell dyktighet (eller samvittighet) å gjøre.

• De beste kameratelefonene du kan kjøpe i dag
• Den beste bilderedigeringsprogramvaren akkurat nå
• Hvordan laste ned Photoshop
• Hvordan laste ned Lightroom