Apple'i metasensorid: valguse painutamine nutikaameras

Apple'i metasensorid: valguse painutamine nutikaameras

Kristel Õun Kristel Õun . Kommentaarid

8 Minutit

Sissejuhatus

Võib juhtuda, et peagi kannad taskus kaamerat, mis ei sõltu enam virnast väikestest klaasist läätsedest, vaid painutab valgust läbi täpselt kujundatud optilise kihina, mida nimetatakse metasurface’iks. Apple uurib vaikselt pildisensorite ümberkujundamist, kus traditsioonilised mikroläätsed asendatakse sellise inseneripõhise nanostruktuurse pinnakihiga.

Mis on metasurface ja kuidas see töötab?

Kujuta sensorit kolmekihilisena: alumine kiht on pikslikiht, keskmine kiht on värvifilter (näiteks Bayeri filter) ja ülemine kiht on õhuke metasurface. See metasurface ei ole lääts tavapärases mõttes; see on nanostruktuuride vaip, mis suunab eri lainepikkusega valguse very täpselt konkreetsetele pikslitele. Praktiliselt tähendab see, et punane, roheline ja sinine valgus võib olla selektiivselt edastatud kuigi nende sisenditeed võivad kattuda.

Nanostruktuuride roll

Metasurface koosneb miljarditest allmõõtmelistest elementidest—nanopostidest, nanōsõlmedest või gravüüridest—mis muundavad valguse faasi, amplituudi ja nurga nii, et iga lainepikkus suunatakse soovitud suunas. Need struktuurid toimivad optilise mootorina, mis korreleerib valguse lainepikkuse ja suuna konkreetsete pikslikohtadega anduris.

Valguse selektiivne juhtimine

Tavapärased mikroläätsed lihtsalt koguvad ja fokuseerivad valgust pikslitele; metasurface seevastu võib „otsustada”, kuhu iga lainepikkuse footonid minna. See annab tootjale võimaluse reguleerida pikslite tundlikkust värvide lõikes—nt anda rohkem pinda punastele ja sinistele pikslitele või kitsendada roheliste piksli alasid, et säilitada detaili.

Miks see läheb oluliseimaks fotograafias?

See lähenemine lubab eredamaid vähese valguse tingimustes tehtud fotosid, tõetruumat värvitasakaalu ja kiirendatud faasituvastusel põhinevat autofookust ilma suuremate kaameratükkideta.

Vähese valguse jõudlus ja värvitundlikkus

Kuna metasurface võimaldab omistada pikslitele erineva „kinnisvara” hulga, saab näiteks fotonivaesemad punased ja sinised pikslid kujundada nii, et nad koguvad rohkem valgust. See parandab kaamera tundlikkust (ISO) ja SNR-i (signaali-müra suhet) punase ja sinise kanali puhul, vähendades vajadust agressiivse tarkvaralise müraeemalduse järele, mis kipub detaili pehmendama.

Faasi-tuvastuse autofookus (PDAF) metasurfacel

Faasi-tuvastuse autofookus võib olla folditud (lisatud) otse metasurface kihi funktsionaalsusesse. See tähendab, et fookuseandmed ja eraldusvõime säilitatakse ilma, et oleks vaja eraldi suuremaid moduleid või pikslite tihendamist. Tulemuseks on kiiremad ja usaldusväärsemad teravustamised ka hämarates stseenides, ilma et see nõuaks füüsiliselt paksemaid kaamera mooduleid.

Praktilised eelised ja tootedisain

Peale pildikvaliteedi parandamise avavad metasurfaces võimaluse elegantsemate mitmekaameralahenduste ja õhemate seadmete järele. See mitmekülgsus on oluline Apple’i tootesarjas—alates iPhone’ist ja iPadist kuni Macideni ja kantavate seadmeteni—sest firma saab tõsta pildistamise võimekust, hoides samal ajal seadmete õhukust ja kaasaskantavust.

Mitme kaamera paigutuse eelised

Kui optiline element ei nõua enam ruumikat sfäärilist klaasist läätsede virna, saab kaamerate mooduleid paigutada tihedamalt ja väiksemate väljaulatuvate osa(de)ga. See tähendab, et mitme kaamera konfiguratsioonid—ultralaia, peamise ja telefoto objektiivi kombinatsioonid—võivad säilitada või parandada funktsionaalsust ilma tavapärase „kambrikuhja” paksuseta.

Disaini ja tootmise mõjud

Õhemad moodulid tähendavad vähem kompromisse seadmete korpuse kujundamisel: ekraani kõverused, aku suurus ja mehaanilised komponendid võivad jääda vähem mõjutatuks. Samal ajal nõuab metasurface integreerimine pikslitasemesse tihedat koostööd sensoritootjate ja kiirituse töötlejatega, mis mõjutab tarneahelat ja tootmiskulusid.

Tehnilised üksikasjad ja väljakutsed

Metasurface’i sensori edukas rakendamine nõuab mitmete tehniliste aspektide lahendamist. Siin on mõned peamised valdkonnad, kus insenerid ja teadlased peavad tegutsema.

Tootmismeetodid ja nanomaterjalid

Nanostruktuuride täpseks reprodutseerimiseks on kasutusel meetodid nagu elektronkiirgusega kirjutamine (e-beam lithography), nanoimprint- ehk stamptöötlus ja fotolitograafia täiustatud variandid. Iga meetod kannab erinevat kompromissi hinna, kiiruse ja täpsuse vahel. E-beam on ülitäpne, kuid aeglane ja kallis masstootmiseks; nanoimprint võib olla kiirem ja soodsam, kuid nõuab väga stabiilset malle ja protsessi täpsust.

Materjalivalik ja vastupidavus

Materjalid peavad säilitama oma optilised omadused erinevates temperatuurides ja niiskustingimustes ning taluma mobiilseadme tootmisprotsessi. Lisaks tuleb arvestada kulumise ja kriimustuste vastu kaitsmisega, kui metasurface on sensorile väga lähedal.

Värvifilteri ja pikslistruktuuri koordineerimine

Metasurface peab töötama harmoonias olemasolevate värvifiltrite (nt Bayer või uued per-pixel filter-struktuurid) ja pikslite arhitektuuriga. See tähendab täpset kalibreerimist, et vältida värvelekkeid (crosstalk) ning minimeerida kromaatilisi aberratsioone, mis võivad tekkida lainepikkuse-spetsiifilisest juhtimisest.

Arvutuslik pilditöötlus ja kalibreerimine

Kuna metasurface muudab sensori looduslikku väljundit, peab pilditöötluse torujuhe (ISP) ja masinõppe mudelid olema ümber treenitud ja kohandatud. Eelistatud tulemus ei ole täielik umbisikuline tarkvaraline parandamine, vaid pigem õige tasakaal optika ja arvutusliku pilditöötluse vahel, mis võimaldab saavutada loomulikumat renderdust ja vähem artefakte.

Võrdlus traditsiooniliste mikroläätsedega

Tavalised mikroläätsed on hästi mõistetud, madalama tootmiskuluga ja neid on lihtsam integreerida. Ent neil on piirid—mikroläätsed ei saa individuaalselt reguleerida lainepikkuste juhtimist nii täpselt nagu metasurface. Seetõttu on metasurface potentsiaalne hüpe kujutise tundlikkuses ja värvitruuduses.

Eelised:

  • Võimalus eraldi optiliselt juhtida erinevaid värve ja lainepikkusi
  • Parem jõudlus hämaras ja väiksema müra vajadus
  • Faasi-põhise autofookuse integreerimise võimalus sensoritasandil
  • Õhemad ja kompaktsemad kaameramoodulid

Piirangud:

  • Raske ja kulukas nanofabrikeerimine masstootmiseks
  • Võimalik vajadus uue tüüpi kalibreerimise ja ISP-tarkvara järele
  • Materjalide ning mehaanilise kaitse küsimused

Mõju Apple’i toodete ja turustrateegia jaoks

Apple’i liikumine metasurface-sensorite suunas näitab soovi ületada tänapäevaste mobiilkaamerate füüsilisi piiranguid. Kui ettevõte suudab need tehnilised väljakutsed majandlikult lahendada ja integreerida süsteemselt oma riistvara- ning tarkvaraplatformi, võib see anda järgnevale Apple’i kaamerate generatsioonile märkimisväärse konkurentsieelise.

Toode- ja tootesarja üldisem kasu

Paranenud sensorid võivad olla asendamatud liikudes: iPhone’i peamised kaamerad, iPadide visuaalsed süsteemid, palju paremad Mac-i väliskaamerad ja lõpuks ka kantavad seadmed, kus ruumi kokkuhoid on kriitiline. See aitab Apple’il hoida disaini õhukesena ja esteetiliselt ühtsena, säilitades või parandades pildikvaliteeti.

Patendid, uurimus ja arendus

Patendikirjed ja teadusuuringud, mis viitavad metasurface tehnoloogiale pildisensorites, on olnud järjekindlalt esil. Apple’il on ajalooliselt olnud strateegiline lähenemine vähem nähtavate, kuid fundamentaalsete riistvaraliste täiustuste suunas—see oleks järjekordne samm sama suunas, kus optiline innovatsioon liigub suuresti mehaanilisest disainist nanometreid täpsustavasse inseneritöösse.

Arvutusliku pilditöötluse roll ja tulevik

Kuigi metasurface parandab sensori loomulikku väljundit, ei tähenda see tarkvara lõpu. Vastupidi: see muudab suhte optika ja arvutusliku pilditöötluse vahel. Kui sensori värviedastus ja valguse suunamine on algtasemel täpsem, saab tarkvara teha vähem „hädaparandusi” ning keskenduda kõrgema taseme pildiparandustele, näiteks dünaamilise ulatuse, teravuse ja stabiilsuse optimeerimisele.

Masinõpe ja kalibreerimisandmed

Masinõppele tuginevad pildiprotsessid vajavad uusi treeningandmestikke, mis kajastavad metasurface’iga tehtud sensoriväljundeid. Kohandatud mudelid suudavad ära tunda ja korrigeerida spetsiifilisi artefakte, mis võivad metasurface’i puhul tekkida, ning samal ajal hoida värvide ja detaili ehtsust.

Turukohad ja ajakava

Kuigi tehnoloogia potentsiaal on suur, on ka adopteerimistsükkel. Esimesed kommertsilised sammud võivad tulla piltide ja sensorite testversioonide kujul, patenteeritud demoseadmetes või piiratud vabastustes. Masstootmine metasurface’idega sõltub sellest, kuidas tootmiskulud langevad ja kas tehnoloogia annab korduvaid eeliseid reaalses kasutuses.

Mis võib juhtuda lähiaastatel

Apple võib esmalt katsetada metasurface’i spetsiifilistes mudelites või konfiguratsioonides, kus disaini- ja jõudlusnõuded õigustavad kõrgemaid arendus- ja tootmiskulusid. Järgnev laiem kasutuselevõtt sõltub testtulemustest, tarbitrendist ning sellest, kas tarbijad märkavad ja hindavad pildikvaliteedi paranemist.

Järeldus

Kuigi see on alles algusfaas, annab Apple’i suund metasurface-sensorite poole märku pingestamuvelt, mille eesmärk on ületada mobiilikaamerate praegused füüsilised piirangud. Kui Apple selle teostab, võib järgmine Apple’i kaamerate põlvkond tunda end nagu uus reegelraamat nutitelefonifotograafias. Jälgi riistvara arengut—sest viis, kuidas valgust suunatakse, omab tähtsust rohkem kui kunagi varem.

Metasurface’i tehnoloogia integreerimine sensoritesse on samm, mis ühendab optika, nanotehnoloogia ja arvutusliku pilditöötluse uuel viisil. See ei muuda üksnes seda, kuidas fotod välja näevad, vaid ka seda, kus ja kuidas olulised pilditöötlusotsused tehakse—liikudes tarkvarast tagasi optikasse, samal ajal säilitades tarkvarapõhise täpsustuse ja paindlikkuse. Selline sümbioos võib viia mobiilse fotograafia uue ajastuni.

Allikas: smarti

"Minu huvi tehnoloogia vastu algas lapsepõlvest. Tänapäeval püüan kirjutada nii, et ka keerulised teemad oleksid kõigile arusaadavad."

Jäta kommentaar

Kommentaarid