Středa 17. srpna 2022, svátek má Petra
  • schránka
  • Přihlásit Můj účet
  • Středa 17. srpna 2022 Petra

Nový obrazový snímač vás rozpozná od psa a pozná, že nemáte roušku

  9:00
Nový čip IMX500 je první, který kombinuje obrazový snímač se signálovým procesorem, obrazovým procesorem a rychlou pamětí. Přímo v něm tak může běžet zpracování snímaného obrazu pomocí modelů umělé inteligence, a to nevídanou rychlostí – vyhodnotit dokáže 30 snímků za sekundu a díky tomu pozná, co zrovna vidí.

První obrazový snímač s AI zpracováním obrazu. Nalevo samotný čip IMX500, nalevo jeho „package“ podoba IMX501 | foto: Sony, koláž Technet.czProfimedia.cz

Společnost Sony dnes představuje první čip, který do obrazového snímače integruje procesory pro zpracování obrazu pomocí umělé inteligence. Na jeho výstupu tak není jen obrazový signál, ale i metadata odpovídající použitému modelu – například informace, že v záběru je pes na louce, snímaný člověk je mladá žena, lidé v záběru nemají roušky a ochranné brýle, že je v daném prostoru překročen maximální počet návštěvníků nebo že se v továrně do vyhrazeného koridoru dostala překážka. 

Takovéto věci zatím buď zpracovávala další výkonná elektronika v zařízení, ve kterém byl obrazový snímač namontován, nebo cloudový systém, na který byla data z kamery posílána.

Výstup z čipu obsahuje metadata – například popisující obsah obrázku.

Výhodou integrace přímo v čipu je především rychlost – díky společné integraci snímače, procesorů a paměti probíhá analýza obrazu velmi rychle. Podle výrobce zvládne systém vytvořit inference pro 30 snímků za sekundu a v MobileNet V1 dosáhl výsledku 3,1 ms. To vše s údajně s velmi příznivou spotřebou energie. Její přesnější hodnotu, stejně jako bližší informace o výkonu procesorů, nám zástupci firmy neprozradili. Víme ale, že čip má rozlišení 12,3 Mpix, takže na výstupu nabídne 4K obraz, pro AI zpracovní jde ale nižší, FullHD, rozlišení. 

Mimo rekordní rychlosti zpracování může být tato integrace i důležitým bezpečnostním prvkem. Systém může být totiž nastaven tak, že čip žádná obrazová data ven neposílá – pouze metadatový výstup z AI modelu. K záběrům a fotografiím by se tak jen obtížně mohla dostat neautorizovaná třetí strana, protože tato data vůbec neopustí čip a po zpracování obrazovým procesorem jsou z vnitřní paměti zahozena.

Struktura čipu IMX500

Čipy budou v nabídce ve dvou variantách – samotný čip a takzvaný „package“ – tedy včetně podpůrných obvodů a standardizované sběrnice. Vzorky první varianty již míří k integračním partnerům, za cenu 10 000 JPY bez daně (2 364 Kč), druhá varianta by měla přijít o měsíc později za cenu dvojnásobnou. 

Příklady použití

Společnost Sony bude čip nabízet jednak s vlastními AI modely, na jejichž „katalogu“ se již pracuje, jednak svým zákazníkům pomůže s integrací jejich vlastních modelů podle jejich vlastní potřeby a požadavků.

Příklady použití

Na otázku, zda se tyto čipy v dohledné době dostanou i do spotřební elektroniky, nám zástupci společnosti během komorní webexové tiskové konference neodpověděli. V kameře pro PlayStation nebo třeba v chytrých telefonech by mohly přinést řadu dnes jen obtížně realizovatelných aplikací.

Začátek nové éry?

Sony je předním výrobcem obrazových čipů, jen na poli chytrých telefonů má dle dostupných údajů lehce přes polovinu trhu. Podle zástupců společnosti nyní nastává zlom, kdy obrazové snímače nebudou především zdrojem obrazu pro jeho opětovné zhlédnutí, ale zejména zdrojem dat. Například autonomní systémy a různé roboty tak budou moci kombinovat ohromné datové zázemí cloudových „backendů“ s vizuálními daty získanými v reálném čase.

Gamescom 2022

Letošní veletrh her Gamescom 2022 opět pořádá na výstavišti v Kolíně nad Rýnem od 24. do 28. srpna. Slavnostní zahájení proběhne večer předem na Opening Night Live 2022 show 23. srpna.

  • Nejčtenější

KOMENTÁŘ: Obrana kupuje bezpilotního dědečka. Zda umí bojovat, nikdo neví

Po několika týdnech spekulací o tom, jaké bojové drony česká armáda nakoupí, ministerstvo obrany zveřejnilo, že půjde o...

ANALÝZA: Tchaj-wan v ohrožení. Neptejme se zda, ale kdy bude válka

Premium Uprostřed obav o budoucnost míru ve světě, na pozadí války probíhající mezi dvěma největšími armádami Evropy...

{NADPIS reklamního článku dlouhý přes dva řádky}

{POPISEK reklamního článku, také dlouhý přes dva a možná dokonce až tři řádky, končící na tři tečky...}

Armáda by mohla dostat německé obrněnce Marder a svá BVP-2 poslat Ukrajině

Válka na Ukrajině rozpoutala v Evropě velké pohyby zbraní a vojenské techniky. Některé země své starší kusy posílají na...

Tatry na Technetu: letiště Poprad je vysoko. První linku mělo v roce 1943

Seriál U Popradu vzniklo nejvýše položené československé dopravní letiště, jeho nadmořská výška je 718 metrů. Když se v roce...

{NADPIS reklamního článku dlouhý přes dva řádky}

{POPISEK reklamního článku, také dlouhý přes dva a možná dokonce až tři řádky, končící na tři tečky...}

Tatry na Technetu: trojčata ze Smíchova pozvedla úroveň cestování na TEŽ

Seriál Z trakčních vozidel, která se za celou dlouhou dosavadní historii tatranské elektrické železnice na dané trati...

Porucha imunity je první známka, že je v našem životě něco špatně, říká lékařka

Premium Lidí s poruchami imunity přibývá. Příčinou je často špatný životní styl, což vede k vážným nemocem, třeba k rakovině....

Bude hůř. Považuji za férové sdělit to divákům předem, přiznal šéf ČT

Premium Inflace, energie, válka na Ukrajině a k tomu nízké koncesionářské poplatky. Současná situace postihla i Českou...

První díl rozhovoru s Shopaholicadel: Práci neseženu, každý den můžu umřít!

Premium Rozhovorům se dlouho úspěšně vyhýbala, nyní ale udělala výjimku a Expresu poskytla exkluzivní sondu do své duše....

  • Další z rubriky

Toto se Applu fakt povedlo. Udivující výkon v tichém chladném kabátku

Vyzkoušeli jsme počítač Apple Mac Studio M1 MAX s monitorem Display Studio. Zatímco o skvělém počítači můžeme říci, že...

Acer v herním notebooku oprášil mrtvou technologii, nejspíš přišel její čas

Deset let je ve vývoji displejů, nanotechnologií a procesorů dlouhá doba. Zdá se proto, že dřív neúspěšné tažení 3D...

Nový Boeing 777-9 má skládací křídla a velký problém s FAA

Na aerosalonu ve Farnborough měl evropskou premiéru nový letoun Boeing 777-9. Podle původních plánů měl již dva roky...

Apple připlácl mobil k notebooku, aby ukázal člověka i jeho stůl

Na letošní vývojářské konferenci se společnost Apple rozhodla ukázat nejen novinky ve svých operačních systémech, ale...

Bude hůř. Považuji za férové sdělit to divákům předem, přiznal šéf ČT

Premium Inflace, energie, válka na Ukrajině a k tomu nízké koncesionářské poplatky. Současná situace postihla i Českou...

K vulgárnímu nápisu musela tatéra přemluvit sexem. Teď ho chce pryč

Její nápad se v salónech nikomu nelíbil. Žádný tatér s ním nechtěl mít nic společného, tak moc nápis svou nositelku...

Herečka Anne Heche zemřela, nepřežila následky zranění po autonehodě

Třiapadesátiletá herečka Anne Heche zemřela. Uvedla to její přítelkyně Nancy Davisová. Herečka skončila v nemocnici v...

Stav herečky Anne Heche je téměř beznadějný. Má vážně poškozený mozek

Herečka Anne Heche (53) s největší pravděpodobností nepřežije nehodu, při níž autem narazila do dvoupodlažní budovy v...

Rýn během pátku přestane být splavný. Ekonomické dopady pocítí celá Evropa

Hladina řeky Rýn v německé oblasti Rheingau podle úřadů v pátek klesne na kritickou úroveň, na klíčovém místě naměří už...