Sobota 17. dubna 2021, svátek má Rudolf
  • schránka
  • Přihlásit Můj účet
  • Sobota 17. dubna 2021 Rudolf

Nový obrazový snímač vás rozpozná od psa a pozná, že nemáte roušku

  9:00
Nový čip IMX500 je první, který kombinuje obrazový snímač se signálovým procesorem, obrazovým procesorem a rychlou pamětí. Přímo v něm tak může běžet zpracování snímaného obrazu pomocí modelů umělé inteligence, a to nevídanou rychlostí – vyhodnotit dokáže 30 snímků za sekundu a díky tomu pozná, co zrovna vidí.

První obrazový snímač s AI zpracováním obrazu. Nalevo samotný čip IMX500, nalevo jeho „package“ podoba IMX501 | foto: Sony, koláž Technet.czProfimedia.cz

Společnost Sony dnes představuje první čip, který do obrazového snímače integruje procesory pro zpracování obrazu pomocí umělé inteligence. Na jeho výstupu tak není jen obrazový signál, ale i metadata odpovídající použitému modelu – například informace, že v záběru je pes na louce, snímaný člověk je mladá žena, lidé v záběru nemají roušky a ochranné brýle, že je v daném prostoru překročen maximální počet návštěvníků nebo že se v továrně do vyhrazeného koridoru dostala překážka. 

Takovéto věci zatím buď zpracovávala další výkonná elektronika v zařízení, ve kterém byl obrazový snímač namontován, nebo cloudový systém, na který byla data z kamery posílána.

Výstup z čipu obsahuje metadata – například popisující obsah obrázku.

Výstup z čipu obsahuje metadata – například popisující obsah obrázku.

Výhodou integrace přímo v čipu je především rychlost – díky společné integraci snímače, procesorů a paměti probíhá analýza obrazu velmi rychle. Podle výrobce zvládne systém vytvořit inference pro 30 snímků za sekundu a v MobileNet V1 dosáhl výsledku 3,1 ms. To vše s údajně s velmi příznivou spotřebou energie. Její přesnější hodnotu, stejně jako bližší informace o výkonu procesorů, nám zástupci firmy neprozradili. Víme ale, že čip má rozlišení 12,3 Mpix, takže na výstupu nabídne 4K obraz, pro AI zpracovní jde ale nižší, FullHD, rozlišení. 

Mimo rekordní rychlosti zpracování může být tato integrace i důležitým bezpečnostním prvkem. Systém může být totiž nastaven tak, že čip žádná obrazová data ven neposílá – pouze metadatový výstup z AI modelu. K záběrům a fotografiím by se tak jen obtížně mohla dostat neautorizovaná třetí strana, protože tato data vůbec neopustí čip a po zpracování obrazovým procesorem jsou z vnitřní paměti zahozena.

První obrazový snímač s AI zpracováním obrazu

Struktura čipu IMX500

Čipy budou v nabídce ve dvou variantách – samotný čip a takzvaný „package“ – tedy včetně podpůrných obvodů a standardizované sběrnice. Vzorky první varianty již míří k integračním partnerům, za cenu 10 000 JPY bez daně (2 364 Kč), druhá varianta by měla přijít o měsíc později za cenu dvojnásobnou. 

Příklady použití

Příklady použití

Společnost Sony bude čip nabízet jednak s vlastními AI modely, na jejichž „katalogu“ se již pracuje, jednak svým zákazníkům pomůže s integrací jejich vlastních modelů podle jejich vlastní potřeby a požadavků.

Příklady použití

Příklady použití

Na otázku, zda se tyto čipy v dohledné době dostanou i do spotřební elektroniky, nám zástupci společnosti během komorní webexové tiskové konference neodpověděli. V kameře pro PlayStation nebo třeba v chytrých telefonech by mohly přinést řadu dnes jen obtížně realizovatelných aplikací.

Začátek nové éry?

Sony je předním výrobcem obrazových čipů, jen na poli chytrých telefonů má dle dostupných údajů lehce přes polovinu trhu. Podle zástupců společnosti nyní nastává zlom, kdy obrazové snímače nebudou především zdrojem obrazu pro jeho opětovné zhlédnutí, ale zejména zdrojem dat. Například autonomní systémy a různé roboty tak budou moci kombinovat ohromné datové zázemí cloudových „backendů“ s vizuálními daty získanými v reálném čase.

Fagradalsfjall online

Sledujte živě aktivní sopku na Islandu. Erupce začala po týdnech otřesů 19. března a zláště pak v noci nabízí fascinující podívanou.

  • Nejčtenější

Fanoušek zřejmě vyfotil tajný dron, o kterém se pouze spekulovalo

O tajném projektu výškového stealth dronu Northrop Grumman RQ-180 se spekuluje řadu let. Až nedávno se ho podařilo...

Už se nemusíte bát pomalého zapínání nebo restartování PC

Jedním z nejvíce frustrujících problémů počítačů s operačním systémem Windows se může stát jeho pomalé spouštění. Od...

Bitevníkem načerno. Nenápadný vojenský dříč dostal zuby přes odpor letců

OV-1 Mohawk se stal během své kariéry platformou pro sofistikované průzkumné systémy, ale osvědčil se i v jiných...

Když má umřít Bambi, veřejnost se bouří. I když si to Bambi zaslouží

Neochota zabíjet roztomile a něžně vypadající zvířátka, i když je to zrovna zapotřebí, se může snadno obrátit proti...

{NADPIS reklamního článku dlouhý přes dva řádky}

{POPISEK reklamního článku, také dlouhý přes dva a možná dokonce až tři řádky, končící na tři tečky...}

Poslední bojový letoun armády USA byl něco mezi sporťákem a stíhačkou

Firma Grumman je známá především námořními letouny. Mezi typy, které jsou neprávem na okraji zájmu, patří nenápadný...

Bláznivý voyeur Tichý. Žil jako bezdomovec, dnes jeho fotky stojí statisíce

Premium V jeho domě se fotky válely po zemi, padal na ně prach i bláto z bot. Na téměř každé z nich byla skvrna od kávy nebo...

Za fotky nehody Philipa nabízeli obří sumu. Neprodal jsem, říká exšéf Kladrub

Premium Když v roce 1996 přijela do Čech britská královna Alžběta II., snad nikdo nemohl velkému milovníkovi koní a jejich...

Svačiny jsou zbytečné. Stačí jíst dvakrát denně, vysvětluje profesor Anděl

Premium Nadváhu má v Česku až 44 procent mužů a 31 procent žen. A obezitu dalších 20 procent mužů a 18 procent žen. Statisíce z...

  • Další z rubriky

Málo místa na stole? Srovnali jsme tři miniaturní počítače

Můžete je pověsit za monitor, nebo nechat stát na stole. Mohou sloužit jako domácí počítač nebo jako mediacentrum u...

Je na co se těšit. Vyzkoušeli jsme notebook Asus s novinkami AMD a Nvidia

Exkluzivně AMD tento týden představilo nové mobilní procesory, Nvidia nové mobilní grafické čipy. Nám se dostal do rukou...

Nejlevnější grafika RTX 3060 potěší náročné hráče s nízkým rozpočtem

Na představení RTX 3060 čekala velká část herního světa. Má dost výkonu na nové herní tituly s vysokými detaily a ray...

Práce a studium z domova vedly k nejvyššímu nárůstu prodejů PC za deset let

Možná i vy jste v době největší krize narazili na nedostatek některých druhů počítačů nebo jejich příslušenství. Přesun...

Princ Harry se vrátil do Británie na pohřeb dědečka, karanténu nestihne

Britský princ Harry přiletěl z Los Angeles na pohřeb svého dědečka prince Philipa. Na letišti Heathrow ho v neděli po...

Je to podraz, říká organizátor koncertů Cesta ze tmy. S projektem končí

Už za týden měl prostory pražské Lucerny rozeznít první koncert ze série Cesta ze tmy. Ministr zdravotnictví Petr...

Pohřbít psa na zahradě? Splnit podmínky vyhlášky je téměř nemožné

Chov zvířecího mazlíčka nepřináší jen radosti. Každý bude muset jednou řešit otázku kam s ním, až život jeho čtyřnohého...

U takové svi.. nemusím být inteligentní. Ve Výměně se vyhrožovalo rozvodem

V jedné rodině pohoda, ve druhé napětí a tichá domácnost. Pavlovi s vyměněnou manželkou došlo, že doma může být dobře....

Karel neskrýval, že chce syna, prozradila těhotná Lilia Khousnoutdinova

Lilia Khousnoutdinova (32) a Karel Janeček (47) se za pár týdnů dočkají miminka. Publicistka, návrhářka a cestovatelka...