Tento čip je navržen pro provoz neuronových sítí a pro zpracování zraku s příkonem pod 1 mW, a přitom provádí vysoce přesné zpracování přímo v zařízení, včetně kombinace více senzorů, rozpoznávání hlasových příkazů a detekce neoprávněné manipulace.
Jak uvádí server Hackster, pro trénink tohoto procesoru na hru DOOM byla použita odlehčená verze hry nazvaná VizDoom. Poté bylo použito učení s posilováním k trénování neuronové sítě skládající se z několika vrstev, přičemž první sada byla zodpovědná za pochopení toho, co síť vidí, a poslední za provádění akcí v reakci na to. Celkem bylo zapotřebí 600 000 parametrů, což je významné, protože NDP200 má pouze 640 kilobajtů vestavěné paměti pro parametry neuronové sítě.
„Kombinace snímače NDP200 společnosti Syntiant a obrazového snímače PixArt s velmi nízkou spotřebou energie nabízí možnost vyvinout vysoce přesné systémy detekce osob a objektů, které spotřebovávají velmi málo energie a nemají téměř žádnou latenci. Tyto vlastnosti jsou mimořádně důležité pro rostoucí potřebu aplikací obrazových senzorů, které se nacházejí v zařízeních internetu věcí napájených z baterií, jako jsou videozvonky a bezpečnostní kamery,“ řekl Sen Huang, generální ředitel společnosti PixArt Imaging, předního dodavatele inteligentních senzorových řešení SoC.
Zdroj: hackster.io, redakce