Сделали датчик изображения со встроенным ИИ

🤔 Ситу­а­ция: сен­со­ры для фото- и видео­ка­мер. Они захва­ты­ва­ют свет из реаль­но­сти, но ниче­го не могут с ним сде­лать, нуж­но его обра­ба­ты­вать на про­цес­со­ре смарт­фо­на. Какие-то зада­чи смарт­фо­ну дают­ся лег­ко, но такие шту­ки, как рас­по­зна­ва­ние объ­ек­тов или иден­ти­фи­ка­ция по лицу, — вещь непро­стая и часто мед­лен­ная.

👎 Про­бле­ма: что­бы сде­лать, напри­мер, «умную каме­ру» с рас­по­зна­ва­ни­ем объ­ек­тов, нуж­но под­клю­чать её к боль­шо­му обла­ку с рас­по­зна­ю­щим ИИ. Это про­бле­мы с при­ват­но­стью и свя­зью: а что если интер­нет не ловит? Хочет­ся, что­бы каме­ра мог­ла сама что хочешь рас­по­знать.

😎 Реше­ние: новый дат­чик изоб­ра­же­ний IMX500 с машин­ным обу­че­ни­ем. В него встро­ен чип, кото­рый прак­ти­че­ски мгно­вен­но обра­ба­ты­ва­ет изоб­ра­же­ния. Дат­чик при­ме­ня­ет стан­дарт­ный алго­ритм рас­по­зна­ва­ния изоб­ра­же­ния к отдель­но­му видео­кад­ру за 3,1 мил­ли­се­кун­ды. Для срав­не­ния: дат­чи­ку Movidius от Гуг­ла нуж­но несколь­ко секунд.

Мас­со­вый выпуск IMX500 пла­ни­ру­ет­ся в сле­ду­ю­щем году. Будут встра­и­вать в смарт-колонки, и колон­ки будут знать, кто это такой в тру­сах мимо про­шёл.

👨‍🔬 Кто: Sony.

Источ­ник: Tech Xplore