Зоровий процесор англ vision processing unit станом на 2016 рік це перспективний клас мікропроцесорів він є окремим типо

Зоровий процесор (англ. vision processing unit, станом на 2016 рік) — це перспективний клас мікропроцесорів; він є окремим типом ШІ-прискорювачів, розробленим для прискорення в задачах машинного зору.

Огляд

Зорові процесори відрізняються від відео-процесорів (що спеціалізуються на кодуванні та декодуванні відео) своєю придатністю для виконання алгоритмів машинного зору, таких як згорткові нейронні мережі, масштабоінваріантне ознакове перетворення тощо.

Вони можуть включати прямі інтерфейси для отримування даних з камер (в обхід будь-яких буферів зовні кристалу), і мають більший акцент на ^[en] в межах кристалу між багатьма вузлами паралельного виконання з ^[en], як і ^[en] процесори цифрової обробки сигналів. Але, як і відео-процесори, вони можуть мати фокус на арифметиці з нерухомою комою низької точності для обробки зображень.

Протиставлення з ГП

Вони відрізняються від ГП, які містять спеціалізоване апаратне забезпечення для растрування та відображення текстур (для тривимірної графіки), і чию ^[en] оптимізовано для маніпулювання растровими зображеннями в пам'яті зовні кристалу (читання (текстур) і внесення змін до кадрових буферів зі ^[en]).

Цільовими ринками є робототехніка, інтернет речей, нові класи цифрових камер для віртуальної та доповненої реальності, ^[en], вбудовування прискорення машинного бачення до смартфонів та інших мобільних пристроїв.

Приклади

^[en], який застосовується в ^[en].
^[en] включають прискорювач, що називається голографічним процесором (у доповнення до їхніх ЦП та ГП), націлений на інтерпретування входу з камери для прискорення відстежування та бачення середовища для застосування в доповненій реальності.
, розробка МІТ, призначена для виконання згорткових нейронних мереж.
, розробка Яна ЛеКуна (реалізована в ПКВМ) для прискорення згорток, яка використовує архітектуру ^[en].

Подібні процесори

Деякі процесори не описуються як ЗП, але є рівноцінно застосовними до задач машинного зору. Вони можуть утворювати ширшу категорію ШІ-прискорювачів (до яких можуть належати й ЗП), проте станом на 2016 рік консенсусу щодо цієї назви ще немає:

IBM TrueNorth, , націлений на подібні задачі розпізнавання образів та розвідки в сенсо́рних даних, включно з відео/аудіо.
^[en], інший представник перспективного класу сенсо́рно/ШІ-орієнтованих мікросхем.

Див. також

^[en], ^[en] процесор з подібним акцентом на потоці інформації в межах кристалу, сфокусований на продуктивності 32-бітових операцій з рухомою комою.
CELL, надбагатоядерний процесор з ознаками, доволі відповідними зоровим процесорам (інструкції та типи даних SIMD, які підходять для відео, і прямий доступ до пам'яті в межах кристалу між ^[en]).
Тензорний процесор, мікросхема, яка була створена Google для прискорення обчислень ШІ.
Графічний процесор, який також часто використовують для виконання зорових алгоритмів. Нещодавня архітектура NVidia Pascal включає підтримку чисел половинної точності для забезпечення кращого компромісу точності/витрат для робочих навантажень ШІ.
Процесори цифрової обробки сигналів, розроблені головно для роботи з потоками даних в реальному часі.
OpenCL
MPSoC
Співпроцесор
Фізичний процесор, минула спроба доповнення ЦП та ГП прискорювачем з високою пропускною здатністю.

Примітки

Seth Colaner, Matthew Humrick (3 січня 2016). A third type of processor for AR/VR: Movidius' Myriad 2 VPU. Tom's Hardware. (англ.)
Prasid Banerje (28 березня 2016). . Digit.in. Архів оригіналу за 2 вересня 2017. Процитовано 10 липня 2016. (англ.)
Weckler, Adrian. . Independent.ie. Архів оригіналу за 15 березня 2016. Процитовано 15 березня 2016. (англ.)
Fred O'Connor (1 травня 2015). . PCWorld. Архів оригіналу за 30 жовтня 2016. Процитовано 10 липня 2016. (англ.)
Chen, Yu-Hsin and Krishna, Tushar and Emer, Joel and Sze, Vivienne (2016). . IEEE International Solid-State Circuits Conference, ISSCC 2016, Digest of Technical Papers. с. 262—263. Архів оригіналу за 21 січня 2018. Процитовано 10 липня 2016. {{}}: Cite має пустий невідомий параметр: |6= () (англ.)
. Qualcomm. 10 жовтня 2013. Архів оригіналу за 29 липня 2016. Процитовано 10 липня 2016. (англ.)

Посилання

Архітектура Eyeriss [ 28 квітня 2016 у Wayback Machine.] (англ.)
Голографічний процесор [ 6 липня 2016 у Wayback Machine.] (англ.)
NeuFlow: A Runtime Reconﬁgurable Dataﬂow Processor for Vision [ 5 травня 2017 у Wayback Machine.] (англ.)

[1] Seth Colaner, Matthew Humrick (3 січня 2016). A third type of processor for AR/VR: Movidius' Myriad 2 VPU. Tom's Hardware. (англ.)

[2] Prasid Banerje (28 березня 2016). . Digit.in. Архів оригіналу за 2 вересня 2017. Процитовано 10 липня 2016. (англ.)

[RiseOfVPUs-3] Weckler, Adrian. . Independent.ie. Архів оригіналу за 15 березня 2016. Процитовано 15 березня 2016. (англ.)

[4] Fred O'Connor (1 травня 2015). . PCWorld. Архів оригіналу за 30 жовтня 2016. Процитовано 10 липня 2016. (англ.)

[5] Chen, Yu-Hsin and Krishna, Tushar and Emer, Joel and Sze, Vivienne (2016). . IEEE International Solid-State Circuits Conference, ISSCC 2016, Digest of Technical Papers. с. 262—263. Архів оригіналу за 21 січня 2018. Процитовано 10 липня 2016. {{}}: Cite має пустий невідомий параметр: |6= () (англ.)

[6] . Qualcomm. 10 жовтня 2013. Архів оригіналу за 29 липня 2016. Процитовано 10 липня 2016. (англ.)