它將以往僅僅用于計算數(shù)據(jù)的物聯(lián)網(wǎng)設備升級為集成人工智能的智能設備，從而增加設備實時決策的能力。 總而言之就是使基于機器學習的智能決策在物理上更接近數(shù)據(jù)源本身。因此，嵌入式視覺下沉到端點設備，就不再僅僅是將圖像或視頻分解成像素，而是理解像素，理解它們的含義，并在發(fā)生特定事件時做出明智決策。

　　什么是嵌入式視覺?

　　嵌入式計算機視覺給機器賦予視覺使它們能夠在機器學習和深度學習算法的支持下更好的了解環(huán)境。很多行業(yè)中都有依賴于計算機視覺的應用，它已經(jīng)是黑科技中不可或缺的一員。準確地說，計算機視覺是人工智能 (AI) 領域的一部分，它使機器能夠從數(shù)字多媒體信息源中提取有意義的信息，并據(jù)此采取行動或提出決策建議。計算機視覺類似于人類視覺，但兩者之間仍存在一些差異。人類視覺的背后，是對所看到的各種不同東西都有理解的能力。而計算機視覺只能識別它已經(jīng)被訓練過的內(nèi)容，同時還有一定的錯誤率。另外一方面，嵌入式視覺通過訓練能讓設備在最短的時間內(nèi)做出對特定對象的識別，從而能更加高效地對海量圖像進行分析。在這一方面，機器視覺優(yōu)于人類視覺。

　　嵌入式視覺廣泛應用于消費和工業(yè)領域的智能終端，為設備提升附加值。簡單舉幾個例子：分析生產(chǎn)線上的產(chǎn)品質(zhì)量、統(tǒng)計人群中的人數(shù)、識別物體、分析特定區(qū)域的內(nèi)容等。

　　在端點設備實現(xiàn)嵌入式視覺應用時，設備的算力會是面臨的一個挑戰(zhàn)。但集中處理的話，從傳感設備傳輸?shù)皆贫巳シ治龅臄?shù)據(jù)量可能非常大，并且超過網(wǎng)絡帶寬。 例如，以 30 FPS(每秒幀數(shù))運行的 1920 x 1080 攝像機可能會產(chǎn)生大約 190 MB/S 的數(shù)據(jù)。 除了隱私問題之外，數(shù)據(jù)從邊緣到云，再從云到端點的往返勢必會帶來延遲。 這些限制都不利于實時應用。

　　物聯(lián)網(wǎng)安全也是市場要采用和發(fā)展嵌入式視覺需要考慮的一個問題。使用智能視覺設備的一個關鍵隱憂是敏感圖像和視頻是否有被不當使用的可能性。 未經(jīng)授權(quán)訪問攝像頭不僅侵犯隱私，而且可能導致更嚴重的后果。

　　端點設備上的人工智能視覺

　　Endpoint AI可以理解捕獲的圖像

　　Endpoint AI使用機器學習和深度學習來按照被訓練的模式去匹配和識別

　　為了獲得最佳性能， AI算法在終端設備上運行，而無需將數(shù)據(jù)傳輸?shù)皆贫?。?shù)據(jù)由圖像識別設備捕獲，然后在同一設備中進行處理和分析。

　　端點設備的功耗限制仍然存在，微控制器或微處理器需要更高的效率來處理AI算法所需的大量乘累加(MAC)運算。

　　人工智能視覺的部署

　　現(xiàn)實世界中有無數(shù)AI視覺應用的使用場景。下面是一些例子，Renesas可以提供全面的MCU和MPU解決方案，包括必要的軟件和工具，以實現(xiàn)快速開發(fā)。

　　智能門禁:

　　語音和人臉識別給安全門禁系統(tǒng)帶來更多使用價值。然而實時識別，要求嵌入式系統(tǒng)具有非常高的算力和片上硬件加速。為了應對這一挑戰(zhàn)，Renesas提供的MCU或MPU具有高算力，還集成了許多支持人臉和語音識別至關重要的功能，如內(nèi)置H.265硬件解碼、2D/3D圖形加速以及內(nèi)部和外部存儲器上的ECC，以消除軟錯誤并實現(xiàn)高速視頻處理。

　　工業(yè)控制:

　　嵌入式視覺可以應用到包括安全操作、自動化、產(chǎn)品分類等多個場景。人工智能可以在生產(chǎn)過程中幫助執(zhí)行多項操作，如包裝和分發(fā)，確保生產(chǎn)過程中所有階段的質(zhì)量和安全。

　　交通運輸:

　　計算機視覺也能改善交通運輸服務。以自動駕駛為例，使用計算機視覺對道路上的物體進行檢測和分類。它還可用于創(chuàng)建3D地圖和估算運動軌跡。自動駕駛汽車使用攝像頭和傳感器收集環(huán)境信息，然后通過模式識別、特征提取和對象跟蹤等視覺技術(shù)來解析數(shù)據(jù)，并做出最合適的響應。