端側(cè)AI應(yīng)用如何落地?安森美半導(dǎo)體通過RSL10智能相機(jī)拍攝平臺(tái)給出答案
人工智能的概念起源可以追溯到1956年,John McCarthy在達(dá)特矛斯會(huì)議上提出了“人工智能”這一概念。在2018年前后隨著諸多人工智能專用芯片的初創(chuàng)公司出現(xiàn)、眾多具有未來感的應(yīng)用場(chǎng)景的曝光...人工智能話題真正被大眾熟知和熱捧。這種廣義的AI的話題似乎在最近幾年削弱了很多,但其實(shí)在AI正在各個(gè)細(xì)分領(lǐng)域進(jìn)行下放和落地?,F(xiàn)在我們可以看到,其實(shí)在各種各樣的物聯(lián)網(wǎng)端側(cè)設(shè)備中,也可以實(shí)現(xiàn)AI和ML的諸多應(yīng)用。
圖:RSL10 智能相機(jī)拍攝平臺(tái)
當(dāng)然受限于供電、算力等等端側(cè)特定場(chǎng)景的要求,端側(cè)AI的應(yīng)用落地需要結(jié)合端側(cè)的實(shí)際場(chǎng)景。最近安森美半導(dǎo)體推出的全新智能相機(jī)拍攝平臺(tái),就給了業(yè)界一個(gè)端側(cè)AI應(yīng)用的很好啟發(fā)。近日筆者專門采訪了安森美半導(dǎo)體亞太地區(qū)方案中心的市場(chǎng)營銷工程師賈鵬先生,他對(duì)于RSL10這一全新平臺(tái)進(jìn)行了精彩的分享。
賈鵬(安森美半導(dǎo)體 亞太地區(qū)方案中心 市場(chǎng)營銷工程師 )
將AI圖片識(shí)別部署到物聯(lián)網(wǎng)端點(diǎn)
圖像識(shí)別是AI的典型應(yīng)用案例之一,在端側(cè)也有著諸多實(shí)際應(yīng)用需求。安森美半導(dǎo)體的RSL10 智能相機(jī)拍攝平臺(tái)就是為端側(cè)實(shí)現(xiàn)了圖像采集的功能,并通過低功耗藍(lán)牙來實(shí)現(xiàn)數(shù)據(jù)傳輸,通過云端AI來智能識(shí)別物體。RSL10 智能相機(jī)拍攝平臺(tái)中包含了安森美半導(dǎo)體的多個(gè)成功的芯片,其中包括藍(lán)牙低功耗的RSL10 SIP、ARX3A0 Mono 65° DFOV IAS模塊、多種傳感器芯片和電源管理芯片等。
據(jù)賈鵬先生分享,RSL10智能相機(jī)拍攝平臺(tái)最獨(dú)特的一點(diǎn)是它提供了一種超自動(dòng)化應(yīng)用的典型思路:傳感器觸發(fā)(條件)- 拍攝(動(dòng)作)- AI識(shí)別 - 獲取信息并處理。我們?cè)谙嚓P(guān)的介紹中可以看到,在實(shí)際應(yīng)用中,開發(fā)者可以將RSL10 智能相機(jī)拍攝平臺(tái)配置成一個(gè)端點(diǎn),設(shè)置特定的時(shí)間、環(huán)境變量作為觸發(fā)條件。例如在某個(gè)時(shí)間段,或者環(huán)境溫濕度達(dá)到觸發(fā)值時(shí),平臺(tái)自動(dòng)將圖像發(fā)送到云端進(jìn)行分析,云端通過圖像分析來給出相應(yīng)的反饋的決策。據(jù)賈鵬先生分享,RSL10智能相機(jī)拍攝平臺(tái)的圖像可以上傳至亞馬遜AWS,AWS在云端提供了圖像識(shí)別服務(wù),能夠識(shí)別大部分用戶拍攝的物體,為后續(xù)的數(shù)據(jù)處理提供了可能。
雖然RSL10智能相機(jī)拍攝平臺(tái)的成品度非常高,但對(duì)于不同的客戶仍可以根據(jù)自己的實(shí)際情況在不同的步驟進(jìn)行設(shè)計(jì),實(shí)現(xiàn)具備差異化的產(chǎn)品研發(fā)。除了安森美現(xiàn)在提供的所有相關(guān)資料之外,賈鵬先生表示安森美半導(dǎo)體的技術(shù)服務(wù)團(tuán)隊(duì)也可提供現(xiàn)場(chǎng)支持。
端側(cè)AI應(yīng)用需符合端側(cè)應(yīng)用條件要求
當(dāng)我們提到物聯(lián)網(wǎng)端側(cè)的應(yīng)用,功耗、成本和可靠性等都是最為重要的設(shè)計(jì)考量。同樣的,端側(cè)AI的部署也都需要考慮到這些因素。據(jù)賈鵬先生介紹,RSL10智能相機(jī)拍攝平臺(tái)的超低功耗是其重要特點(diǎn)之一:RSL10智能相機(jī)拍攝平臺(tái)有連續(xù)拍攝和正常拍攝兩種模式,一塊1700 mAh的充電電池能夠支持它在全傳感器工作并保持藍(lán)牙低功耗(BLE)時(shí)刻連接狀態(tài)下正常使用約半年(此狀態(tài)下平均功耗小于2 mW)。
筆者還關(guān)注到RSL10智能相機(jī)拍攝平臺(tái)中搭載的ARX3A0圖像傳感器的每秒幀數(shù)可以達(dá)到360,遠(yuǎn)超現(xiàn)在主流手機(jī)的30 fps、60fps的水準(zhǔn)。但據(jù)賈鵬先生分享,ARX3A0圖像傳感器擁有的高幀率特性,主要是為了眼球跟蹤、VR/AR等需要高速攝影的應(yīng)用場(chǎng)景。但在RSL10智能相機(jī)拍攝平臺(tái)中ARX3A0圖像傳感器以較低幀率就可以滿足端側(cè)的采集需求,這樣也不會(huì)對(duì)與藍(lán)牙數(shù)據(jù)傳輸即時(shí)性、整體的平臺(tái)功耗產(chǎn)生過多的壓力。當(dāng)然我們可以看到這種硬件上的參數(shù)富裕也給了設(shè)計(jì)者更多個(gè)性化發(fā)揮的空間。
賈鵬先生表示,Edge AI是新的發(fā)展方向,它能夠把數(shù)據(jù)處理分析過程從云端搬回本地,來避免網(wǎng)絡(luò)傳輸延遲和潛在的隱私安全問題,同時(shí)可以大大減少成本。在未來的圖像傳感器里,不僅僅包含模擬數(shù)字信號(hào)處理,人工智能算法也會(huì)被加入加快圖像傳感器的高度智能化,從而使系統(tǒng)能夠通過新的計(jì)算和決策提供更快更準(zhǔn)確的結(jié)果。而受限于端側(cè)的有限資源,我們需要更有效的算法支持來平衡計(jì)算能力和功耗。
對(duì)于安森美半導(dǎo)體這樣具有非常寬廣的產(chǎn)品組合的廠商而言,除了優(yōu)勢(shì)的單品外,還可以提供非常多豐富的解決方案。RSL10智能相機(jī)拍攝平臺(tái)就是其中之一,它為業(yè)界的端側(cè)AI應(yīng)用提供了很好的范例和啟示。相信我們也可以在諸多實(shí)地應(yīng)用中看到它的身影。