小眼探索首次推出了基于靈汐科技類腦芯片KA200的小眼芯片邊緣異構(gòu)計(jì)算平臺(tái)Tiny-Brain Y300及面向行業(yè)級無人機(jī)光電吊艙的感知和控制解決方案。該方案采用1顆高清攝像頭和一顆紅外熱成像相機(jī),探索推出臺(tái)集成了紅外熱成像與可見光的首次算平雙光融合、神經(jīng)網(wǎng)絡(luò)目標(biāo)識別、基于圖像壓縮等功能于一體,靈汐類腦可廣泛用于無人機(jī)電網(wǎng)巡檢、科技森林防火、緣異安防偵察等領(lǐng)域。構(gòu)計(jì)
為了提升無人機(jī)光電吊艙的小眼芯片整體感知和控制性能,該方案重點(diǎn)對異構(gòu)計(jì)算平臺(tái)NPU部分的探索推出臺(tái)深度神經(jīng)網(wǎng)絡(luò)進(jìn)行了優(yōu)化和加速,同時(shí)針對arm架構(gòu)cpu里運(yùn)行的首次算平經(jīng)典算法進(jìn)行了優(yōu)化,聯(lián)合戰(zhàn)略伙伴清醒異構(gòu)進(jìn)行了深度編譯與并行加速,基于最終使得整套系統(tǒng)的靈汐類腦運(yùn)行效率可達(dá)50fps高速圖像處理,端到端延時(shí)小于80ms,科技可滿足復(fù)雜場景下高動(dòng)態(tài)、緣異小目標(biāo)的高幀率、低延時(shí)感知和控制需求。
領(lǐng)啟KA200是靈汐科技基于全新的存算一體、眾核并行、異構(gòu)融合架構(gòu),能高效支持深度學(xué)習(xí)神經(jīng)網(wǎng)絡(luò)、生物神經(jīng)網(wǎng)絡(luò)和大規(guī)模腦仿真。單芯片集成 25 萬神經(jīng)元和2500 萬突觸(稠密模式),可擴(kuò)展支持200萬神經(jīng)元和20億突觸的集成計(jì)算(稀疏模式),支持混合精度計(jì)算(32Tops@INT8和 16Tflops@FP16)。目前,小眼探索團(tuán)隊(duì)正在跟靈汐科技、清華大學(xué)類腦中心、中科院自動(dòng)化所開展SNN(脈沖神經(jīng)網(wǎng)絡(luò))模型的研發(fā)合作,預(yù)計(jì)年底可以向用戶提供完整的編譯器和算法模型,以及面向部分場景的解決方案。
未來,小眼探索將不斷提供軟硬一體產(chǎn)品和解決方案,以“異構(gòu)計(jì)算硬件、深度神經(jīng)網(wǎng)絡(luò)加速、多模態(tài)融合感知和控制”為核心,構(gòu)建“智能感知相機(jī)、智能計(jì)算平臺(tái)、智能光電系統(tǒng)”的產(chǎn)品矩陣,為無人機(jī)、衛(wèi)星遙感、智能駕駛等領(lǐng)域提供更智能、更安全的“最強(qiáng)大腦”。
審核編輯:彭靜