基于Mediatek Genio350 的AIoT之人臉偵測(cè)方案

聯(lián)發(fā)科技MediaTek AIoT Genio350 是用于連接多媒體系統(tǒng)的高度集成解決方案。目前 AIoT Yocto 支持大部分硬件功能，而其它僅由聯(lián)發(fā)科專有軟件支持。 AIoT Yocto 支持的硬件功能請(qǐng)參考下面的功能框圖。

支持的功能塊

AIoT Yocto 支持以下 Genio350 設(shè)備功能：

● Quad-core Arm Cortex-A53 64-bit processor

● Arm Mali-G52 MC1 3D Graphics Accelerator (GPU)

● AI Processor Unit (APU) Cadence Tensilica VP6 processor

● Dual MIPI Camera Serial Interface (CSI)

● Dual display support with MIPI DSI and DPI

● Rich audio interfaces to support various microphones and speakers configurations

● 10/100 Ethernet MAC with RMII

● Support Wi-Fi connectivity through external Cypress module and MT7633 module

聯(lián)發(fā)科技 MediaTek  Genio350是高度集成的邊緣人工智能平臺(tái)采用超高效的 14 奈米工藝構(gòu)建，結(jié)合了專用的 APU（人工智能處理器）和 DSP，以實(shí)現(xiàn)視覺(jué)和語(yǔ)音邊緣人工智能，在常見(jiàn)應(yīng)用中具有顯著提高的性能和能效。

支持具有觸摸界面和豐富應(yīng)用程序的高清顯示器，使其成為智能設(shè)備、智能訪問(wèn)、零售和商業(yè)環(huán)境中的信息站、自動(dòng)售貨機(jī)或 POS 等公共接口，或工業(yè)和醫(yī)療環(huán)境中的集線器的理想平臺(tái)。

Arm Mali G52 GPU 提供了顯著更高的性能，并且通過(guò) OpenGL ES、OpenCL 和 Vulkan 實(shí)現(xiàn)的通用 API 兼容性，簡(jiǎn)化了開(kāi)發(fā)機(jī)會(huì)。 高達(dá) 13MP 的高清攝像頭，加上使用 HEVC 以全高清 @ 60fps 的快速視頻編碼，支持需要詳細(xì)和可靠的圖像和視頻捕獲功能的下一代應(yīng)用程序。一般處理由快速 2GHz 四核 Arm Cortex-53 CPU 提供。 提供的更廣泛的內(nèi)存和閃存選項(xiàng)中進(jìn)行選擇，從而更自由地滿足性能要求。

本次演練是搭配 GenesysLogic GL3004 360° Camera 做演示

1）先確認(rèn) Camera 是掛載于哪一個(gè) Video 節(jié)點(diǎn)

輸入 ls -l /sys/class/video4linux/

2）本次OpenCV語(yǔ)法是設(shè)置成自行帶參數(shù)，來(lái)選擇所要提取的 Video 節(jié)點(diǎn)

video_capture = cv2.VideoCapture(int(sys.argv[1]))

3.）執(zhí)行預(yù)先寫(xiě)好的臉部偵測(cè)的語(yǔ)法

輸入 python3 ./demo-opencl.py 3

演示結(jié)果如下：

場(chǎng)景應(yīng)用圖

展示版照片

方案方塊圖

核心技術(shù)優(yōu)勢(shì)

聯(lián)發(fā)科技 MediaTek Genio350 具有集成 APU 和 DSP 的主流 AIoT 平臺(tái)，專為需要視覺(jué)和語(yǔ)音邊緣處理的邊緣應(yīng)用而設(shè)計(jì)。例如面部、物體、手勢(shì)、動(dòng)作識(shí)別、LPR、語(yǔ)音激活和速度識(shí)別、聲音隔離、生物技術(shù)和生物測(cè)量測(cè)量等應(yīng)用。

方案規(guī)格

● 應(yīng)用處理器

   Arm Cortex-A53, Quad Core 64-bit, 運(yùn)行時(shí)脈高達(dá) 2GHz

● 圖形處理器

    Arm Mali-G52 MC1

● 人工智能處理器

   MediaTek APU 1.0

● 記憶體

    LPDDR4/LPDDR4X 時(shí)脈高達(dá) 3200Mbps, LPDDR3, DDR3/L 時(shí)脈高達(dá) 1866Mbps

● 影音多媒體規(guī)格

    Voice Assistant Services

    HiFi4 DSP

    ISP 13MP Camera

    1920x1200 *2 支持雙顯

    Video Encoding 支持 H.264, H.265 / HEVC, 1080p@60p(HEVC, H264)

    Video Decoding 支持 H.264, H.265 / HEVC, MPEG-1/2/4, VP-9

● 無(wú)線連接

    Wi-Fi 5 (b/g/n/ac)，2.4GHz/5GHz

    Bluetooth 5.0

● 儲(chǔ)存裝置

    eMMC 5.1, SLC/MLC/TLC, Micro SD card.

● 周邊界面

    Audio Amplifier, DPI, Ethernet, GPIO, I2C, LVDS, HDMI, MIPI-DSI, MIPI-CSI, PDM-in, SDIO, TDM, USB2.0 OTG and Host.