fireflyAIO-3399J-Ubuntu應用層支持介紹

Ubuntu 應用層支持

視頻硬件編解碼支持

Mpp是Rockchip為RK3399提供的一套視頻編解碼的api, 并且基于mpp,Rockchip提供了一套gstreamer的編解碼插件。用戶可以根據(jù)自己的需求，基于gstreamer來做視頻編解碼的應用，或者直接調(diào)用mpp，來實現(xiàn)硬件的編解碼加速。

Firefly 發(fā)布的Ubuntu 系統(tǒng)， 都已經(jīng)提供了完整的gstremaer 和 mpp支持，并且提供了相應的demo，供用戶開發(fā)參考。

Gstreamer

Ubuntu 16.04 下，gstreamer 1.12 已經(jīng)安裝在/opt/目錄下。

Ubuntu 18.04下， gstreamer 1.12 已經(jīng)安裝到系統(tǒng)中。

/usr/local/bin/h264dec.sh 測試硬件H264解碼。

/usr/local/bin/h264enc.sh 測試硬件H264編碼。

用戶可以參照這兩個腳本，配置自己的gstreamer應用。

Mpp

Ubunut 系統(tǒng)下， mpp 相關dev包都已經(jīng)安裝到系統(tǒng)中。

/opt/mpp/下分別是mpp 編解碼的相關demo 和 源文件。

OpenGL-ES

RK3399 支持 OpenGL ES1.1/2.0/3.0/3.1。

Firefly 發(fā)布的Ubuntu 系統(tǒng)， 都已經(jīng)提供了完整的OpenGL-ES支持。運行glmark2-es2可以測試openGL-ES支持。 如果要避免屏幕刷新率對測試結果的影響，可以在串口終端上使用以下命令測試。

# systemctl stop lightdm # export DISPLAY=:0 # Xorg & # glmark2-es2 –off-screen

在Chromium瀏覽器中， 在地址欄輸入：chrome://gpu可以查看chromium下硬件加速的支持。

Note:

EGL 是用arm 平臺上OpenGL針對x window system的擴展，功能等效于x86下的glx庫。

由于Xorg使用的Driver modesettings 默認會加載libglx.so(禁用glx會導致某些通過檢測glx環(huán)境的應用啟動失敗)， libglx.so會搜索系統(tǒng)中的dri實現(xiàn)庫。但是rk3399 Xorg 2D加速是直接基于DRM實現(xiàn)， 并未實現(xiàn)dri庫，所以啟動過程中，libglx.so會報告如下的錯誤 。

(EE) AIGLX error: dlopen of /usr/lib/aarch64-linux-gnu/dri/rockchip_dri.so failed

這個對系統(tǒng)運行沒有任何影響，不需要處理。

基于同樣的道理，某些應用啟動過程中，也會報告如下錯誤，不用處理，對應用的運行不會造成影響。

libGL error: unable to load driver: rockchip_dri.so libGL error: driver pointer missing libGL error: failed to load driver: rockchip

Firefly之前發(fā)布的某些版本的Ubuntu軟件，默認關閉了加載libglx.so，在某些情況下，運行某些應用程序會出現(xiàn)下述錯誤：

GdkGLExt-WARNING **: Window system doesn't support OpenGL.

修正的方法如下：

刪除 /etc/X11/xorg.conf.d/20-modesetting.conf 中一下三行配置。

Section "Module" Disable "glx" EndSection

OpenCL

Firefly發(fā)布的Ubuntu系統(tǒng)，已經(jīng)添加了opencl1.2支持，可以運行系統(tǒng)內(nèi)置的clinfo獲取平臺opencl相關參數(shù)。

firefly@firefly:~$ clinfo Platform #0 Name: ARM Platform Version: OpenCL 1.2 v1.r14p0-01rel0-git(966ed26).f44c85cb3d2ceb87e8be88e7592755c3 Device #0 Name: Mali-T860 Type: GPU Version: OpenCL 1.2 v1.r14p0-01rel0-git(966ed26).f44c85cb3d2ceb87e8be88e7592755c3 Global memory size: 1 GB 935 MB 460 kB Local memory size: 32 kB Max work group size: 256 Max work item sizes: (256, 256, 256) …

TensorFlow Lite

RK3399 支持神經(jīng)網(wǎng)絡的GPU加速方案LinuxNN， Firefly發(fā)布的Ubuntu系統(tǒng)，已經(jīng)添加了LinuxNN的支持。

在opt/tensorflowbin/下，運行test.sh， 即可測試MobileNet 模型圖像分類器的 Demo和MobileNet-SSD 模型的目標檢測 Demo

firefly@firefly:/opt/tensorflowbin$ ./test.sh Loaded model mobilenet_ssd.tflite resolved reporter nn version: 1.0.0 findAvailableDevices filename:libarmnn-driver.so d_info:40432 d_reclen:40s [D][ArmnnDriver]: Register Service: armnn (version: 1.0.0)! first invoked time: 1919.17 ms invoked average time: 108.4 ms validCount: 26 car @ (546, 501) (661, 586) car @ (1, 549) (51, 618) person @ (56, 501) (239, 854) person @ (332, 530) (368, 627) person @ (391, 541) (434, 652) person @ (418, 477) (538, 767) person @ (456, 487) (602, 764) car @ (589, 523) (858, 687) person @ (826, 463) (1034, 873) bicycle @ (698, 644) (1128, 925) write out.jpg succ!

屏幕旋轉(zhuǎn)

Firefly發(fā)布的Ubuntu系統(tǒng)，如果需要默認對系統(tǒng)的顯示方向做旋轉(zhuǎn)，可以在

/etc/default/xrandr中修改對應的顯示設備的方向即可。

firefly@firefly:~$ cat /etc/default/xrandr #!/bin/sh # Rotation can be one of 'normal', 'left', 'right' or 'inverted'. # xrandr --output HDMI-1 --rotate normal # xrandr --output LVDS-1 --rotate normal # xrandr --output EDP-1 --rotate normal # xrandr --output MIPI-1 --rotate normal # xrandr --output VGA-1 --rotate normal # xrandr --output DP-1 --rotate normal

對于配有觸摸屏的平臺，如果需要對觸摸屏的方向做旋轉(zhuǎn)，可以在/etc/X11/xorg.conf.d/05-gslX680.conf中修改SwapAxes / InvertX / InvertY三個值。

firefly@firefly:~$ cat /etc/X11/xorg.conf.d/05-gslX680.conf Section "InputClass" Identifier "gslX680" MatchIsTouchscreen "on" MatchProduct "gslX680" Driver "evdev" Option "SwapAxes" "off" # Invert the respective axis. Option "InvertX" "off" Option "InvertY" "off" EndSection