电鱼智能 RK3399 赋能配送机器人的多屏交互与人脸识别支付

商业配送机器人需要处理复杂的交互逻辑与高安全性的支付验证。本文解析如何利用电鱼智能 RK3399 的 VOP 双路显示引擎实现头部表情与胸部操作屏的“双屏异显”，并利用其强大的 CPU+GPU 算力驱动双目摄像头进行 3D 活体检测，构建安全、流畅的无人配送服务终端。

电鱼智能的电小鱼

314人浏览 · 2026-01-14 15:25:28

电鱼智能的电小鱼 · 2026-01-14 15:25:28 发布

什么是电鱼智能 RK3399？

电鱼智能 RK3399 是一款高性能、高扩展性的六核（2×A72 + 4×A53）嵌入式核心板。虽然发布已有几年，但它在多媒体处理方面依然表现强劲。它支持 双路 MIPI/LVDS/HDMI/eDP 显示接口，且内置了双路 ISP（支持同时接入两路摄像头），这使得它天生就是为需要“多屏多摄”的机器人产品而设计的。

为什么配送机器人交互终端首选 RK3399？ (选型分析)

1. 原生“双屏异显” (Dual Screen Different Display)

机器人通常需要两个屏幕：

Head Screen (头部)：显示眼睛动画、表情，增强亲和力。
Body Screen (胸部)：显示货柜格口选择、二维码或人脸支付界面。
RK3399 优势：它拥有独立的两个 VOP（Video Output Processor）。这意味着你可以通过 MIPI 接口驱动头部的 7 寸屏，同时通过 eDP/LVDS 驱动胸部的 15.6 寸触摸屏，两块屏幕显示完全不同的内容，且互不卡顿。

2. 双目活体检测 (Liveness Detection)

为了防止照片欺诈，刷脸支付必须使用双目摄像头（RGB + IR）或3D 结构光。

算力支持：电鱼智能 RK3399 的 Mali-T860 GPU 和 A72 大核支持 TensorFlow Lite 或 ncnn 框架的加速。它可以实时处理双路视频流：一路用于提取人脸特征，一路利用红外（IR）光谱判断是否为活体，响应速度可达毫秒级。

3. 丰富的外设扩展

接口：机器人还需要控制货柜电磁锁、底盘通讯、补光灯。RK3399 引出的丰富 GPIO、USB 3.0 和串口资源，可以轻松挂载3D 深度相机、身份证阅读器和4G/5G 模组。

系统架构与数据流 (System Architecture)

该方案构建了一个多媒体交互中心：

视觉层：
- 双目宽动态摄像头：通过 USB 3.0 或双路 MIPI-CSI 接入。
- 补光灯：通过 PWM 控制亮度，适应楼道暗光环境。
核心交互层：电鱼智能 RK3399
- Android OS：利用 Presentation API 管理双屏内容。
- AI 引擎：运行人脸识别 SDK（如虹软、百度 AI）。
显示层：
- 主屏 (eDP)：$1920 \times 1080$，电容触摸，用户操作区。
- 副屏 (MIPI/HDMI)：$1024 \times 600$，表情展示区。

关键技术实现 (Implementation)

Android 双屏异显代码逻辑 (Java)

利用 Android 原生的 Presentation 类将不同的 UI 投射到副屏：

Java

// 逻辑示例：在 Android 上实现双屏异显
import android.app.Presentation;
import android.content.Context;
import android.view.Display;

public class FaceExpressionPresentation extends Presentation {
    public FaceExpressionPresentation(Context outerContext, Display display) {
        super(outerContext, display);
    }

    @Override
    protected void onCreate(Bundle savedInstanceState) {
        super.onCreate(savedInstanceState);
        // 加载表情布局 (眼睛动画)
        setContentView(R.layout.layout_robot_face);
    }
    
    public void setExpression(String mood) {
        // 更新表情：开心、眨眼、睡眠
        updateFaceAnimation(mood);
    }
}

// 在主 Activity 中调用
MediaRouter mediaRouter = (MediaRouter) getSystemService(Context.MEDIA_ROUTER_SERVICE);
MediaRouter.RouteInfo route = mediaRouter.getSelectedRoute(MediaRouter.ROUTE_TYPE_LIVE_VIDEO);
if (route != null) {
    Display presentationDisplay = route.getPresentationDisplay();
    if (presentationDisplay != null) {
        FaceExpressionPresentation presentation = new FaceExpressionPresentation(this, presentationDisplay);
        presentation.show();
    }
}