设置移动设备

此示例说明如何使用深度学习对移动设备摄像头采集的图像进行分类。

在您的移动设备上安装和设置 MATLAB^® Mobile™。然后，从 MATLAB Mobile 的“设置”登录 MathWorks^® Cloud。有关详细信息，请参阅 在您的设备上安装 MATLAB Mobile 和 登录到 Cloud。

在您的设备上启动 MATLAB Mobile。

创建与移动设备摄像头的连接

在命令屏幕上，创建一个 mobiledev 对象 m。

m = mobiledev

m = 
mobiledev with properties:

                   Connected: 1
            AvailableCameras: {'back' 'front'}
                     Logging: 0
            InitialTimestamp: ''

   AccelerationSensorEnabled: 0
AngularVelocitySensorEnabled: 0
       MagneticSensorEnabled: 0
    OrientationSensorEnabled: 0
       PositionSensorEnabled: 0

Supported functions

AvailableCameras 属性指示该设备具有 'back' 和 'front' 摄像头。创建与 'back' 摄像头的连接。

cam = camera(m,'back')

cam = 
  Camera with properties:

                    Name: 'back'
    AvailableResolutions: {'640x480'  '1280x720'}
               ZoomRange: [1 121.8750]
              Resolution: '640x480'
                    Zoom: 1
                   Flash: 'off'
               Autofocus: 'on'

摄像头属性提供关于图像分辨率、自动对焦和闪光灯设置的信息。

加载预训练网络并采集图像

在命令屏幕上，使用 Deep Learning Toolbox™ 加载预训练的 GoogLeNet 网络。

nnet = googlenet;

使用 snapshot 函数和手动快门模式从摄像头采集单个图像。摄像头预览打开后，您可以移动您的移动设备来捕获所需的视野。对于本例，捕获要分类的对象的图像。准备好后，按快门按钮采集图像。

img = snapshot(cam,'manual');

调整图像大小以匹配网络的输入大小。GoogLeNet 的输入大小是 224×224。使用 image 在 MATLABMobile 中预览图像。

img = imresize(img,[224,224]);
image(img)

分类并显示采集的图像

使用来自 Deep Learning Toolbox 的 classify 对所采集图像中的对象进行分类。

label = classify(nnet,img)

label = 

  categorical

     coffee mug 

此对象被分类为咖啡杯。使用标签作为图窗标题预览图像。

image(img)
title(char(label));

编写函数对图像进行分类

您可以在 MATLABMobile 中编写一个函数来执行前面所有步骤，以对图像进行分类。

在文件屏幕上，在 MATLABDrive™ 文件夹中创建一个新脚本。将文件命名为 camnet.m。按照以下方式定义 camnet 函数并保存文件。

function value = camnet(cam,nnet)
    img = snapshot(cam,'manual');
    pic = imresize(img,[224,224]);
    value = classify(nnet,pic);
    image(pic)
    title(char(value))
end

在命令屏幕上，创建 mobiledev 对象。然后创建 camera 对象。

m = mobiledev;
cam = camera(m,'front');

nnet = googlenet;

调用 camnet 函数。

label = camnet(cam,nnet)

摄像头预览会在您的移动设备上打开。移动您的移动设备摄像头，指向您要分类的对象。按快门按钮捕获图像。捕获图像后，您可以查看图窗。图窗标题显示对象的预测标签。