配套资料在网盘资料的“iTOP-3399 开发资料汇总(不含光盘内容)\04_iTOP-3399 开发板人工智能测试资料\智能回复配套资料.zip”目录下。
本章节将在 ITOP-3399 开发板上测试智能回复 APP,这是 TensorFlow Lite 在 Android 上的示例应用程序。智能回复 APP 可以实时回答问题,帮助用户高效且毫不费力地回复消息(或电子邮件)。智能回复在谷歌产品中已经非常成功,包括 Gmail、Inbox 和 Allo。智能回复 APP 回复模型针对的是文本聊天,它的架构与基于云计算的同类产品完全不同,它是专门针对手机或者手表等内存较小的设备而设计的。该设备模型具有多个优点:
更快:该模型运行在设备上,不需要网络连接。因此,推论是非常快的并且具有仅几毫秒的平均等待
时间。
资源高效:该模型在设备上的内存占用很小。
隐私友好型:用户数据永远不会离开设备,这消除了任何隐私限制
56.1 下载示例源码
如果您没有安装 AndroidStudio,请参考本手册“15.1 安装 AndroidStudio”章节安装 Android Studio 3.2或更高版本。您需要最低 API 21 的 Android 设备和开发环境。
TensorFlow Lite 是一种用于设备端推断的开源深度学习框架,官网提供了现成模型来供开发者使用,输入网址
<ignore_js_op>
打开中文官网,如下图所示:
点击“智能回复”框图中的“在 Android 设备上试试”,会弹出自述文件说明,这个文件会说明如何将APP 在 android 上测试,如下图所示:
接下来将 TensorFlow 示例源代码下载到您的电脑上,下载地址是:
下载完成后得到 examples-master.zip 文件,迅为配套资料里面有下载好的,大家可以直接拿来用。
2 构建 Android Studio 项目
在 AndroidStudio 中打开刚刚下载的 TensorFlow 源代码,打开 AndroidStudio 选择“Open an existingproject”,依次打开 examples-master\lite\examples\smart_reply\android,如下图所示:(注意存放源码的路径不能带中文)
打开工程以后自动开始下载依赖库,如果网络下载太慢的话,我们可以换阿里云源进行下载,如下图所示:
<ignore_js_op>
修改完以后,点击“Sync Now”,如下图所示:
编译会出现如下图所示的错误,这是因为找不到下载的设备模型,因为从国外下载比较不稳定,我们迅为已经替大家下载好了,大家可以直接使用。
我们将迅为资料包里面的 smartreply.tflite 拷贝到examples-master\lite\examples\smart_reply\android\app\build 目录下,如果没有 build 文件夹,则新建一个。拷贝完如下图所示:
我们将迅为资料包里面的 smartreply.tflite 拷贝到
examples-master\lite\examples\smart_reply\android\app\build 目录下,如果没有 build 文件夹,则新建一个。
拷贝完如下图所示:
修改完保存,点击“Build”->Rebuild Project,重新编译工程,如下图所示:
>
编译成功,如下图所示。特别要注意的是在编译前要配置好 AndroidSDK,至少需要 SDK 版本为 23。
3 安装并运行应用程序
将 ITOP-3399 开发板设备连接到电脑,硬件连接如下图所示:
我们要确保开发板里面烧写了 android8 的系统,并且打开了开发者模式,并允许 USB 调试和设置 USB模式为文件传输模式(MTP 模式),然后选择 Run -> Run app。我们在要安装该应用程序的设备的连接设备中选择部署目标(ITOP-3399 开发板),这将在设备上安装该应用程序。重新安装该应用程序可能需要您卸载以前的安装。安装成功如下图所示:
我们输入文本“nice to meet you”,智能回复 APP 反馈如下图所示:
瑞芯微3399开发板
核心板参数
尺寸:6.5*5.5cm
高度:连同连接器在内0.26cm
CPU:Rockchip RK3399 28纳米HKMG制程 双核Cortex-A72 1.8/2.0GHz;四核Cortex-A53 1.4GHz
内存:2GB 双通道DDR3(4GB可选)
存储:16GB EMMC
电源管理:官方推荐RK808芯片
工作电压:3.3V供电
系统支持:Android8.1系统;Ubuntu16.04系统;Debian9系统
接口:支持双USB3.0 Type-C接口;支持PCIe 2.1 (4 full-duplex lanes );内置低功耗MCU;8路数字麦克风阵列输入
引角扩展:引出脚多达320个,满足用户各类扩展需求
多媒体:支持4K VP9 and 4K 10bits H265/H264 视频解码,高达60fps;1080P 多格式视频解码 (VC-1, MPEG-1/2/4, VP8)
运行温度:0度至+80度区间,设备工作正常,运行良好!
应用范围:可广泛用于人脸识别设备、无人机、机器人、游戏终端、广告机/一体机、金融POS类、车载控制业、云端服务、VOIP视频会议系统、医疗类、安防/监控/警务、工控类、IoT物联网领域、VR等近百行业应用产品。
底板参数
尺寸:19cm*12cm PCB板:4层
POWER:电直流电源输入接口,12V/2A电源输入 GPS模块:支持(选配)
SWITCH:电源开关 WIFI/BT:双频2.4G/5G WIFI、Bluetooth4.1二合一模块
HDMI接口:1路 HDMI2.0输出接口 EDP LCD:1路
Type-C:1路 Type-C USB3.0接口,兼容OTG功能 MIPI_TX:1路
TF卡槽:1个 MIPI_TX/RX:1路
USB HOST:4路 USB2.0接口;1路 USB3.0接口; SPDIF:光纤输出接口
串口:2路RS232串口 BUZZER:1个蜂鸣器
网口:1路千兆以太网(10/100/1000Mbps) RTC:实时时钟
IRDA:1个 GPIO接口:20PIN,包括2路 ADC、2路I2C、 5v、3.3v电源和地
SIM卡槽:1个 LED:3个
PHONE:支持耳机输出 PCIE:PCIE M.2接口
MIC:支持MIC输入 陀螺仪:支持
按键:6个 电子罗盘:支持
4G模块:全网通(选配) GPIO:20路
CAMERA接口:CAMERA 1路、MIPI CAMERA 1路