Ubuntu下试玩visionseed工具的数据可视化

azxyqcr

日前购得一套AI视觉模组visionseed，我准备先在Ubuntu下试玩visionseed工具来了解这套视觉模组。当然前期准备工作是要做的：

（1）提前准备Ubuntu Linux系统，也可以安装Ubuntu虚拟机

（2）提前准备VisionSeed开发者套装，包括蓝色框中的VisionSeed（含摄像头模组）和USB数据线。

（3）在VisionSeed官网（https://visionseed.youtu.qq.com）开发者中心界面下载工具VisionSeed SDK（Linux）和VisionSeed客户端工具（Ubuntu Linux 16.04）。

准备工作完成后，现在开始客户端连接VisionSeed了，在Ubuntu环境下打开VisionSeed SDK，可以看到目录结构如下：

其中scripts/99-tencent-yt.rules为USB权限配置文件，可授予普通用户USB接口权限，需要执行以下命令将该文件复制到文件夹/etc/udev/rules.d/。

sudo cp./scripts/99-tencent-yt.rules /etc/udev/rules.d/

使用USB数据线将VisionSeed连接到电脑的USB接口，在连接电脑USB端口后VisionSeed会虚拟出一个视频设备和一个串口设备。

在Ubuntu环境下打开后缀为AppImage的客户端，界面如下：

左下方选项框中选择虚拟串口/dev/tty/ACM0，点击连接按钮就连接成功了，当人脸对着VisionSeed模块的Camera可以在左下方看到获取的面部90个配准点信息。

连接完成后迫不及待的点开了数据可视化，在界面下方有FPS/左眼开闭/右眼开闭/嘴巴开闭/方位角/翻滚角/俯仰角等7种数据可视化选项。

先看运行针率，点击FPS->运行后，界面会跳转到显示曲线，下面就是我做的实验，可以看到fps十分的稳定：

再来看看，左眼开闭/右眼开闭/嘴巴开闭可视化的效果，从使用说明中了解到facesfaceShap包含了人脸的90个匹配点，通过这些匹配点我们可以通过算法获取到左眼/右眼/嘴巴开闭的数据。

点击左眼开闭->运行后，可以看到显示曲线，我不断的眨眼可以形成一个类似正弦函数的图像，是不是很有趣。

再看嘴巴开闭的情况：

VisionSeed能够根据检测到的人脸信息计算出头部的空间姿态信息，返回roll，yaw和pitch角度信息，分别表示脸部左右倾斜角度，脸部左右扭头角度和脸部俯仰角度，即翻滚角，方位角和俯仰角。

我运行了一下方位角，看自己“摇头晃脑”的可视化数据也是蛮有趣的：

通过这次的试玩，了解到VisionSeed功能的强大，不仅仅是个集成了摄像头+AI芯片的模块，AI算法才是效果的保证，他内置了腾讯优图的算法，效果过硬，模块内还包括了人脸识别功能，通过附带工具软件管理数据库，能够实时离线识别库中的身份，非常强大，能做出很多有意思的东西。

azxyqcr