查看: 1983  |  回复: 1
Ubuntu下试玩visionseed工具的数据可视化

主题

回复
发表于2019-09-16 11:45:10 | 只看该作者
1# 电梯直达

日前购得一套AI视觉模组visionseed,我准备先在Ubuntu下试玩visionseed工具来了解这套视觉模组。当然前期准备工作是要做的:

(1)提前准备Ubuntu Linux系统,也可以安装Ubuntu虚拟机

(2)提前准备VisionSeed开发者套装,包括蓝色框中的VisionSeed(含摄像头模组)和USB数据线。


  


(3)在VisionSeed官网(https://visionseed.youtu.qq.com)开发者中心界面下载工具VisionSeed SDK(Linux)和VisionSeed客户端工具(Ubuntu Linux 16.04)。


  


准备工作完成后,现在开始客户端连接VisionSeed了,在Ubuntu环境下打开VisionSeed SDK,可以看到目录结构如下:


 


其中scripts/99-tencent-yt.rules为USB权限配置文件,可授予普通用户USB接口权限,需要执行以下命令将该文件复制到文件夹/etc/udev/rules.d/。

sudo cp ./scripts/99-tencent-yt.rules /etc/udev/rules.d/ 

使用USB数据线将VisionSeed连接到电脑的USB接口,在连接电脑USB端口后VisionSeed会虚拟出一个视频设备和一个串口设备。

在Ubuntu环境下打开后缀为AppImage的客户端,界面如下:


 


左下方选项框中选择虚拟串口/dev/tty/ACM0,点击连接按钮就连接成功了,当人脸对着VisionSeed模块的Camera可以在左下方看到获取的面部90个配准点信息。


 


连接完成后迫不及待的点开了数据可视化,在界面下方有FPS/左眼开闭/右眼开闭/嘴巴开闭/方位角/翻滚角/俯仰角等7种数据可视化选项。


 


先看运行针率,点击FPS->运行后,界面会跳转到显示曲线,下面就是我做的实验,可以看到fps十分的稳定:


 


再来看看,左眼开闭/右眼开闭/嘴巴开闭可视化的效果,从使用说明中了解到faces[i]faceShap包含了人脸的90个匹配点,通过这些匹配点我们可以通过算法获取到左眼/右眼/嘴巴开闭的数据。

点击左眼开闭->运行后,可以看到显示曲线,我不断的眨眼可以形成一个类似正弦函数的图像,是不是很有趣。


 


再看嘴巴开闭的情况:


 


VisionSeed能够根据检测到的人脸信息计算出头部的空间姿态信息,返回roll,yaw和pitch角度信息,分别表示脸部左右倾斜角度,脸部左右扭头角度和脸部俯仰角度,即翻滚角,方位角和俯仰角。


 


我运行了一下方位角,看自己“摇头晃脑”的可视化数据也是蛮有趣的:


 


通过这次的试玩,了解到VisionSeed功能的强大,不仅仅是个集成了摄像头+AI芯片的模块,AI算法才是效果的保证,他内置了腾讯优图的算法,效果过硬,模块内还包括了人脸识别功能,通过附带工具软件管理数据库,能够实时离线识别库中的身份,非常强大,能做出很多有意思的东西。


主题

回复
发表于2019-09-25 14:20:04   |  只看该作者
2#
 

主题

回复
  • 温馨提示: 标题不合格、重复发帖、发布广告贴,将会被删除帖子或禁止发言。 详情请参考: 社区发帖规则
  • 您当前输入了 0 个文字。还可以输入 8000 个文字。 已添加复制上传图片功能,该功能目前仅支持chrome和火狐

禁言/删除

X
请选择禁言时长:
是否清除头像:
禁言/删除备注:
昵 称:
 
温馨提示:昵称只能设置一次,设置后无法修改。
只支持中文、英文和数字。

举报

X
请选择举报类型:
请输入详细内容:

顶部