基于TencentOS Tiny的图像识别案例

背景

近来,很高兴能够参与到腾讯云AIoT应用创新大赛,有机会认识到各种行业背景的物联网爱好者;作为一个新手,接触了面向物联网领域的TencentOS Tiny系统、腾讯云物联网开发平台以及RISC-V芯片的应用实例等。

图1 TencentOS tiny框架——开放原子开源基金会展台

案例实践

本次比赛中,官方提供了丰富的demo例程,通过调用API函数将嵌入式设备与腾讯云进行对接,实现了底层设备的在线监测。例如:通过CH32V307芯片驱动OV2640摄像头采集指示灯的运行状态,后续通过图像识别算法提取颜色特征,并将结果上报到云平台。近来,在官方例程的基础上进行了优化改进,解决了图像识别算法泛化能力差等弊端,具体内容如下所示:

硬件

硬件结构极为简单,主要包含主控CH32V307、ESP8266 wifi模块、ST7789屏幕以及WCH-Link等,具体如图2所示。

图2 端云一体化解决方案demo硬件原理图

优化改进

嵌入式设备的应用场景一般较为复杂,很难通过颜色识别算法提取图像的全部特征,例如:智能门禁系统中涉及的人脸识别,自动抄表系统涉及的文字信息提取等。因此,近来想要把人工智能算法嵌入到边缘计算端,最终实现云-边-端的高效协同,优化嵌入式设备的执行速度以及图像识别准确率。

流程框架:通过OV2640采集手机屏幕图像,然后通过UART6串口将RGB565图像数据传输到电脑端并保存为DAT文件,后续采用matlab对图像进行可视化,最后调用yolov5深度学习模型对结果进行识别,具体结果如图3所示:

图3 基于Tencent TIny例程的改进方案:(a)原始图像;(b)实验过程;(c)OV2640采集的数据信息(感觉OV2640拍摄的图像清晰度有点差);(d)基于Yolov5模型的图像识别结果.

附件

最近编写了一个matlab程序,能够直接将串口接收的log数据转化为png图片,具体流程为:1.数据预处理:提取DAT文件中与RGB565有关的数据;2.格式转化:将RGB565转换为RGB888格式;3.图像可视化及保存,具体代码如下:

图4 RGB565的图像格式
clc;clear all;close all;

%% 数据导入
changdu=240;
kuandu=120;
yuanshuju=textread('C:\Temp\matlab\matlab\ReceivedTofile-COM5-2022_7_29_21-50-34.DAT','%s')';%以字符形式打开文件 

%% 数据预处理
qishiweizhi=0;mowei=0;
chishu1=0;chishu2=0;
for i=1:1:length(yuanshuju)
    xiangshu=strsplit(yuanshuju{i},',');
    if strcmp(xiangshu{:,1},'chushi')      
      chishu1=chishu1+1;
      qishiweizhi(chishu1)=i+1;
    end
    if strcmp(xiangshu{:,1},'jiewei')      
      chishu2=chishu2+1;
      mowei(chishu2)=i-1;
    end
end

%% 结果可靠性测试

if (chishu1~=chishu2)
    chishu1=chishu1-1;
end

%% 将RGB565数据转化为RGB数据
R1=5;
G1=6;
B1=5;

for kkk=1:1:chishu1
for i=qishiweizhi(kkk):1:mowei(kkk)
    xiangshu=strsplit(yuanshuju{i},',');
    erjin=dec2bin(hex2dec(xiangshu{:,2}),16);
    rr(i-qishiweizhi(kkk)+1)=2^(8-R1)*bin2dec(erjin(1:5));
    gg(i-qishiweizhi(kkk)+1)=2^(8-G1)*bin2dec(erjin(6:11));
    bb(i-qishiweizhi(kkk)+1)=2^(8-B1)*bin2dec(erjin(12:16));
end

%% 将RGB数据转换为图像
m=1;
for j=1:1:kuandu
    for k=1:1:changdu
        pic(j,k,1)=rr(m);
        pic(j,k,2)=gg(m);
        pic(j,k,3)=bb(m);
        m=m+1;
    end
end

%% 数据归一化及绘图,使矩阵的每个元素的值都在0和1之间
rgb = mat2gray(pic);
subplot(1,chishu1,kkk)
imshow(rgb);
end

原文地址:https://cloud.tencent.com/developer/article/2063995

版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 dio@foxmail.com 举报,一经查实,本站将立刻删除。

相关推荐


linux下开机自启: 在/etc/init.d目录下新建文件elasticsearch 并敲入shell脚本: 注意, 前两行必须填写,且要注释掉。 第一行为shell前行代码,目的告诉系统使用shell。 第二行分别代表运行级别、启动优先权、关闭优先权,且后面添加开机服务会用到。 shell脚本
1、因为在centos7中/etc/rc.d/rc.local的权限被降低了,所以需要赋予其可执行权 chmod +x /etc/rc.d/rc.local 2、赋予脚本可执行权限假设/usr/local/script/autostart.sh是你的脚本路径,给予执行权限 chmod +x /usr
最简单的查看方法可以使用ls -ll、ls-lh命令进行查看,当使用ls -ll,会显示成字节大小,而ls- lh会以KB、MB等为单位进行显示,这样比较直观一些。 通过命令du -h –max-depth=1 *,可以查看当前目录下各文件、文件夹的大小,这个比较实用。 查询当前目录总大小可以使用d
ASP.NET Core应用程序发布linux在shell中运行是正常的。可一但shell关闭网站也就关闭了,所以要配置守护进程, 用的是Supervisor,本文主要记录配置的过程和过程遇到的问题 安装Supervisor 1 yum install python-setuptools
设置时区(CentOS 7) 先执行命令timedatectl status|grep 'Time zone'查看当前时区,如果不是时区(Asia/Shanghai),则需要先设置为中国时区,否则时区不同会存在时差。 #已经是Asia/Shanghai,则无需设置 [root@xia
vim /etc/sysconfig/network-scripts/ifcfg-eth0 BOOTPROTO="static" ONBOOT=yes IPADDR=192.168.8.106 NETMASK=255.255.252.0 GATEWAY=192.168.
一、安装gcc依赖 由于 redis 是用 C 语言开发,安装之前必先确认是否安装 gcc 环境(gcc -v),如果没有安装,执行以下命令进行安装 [root@localhost local]# yum install -y gcc 二、下载并解压安装包 [root@localhost local
第一步 On CentOS/RHEL 6.*: $ sudo rpm -Uvh http://li.nux.ro/download/nux/dextop/el6/x86_64/nux-dextop-release-0-2.el6.nux.noarch.rpm On CentOS/RHEL 7: $
/// <summary> /// 取小写文件名后缀 /// </summary> /// <param name="name">文件名</param> /// <returns>返回小写后缀,不带“.”</ret
which nohup .bash_profile中并source加载 如果没有就安装吧 yum provides */nohup nohup npm run start & nohup ./kibana &
1.1 MySQL安装 1.1.1 下载wget命令 yum -y install wget 1.1.2 在线下载mysql安装包 wget https://dev.mysql.com/get/mysql57-community-release-el7-8.noarch.rpm 1.1.3 安装My
重启 reboot shutdown -r now init 6 关闭 init 0 shutdown -h now shutdown -h 20:25 #8点25关机查看内存 free CPU利用率 top 日期 date 设置时间 date 033017002015 #月日时间年 日历 cal
1、firewalld的基本使用 启动: systemctl start firewalld 关闭: systemctl stop firewalld 查看状态: systemctl status firewalld 开机禁用 : systemctl disable firewalld 开机启用 :
1 下载并安装MySQL官方的 Yum Repository wget -i -c http://dev.mysql.com/get/mysql57-community-release-el7-10.noarch.rpm 使用上面的命令就直接下载了安装用的Yum Repository,大概
CentOS6.x CentOS6中转用Upstrat代替以前的init.d/rcX.d的线性启动方式。 一、相关命令 通过initctl help可以查看相关命令 [root@localhost ~]# initctl help Job commands: start Start job. sto
1、使用命令:df -lk 找到已满磁盘 2、使用命令:du --max-depth=1 -h 查找大文件,删除
ifconfig:查看网卡信息 网卡配置文件位置: /etc/sysconfig/network-scripts/文件夹 nmtui:配置网卡 netstat -tlunp:查看端口信息 端口信息存储位置: /etc/services文件 route:查看路由信息 wget:下载网路文件,例如 wg
ps -ef:查看所有进程, ps -ef |grap firewalld 查看与firewalld相关的进程 which :查看进程:which firewalld kill 进程id:杀掉进程 kill 640,强制杀:kill -9 640 man:查看帮助,例如 man ps 查看
useradd:添加用户 useradd abc,默认添加一个abc组 vipw:查看系统中用户 groupadd:添加组groupadd ccna vigr:查看系统中的组 gpasswd:将用户abc添加到ccna组 gpasswd -a abc ccna groups abc:查看用户abc属