jpeg图片接收显示测试上位机[串口网络摄像头上位机软件开源]

xijiele · 发表于 2016-1-5 21:04:40

之前用过一个类似软件，只能用串口接收，而且速度有限，并且还很耗CPU。前不久调USB摄像头的时候自己用C++写了一个，支持串口接收和网络接收JPEG图像序列。现在发出来给需要的同学，方便各位的程序调试。

串口接收功能：
串口端口无限制，自动检测电脑可用端口，波特率从9600到921600可选，默认不支持流控制和奇偶校验，8位数据位一位停止位。不需要通信协议，自动从接收的数据中判断JPG数据的起始(FFD8)结束(FFD9)标志，不包含在起始结束标志之间的数据默认为非jpg数据并显示在数据接收窗口（目前只支持文本显示，16进制暂未实现），支持接收数据量显示，帧速率显示（可能计算的不太准确），一帧JPG图像数据大小显示，图像分辨率显示。串口发送功能暂未实现。

网络接收功能：
上位机也支持通过网络接收JPG图片序列。数据接收功能和图像显示功能同串口。上位机默认作为服务器端，且暂时只支持TCP服务器，UDP未实现。目前只支持一个客户端的连接，可显示客户端的连接状态和IP。

注意：
串口接收功能和网络接收功能可同时开启，但如果同时接收数据会造成数据混乱从而导致图像显示不正常。
串口和网络的发送功能均暂未实现（暂时用不到发送功能）。
本人实测通过TCP本地回环接收TCP客户端发来的MJPG编码的1080P avi视频文件，网络速度3~5MB/s（360加速球显示），图像显示速率20~30fps，CPU（i5 750）占用25%左右，串口传输效果可以看这里链接里的视频http://pan.baidu.com/s/1jGDA9s6
软件目前还算稳定，之前测试传输了几个小时的图像也没什么问题，可能还有些小bug，欢迎反馈。

测试截图

添加不了附件了，二楼传

tyutzz10261 · 发表于 2016-9-14 09:33:17

楼主问一下这个软件怎么使用呢，有没有具体的说明，我现在用OV7670摄像头采集数据直接通过串口发送的到软件，数据只在文本接收区显示，在图像区什么都没有，是要将摄像头数据转成bmp或是jpeg格式还是怎么弄，另外开头的FFD8和结尾的FFD9需要怎么加上去？

正点原子 · 发表于 2016-1-7 00:10:33

报错：
WIN7 64位。报如下错误：
无标题.png

正点原子 · 发表于 2016-1-9 17:33:35

10楼的软件,有几个问题.

1.波特率无法支持到921600.
2,右侧的图片显示区域,如果不同时刻发不同的尺寸过来,之前的图片,可能会有残影.
3,图片显示区域,如果可以最大化,最小化设置,效果会更好.(显示大图片.)

xijiele · 发表于 2016-1-5 21:06:14

附件：上位机程序

xijiele · 发表于 2016-1-5 21:13:34

对了有个限制是一帧图片数据大小不能超过2MB

负西弱 · 发表于 2016-1-6 13:25:40

Mark,有需要时拿来用用

xijiele · 发表于 2016-1-6 20:55:56

更新一下：之前的FPS计算是基于两帧图像的时间间隔计算，跳动比较大，不易观察，现在改为1s更新一次，数据更稳定。有MJPG网络视频传输需求的同学可以试试

正点原子 · 发表于 2016-1-7 00:08:34

不错，刚好需要用到。

同志们辛苦了 · 发表于 2016-1-7 08:57:55

你这不是程序啊

jermy_z · 发表于 2016-1-7 09:02:22

win10 64位报错提示信息跟原子的一样

xijiele · 发表于 2016-1-7 10:27:03

本帖最后由 xijiele 于 2016-1-7 10:41 编辑

正点原子发表于 2016-1-7 00:10
报错：
WIN7 64位。报如下错误：

@jermy_z
用静态库重新编译了一下，应该不会再出现缺失DLL的问题。下一步增加TCP客户端模式的网络接收~

UartDisplay静态编译.rar (2.24 MB, 下载次数: 9860)

正点原子 · 发表于 2016-1-9 17:22:33

xijiele 发表于 2016-1-7 10:27
@jermy_z
用静态库重新编译了一下，应该不会再出现缺失DLL的问题。下一步增加TCP客户端模式的网络接收~
...

这个可以了

正点原子 · 发表于 2016-1-9 17:42:21

这是我测试的,顺便把问题说下.
希望可以改进下.

无标题.png

正点原子 · 发表于 2016-1-9 18:09:09

另外,测试500W像素的jpeg文件时,无法正常显示.
照片分辨率:2592*1944
文件大小:2.5MB左右

1920*1080的显示OK.

xijiele · 发表于 2016-1-9 22:43:26

正点原子发表于 2016-1-9 17:33
10楼的软件,有几个问题.

1.波特率无法支持到921600.

感谢原子哥测试，有些问题其实我也发现了，既然有了需求也就有了改的动力，哈哈。
1.波特率我记得之前添加了921600的啊，难道是发的版本不对？
2.残影的问题可以点清除图像来清除之前的图像，就不会叠加到后面的图像上了，因为没有考虑传输过程中分辨率的改变，因此没有清除之前的图像，下一版显示图像前清除之前的试试，不知道会对显示效果和效率有多大影响。
3.最大化显示区域这个建议不错，可以考虑，看实现的难易度吧，咱也不是专业搞C++

。
4.楼上之前说过了图片大小2M限制，超过的话会有问题，下一版加到5M或手动设定？
5.图像文件保存下一版可以添加。其实之前已经准备实现保存avi功能，不过还没太弄清楚avi头数据的格式，然后有其它任务就没弄了，后续看时间和需求考虑是否添加。

正点原子 · 发表于 2016-1-10 00:42:47

xijiele 发表于 2016-1-9 22:43
感谢原子哥测试，有些问题其实我也发现了，既然有了需求也就有了改的动力，哈哈。
1.波特率我记得之前添 ...

恩，最近在调试OV5640，所以需要一个这样的软件。之前2640配套的那个，波特率高了会有问题，所以，比较郁闷。你这个刚好符合我的要求，所以就用了起来。

可以的话，到时候会配套我们的STM32开发板，放光盘给广大网友使用。
感谢楼主分享。

正点原子 · 发表于 2016-1-12 00:29:03

xijiele 发表于 2016-1-9 22:43
感谢原子哥测试，有些问题其实我也发现了，既然有了需求也就有了改的动力，哈哈。
1.波特率我记得之前添 ...

1，可能吧。最好支持921600.
4,5M差不多了。500W摄像头，最大也就2.5M左右。
5，这个功能比较有用，建议加上。

xijiele · 发表于 2016-1-12 16:47:39

正点原子发表于 2016-1-12 00:29
1，可能吧。最好支持921600.
4,5M差不多了。500W摄像头，最大也就2.5M左右。
5，这个功能比较有用，建 ...

更新一下进度，发布2.0 beta版：
解决BUG:
1. 添加921600波特率
2. 接收图片分辨率改变时清空先前图片再显示，防止叠加
3. 图片接收缓冲区调整到5MB
新增功能包括：
1. 新增TCP客户端接收模式
2. 新增图片保存功能
3. UI的修改
4. 新增图片大窗口预览功能（目前还有问题，在关闭预览窗口后可能造成程序崩溃或部分无响应）

其实上面这些内容昨天就已经完成了，只是大窗口预览的BUG一直找不到原因，现在仍未解决。如果不使用这个功能，其他基本正常（如果还有其他BUG欢迎指出）。本来是打算解决这个问题后再发布，不过为了刷一下存在感，还是先发布一个尝鲜版吧

UartDisplay_V2.0beta.rar (2.24 MB, 下载次数: 7229)

xijiele · 发表于 2016-1-15 17:54:35

正点原子发表于 2016-1-12 00:29
1，可能吧。最好支持921600.
4,5M差不多了。500W摄像头，最大也就2.5M左右。
5，这个功能比较有用，建 ...

发布2.1版啦：
功能改进主要是解决上一版大图预览功能的BUG。上一版的BUG找了好久还是没找到，山穷水尽时突然想到为什么不就在当前窗口显示？于是问题就顺利解决了。
这一版使能了窗口最大化按钮，窗口控件根据窗口大小自动调整，图片显示范围增大。同时还是保留双击大图预览功能，不过是直接在当前窗口预览，会覆盖掉其它控件，仅保留底部状态栏。然后上一版TCP客户端模式连接服务器时没有处理连接超时的情况，这一版已修正。还是那句话，有什么bug欢迎反馈！

UartDisplay_V2.1.rar (2.24 MB, 下载次数: 9426)

zuoyi · 发表于 2016-1-16 09:13:13

很牛！

正点原子 · 发表于 2016-1-18 21:10:45

xijiele 发表于 2016-1-15 17:54
发布2.1版啦：
功能改进主要是解决上一版大图预览功能的BUG。上一版的BUG找了好久还是没找到，山穷水尽 ...

不错,我试试.

正点原子 · 发表于 2016-1-18 21:37:04

测试了下,921600可以了.
也可以大图预览.非常不错.

发两张用OV5640拍的照片:

问题:偶尔会死机,报:管道数据溢出.....

xijiele · 发表于 2016-1-19 09:24:42

本帖最后由 xijiele 于 2016-1-19 09:44 编辑

正点原子发表于 2016-1-18 21:37
测试了下,921600可以了.
也可以大图预览.非常不错.

问题:偶尔会死机,报:管道数据溢出.....

这个问题多久出现一次？我这边一般测试是用网络传输测试，还从来没出现过这种情况，串口的921600也测试过，不过测试得不多。
现在数据的处理和图片的解码都在界面线程中处理，在数据量比较大，图片分辨率比较高的时候界面线程处理任务比较重，可能导致程序无响应。下一步是考虑把数据处理和图片解码放在独立的线程，界面线程只负责图片显示和消息响应。

正点原子 · 发表于 2016-1-19 10:31:27

xijiele 发表于 2016-1-19 09:24
这个问题多久出现一次？我这边一般测试是用网络传输测试，还从来没出现过这种情况，串口的921600也测试 ...

经常.
具体的步骤: 设置921600接收图片.打开串口. 正常接收....
如果此时选择保存图片,然后设置保存路径.然后就死了....

整个界面卡住,然后关闭的时候,就提示管道数据溢出

xijiele · 发表于 2016-1-19 15:36:10

正点原子发表于 2016-1-19 10:31
经常.
具体的步骤: 设置921600接收图片.打开串口. 正常接收....
如果此时选择保存图片,然后设置保存路 ...

我这边用921600波特率传输640x480的图片按照你说的操作测试了好几次，但是是没遇到什么问题，只是在传输数据时选择保存图片弹出对话框的时候会稍微卡一下，但不至于卡死。至于后面数据溢出可能是程序卡死所致。如果出现这种问题可以在接收图片前设置保存路径再开始接收。在921600波特率传输的时候串口数据接收本身就会比较占用CPU，然后再加上界面线程的处理，如果CPU处理不过来的话是有可能造成卡死。因此上面提到了下一版的计划，看能不能有所改善。

正点原子 · 发表于 2016-1-19 23:21:01

xijiele 发表于 2016-1-19 15:36
我这边用921600波特率传输640x480的图片按照你说的操作测试了好几次，但是是没遇到什么问题，只是在传输 ...

恩,我现在就是这么搞的.先设置好,再打开串口.

login_FAE · 发表于 2016-1-20 22:31:50

你好，麻烦问下，串口收到的数据，你怎么处理的呢？
是一帧一帧的截取再显示么，还是有其他的方法
谢谢，
我现在是这样想的，定时处理收到的数据，取出其中一帧jpeg数据再用pictureBox来显示，怕这样来处理显示速度会限制很多
不知道大神用的什么方法

STM32_2022 · 发表于 2016-1-21 07:28:39

很牛！

xijiele · 发表于 2016-1-22 22:55:18

login_FAE 发表于 2016-1-20 22:31
你好，麻烦问下，串口收到的数据，你怎么处理的呢？
是一帧一帧的截取再显示么，还是有其他的方法
谢谢， ...

当然是收到一帧显示一帧啦，定时处理的话如果传入的帧速率快了怎么办？处理不过来的直接丢掉？我现在最新的版本是在一个线程里不停的读取串口或网络传过来的数据（当然，没数据会阻塞，不会一直耗CPU），检测到数据里的FFD8后把后面直到FFD9的数据存入一个帧数据缓冲区，然后解码，并存储到一个CImage类，解码完后通知界面线程更新图像，界面线程调用CImage的Draw()方法绘图，这样界面线程的处理压力减少了很多，不会出现高速率高分辨率的情况下界面无响应的问题了。测试通过网络的方式接收320*240的avi视频，图像更新速率最快可以达到250fps以上。不过这个版本目前串口接收貌似出了点问题，周末没硬件，周一再调试了。

hehelloook · 发表于 2016-2-4 09:28:48

GAO DA SHANG!

xijiele · 发表于 2016-2-19 19:36:05

很久没更新了，发布一下2.2版本：
更新内容：
1. 采用独立线程负责串口和网络数据的接收及图像解码，界面线程只负责显示和事件响应，降低了CPU占用，解决了界面卡顿的问题
已知BUG：
1. 文本接收窗口显示有问题（不影响图片接收和显示）。

UartDisplay_V2.2.rar (2.26 MB, 下载次数: 7416)

2016-2-19 18:54 上传

点击文件名下载附件

关于BUG的描述：
由于采用的MFC的CEdit控件，而这个控件有个蛋疼的地方是当文本显示内容多了之后需要垂直自动滚动到文本末尾也就是最下面一行，而现在的情况是每刷新一遍CEdit的时候光标都会自动回滚到文本开始的地方，然后需要重新设置滚动条滚动到末尾，这在一般情况下没问题，但是在这种动态滚动刷新速度比较快的情况下会出现文本和滚动条高速来回滚动造成闪烁。同时CEdit里的文本只支持\r\n换行，\r或\n或\n\r都不会自动换行，因此加了在更新CEdit的时候将其中的\n\r替换成\r\n的操作，然而如果连续有多个\n\r或\r\n最终都会被替换掉只剩一个\r\n，因此显示出来会缺少空行。另外文本的暂存现在选用的是CString，收到一个字符就Append进去，这样处理效率也不高。前一个滚动的问题在网上找了好久没找到合适的解决方案，再加上换行和效率的问题，最后只有考虑放弃使用CEdit自己实现一个（不知道用RichEdit行不行），在网上也找到了参考代码，不过最近没太多时间弄，以后有时间再尝试下。

其实这个版本年前就弄好了，只不过接近放假，心都飞了。程序拷回去准备在家里调调，回到家才想起家里没网啊，又不能百度又不能查MSDN怎么调啊。年后又开始忙了。
看到有人私信求源码，我想了想，也就不藏着掖着了，不是什么高深的东西，串口和网络是一般嵌入式开发上位机常用的两种与下位机通信的接口，估计很多人也想了解，下面就把源码放出来吧，代码写的不好请轻喷。如果有人能完善我的代码或者添加其他功能，希望也能分享出来，一起交流，多多支持开源计划。

UartDisplay_2.2_SRC.rar (782.79 KB, 下载次数: 7364)

xijiele · 发表于 2016-2-19 19:39:06

另外如果有人有好的解决上述文本显示BUG的方法，请不吝赐教

xijiele · 发表于 2016-2-19 19:40:33

本帖最后由 xijiele 于 2016-2-19 19:42 编辑

@正点原子 @pyatao @login_FAE

正点原子 · 发表于 2016-3-27 17:24:31

xijiele 发表于 2016-2-19 19:36
很久没更新了，发布一下2.2版本：
更新内容：
1. 采用独立线程负责串口和网络数据的接收及图像解码，界面 ...

不错了.我用2.1的时候,基本上就没有太大的bug了.
我没有用到文本显示功能,我直接用网络/串口摄像头显示摄像头数据,这个时候,貌似你的文本框是不会显示东西的,除非有错误出现.

非常感谢您的软件.我们打算放在我们的开发板光盘,给广大电子爱好者使用.
如果可以的话,能否修改该软件的名字?

整鼓猩 · 发表于 2016-3-29 21:30:28

如果添上我的SPI通用500万像素摄像头那就很棒了！有兴趣可以参考本店推出的SPI接口通用500万像素拍摄模块。https://item.taobao.com/item.htm ... amp;id=522561627321

lyh18259893679 · 发表于 2016-3-30 20:15:45

整鼓猩发表于 2016-3-29 21:30
如果添上我的SPI通用500万像素摄像头那就很棒了！有兴趣可以参考本店推出的SPI接口通用500万像素拍摄模块。 ...

我刚买了你得摄像头模块

小梅哥 · 发表于 2016-3-31 08:54:10

太棒了，楼主的这个软件。楼主可以设置一个几块钱的注册费，我们可以帮忙推广，因为我们的系统中也想用到这个软件，（我们是做fpga开发板的），但是直接免费使用感觉有点儿不地道。

整鼓猩 · 发表于 2016-3-31 21:33:42

lyh18259893679 发表于 2016-3-30 20:15
我刚买了你得摄像头模块

谢谢支持~

xijiele · 发表于 2016-4-3 20:10:19

正点原子发表于 2016-3-27 17:24
不错了.我用2.1的时候,基本上就没有太大的bug了.
我没有用到文本显示功能,我直接用网络/串口摄像头显示 ...

可以的，没问题，我当初也没多想只是随便起了个名字，原子哥如果有更好的名字也可以换，或者自己编译一个也行。后来又用了几次，发现在视频流中显示和处理文本的部分效率实在太低，自己又编译了一个版本把文本显示给关了...

xijiele · 发表于 2016-4-3 20:16:51

小梅哥发表于 2016-3-31 08:54
太棒了，楼主的这个软件。楼主可以设置一个几块钱的注册费，我们可以帮忙推广，因为我们的系统中也想用到这 ...

没关系的，这个软件能方便大家就好，说实话我都还不知道要怎么设置个注册限制呢

，你们用着好就行，用着不好就自己改改源码编译一个吧

正点原子 · 发表于 2016-4-3 20:41:35

xijiele 发表于 2016-4-3 20:16
没关系的，这个软件能方便大家就好，说实话我都还不知道要怎么设置个注册限制呢，你们用着好就行，用 ...

注册没必要了，呵呵。

352308347@qq.co · 发表于 2016-4-6 12:08:46

感谢分享,哈哈哈,不过,我不知道怎么用

,摄像头怎么跟电脑连接?还是先通过单片机,再用单片机和网络连接?

745021926 · 发表于 2016-4-6 19:14:01

这个太牛了，必须膜拜LZ

zcf287 · 发表于 2016-4-10 15:05:42

牛逼，非常好啊

qsqs842 · 发表于 2016-5-2 15:18:08

东西很好收下了，谢谢LZ

phoenix · 发表于 2016-5-5 02:02:51

正点原子发表于 2016-1-10 00:42
恩，最近在调试OV5640，所以需要一个这样的软件。之前2640配套的那个，波特率高了会有问题，所以，比较郁 ...

请问，您调试的OV5640是基于stm32平台吗？是将要有OV5640模块上架销售吗？大概是什么时候？非常期待！如果兼容探索者开发板就更好了。

luyongyun · 发表于 2016-5-5 09:00:27

非常感谢楼主的无私分享

蓝色天空 · 发表于 2016-5-6 21:06:28

大牛，请问一下串口发送格式用不用命令头跟尾，谢谢

不同 · 发表于 2016-5-10 17:41:06

谢楼主分享

1023583350 · 发表于 2016-5-13 21:08:46

正点原子发表于 2016-1-9 18:09
另外,测试500W像素的jpeg文件时,无法正常显示.
照片分辨率:2592*1944
文件大小:2.5MB左右

原子哥，stm32f07开发板能提供多大的帧数输出呢？串口的fps最大能多大？网口的呢？
为什么我的都是1点几fps，不流畅，但网口好像有时fps跑飞了，达到60以上

帐号		自动登录	找回密码
密码			立即注册

jpeg图片接收显示测试上位机[串口 网络 摄像头上位机软件 开源]

原子哥极力推荐 /2

jpeg图片接收显示测试上位机[串口网络摄像头上位机软件开源]