本发明公开了一种基于Linux的视频图像处理的网络传输监控系统。所述系统包括顺序连接的采集图像数据单元、嵌入式网络监控服务器单元、网络传输单元和客户端监控单元,所述嵌入式网络监控服务器单元的处理器内核为搭载Linux操作系统和H.264编码单元的ARM926,ARM926通过TCP/UDP协议对控制流和视频流进行打包发送,客户端监控单元通过VLC media player解码播放。本发明同时还公开了基于Linux的视频图像处理的网络传输监控系统的实现方法,这种方法图片压缩率高、网络传输时延少,视频图像传输效率高,视频能在客户端清晰、流畅地显示,能满足监控需求。