多媒体技术的综合应用

--- 智能视频监控系统
（ IVS:Intelligent Video Survaillance ）

智能视频监控系统概述
智能视频监控的典型应用场景
智能视频监控系统的构成
智能视频监控面临的问题
智能视频监控的应对策略

Page: 1 Date:24/1/29
一、 IVS 概述
 监控技术的发展

传统视频监控
传统视频监控 电子眼 ( 采集与传输：模拟、数字 ) ＋人脑

智能视频监控
智能视频监控 电子眼＋电子脑

 智能视频监控源自于计算机视觉的一个应用方向。其概念主要是指
由机器自动分析视频图像源，从中识别并提取出有用的关键信息，
并自动控制机器进行相应动作 。

Page: 2 Date:24/1/29
 IVS 概述
 为什么需要智能视频监控

 传统监控模式下，保安人员
需要监视太多的视频画面，
远远超出人的接受能力。
 实验表明：盯着视频 22 分
钟之后人眼将对视频画面里
95% 以上的信息视而不见
。

Page: 3 Date:24/1/29
 IVS 概述
 IVS 的优点

 自动“观看”视频并加以分析，增加有效性。

 主动发出警示，监控不再是马后炮。

 自动进行目标的识别和事件的统计。

 解放人力降低成本。

人的视觉系统 智能视频监控

 本质上是给监控 眼睛 摄像机

装上永不疲倦的 大脑 智能视频
智能视频分析 分析单元
“大脑”。 IVS
（模式识别、计算机视频、
人工智能等处理）

Page: 4 Date:24/1/29
二、智能视频监控典型应用

Page: 5 Date:24/1/29
金融系统的智能监控

ATM 监控
银行出入口
柜台交易
外围周界防范 TCP/IP

金库

Page: 6 Date:24/1/29
功能演示

ATM 机前徘徊 可疑人员靠近

室内人数统计 进出门人数统计
Page: 7 Date:24/1/29
交通行业应用

智能交通的功能：
交通违法
拥堵检测
事故检测
车流量统计
车速统计
停车检测
交通拥堵检测

Page: 8 Date:24/1/29
车站、机场、体育馆等公共场所

 场馆客流分析
 区域人数统计
 移除检测
 遗留侦测
 尾随检测

客流量统计

Page: 9 Date:24/1/29
无人值守场地

停车场

无人值守周界防范

Page: 10 Date:24/1/29
 平安城市建设及特殊场所应用

 打击、震慑、预防犯罪
民众免于恐惧
 监狱监控
 军械库看护
 哨所入侵检测
 场所周边入侵检测

Page: 11 Date:24/1/29
森林防火智能防范

适用于各种森林复杂场景
明火隐患智能监测
烟雾感应智能识别
灾备及预警
人员异常检测

Page: 12 Date:24/1/29
三、智能视频监控系统的构成
 视频的采集

 视频压缩、解压缩
 视频的传输
 视频的存储
 视频的分析
 决策

Page: 13 Date:24/1/29
校园监控系统实例与趋势

趋势：摄像头功能在加强、
网络、目标检测…
Page: 14 Date:24/1/29
四、智能视频监控面临的问题

Page: 15 Date:24/1/29
视频自身的限制
目标众多：恐怖份子在哪 遮光：算出在车内有多少人

像素：识别 4 个像素的“人” 天气：看穿浓雾

= ?

Page: 16 Date:24/1/29
智能技术面对的挑战

统计车流量？ 有人徘徊？

检测横穿公路？ 周界防范？
Page: 17 Date:24/1/29
特殊场景的影响

下雨／下雪 红外灰度图像 水面

夜晚低对比度 车灯抑制 严重阴影

Page: 18 Date:24/1/29
五、应对策略 1 ：高清视频

Page: 19 Date:24/1/29
已进入高清时代
 改善传统视频监控的瓶颈

图像清晰度不够高，已达到瓶颈！

Page: 20 Date:24/1/29
高清视频定义

分辨率： 352×288 清晰度： 300 线左右 约为 10 万像

CIF 素
码流： 384Kbps 录像文件： 200M/ 路 / 小时

分辨率： 704×576 清晰度： 500 线左右 约为 44 万

D1 像素
码流： 1.5Mbps 录像文件： 750M/ 路 / 小时

分辨率： 1280×720 清晰度： 800 线左右 约为 90 万像

720p 素
码流： 3Mbps 录像文件： 1500M/ 路 / 小时

1080i 分辨率： 1600×1200 清晰度： 800 线左右 约为 190 万像

素
码流： 4Mbps 录像文件： 3000M/ 路 / 小时

Page: 21 Date:24/1/29
高清时代的来临

高清全屏显示，图像细节更清晰，视觉新体验

Page: 22 Date:24/1/29
 1600

1600 200 万像素

200 万像素

1280

130 万像素 1200

704
44 万像素

720
352 576
10 万像素

288

Page: 23 Date:24/1/29
已进入高清时代

清晰度是普通 D1 画质的 3 倍！

CIF D1 HD

Page: 24 Date:24/1/29
 高清视频解决方案
全数字监控模式：高清 IP Camera(IVS) + NVR + IP SAN
NVR: Network Video Recorder SAN ： Storage Area Network
存储和管理大量的数据

百万像素网络摄像机 NVR + IP SAN 液晶电视

Page: 25 Date:24/1/29
高清视频解决方案

Page: 26 Date:24/1/29
 应对策略 2 ：人工智能技术的进步

网络技术 网络视频技术

智能视
频监控
计算机视觉
人工智能为计算机
视觉提供了更高级
别的理解和决策能
力，使用机器学习
计算机视觉使用图像处理、
特征提取、目标检测、图 知识推理和决策制
像分割等技术，以实现对 人工智能 定等方法自动分析
和抽取视频源中的
视觉数据的分析和理解，
理解和解释视频中的内容。 关键信息，模拟人
类的智能能力。

24/1/29
Page: 27 Date:24/1/29
 智能监控技术的发展
传统视频监控的应用 - 看得到
图像去噪、去雾、防抖等预处理
低级智能 - 看清楚 图像增强还原
高清晰度图像处理及显示

目标分类及跟踪
图像区域分割与拼接
智能技术 中级智能 - 看明白
非法入侵、滞留和遗失检测
多信息融合

人脸、车牌的自动纪录、比对、识别
人群、车辆等计数及流量控制
高级智能 - 自动化 行为的判断和识别
视频存储和检索
结合实战处置和预案调用
Page: 28 Date:24/1/29
 智能视频监控数据处理与分析

图像获取

图像预处理

目标检测 目标跟踪 目标识别 行为理解

决策 行为评估

智能视频监控结构框图

Page: 29 Date:24/1/29
 智能监控的关键技术
目标检测
帧差法
背景差法
混合高斯模型
目标跟踪
粒子滤波器
目标识别
模式识别 ( 与对象相关、 OCR 、车牌、图像检
索)
行为理解
人体行为理解
交通行为理解
深度学习：视频监控数据处理与分析的新贵。
Page: 30 Date:24/1/29
 应对策略 3 ：工程层面

摄像机的安装及选型

安装补光设备或使用红外摄像机

合理的设置规则及参数

系统应用层面的取舍

Page: 31 Date:24/1/29
摄像机选型

全景摄像机 红外摄像机 热成像摄像机

不同照度下需要用不同类型的摄像机，弱光环境下需要补光设备。

Page: 32 Date:24/1/29
摄像机的选型和安装

高度 室内摄像机距地面不宜低于 2.5 米，不

高于 5 米，室外距地面不宜低于 3.5 米
。
角度 摄像机角度要能够保证获取尽量多
的视频信息。

光照影响 摄像机镜头避免强光直射及干扰。

遮挡 视场内没有遮挡重要监视目标的物体。

Page: 33 Date:24/1/29
摄像机安装

解决方案 高度
角度
位置

Page: 34 Date:24/1/29
避免强光和逆光情况

Page: 35 Date:24/1/29