智能监控国内外研究现状

智能监控具有广泛的应用前景和潜在的经济价值，从而激发了世界上广大科研工作者及相关人士的浓厚兴趣，尤其在美国、英国等国家已经开展了大量相关项目的研究。例如，1997年美国国防高级研究项目署(DefenseAdvancedResearchProjeCtSAgency)设立了视觉监控重大项目VSAM主要研究用于战场及普通民用场景进行监控的自动视频理解技术。实时视觉监控系统不仅能够定位人和分割出人的身体部分，而且通过建立外观模型来实现多人的跟踪，并可以检测人是否携带物体等简单行为。英国的雷丁大学(UniversityofReading)己开展了对车辆和行人的跟踪及其交互作用识别的相关研究;国际上很多权威期刊将智能监控中人的运动分析研究作为主题内容之一，为该领域的研究人员提供了更多的交流机会。

在我国，这方面的研究近几年才开展起来的。中国科学院自动化研究所模式识别国家重点实验室己经成立智能视觉监控研究组，开展这方面的研究，目标是实现一个动态场景集成分析演示系统并最终推向实用。第一届全国智能视觉监控学术会议于2002年5月25一26日在北京市西郊宾馆成功举行。国内有一些视频监控方面的产品，如Anychat、黄金眼、行者猫王等，应用于交通控制，监狱管理等方面。另外，国内产品还有数字硬盘录像系统(DVR)，将监控区域内有运动对象出现的情况录制下来，以备查询，该系统只是简单的检测出有无运动对象，而没有对运动对象做任何分析。

由于国内的研究起步较晚，技术还不够完善，开发出的产品距离智能化还有一定差距，在实际的应用中，受到很多限制，还有待于进一步的完善。

虽然目前监控摄像机在商业应用中己经普遍存在，但并没有充分发挥其实时主动的监督作用，因为它们通常是将摄像机的输出结果记录下来，当异常情况(如停车场中的车辆被盗)发生后，保安人员才通过一记录的结果观察发生的事实，但往往为时已晚。而我们需要的监控系统应能够每天连续24小时的实时智能监视，并自动分析摄像机捕捉的图像数据，当异常发生时，系统能向保卫人员准确及时地发出警报，从而避免犯罪的发生，同时也减少雇佣大批监视人员所需要的人力、物力和财力的投入。

智能视觉监控就是要用计算机视觉的方法，在不需要人为干预的情况下，通过对摄像机拍录的图像序列进行自动分析，实现对动态场景中目标的定位、识别和跟踪，并在此基础上分析和判断目标的行为，从而做到既能完成日常管理又能在异常情况发生的时候及时做出反应。

智能监控系统的需求主要来自那些对安全要求敏感的场合，如银行、商店、停车场等。另外，智能监控系统在自动售货机、ATM机、交通管理、公共场所行人的拥挤状态分析及商店中消费者流量统计等方面也有着相应的应用。

从功能上讲，视频监控可用于安全防范、信息获取和指挥调度等方面，可以提供生产流程控制、大型公共设施的安防，也能为医疗监护、远程教育等提供各种服务。

从应用领域上看，视频监控在各行各业都得到了广泛的应用，除了档案室、文件室、金库、博物馆等重要部门的监视和报警，在公共场所进行安全监控，在其他经济和生活领域进行管理和控制也是必不可少的。

具体应用实例有:

:营业大厅监控、金库的监控、自动提款机及自助银行监控等。

电信/电力领域:交换机房、无线机房、动力机房等的远程监控、变电站、电厂等的远程无人值守监控。

商业市场:商场的保安监控、超级市场的出入口监控、码头、货柜、大型仓库的监管等。

军事领域:基地安防、公安侦破、监狱法庭管理等。我国有上万公里的海岸线和边境线，与多个国家毗邻。准确及时地掌握边海防区域的军事情况，对于有效保卫祖国的领海和领土，在未来战争中做出快速反应、掌握战争主动权有着极其重要的意义。建立边海防远程视频监控系统，对关键口岸、哨所和敏感地区实施监控，就能使我军情报部门直观、及时地监控边海防前线的当面情况，提高情报获取的实时性和综合处理能力，也能有效防止偷渡、出逃、走私、贩毒等非法行为。

:高速公路收费管理、交通违章和流量监控、公共交通车辆牌照管理、公路桥梁铁路机场等场所的远程图像监控等。有效的交通管理是我国各大都市面临的难题。智能视频交通控制系统能及时提供各路段的车辆流量和路况信息，记录违章车辆，以便实现准确快速的交通指挥调度，达到充分利用现有的道路资源，提高突发交通事故的处理能力，从而为人们的出行提供快捷舒适的交通服务。

社区物业管理:住宅小区、办公室的安全防范、智能大厦、停车场的无人监控等。

只需在现有的家庭微机上增加USB摄像头和相应的软件系统，就可实现功能强、价格低、性能可靠的数字化家庭监控系统。系统自动检测在家中采集到的图像，当发现异常时，通过Internet和短消息中心向用户指定的电话号码发送短消息，并将现场图像以Email方式发送给用户。用户收到短消息后通过检查Email就可对家中情况有清楚的了解。此外，用户出差在外时，也可以远程登录到家中计算机，观看家中安全情况或家人的生活健康状况。

智能行为识别当前比较主流的识别归类:

能区分出移动物体的类别和行为，是轿车，还是摩托车、还是人、还是飞机等等，同时还能判断移动物体是行走、倒下、速度或其他，这是其他识别的基础。

在视频画面上人为的画一道线或曲线，可以识别出物体穿越此界限的行为。比如视野是个马路上，画一条线把道路分成两端，假设定义了从左到右是合法，从右到左为非法，一旦车辆行驶跨越了这个界线，设备判断其是否非法，非法则产生报警。

识别处移动物体之后，能在移动的元素后面画出其运动经过场所的轨迹。如广场、车站等公众场所，人流穿梭，设备能显示并记录下每个人的走动轨迹，如果一个人长时间在视野中徘徊游荡，超过一定时间，则设备自动报警提示发现可疑行为人物。若使用多摄像头跟踪，可结合行人重识别技术。

设备能识别出视野场景中的物体多出一个或者少了一个，适合仓库、车站、展厅、安检等场所，如果有背包长时间丢失在某处无人拾取，超过设定的时间，系统将产生报警，或者像展厅这些场所，如果展示品缺少一件，设备也能发现并报警。

如果视频场景是个道路口或者小区出入口;只要车牌区域在视频中出现过，设备能自动识别出车牌号码;并以文字的方式提示用户。可以用于违规车辆稽查，比如某牌照车辆在事故后逃逸不知去处，如果市内各要道口都有智能识视频服务器，系统只有通过网络一次性把一个或几个需要稽查的车牌号码设置到系统中的各个智能设备中，一旦此牌照的车辆在视野中出现过，就能立即告警。节省许多警力资源。

比如高速路上有200M的速度提示区，时时提醒驾驶员不要超速行驶，然而超速行驶还是屡屡发生;试想如果在高速路上安装一个智能视频服务器，我们只要在视野中画两道线，如果确知这两道线的实际距离是100M，输入到设备中，设备就能自动计算出每个进过车辆的速度，并且超速时立即报警。

智能设备能识别出过往的行人和车辆，同时能统计出过往的人或车的数量;试想在一个十字路口或者一个会展中心的门口，安装这样一个智能设备，就能统计处过往车流量或人流量。为公交调度提供更多更及时的信息。

比如单行道，或者车站、机场的出口或入口，车流人流都是单方向的，一旦有人逆行，系统会自动识别出，并产生报警。

原本洁净的墙面，被人乱贴小广告、电话或者乱涂乱画等，有碍市容。有了智能监控系统设备，就能及时发现这样的涂鸦行为，并及时告警。

公园、广场、车站等公众场合，人流众多，任何突发的危害人身安全的行为都可能造成重大损失和负面影响。智能识别系统，能及时发现人或车辆的异常行为，突然奔跑、摔倒，追打等行为，系统都会及时发现并提醒管理者。

智能监控(Intelligent Surveillance)是嵌入式视频服务器中，集成了智能行为识别算法，能够对画面场景中的人或车辆的行为进行识别、判断，并在适当的条件下，产生报警提示用户。

尽管在智能监控领域已经取得了一定的进展，但是在以下几个方面仍是今后研究的难点问题。

快速准确的运动分割是个相当重要又是比较困难的一个问题。这是由于动态环境中捕捉的图像受到多方面的影像，比如天气的变化，光照条件的变化，背景的混乱干扰，运动目标的影子，物体之间或者物体与环境之间的遮挡，以及摄像机的运动等。这些都给准确有效的运动分割带来了困难，以运动目标的影子为例，他可能与被检测目标的相连，也可能与目标分离，在前者情况下，影子扭曲了目标的形状，从而使得以后基于形状和基于状态空间模型的方法定义每个静态姿势作为一个状态，这些状态之间通过的识别方法不再可靠;在后者情况下，影子有可能被误认为为场景中一个完全错误的目标。尽管目前图像运动分割主要利用背景减除方法，但如何建立对于任何具有自适应性的复杂环境中动态变化的背景模型仍是相当困难的问题。一个可喜的发展是，一些研究者们正利用时空统计的方法构建自适应的背景模型，这对于不受限环境中的运动分割而言是个更好的选择。

目前，大部分智能监控系统都不能很好地解决目标之间互遮挡和人体自遮挡问题，尤其是在拥挤状态下，多人的检测和跟踪问题更是难处理。遮挡时，人体只有部分是可见的，而且这个过程一般是随机的，简单依赖于背景减除进行运动分割的技术此时将不再可靠，为了减少遮挡或深度所带来的歧义性问题，必须开发更好的模型来处理遮挡时特征与身体各部分之间的准确对应问题。另外，一般系统也不能完成何时停止和重新开始身体部分的跟踪，即遮挡前后的跟踪初始化缺少自举方法。当然，可喜的进步是利用统计方法从可获得的图像信息中进行人体姿势、位置等的预测;不过，对于解决遮挡问题最有实际意义的潜在方法应该是基于多摄像机的跟踪系统。

二维方法在早期智能监控系统中证明是很成功的，尤其对于那些不需要精确的姿势恢复或低图像分辨率的应用场合(如交通监控中的行人跟踪)。二维跟踪有着简单快速的优点，主要的缺点是受摄像机角度的限制。而三维方法在不受限的复杂的人的运动判断(如人的徘徊、握手与跳舞等)、更加准确的物理空间的表达、遮挡的准确预测和处理等方面的优点是用于行为识别;同时，三维恢复对于虚拟现实中的应用也是必需的。目前基于视觉的三维跟踪研究仍相当有限，三维姿势恢复的实例亦很少，且大部分系统由于要求鲁棒性而引入了简化的约束条件。三维跟踪也导致了从图像中人体模型的获取、遮挡处理、人体参数化建模、摄像机的标定等一系列难题。以建模为例，人体模型通常使用许多形状参数所表达。然而，目前的模型很少利用了关节的角度约束和人体部分的动态特性;而且过去的一些工作几乎都假设3 D模型依据先验条件而提前被指定，实际上这些形状参数应当从图像中估计出来。总之，3 D建模与跟踪在未来工作中应值得更多的关注。

使用单一摄像机的三维人的跟踪研究还很缺乏，身体姿势和运动在单一视角下由于遮挡或深度影响而容易产生歧义现象，因此使用多摄像机进行三维姿势跟踪和恢复的优点是很明显的。同时，多摄像机的使用不仅可以扩大监视的有效范围，而且可以提供多个不同的方向视角以用于解决遮挡问题。很明显，未来的智能监控系统将极大受益于多摄像机的使用。对于多摄像机跟踪系统而言，我们需要确定在每个时刻使用哪一个摄像机或哪一幅图像。也就是说，多摄像机之间的选择和信息融合是一个比较重要的问题。

一般而言，鲁棒性、准确度、速度是智能监控系统的三个基本要求。例如，系统的鲁棒性对于监控应用特别重要，这是因为它们通常被要求是自动、连续地工作，因此这些系统对于如噪声、光照、天气等因素的影响不能太敏感;系统的准确度对于控制应用特别重要，例如基于行为或姿势识别的接口控制场合;而系统的处理速度对于那些需要实时高速的监控系统而言更是非常关键。因此，如何选择有效的工作方案来提高系统性能、降低计算代价是个特别值得考虑的问题。同时，如何利用来自不同用户、不同环境、不同实验条件的大量数据测试系统的实时性、鲁棒性亦相当重要。

目前智能监控技术主要包括几个大类:1、对人、物的识别;2、对人、物运动轨迹的识别;3、对视频环境影响的判断和补偿。

主要就是识别监控系统关心的内容，包括人脸识别、车牌号识别、车辆类型识别、船只识别、红绿灯识别等等。识别类的智能监控技术，最关键的要求就是识别的准确率。比方说车牌号识别，目前市场上做的好的，识别率在95%甚至98%以上，这样就能够较好地满足道路监控类客户的需求。如果识别率低于90%，就会对管理人员带来很大的麻烦。识别类技术，常常应用于道路监控、金融银行、航道管理等行业，主要是为客户提供识别记录和分级管理的依据。

目前细分的很多，主要包括虚拟警戒线、虚拟警戒区域、智能跟踪、人数统计、车流统计、物体出现和消失、人员突然奔跑、人员突然聚集等等。此类技术，除了数量统计外，一般是对某个过程进行判断，一旦发现了异常情况，如有人进入警戒区域、广场东北角有人迅速聚集等情况，就发出报警信息，提醒值班监控人员关注相应热点区域。对于数量统计类技术，关键的技术点是发现异常情况，并对异常情况进行数量统计。所以要求统计数据的准确率，尽量降低误差。运动轨迹识别处理类的技术，受实际监控应用场景影响非常大。此类技术的关键是能够尽快发现异常，需要尽量避免遗漏，提高预报的准确率。目前此类功能主要应用于平安城市建设、商业监控等行业。