1.本公开涉及物联网技术领域,具体地,涉及一种巡检监测方法以及系统。
背景技术:
2.智能物联网(aiot)是2018年兴起的概念,指系统通过各种
信息传感器实时采集各类信息(一般是在监控、互动、连接情景下的),在终端设备、边缘域或云中心通过机器学习对数据进行智能化分析,包括定位、对比、预测、调度等。在技术层面,人工智能使物联网获取感知和识别能力、物联网为人工智能提供训练算法的数据,在商业层面,二者共同作用于实体经济,促使产业升级、体验优化。从具体类型来看,主要有具备感知/交互能力的智能联网设备,通过机器学习手段进行设备资产管理、拥有联网设备和ai能力的系统性解决方案等三大类。
3.当前智能物联网关主要部署在现场和摄像头进行连接,然后通过拍摄的
图像对现场的各种情况进行实时监测。
4.然而,相关技术中的监测方式受限于现场安装摄像头的位置,以及摄像头需要人工在云台处控制调整其拍摄角度,无法实时响应现场各种突发事件。
技术实现要素:
5.为克服相关技术中存在的问题,本公开提供一种巡检监测方法以及系统。
6.根据本公开实施例的第一方面,提供一种巡检监测方法,应用于巡检监测系统,
所述巡检监测系统包括图像采集
装置、音频采集装置以及主控装置,所述方法包括:
7.通过所述音频采集装置采集当前环境的音频信息;
8.通过所述主控装置根据所述音频信息从所述当前环境中确定目标对象,并控制所述图像采集装置的拍摄角度与所述目标对象相对应;
9.通过所述图像采集装置采集所述目标对象的图像信息;
10.通过所述主控装置根据所述图像信息确定监测结果信息,并根据所述监测结果信息输出通知信息。
11.可选地,所述通过所述主控装置根据所述音频信息从所述当前环境中确定目标对象,包括:
12.通过所述主控装置对所述音频信息进行频谱分析,得到目标频谱;
13.将预设的多个参考频谱与所述目标频谱进行比对,得到比对结果,所述多个参考频谱与预设的多个参考对象一一对应;
14.根据所述比对结果从所述多个参考对象中确定所述目标对象。
15.可选地,所述控制所述图像采集装置的拍摄角度与所述目标对象相对应,包括:
16.根据所述音频信息确定所述目标对象相对于所述图像采集装置的方位信息;
17.根据所述方位信息将所述图像采集装置的拍摄角度调节至朝向所述目标对象。
18.可选地,所述根据所述音频信息确定所述目标对象相对于所述图像采集装置的方
位信息,包括:
19.从所述音频信息中提取出与所述目标对象对应的振幅信息;
20.根据所述振幅信息确定所述目标对象相对于所述图像采集装置的方位信息。
21.可选地,所述目标对象的数量为多个,多个目标对象对应不同的优先级,所述控制所述图像采集装置的拍摄角度与所述目标对象相对应,包括:
22.控制所述图像采集装置的拍摄角度与所述多个目标对象中优先级最高的目标对象相对应。
23.可选地,所述通过所述主控装置根据所述图像信息确定监测结果信息,包括:
24.从所述图像信息中提取出初始图像特征;
25.从预设的多个参考图像特征中确定与所述初始图像特征匹配的目标图像特征,所述多个参考图像特征与预设的多个参考监测信息一一对应;
26.将所述目标图像特征对应的参考监测信息,确定为所述监测结果信息。
27.可选地,所述多个参考监测信息与多个预设的监测部门地址相对应,所述根据所述监测结果信息输出通知信息,包括:
28.根据所述监测结果信息向与所述监测结果信息对应的监测部门地址发送通知信息。
29.根据本公开实施例的第二方面,提供一种巡检监测方法,包括:
30.响应于音频采集装置采集到的当前环境的音频信息,根据所述音频信息从所述当前环境中确定目标对象,并控制图像采集装置的拍摄角度与所述目标对象相对应;
31.响应于所述图像采集装置采集到的所述目标对象的图像信息,根据所述图像信息确定监测结果信息,并根据所述监测结果信息输出通知信息。
32.根据本公开实施例的第三方面,提供一种巡检监测系统,包括:图像采集装置、音频采集装置以及主控装置,
33.所述音频采集装置用于采集当前环境的音频信息;
34.所述主控装置用于根据所述音频信息从所述当前环境中确定目标对象,并控制所述图像采集装置的拍摄角度与所述目标对象对应;
35.所述图像采集装置用于采集所述目标对象的图像信息;
36.所述主控装置还用于根据所述图像信息确定监测结果信息,并根据所述监测结果信息输出通知信息。
37.可选地,所述音频采集的数量为多个,所述多个音频采集装置设置在所述图像采集装置的不同方向上。
38.本公开的实施例提供的技术方案至少包括以下有益效果:通过音频采集装置采集当前环境的音频信息;在通过主控装置根据音频信息从当前环境中确定目标对象,并控制图像采集装置的拍摄角度与目标对象相对应;还通过图像采集装置采集目标对象的图像信息;最后通过主控装置根据图像信息确定监测结果信息,并根据监测结果信息输出通知信息。从而能够根据当前环境下采集到的声音发现出现问题的目标对象,然后及时调用图像采集模块调整拍摄角度来对出现问题的目标对象进行图像采集,并对采集到的图像进行分析后上报监测结果,以此实现了对问题情况的及时、准确的监测,避免了通过人工调整摄像头来监测现场时,无法实时响应现场各种突发事件的问题。
39.本公开的其他特征和优点将在随后的具体实施方式部分予以详细说明。
附图说明
40.附图是用来提供对本公开的进一步理解,并且构成说明书的一部分,与下面的具体实施方式一起用于解释本公开,但并不构成对本公开的限制。在附图中:
41.图1是根据一示例性实施例示出的一种巡检监测方法的流程示意图。
42.图2是根据另一示例性实施例示出的一种巡检监测方法的流程示意图。
43.图3是根据又一示例性实施例示出的一种巡检监测方法的流程示意图。
44.图4是根据一示例性实施例示出的一种巡检监测系统的结构示意图。
45.图5是根据一示例性实施例示出的电子设备的框图。
46.图6是根据另一示例性实施例示出的电子设备的框图。
具体实施方式
47.以下结合附图对本公开的具体实施方式进行详细说明。应当理解的是,此处所描述的具体实施方式仅用于说明和解释本公开,并不用于限制本公开。
48.在本公开的描述中,需要说明的是,术语“第一”、“第二”、“第三”等仅用于区分描述,而不能理解为指示或暗示相对重要性。
49.在本公开的描述中,还需要说明的是,除非另有明确的规定和限定,术语“设置”、“安装”、“相连”、“连接”应做广义理解,例如,可以是固定连接,也可以是可拆卸连接,或一体地连接;可以是机械连接,也可以是电连接;可以是直接相连,也可以通过中间媒介间接相连,可以是两个元件内部的连通。对于本领域的普通技术人员而言,可以具体情况理解上述术语在本公开中的具体含义。
50.下面将结合本实施例中的附图,对本实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本公开一部分实施例,而不是全部的实施例。基于本公开中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本公开保护的范围。
51.图1是根据一示例性实施例示出的一种巡检监测方法,该方法可以应用于巡检监测系统,该巡检监测系统包括图像采集装置、音频采集装置以及主控装置,其中,主控装置可以分别与图像采集装置和音频采集装置连接,如图1所示,该方法可以包括:
52.110、通过上述音频采集装置采集当前环境的音频信息。
53.在一些实施方式中,该巡检监测系统可以通过音频采集装置实时地对当前环境产生的声音进行采集,得到音频信息,并通过音频采集装置将该音频信息发送至主控装置。
54.可选地,音频采集装置也可以每间隔预设时长进行一次声音采集,以达到节省功耗的作用,其中,预设时长可以根据实际需求设定,在此不做限定。
55.120、通过上述主控装置根据上述音频信息从上述当前环境中确定目标对象,并控制上述图像采集装置的拍摄角度与上述目标对象相对应。
56.在一些实施方式中,主控装置中可以预先存储有多种监测对象在不同情况下发出的声音的参考音频特征信息。在主控装置获得当前场景的音频信息后可以从音频信息中提取出当前音频特征信息,然后将当前音频特征信息与上述多种参考音频特征信息进行比
对,然后根据比对结果确定是哪个监测对象在哪种情况下发出的声音,从而确定出目标对象。例如,从音频信息中提取出的当前音频特征信息与参考音频特性信息a的比对结果为一致,参考音频特性信息a预先对应的是电机超负荷运转发出的声音,那么主控装置可以将电机确定为目标对象。可选地,上述音频特征信息可以包括但不限于振幅、频率等。作为一种示例,多个参考音频特征信息对应的声音可以包括但不限于:电机超负荷运转、异常运转声音、火灾报警、事故报警声音以及特定场合所具有的声音。
57.在一些实施方式中,该监测系统中预先存储有控制图像采集装置对应多个监测对象的拍摄角度,在从多个监测对象中确定出目标对象后,主控装置可以将图像采集装置的拍摄角度调节至与上述目标对象对应的拍摄角度,从而实现对目标对象的图像监测。可选地,该图像采集装置可以包括但不限于摄像头、工业相机等。
58.130、通过上述图像采集装置采集上述目标对象的图像信息。
59.在一些实施方式中,在将图像采集装置的拍摄角度调节与上述目标对象对应后,可以通过图像采集装置对该目标对象进行实时拍摄,得到目标对象的图像信息。可以理解的是,当图像采集装置的拍摄角度调节与上述目标对象对应时,图像采集装置的拍摄角度是大致朝向目标对象的,能够拍摄目标对象完整的图像画面。可选地,图像信息可以是视频,也可以是图片,在此不做限定。
60.140、通过上述主控装置根据上述图像信息确定监测结果信息,并根据上述监测结果信息输出通知信息。
61.在一些实施方式中,该监测系统中预先存储有多个监测对象在不同突发情况下的参考图像特征,该监测系统在采集到目标对象的图像信息后,可以从图像信息中提取出目标图像特征,然后将目标图像特征与多个参考特征图像进行比对,然后根据比对结果确定突发情况,并根据突发情况生成相应的监测结果信息。例如目标图像特征与参考图像特征a的比对结果为一致,参考图像特征a对应的突发情况为电机超负荷运转,那么可以此时可以生成表针电机超负荷运转的检测结果信息。然后根据该检测结果信息输出通知信息,可选地,监测系统可以根据检测结果信息在其显示器上显示“电机超负荷运转”的通知信息,也可以通过音频播放装置播放“电机超负荷运转”的通知信息,还可以通过通信装置将该通知信息远程发送给相关部门进行提醒。
62.可见,在本实施例中,通过音频采集装置采集当前环境的音频信息;在通过主控装置根据音频信息从当前环境中确定目标对象,并控制图像采集装置的拍摄角度与目标对象相对应;还通过图像采集装置采集目标对象的图像信息;最后通过主控装置根据图像信息确定监测结果信息,并根据监测结果信息输出通知信息。从而能够根据当前环境下采集到的声音发现出现问题的目标对象,然后及时调用图像采集模块调整拍摄角度来对出现问题的目标对象进行图像采集,并对采集到的图像进行分析后上报监测结果,以此实现了对问题情况的及时、准确的监测,避免了通过人工调整摄像头来监测现场时,无法实时响应现场各种突发事件的问题。
63.图2是根据另一示例性实施例示出的一种巡检监测方法,该方法可以应用于巡检监测系统,如图2所示,该方法可以包括:
64.210、通过上述音频采集装置采集当前环境的音频信息。
65.其中,步骤210的具体实施方式可以参考步骤110,故不在此赘述。
66.220、通过上述主控装置根据上述音频信息从上述当前环境中确定目标对象,并控制上述图像采集装置的拍摄角度与上述目标对象相对应。
67.在一些实施方式中,步骤220的具体实施方式可以包括:
68.通过上述主控装置对上述音频信息进行频谱分析,得到目标频谱。
69.示例性地,可以将采集到的音频信息输入至频谱分析仪中,获取频谱分析仪输出的目标频谱。
70.将预设的多个参考频谱与上述目标频谱进行比对,得到比对结果,上述多个参考频谱与预设的多个参考对象一一对应。
71.根据上述比对结果从上述多个参考对象中确定上述目标对象。
72.示例性地,可以预先在监测系统中存储多个参考频谱,作为一种示例,多个参考频谱和多个参考对象之间的映射关系可以如表1所示。
73.表1
74.频谱监测对象突发情况参考频谱a参考对象aa情况参考频谱b参考对象bb1情况参考频谱c参考对象bb2情况参考频谱d参考对象cc情况
75.可见,在确定目标频谱后,可以将目标频谱与表1中的多个参考频谱进行比对。例如比对结果为目标频谱与参考频谱c匹配,则可以将参考对象b确定为目标对象。
76.可选地,除了采用音频信息中的频谱特征来确定目标对象,监测系统还可以使用音频信息中的其它音频特征来确定目标对象,在此不做限定。
77.在一些实施方式中,步骤220的具体实施方式可以包括:
78.221、根据上述音频信息确定上述目标对象相对于上述图像采集装置的方位信息。
79.作为一种示例,音频采集装置的数量可以为多个,多个音频采集装置可以设置在图像采集装置的不同方向上,用于采集不同方向传来的声音,从而能够根据不同方向上传来的声音确定目标对象的方位信息。例如,多个音频采集装置中只有位于图像采集装置北方的音频采集装置采集到声音,因此可以确定方位信息为:目标对象的在图像采集装置的朝北方向。
80.在一些实施方式中,步骤221可以包括:
81.从上述音频信息中提取出与上述目标对象对应的振幅信息;根据上述振幅信息确定上述目标对象相对于上述图像采集装置的方位信息。
82.示例性地,例如,监测系统接收到的声音,在图像采集装置的东边30度方向的声音振幅较小,而在图像采集装置的东边35度方向的声音振幅较大。则可以确定方位信息:为目标对象在图像采集装置的东边35度角的位置。
83.在本实施方式中,通过接收到的各方向上的声音振幅大小来确定目标对象的方位信息,能够得到更精准的方位信息。
84.可以理解的是,除了振幅以外,还可以通过其它声音特征来确定目标对象的方位信息,在此不做限定。
85.222、根据上述方位信息将上述图像采集装置的拍摄角度调节至朝向上述目标对
象。
86.沿用上述示例,主控装置可以控制图像采集装置的拍摄角度调节至朝向东边35度方向,从而对准目标对象。
87.在一些实施方式中,上述目标对象的数量为多个,多个目标对象对应不同的优先级,步骤220的具体实施方式可以包括:
88.控制上述图像采集装置的拍摄角度与上述多个目标对象中优先级最高的目标对象相对应。
89.作为一种示例,例如目标对象包括警铃和电机,警铃的优先级高于电机的优先级,那么主控装置可以控制图像采集装置的拍摄角度朝向警铃的位置。可选地,目标对象的优先级可以是用户根据需求自定义设置,在此不做限定。
90.考虑到可能同时检测到多种突发情况,在本实施方式中,通过对多个目标对象设定不同的优先级,并控制上述图像采集装置的拍摄角度与上述多个目标对象中优先级最高的目标对象相对应,可以保证优先对重要的突发情况进行监测,使得监测更加灵活。
91.230、通过上述图像采集装置采集上述目标对象的图像信息。
92.其中,步骤230的具体实施方式可以参考步骤130,故不在此赘述。
93.240、从上述图像信息中提取出初始图像特征。
94.示例性地,可以通过预先训练好的机器学习模型从图像信息中提取出初始图像特征,该初始图像特征可以包括但不限于轮廓、纹理、形状、颜等特征。
95.250、从预设的多个参考图像特征中确定与上述初始图像特征匹配的目标图像特征,上述多个参考图像特征与预设的多个参考监测信息一一对应。
96.作为一种示例,例如多个参考图像特征中的参考图像特征b是在电机超负荷运转时记录的,而初始图像特征与参考图像特征b匹配,则可以将参考图像特征b确定为目标图像特征。可选地,如果初始图像特征与参考图像特征b之间的相似度大于预设相似度,那么可以确定初始图像特征与参考图像特征b匹配。
97.可以理解的是,参考图像特征包括的特征类型可以与初始图像特征中包括的特征类型一致或部分一致。
98.260、将上述目标图像特征对应的参考监测信息,确定为上述监测结果信息。
99.沿用上述示例,由于初始图像特征与参考图像特征b匹配,那么可以确定与参考图像特征b对应的参考监测信息“电机超负荷运转”确定为监测结果信息。
100.270、据上述监测结果信息输出通知信息。
101.在一些实施方式中,上述多个参考监测信息与多个预设的监测部门地址相对应,步骤270的具体实施方式可以包括:
102.根据上述监测结果信息向与上述监测结果信息对应的监测部门地址发送通知信息。
103.示例性地,当根据图像信息判断出具体发生的情况后,主控装置就可以根据检测监测部门的地址通知不同的监测部门进行问题的处理,例如如果是设备异常,就会发送通知信息给设备处,如果是生产事故会发送通知信息给生产处,从而能够对突发情况进行及时、有效的处理。
104.图3是根据又一示例性实施例示出的一种巡检监测方法,该方法应用于上述巡检
监测系统中的主控装置,如图3所示,该方法可以包括:
105.310、响应于音频采集装置采集到的当前环境的音频信息,根据上述音频信息从上述当前环境中确定目标对象,并控制图像采集装置的拍摄角度与上述目标对象相对应。
106.320、响应于上述图像采集装置采集到的上述目标对象的图像信息,根据上述图像信息确定监测结果信息,并根据上述监测结果信息输出通知信息。
107.其中,步骤310至步骤320的更为具体的实施方式,可以参考上述实施例中的巡检监测方法,故不在此赘述。
108.图4是根据一示例性实施例示出的一种巡检监测系统,如图4所示,该系统可以包括:图像采集装置、音频采集装置以及主控装置,其中:
109.上述音频采集装置用于采集当前环境的音频信息。
110.上述主控装置用于根据上述音频信息从上述当前环境中确定目标对象,并控制上述图像采集装置的拍摄角度与上述目标对象对应。
111.上述图像采集装置用于采集上述目标对象的图像信息。
112.上述主控装置还用于根据上述图像信息确定监测结果信息,并根据上述监测结果信息输出通知信息。
113.可选地,上述音频采集的数量为多个,上述多个音频采集装置设置在上述图像采集装置的不同方向上。
114.作为一种示例,如图4所示,音频采集装置可以包括音频采集装置a、音频采集装置b、音频采集装置c以及音频采集装置d。图像采集装置可以为摄像头i。主控装置可以包括摄像头控制模块g、智能分析模块h、中央处理模块f以及数据传输模块e。
115.其中,上述的音频采集装置可以实时监测前后左右上下等720度方向的音频信息(以下可称声音),智能分析模块h可以将采集的声音通过噪音滤波器过滤后,提取声音特征,并和样本库中的声音特征进行比对。
116.上述摄像头控制模块g可以对摄像头进行控制,把摄像头i旋转到特定角度。
117.数据传输模块e,可以把图像信息和音频信息等传输到中央处理模块f;
118.上述的中央处理模块f,可以进行策略控制和处理,结合智能分析模块h,可以识别声音特征和声音方向,也可以进行摄像头旋转控制,以便拍摄到想要的清晰视频进行分析。
119.上述的智能分析模块h,可以预先录制特定音频,以便中央处理模块进行分析对比。
120.上述的中央处理模块f可以把声音进行了频谱化解析,同时和智能分析模块h里面保存的特征量进行对比,当发现采集到的声音频谱和保存的频谱一致时,则需要对该声音对应的对象进行图像采集;上述的智能分析模块h存储了需要用到的场景所发出的声音特征,声音通过采样分析后,具有的特定声音特征存储在智能分析模块h里。可选地,上述的声音特征为电机超负荷运转、异常运转声音、火灾报警、事故报警声音以及特定场合所具有的声音。
121.示例性地,在实际应用中,该巡检监测系统的工作流程如下:
122.(1)通过音频采集装置采集需要识别的设备异常噪音,或者需要识别的工作场景的背景噪音,或者是其他报警声响。
123.(2)把采集的声音进行频谱分析,然后绘制出特征频谱,把特征频谱保存在智能分
析模块h中。
124.(3)启动该巡检监测系统,使得处于运行中;该系统开始实施监听360度环境范围内的声音和噪声。
125.(4)当监测系统的东面发出警报时,监测终端监听到声音,且将该声音通过传输模块e传输至中央处理模块f进行处理。
126.(5)当发现这个频谱和保存的频谱一致时,中央处理模块f发送至摄像头控制模块g进行录制;上述的摄像头控制模块g将摄像头i调节到声音所在的这个角度。可选地,摄像头控制模块g还可以根据声音的其他特征,比如振幅的大小来确定摄像头更精确的调节角度。
127.(6)摄像头i会根据摄像头控制模块g的指令,旋转到具体的位置,然后开启摄像头i的视频摄像功能。
128.(7)摄像头i拍摄的视频通过传输模块e进入中央处理模块f,进而开启视频智能识别的分析,根据存储在智能分析模块h里面的视频特征量,进行判断和识别。
129.可选地,录制的视频能够进行本地识别分析的,并且通知远端控制平台进行报警。如果本地无法处理,则可以把视频压缩后传递给远端控制平台,由控制平台进行视频识别或者人工视频处理,进而判断问题发生的地方所在。
130.可选地,当视频判断出具体发生的情况后,中央处理模块f可以通知不同的处理单位进行问题的处理;如果是设备异常就会通知设备处,如果是生产事故会通知生产处。
131.可见,本实施例的巡检监测系统,通过采集声音,提取特征,判断比对声音的特征,并识别声音的方向,且判断这个声音发出源是否是需要监控的场景,如果需要,则同时调节视频摄像头进行拍摄和跟踪。能够使得巡检更精确,目的性更强。不用浪费过多的时间在不必要的地方。另外,声音的特征在监测过程中往往比视觉更灵敏和靠谱,因此具有更强的巡检感知力。
132.图5是根据一示例性实施例示出的一种电子设备的框图。如图5所示,该电子设备700可以包括:处理器701,存储器702。该电子设备700还可以包括多媒体组件703,输入/输出(i/o)接口704,以及通信组件705中的一者或多者。
133.其中,处理器701用于控制该电子设备700的整体操作,以完成上述的巡检监测方法中的全部或部分步骤。存储器702用于存储各种类型的数据以支持在该电子设备700的操作,这些数据例如可以包括用于在该电子设备700上操作的任何应用程序或方法的指令,以及应用程序相关的数据,例如联系人数据、收发的消息、图片、音频、视频等等。该存储器702可以由任何类型的易失性或非易失性存储设备或者它们的组合实现,例如静态随机存取存储器(static random access memory,简称sram),电可擦除可编程只读存储器(electrically erasable programmable read-only memory,简称eeprom),可擦除可编程只读存储器(erasable programmable read-only memory,简称eprom),可编程只读存储器(programmable read-only memory,简称prom),只读存储器(read-only memory,简称rom),磁存储器,快闪存储器,磁盘或光盘。多媒体组件703可以包括屏幕和音频组件。其中屏幕例如可以是触摸屏,音频组件用于输出和/或输入音频信号。例如,音频组件可以包括一个麦克风,麦克风用于接收外部音频信号。所接收的音频信号可以被进一步存储在存储器702或通过通信组件705发送。音频组件还包括至少一个扬声器,用于输出音频信号。i/o
接口704为处理器701和其他接口模块之间提供接口,上述其他接口模块可以是键盘,鼠标,按钮等。这些按钮可以是虚拟按钮或者实体按钮。通信组件705用于该电子设备700与其他设备之间进行有线或无线通信。无线通信,例如wi-fi,蓝牙,近场通信(near field communication,简称nfc),2g、3g、4g、nb-iot、emtc、或其他5g等等,或它们中的一种或几种的组合,在此不做限定。因此相应的该通信组件705可以包括:wi-fi模块,蓝牙模块,nfc模块等等。该输入/输出(i/o)接口704可以连接图像采集装置和/或音频采集装置。其中,该电子设备可以相当于上述实施例中的主控装置。
134.在一示例性实施例中,电子设备700可以被一个或多个应用专用集成电路(application specific integrated circuit,简称asic)、数字信号处理器(digital signal processor,简称dsp)、数字信号处理设备(digital signal processing device,简称dspd)、可编程逻辑器件(programmable logic device,简称pld)、现场可编程门阵列(field programmable gate array,简称fpga)、控制器、微控制器、微处理器或其他电子元件实现,用于执行上述的巡检监测方法。
135.在另一示例性实施例中,还提供了一种包括程序指令的计算机可读存储介质,该程序指令被处理器执行时实现上述的巡检监测方法的步骤。例如,该计算机可读存储介质可以为上述包括程序指令的存储器702,上述程序指令可由电子设备700的处理器701执行以完成上述的巡检监测方法。
136.图6是根据另一示例性实施例示出的一种电子设备的框图。例如,电子设备1900可以被提供为一服务器。参照图6,电子设备1900包括处理器1922,其数量可以为一个或多个,以及存储器1932,用于存储可由处理器1922执行的计算机程序。存储器1932中存储的计算机程序可以包括一个或一个以上的每一个对应于一组指令的模块。此外,处理器1922可以被配置为执行该计算机程序,以执行上述的巡检监测方法。
137.另外,电子设备1900还可以包括电源组件1926和通信组件1950,该电源组件1926可以被配置为执行电子设备1900的电源管理,该通信组件1950可以被配置为实现电子设备1900的通信,例如,有线或无线通信。此外,该电子设备1900还可以包括输入/输出(i/o)接口1958。电子设备1900可以操作基于存储在存储器1932的操作系统,例如windows servertm,mac os xtm,unixtm,linuxtm等等。
138.在另一示例性实施例中,还提供了一种包括程序指令的计算机可读存储介质,该程序指令被处理器执行时实现上述的巡检监测方法的步骤。例如,该非临时性计算机可读存储介质可以为上述包括程序指令的存储器1932,上述程序指令可由电子设备1900的处理器1922执行以完成上述的巡检监测方法。
139.在另一示例性实施例中,还提供一种计算机程序产品,该计算机程序产品包含能够由可编程的装置执行的计算机程序,该计算机程序具有当由该可编程的装置执行时用于执行上述的巡检监测方法的代码部分。
140.以上结合附图详细描述了本公开的优选实施方式,但是,本公开并不限于上述实施方式中的具体细节,在本公开的技术构思范围内,可以对本公开的技术方案进行多种简单变型,这些简单变型均属于本公开的保护范围。
141.另外需要说明的是,在上述具体实施方式中所描述的各个具体技术特征,在不矛盾的情况下,可以通过任何合适的方式进行组合。为了避免不必要的重复,本公开对各种可
能的组合方式不再另行说明。
142.此外,本公开的各种不同的实施方式之间也可以进行任意组合,只要其不违背本公开的思想,其同样应当视为本公开所公开的内容。
技术特征:
1.一种巡检监测方法,其特征在于,应用于巡检监测系统,所述巡检监测系统包括图像采集装置、音频采集装置以及主控装置,所述方法包括:通过所述音频采集装置采集当前环境的音频信息;通过所述主控装置根据所述音频信息从所述当前环境中确定目标对象,并控制所述图像采集装置的拍摄角度与所述目标对象相对应;通过所述图像采集装置采集所述目标对象的图像信息;通过所述主控装置根据所述图像信息确定监测结果信息,并根据所述监测结果信息输出通知信息。2.根据权利要求1所述的方法,其特征在于,所述通过所述主控装置根据所述音频信息从所述当前环境中确定目标对象,包括:通过所述主控装置对所述音频信息进行频谱分析,得到目标频谱;将预设的多个参考频谱与所述目标频谱进行比对,得到比对结果,所述多个参考频谱与预设的多个参考对象一一对应;根据所述比对结果从所述多个参考对象中确定所述目标对象。3.根据权利要求1所述的方法,其特征在于,所述控制所述图像采集装置的拍摄角度与所述目标对象相对应,包括:根据所述音频信息确定所述目标对象相对于所述图像采集装置的方位信息;根据所述方位信息将所述图像采集装置的拍摄角度调节至朝向所述目标对象。4.根据权利要求3所述的方法,其特征在于,所述根据所述音频信息确定所述目标对象相对于所述图像采集装置的方位信息,包括:从所述音频信息中提取出与所述目标对象对应的振幅信息;根据所述振幅信息确定所述目标对象相对于所述图像采集装置的方位信息。5.根据权利要求1至4任一项所述的方法,其特征在于,所述目标对象的数量为多个,多个目标对象对应不同的优先级,所述控制所述图像采集装置的拍摄角度与所述目标对象相对应,包括:控制所述图像采集装置的拍摄角度与所述多个目标对象中优先级最高的目标对象相对应。6.根据权利要求1至4任一项所述的方法,其特征在于,所述通过所述主控装置根据所述图像信息确定监测结果信息,包括:从所述图像信息中提取出初始图像特征;从预设的多个参考图像特征中确定与所述初始图像特征匹配的目标图像特征,所述多个参考图像特征与预设的多个参考监测信息一一对应;将所述目标图像特征对应的参考监测信息,确定为所述监测结果信息。7.根据权利要求6所述的方法,其特征在于,所述多个参考监测信息与多个预设的监测部门地址相对应,所述根据所述监测结果信息输出通知信息,包括:根据所述监测结果信息向与所述监测结果信息对应的监测部门地址发送通知信息。8.一种巡检监测方法,其特征在于,包括:响应于音频采集装置采集到的当前环境的音频信息,根据所述音频信息从所述当前环境中确定目标对象,并控制图像采集装置的拍摄角度与所述目标对象相对应;
响应于所述图像采集装置采集到的所述目标对象的图像信息,根据所述图像信息确定监测结果信息,并根据所述监测结果信息输出通知信息。9.一种巡检监测系统,其特征在于,包括:图像采集装置、音频采集装置以及主控装置,所述音频采集装置用于采集当前环境的音频信息;所述主控装置用于根据所述音频信息从所述当前环境中确定目标对象,并控制所述图像采集装置的拍摄角度与所述目标对象对应;所述图像采集装置用于采集所述目标对象的图像信息;所述主控装置还用于根据所述图像信息确定监测结果信息,并根据所述监测结果信息输出通知信息。10.根据权利要求9所述的巡检监测系统,其特征在于,所述音频采集的数量为多个,所述多个音频采集装置设置在所述图像采集装置的不同方向上。
技术总结
本公开涉及一种巡检监测方法以及系统,所述巡检监测系统包括图像采集装置、音频采集装置以及主控装置,所述方法包括:通过所述音频采集装置采集当前环境的音频信息;通过所述主控装置根据所述音频信息从所述当前环境中确定目标对象,并控制所述图像采集装置的拍摄角度与所述目标对象相对应;通过所述图像采集装置采集所述目标对象的图像信息;通过所述主控装置根据所述图像信息确定监测结果信息,并根据所述监测结果信息输出通知信息。本公开能够有效提升巡检监测效率。有效提升巡检监测效率。有效提升巡检监测效率。
技术研发人员:
汪义贺 叶剑青 孙彬 江海龙 胡梅春 朱峰 吴保卫
受保护的技术使用者:
国能神皖池州发电有限责任公司
技术研发日:
2022.08.09
技术公布日:
2022/11/22