一种多模态图像识别算法的生产安全预警系统的制作方法

1.本发明涉及安全预警领域，尤其涉及一种多模态图像识别算法的生产安全预警技术。


背景技术：

2.安全预警，是指在安全事件发生之前，通过对潜在风险的识别、评估和预测，提前发现并预警可能出现的安全威胁，以便及时采取措施防范和化解风险；现有生产安全预警系统中，针对火灾预警的检测，通常都是对厂房内的生产线以及生产线附近的区域进行安全监测，而针对其他区域通常都是利用烟雾报警器对火灾进行报警和洒水处理，导致用户出现经济损失，且现有的生产安全预警系统难以结合厂房内的物体的易燃程度对厂房的火灾风险进行预警，导致用户无法准确地知道哪些区域温度过高或者吸烟行为对厂房的危害，现有的生产安全预警系统还存在监测不够细致以及监测不够全面的问题。


技术实现要素：

3.针对现有技术存在的不足，本发明提供了一种多模态图像识别算法的生产安全预警系统，能够通过检测分析物体的易燃性来确定厂房内不同区域的易燃程度，同时对厂房内所有区域进行实时监测，结合不同区域的易燃程度，判断厂房内是否存在火灾风险并及时发送预警信号，以解决现有的生产安全预警系统还存在监测不够细致以及监测不够全面的问题。
4.为了实现上述目的，本发明是通过如下的技术方案来实现：一种多模态图像识别算法的生产安全预警系统，包括厂房监测模块、机器人巡检模块以及数据处理模块；所述厂房监测模块、红外热成像模块以及机器人巡检模块分别与数据处理模块数据连接；所述厂房监测模块用于实时对厂房区域进行热成像处理，得到区域热力图；所述机器人巡检模块包括移动单元、图像采集单元、物体加热单元、机载热成像单元、光照单元、压力检测单元以及测距单元，所述移动单元用于在厂房内进行自由移动；所述图像采集单元用于采集物体的反光图像；所述物体加热单元用于对物体进行加热处理；所述机载热成像单元用于对物体进行热成像处理，得到物体热力图；所述光照单元用于对物体进行照明；所述压力检测单元用于通过压力检测物体的维氏硬度值；所述测距单元用于检测机器人巡检模块与物体的距离，标记为相对距离；所述数据处理模块包括物体位置分析单元、反光图像处理单元、热力图像处理单元、易燃等级分析单元以及安全预警单元，所述反光图像处理单元用于分析物体的反光图像，得到物体的反光度；所述热力图像处理单元用于分析物体热力图，得到物体的热力灰度值；所述物体位置分析单元用于基于机器人当前的定位，分析物体的相对位置，得到物体在厂房的绝对位置；所述物体位置分析单元还用于对厂房进行区域划分；所述易燃等级分析单元用于分析物体的反光度、热力图像以及硬度，得到物体的易燃等级；所述易燃等级包括
一级易燃类、二级易燃类以及三级易燃类；所述安全预警单元用于分析易燃等级、绝对位置以及热力图像，得到区域的危险系数，根据危险系数进行安全预警。
5.进一步地，所述厂房监测模块包括若干热成像仪，若干热成像仪均匀分布在各厂房区域内并对厂房区域进行热力监测；所述机载热成像单元也包括热成像仪。
6.进一步地，所述测距单元包括超声波传感器，所述超声波传感器用于发射和接收超声波信号，通过超声波测距算法计算移动平台前方障碍物的距离，所述超声波测距算法配置为：s=t
×
v/2；其中，s为障碍物与移动平台之间的距离，t为超声波传感器发射超声波信号到接收超声波信号的时间，v为声波在空气中传播的速度。
7.进一步地，所述压力检测单元包括维氏硬度计，所述维氏硬度计用于测试物体的维氏硬度值。
8.进一步地，所述物体位置分析单元配置有物体位置分析策略，所述物体位置分析策略包括：获取厂房的空间信息并构建厂房的轮廓图；采用slam法对机器人进行定位；建立二维坐标系，所述二维坐标系包括x1轴和y1轴，将轮廓图的长边与x轴保持平行，将轮廓图的宽边与y轴保持平行，将轮廓图对应到二维坐标系中得到厂房的平面图；基于平面图以第一划分长度为边长对厂房进行区域划分，划分后的区域标记为厂房区域；获取机器人当前的坐标，标记为机器人坐标，获取机器人的朝向，将机器人的朝向与x轴的夹角标记为偏移度；通过测距单元获取机器人与物体的相对距离，并通过公式xi=cosθ
×
l计算机器人与物体横坐标差值，其中，xi为横坐标差值，θ为偏移度，l为相对距离；通过公式yi=sinθ
×
l计算机器人与物体纵坐标差值，其中，yi为纵坐标差值；以机器人当前坐标为原点，建立平面坐标系，所述平面坐标系包括x2轴以及y2轴，所述x1轴与x2轴平行，y1轴与y2轴平行，获取物体在平面坐标系的象限；若物体在平面坐标系的第一象限，则通过公式x1g=x1e+xi计算得到物体在二维坐标系的横坐标，其中，x1g为物体横坐标，x1e为机器人横坐标；通过公式y1g=y1e+yi计算得到物体在二维坐标系的纵坐标，其中，y1g为物体纵坐标，y1e为机器人纵坐标；若物体在平面坐标系的第二象限，则通过公式x1g=x1e-xi计算得到物体在二维坐标系的横坐标；通过公式y1g=y1e+yi计算得到物体在二维坐标系的纵坐标；若物体在平面坐标系的第三象限，则通过公式x1g=x1e-xi计算得到物体在二维坐标系的横坐标；通过公式y1g=y1e-yi计算得到物体在二维坐标系的纵坐标；若物体在平面坐标系的第四象限，则通过公式x1g=x1e+xi计算得到物体在二维坐标系的横坐标；通过公式y1g=y1e-yi计算得到物体在二维坐标系的纵坐标；基于物体横坐标以及纵坐标，在二维坐标系内对物体进行标记。
9.进一步地，所述反光图像处理单元配置有反光图像处理策略，所述反光图像处理策略包括：对物体进行光照，并通过图像采集单元获取物体的反光图像；对反光图像进行灰度化处理，得到物体的反光灰度图；
获取反光灰度图内所有像素点的灰度值，将灰度值最小的像素点的灰度值标记为反光灰度值；通过反光度算法计算物体的反光度；其中，f为物体的反光度，fh为物体的反光灰度值，α为预设反光系数。
10.进一步地，所述热力图像处理单元用于对热力图像进行灰度化处理，得到热力灰度图；获取热力灰度图上各像素点的灰度值，将灰度值最大的像素点的灰度值标记为热力灰度值。
11.进一步地，所述易燃等级分析单元配置有易燃等级分析策略，所述易燃等级分析策略包括：建立物体材质易燃等级数据库，查询大数据系统，录入各种材料的常态灰度值、加热灰度值、反光度、维氏硬度值以及易燃等级；获取物体在常温状态下的热力灰度值，标记为常态灰度值；对物体进行加热，当加热到第一加热阈值时停止加热，获取物体的热力灰度值，标记为加热灰度值；通过压力检测单元检测物体的维氏硬度值，获取物体的反光度；将物体的常态灰度值、加热灰度值、反光度以及维氏硬度值与物体材质易燃等级数据库内的数据进行比对查找，得到物体的易燃等级。
12.进一步地，所述安全预警单元配置有安全预警策略，所述安全预警策略包括：获取厂房区域内所有物体的易燃等级，若厂房区域内包含一级易燃类的物体或二级易燃类的物体，则将厂房区域标记为易燃区；若厂房区域内仅包含三级易燃类的物体，则将厂房区域标记为不易燃区；实时获取厂房区域的热力图，通过热力图像处理单元获取厂房区域的热力灰度值，标记为区域热力灰度值；将区域热力灰度值与第一热力阈值进行比对，若热力灰度值小于等于第一热力阈值，则输出热力正常信号；若热力灰度值大于第一热力阈值，则输出热力异常信号；当检测到热力异常信号时，获取厂房区域是否为易燃区，若厂房区域是易燃区，则输出火灾预警信号；若厂房区域不是易燃区，则输出火灾排查信号；当输出火灾排查信号时，获取所有与当前厂房区域相邻的厂房区域是否包含易燃区，若包含易燃区，则输出火灾预警信号；若不包含易燃区，则输出环境正常信号。
13.本发明的有益效果：本发明通过检测物体的维氏硬度值、反光度以及物体表面的温度，通过大数据比对查找确定厂房内所有物体的易燃等级，并对厂房内不同区域进行易燃等级划分，通过结合物体易燃性进行分析的方式对厂房进行安全预警，提高了安全预警系统分析的全面性以及厂房生产的安全性；本发明通过对厂房所有区域进行热成像监测，实时判断区域内是否存在高温区域或者是否有明火以及吸烟行为，结合不同区域的易燃性进行安全预警，提高了厂房生产的安全性以及安全预警的及时性。
14.本发明附加方面的优点将在下面的具体实施方式的描述中部分给出，部分将从下面的描述中变得明显，或通过本发明的实践了解到。
附图说明
15.通过阅读参照以下附图对非限制性实施例所作的详细描述，本发明的其他特征、目的和优点将会变得更明显：图1为本发明的系统的原理框图。
具体实施方式
16.应该指出，以下详细说明都是示例性的，旨在对本发明提供进一步的说明。除非另有指明，本文使用的所有技术和科学术语具有与本发明所属技术领域的普通技术人员通常理解的相同含义。
17.需要注意的是，这里所使用的术语仅是为了描述具体实施方式，而非意图限制根据本发明的示例性实施方式。
18.在不冲突的情况下，本发明中的实施例及实施例中的特征可以相互组合。
19.请参阅图1所示，本发明提供一种多模态图像识别算法的生产安全预警系统，通过检测分析物体的易燃性来确定厂房内不同区域的易燃程度，同时对厂房内所有区域进行实时监测，结合不同区域的易燃程度，判断厂房内是否存在火灾风险并及时发送预警信号，以解决现有的生产安全预警系统还存在监测不够细致以及监测不够全面的问题。
20.具体地，安全预警系统包括图像识别模块、机器人巡检模块以及数据处理模块；图像识别模块、红外热成像模块以及机器人巡检模块分别与数据处理模块数据连接；厂房监测模块用于实时对厂房区域进行热成像处理，得到区域热力图；具体应用中，厂房监测模块包括若干红外热成像仪，若干红外热成像仪均匀分布在若干厂房区域内。
21.机器人巡检模块包括移动单元、图像采集单元、物体加热单元、机载热成像单元、光照单元、压力检测单元以及测距单元，移动单元用于在厂房内进行自由移动；图像采集单元用于采集物体的反光图像；物体加热单元用于对物体进行加热处理；机载热成像单元用于对物体进行热成像处理，得到物体热力图；光照单元用于对物体进行照明；压力检测单元用于通过压力检测物体的维氏硬度值；测距单元用于检测机器人巡检模块与物体的距离，标记为相对距离；具体应用中，移动单元采用现有的移动机器人，图像采集单元采用高清摄像头，物体加热单元设置有的加热器，机载热成像单元设置有红外热成像仪，光照单元采用电筒照明，压力检测单元采用现有的维氏硬度计，测距单元采用现有的超声波传感器。
22.测距单元包括超声波传感器，超声波传感器用于发射和接收超声波信号，通过超声波测距算法计算移动平台前方障碍物的距离，超声波测距算法配置为：s=t
×
v/2；其中，s为障碍物与移动平台之间的距离，t为超声波传感器发射超声波信号到接收超声波信号的时间，v为声波在空气中传播的速度；具体应用中，获取到超声波传感器发射超声波信号到接收超声波信号的时间t为0.06s，声波在空气中传播的速度v为340m/s，则计算得到障碍物与移动平台之间的距离s为10.2m。
23.数据处理模块包括物体位置分析单元、反光图像处理单元、热力图像处理单元、易燃等级分析单元以及安全预警单元，反光图像处理单元用于分析物体的反光图像，得到物
体的反光度；热力图像处理单元用于分析物体热力图，得到物体的热力灰度值；物体位置分析单元用于基于机器人当前的定位，分析物体的相对位置，得到物体在厂房的绝对位置；物体位置分析单元还用于对厂房进行区域划分；易燃等级分析单元用于分析物体的反光度、热力图像以及硬度，得到物体的易燃等级；易燃等级包括一级易燃类、二级易燃类以及三级易燃类；安全预警单元用于分析易燃等级、绝对位置以及热力图像，得到区域的危险系数，根据危险系数进行安全预警；物体位置分析单元配置有物体位置分析策略，物体位置分析策略包括：获取厂房的空间信息并构建厂房的轮廓图；采用slam法对机器人进行定位；建立二维坐标系，二维坐标系包括x1轴和y1轴，将轮廓图的长边与x轴保持平行，将轮廓图的宽边与y轴保持平行，将轮廓图对应到二维坐标系中得到厂房的平面图；基于平面图以第一划分长度为边长对厂房进行区域划分，划分后的区域标记为厂房区域；获取机器人当前的坐标，标记为机器人坐标，获取机器人的朝向，将机器人的朝向与x轴的夹角标记为偏移度；通过测距单元获取机器人与物体的相对距离，并通过公式xi=cosθ
×
l计算机器人与物体横坐标差值，其中，xi为横坐标差值，θ为偏移度，l为相对距离；通过公式yi=sinθ
×
l计算机器人与物体纵坐标差值，其中，yi为纵坐标差值；具体应用中，获取到机器人坐标为（10，20），获取到偏移度θ为30
°
，通过测距单元获取到相对距离l为10.2m，则计算得到横坐标差值xi为8.83m，纵坐标差值yi为5.10m，计算结果保留两位小数；以机器人当前坐标为原点，建立平面坐标系，平面坐标系包括x2轴以及y2轴，x1轴与x2轴平行，y1轴与y2轴平行，获取物体在平面坐标系的象限；若物体在平面坐标系的第一象限，则通过公式x1g=x1e+xi计算得到物体在二维坐标系的横坐标，其中，x1g为物体横坐标，x1e为机器人横坐标；通过公式y1g=y1e+yi计算得到物体在二维坐标系的纵坐标，其中，y1g为物体纵坐标，y1e为机器人纵坐标；若物体在平面坐标系的第二象限，则通过公式x1g=x1e-xi计算得到物体在二维坐标系的横坐标；通过公式y1g=y1e+yi计算得到物体在二维坐标系的纵坐标；若物体在平面坐标系的第三象限，则通过公式x1g=x1e-xi计算得到物体在二维坐标系的横坐标；通过公式y1g=y1e-yi计算得到物体在二维坐标系的纵坐标；若物体在平面坐标系的第四象限，则通过公式x1g=x1e+xi计算得到物体在二维坐标系的横坐标；通过公式y1g=y1e-yi计算得到物体在二维坐标系的纵坐标；基于物体横坐标以及纵坐标，在二维坐标系内对物体进行标记；具体应用中，获取物体在平面坐标系的象限为第一象限，则计算得到物体的物体横坐标x1g为18.83，物体纵坐标y1g为25.1，则物体坐标为（18.83，25.1），在二维坐标系内对坐标点（18.83，25.1）进行标记。
24.反光图像处理单元配置有反光图像处理策略，反光图像处理策略包括：对物体进行光照，并通过图像采集单元获取物体的反光图像；对反光图像进行灰度化处理，得到物体的反光灰度图；获取反光灰度图内所有像素点的灰度值，将灰度值最小的像素点的灰度值标记为
反光灰度值；通过反光度算法计算物体的反光度；其中，f为物体的反光度，fh为物体的反光灰度值，α为预设反光系数；具体应用中，α设置为0.2获取到物体的反光灰度值fh为165，则通过计算得到物体的反光度f为33。
25.热力图像处理单元用于对热力图像进行灰度化处理，得到热力灰度图；获取热力灰度图上各像素点的灰度值，将灰度值最大的像素点的灰度值标记为热力灰度值；具体应用中，获取到物体的热力灰度图中灰度值最高为186，则物体的热力灰度值为186。
26.易燃等级分析单元配置有易燃等级分析策略，易燃等级分析策略包括：建立物体材质易燃等级数据库，查询大数据系统，录入各种材料的常态灰度值、加热灰度值、反光度、维氏硬度值以及易燃等级；获取物体在常温状态下的热力灰度值，标记为常态灰度值；对物体进行加热，当加热到第一加热阈值时停止加热，获取物体的热力灰度值，标记为加热灰度值；通过压力检测单元检测物体的维氏硬度值，获取物体的反光度；将物体的常态灰度值、加热灰度值、反光度以及维氏硬度值与物体材质易燃等级数据库内的数据进行比对查找，得到物体的易燃等级；具体应用中，物体材质易燃等级数据库部分数据如下表所示：
27.第一加热阈值设置为100℃，获取到物体的常态灰度值为126，加热灰度值为209，检测到物体的维氏硬度值为23gpa，物体的反光度为33；则通过数据比对得到物体的易燃等级为一级易燃类。
28.安全预警单元配置有安全预警策略，安全预警策略包括：获取厂房区域内所有物体的易燃等级，若厂房区域内包含一级易燃类的物体或二级易燃类的物体，则将厂房区域标记为易燃区；若厂房区域内仅包含三级易燃类的物体，则将厂房区域标记为不易燃区；实时获取厂房区域的热力图，通过热力图像处理单元获取厂房区域的热力灰度值，标记为区域热力灰度值；将区域热力灰度值与第一热力阈值进行比对，若热力灰度值小于等于第一热力阈值，则输出热力正常信号；若热力灰度值大于第一热力阈值，则输出热力异常信号；
当检测到热力异常信号时，获取厂房区域是否为易燃区，若厂房区域是易燃区，则输出火灾预警信号；若厂房区域不是易燃区，则输出火灾排查信号；当输出火灾排查信号时，获取所有与当前厂房区域相邻的厂房区域是否包含易燃区，若包含易燃区，则输出火灾预警信号；若不包含易燃区，则输出环境正常信号；具体应用中，第一热力阈值设置为180，获取到厂房区域一内包含物体1为一级易燃类，则厂房区域一为易燃区；获取到厂房区域一的区域热力灰度值为196，通过比对得到区域热力灰度值大于第一热力阈值，则输出热力异常信号，由于区域一为易燃区，则输出火灾预警信号。
29.工作原理：首先通过物体位置分析单元构建厂房的轮廓图并建立二维坐标系得到厂房的平面图，再通过测距单元以及物体位置分析单元结合分析得到物体在厂房的绝对位置，并对厂房进行区域划分；通过光照单元以及图像采集单元获取物体的反光图像，再通过反光图像分析单元分析得到物体的反光度，再通过热力图像处理单元获取物体的常态灰度值以及加热灰度值，同时通过压力检测单元获取物体的维氏硬度值，通过易燃等级分析单元对物体的常态灰度值、加热灰度值、反光度以及维氏硬度值进行分析，得到物体的易燃等级；通过安全预警单元对厂房区域进行易燃等级划分，再通过厂房检测模块对厂房区域进行监测，实时获取厂房区域的区域热力图，再通过热力图像处理单元分析得到厂房区域的区域热力灰度值，最后通过安全预警单元对厂房区域的易燃等级以及区域热力灰度值进行分析，根据分析结果输出预警信号。
30.以上所述实施例，仅为本发明的具体实施方式，用以说明本发明的技术方案，而非对其限制，本发明的保护范围并不局限于此，尽管参照前述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，其依然可以对前述实施例所记载的技术方案进行修改或可轻易想到变化，或者对其中部分技术特征进行等同替换；而这些修改、变化或者替换，并不使相应技术方案的本质脱离本发明实施例技术方案的精神和范围，都应涵盖在本发明的保护范围之内。因此，本发明的保护范围应以所述权利要求的保护范围为准。

技术特征：
1.一种多模态图像识别算法的生产安全预警系统，其特征在于，包括厂房监测模块、机器人巡检模块以及数据处理模块；所述厂房监测模块、红外热成像模块以及机器人巡检模块分别与数据处理模块数据连接；所述厂房监测模块用于实时对厂房区域进行热成像处理，得到区域热力图；所述机器人巡检模块包括移动单元、图像采集单元、物体加热单元、机载热成像单元、光照单元、压力检测单元以及测距单元，所述移动单元用于在厂房内进行自由移动；所述图像采集单元用于采集物体的反光图像；所述物体加热单元用于对物体进行加热处理；所述机载热成像单元用于对物体进行热成像处理，得到物体热力图；所述光照单元用于对物体进行照明；所述压力检测单元用于通过压力检测物体的维氏硬度值；所述测距单元用于检测机器人巡检模块与物体的距离，标记为相对距离；所述数据处理模块包括物体位置分析单元、反光图像处理单元、热力图像处理单元、易燃等级分析单元以及安全预警单元，所述反光图像处理单元用于分析物体的反光图像，得到物体的反光度；所述热力图像处理单元用于分析物体热力图，得到物体的热力灰度值；所述物体位置分析单元用于基于机器人当前的定位，分析物体的相对位置，得到物体在厂房的绝对位置；所述物体位置分析单元还用于对厂房进行区域划分；所述易燃等级分析单元用于分析物体的反光度、热力图像以及硬度，得到物体的易燃等级；所述易燃等级包括一级易燃类、二级易燃类以及三级易燃类；所述安全预警单元用于分析易燃等级、绝对位置以及热力图像，得到区域的危险系数，根据危险系数进行安全预警。2.根据权利要求1所述的一种多模态图像识别算法的生产安全预警系统，其特征在于，所述厂房监测模块包括若干热成像仪，若干热成像仪均匀分布在各厂房区域内并对厂房区域进行热力监测；所述机载热成像单元也包括热成像仪。3.根据权利要求2所述的一种多模态图像识别算法的生产安全预警系统，其特征在于，所述测距单元包括超声波传感器，所述超声波传感器用于发射和接收超声波信号，通过超声波测距算法计算移动平台前方障碍物的距离，所述超声波测距算法配置为：s=t
×
v/2；其中，s为障碍物与移动平台之间的距离，t为超声波传感器发射超声波信号到接收超声波信号的时间，v为声波在空气中传播的速度。4.根据权利要求3所述的一种多模态图像识别算法的生产安全预警系统，其特征在于，所述压力检测单元包括维氏硬度计，所述维氏硬度计用于测试物体的维氏硬度值。5.根据权利要求4所述的一种多模态图像识别算法的生产安全预警系统，其特征在于，所述物体位置分析单元配置有物体位置分析策略，所述物体位置分析策略包括：获取厂房的空间信息并构建厂房的轮廓图；采用slam法对机器人进行定位；建立二维坐标系，所述二维坐标系包括x1轴和y1轴，将轮廓图的长边与x轴保持平行，将轮廓图的宽边与y轴保持平行，将轮廓图对应到二维坐标系中得到厂房的平面图；基于平面图以第一划分长度为边长对厂房进行区域划分，划分后的区域标记为厂房区域；获取机器人当前的坐标，标记为机器人坐标，获取机器人的朝向，将机器人的朝向与x轴的夹角标记为偏移度；通过测距单元获取机器人与物体的相对距离，并通过公式xi=cosθ
×
l计算机器人与物体横坐标差值，其中，xi为横坐标差值，θ为偏移度，l为相对距离；
通过公式yi=sinθ
×
l计算机器人与物体纵坐标差值，其中，yi为纵坐标差值；以机器人当前坐标为原点，建立平面坐标系，所述平面坐标系包括x2轴以及y2轴，所述x1轴与x2轴平行，y1轴与y2轴平行，获取物体在平面坐标系的象限；若物体在平面坐标系的第一象限，则通过公式x1g=x1e+xi计算得到物体在二维坐标系的横坐标，其中，x1g为物体横坐标，x1e为机器人横坐标；通过公式y1g=y1e+yi计算得到物体在二维坐标系的纵坐标，其中，y1g为物体纵坐标，y1e为机器人纵坐标；若物体在平面坐标系的第二象限，则通过公式x1g=x1e-xi计算得到物体在二维坐标系的横坐标；通过公式y1g=y1e+yi计算得到物体在二维坐标系的纵坐标；若物体在平面坐标系的第三象限，则通过公式x1g=x1e-xi计算得到物体在二维坐标系的横坐标；通过公式y1g=y1e-yi计算得到物体在二维坐标系的纵坐标；若物体在平面坐标系的第四象限，则通过公式x1g=x1e+xi计算得到物体在二维坐标系的横坐标；通过公式y1g=y1e-yi计算得到物体在二维坐标系的纵坐标；基于物体横坐标以及纵坐标，在二维坐标系内对物体进行标记。6.根据权利要求5所述的一种多模态图像识别算法的生产安全预警系统，其特征在于，所述反光图像处理单元配置有反光图像处理策略，所述反光图像处理策略包括：对物体进行光照，并通过图像采集单元获取物体的反光图像；对反光图像进行灰度化处理，得到物体的反光灰度图；获取反光灰度图内所有像素点的灰度值，将灰度值最小的像素点的灰度值标记为反光灰度值；通过反光度算法计算物体的反光度；其中，f为物体的反光度，fh为物体的反光灰度值，α为预设反光系数。7.根据权利要求6所述的一种多模态图像识别算法的生产安全预警系统，其特征在于，所述热力图像处理单元用于对热力图像进行灰度化处理，得到热力灰度图；获取热力灰度图上各像素点的灰度值，将灰度值最大的像素点的灰度值标记为热力灰度值。8.根据权利要求7所述的一种多模态图像识别算法的生产安全预警系统，其特征在于，所述易燃等级分析单元配置有易燃等级分析策略，所述易燃等级分析策略包括：建立物体材质易燃等级数据库，查询大数据系统，录入各种材料的常态灰度值、加热灰度值、反光度、维氏硬度值以及易燃等级；获取物体在常温状态下的热力灰度值，标记为常态灰度值；对物体进行加热，当加热到第一加热阈值时停止加热，获取物体的热力灰度值，标记为加热灰度值；通过压力检测单元检测物体的维氏硬度值，获取物体的反光度；将物体的常态灰度值、加热灰度值、反光度以及维氏硬度值与物体材质易燃等级数据库内的数据进行比对查找，得到物体的易燃等级。9.根据权利要求8所述的一种多模态图像识别算法的生产安全预警系统，其特征在于，所述安全预警单元配置有安全预警策略，所述安全预警策略包括：获取厂房区域内所有物体的易燃等级，若厂房区域内包含一级易燃类的物体或二级易燃类的物体，则将厂房区域标记为易燃区；若厂房区域内仅包含三级易燃类的物体，则将厂房区域标记为不易燃区；
实时获取厂房区域的热力图，通过热力图像处理单元获取厂房区域的热力灰度值，标记为区域热力灰度值；将区域热力灰度值与第一热力阈值进行比对，若热力灰度值小于等于第一热力阈值，则输出热力正常信号；若热力灰度值大于第一热力阈值，则输出热力异常信号；当检测到热力异常信号时，获取厂房区域是否为易燃区，若厂房区域是易燃区，则输出火灾预警信号；若厂房区域不是易燃区，则输出火灾排查信号；当输出火灾排查信号时，获取所有与当前厂房区域相邻的厂房区域是否包含易燃区，若包含易燃区，则输出火灾预警信号；若不包含易燃区，则输出环境正常信号。

技术总结
本发明提供一种多模态图像识别算法的生产安全预警系统，涉及安全预警领域，包括厂房监测模块、机器人巡检模块以及数据处理模块，所述厂房监测模块用于实时对厂房区域进行热成像处理，得到区域热力图，所述机器人巡检模块用于采集物体的各类信息，所述数据处理模块用于对数据进行分析处理，本发明用于解决现有的生产安全预警系统还存在监测不够细致以及监测不够全面的问题。监测不够全面的问题。监测不够全面的问题。


技术研发人员：岑兆祥
受保护的技术使用者：深圳市华安泰智能科技有限公司
技术研发日：2023.06.07
技术公布日：2023/7/12