基于理赔照片深度学习实现保险理赔反欺诈的方法及服务器

本发明涉及金融服务技术领域，特别是一种基于理赔照片深度学习实现保 险理赔反欺诈的方法及服务器。

目前，随着机动车保有量的不断上升，道路的供需矛盾日益突出，道路拥 堵现象越来越严重，许多由交通事故特别是像一些溜车、追尾等轻微交通事故 造成的交通拥堵现象日趋严重。

为解决道路交通事故造成的交通拥堵问题，交警部门采取了路面执勤民警 使用简易程序快速处理轻微交通事故。但是许多轻微交通事故，驾驶员不敢撤 离现场，很多人认为，一旦挪了车，保险公司会有各种理由不理赔，于是还是 先等交警，再等保险公司，人为的造成了道路的严重拥堵。

鉴于上述情况，交管部门联合保监部门，共同研发手机APP软件，通过手 机快速取证，一旦发生了交通事故，用这款APP软件取证，拍摄的信息可由交 管部门和保险公司共享。让车主放心挪车，让保险公司放心理赔。

然而这样的取证方法，在便利了保险人与保险公司的同时，也会带来一些 弊端，如为了骗保，保险人可能会上传虚假的取证照片，如通过PS技术合成或 者篡改的事故现场照片，或者上传非真实事故现场的照片。因此，保险公司在 审核保险人的理赔申请时，需要人工校验照片的真实性与有效性，费时费力， 且效率不高。

鉴于以上内容，有必要提供一种基于理赔照片深度学习实现保险理赔反欺 诈的方法及服务器，以自动检查出篡改的理赔照片，以及自动判断出理赔照片 与对应的理赔申请是否匹配，从而自动识别欺诈的理赔行为。

一种基于理赔照片深度学习实现保险理赔反欺诈的方法，包括：

在接收到用户提交的理赔照片时，基于二维离散余弦变换函数对获取的照 片进行频域转换，根据预设的分析规则并基于频域转换后的照片在各个颜通 道上的颜值，对所述照片进行真实性验证；

若获取的图片是不真实的，则生成提醒信息以提醒获取的图片对应的理赔 申请存在欺诈行为；

若获取的图片是真实的，则按照预先确定的时间识别规则，识别出获取的 照片中的拍摄时间；

提取出获取的照片对应的理赔申请中填写的理赔事件发生时间；及

在提取的理赔事件发生时间与识别的拍摄时间不匹配时，生成提醒信息以 提醒获取的图片对应的理赔申请存在欺诈行为。

优选地，所述预设的分析规则为：提取频域转换后的照片在各个RGB颜 通道上的颜值变化幅度，若有颜通道上的颜值变化幅度大于预设阈值， 则判断获取的照片是不真实的照片；若没有颜频道上的颜值变化幅度大于 所述预设阈值，则判断获取的照片是真实的照片。

优选地，所述预先确定的时间识别规则为：按照预设的图块定位规则对获 取的图片中预设位置的图块进行定位；按照预先生成的支持向量机模型识别出 已定位的图块中是否包含时间信息；按照预设的字符分割规则对识别出的图块 进行字符图块分割；按照预先生成的字符识别模型识别出分割的各个字符图块 对应的字符数据。

优选地，所述预设的图块定位规则为：应用高斯模糊方法对照片预设位置 进行预处理，降低照片预设位置的细节层次；将预处理后的预设位置图像灰度 化；对灰度化后的图像进行Sobel边缘检测运算，从而得到图像的一阶水平方向 导数；将灰度化的图像转换成二值图像；确定出二值图像中的所有轮廓块，并 按照预设的筛选规则筛选出待分析的轮廓块，并为筛选出的轮廓块生成最小外 接矩形框；将存在倾斜角度的由矩形框包围的轮廓块滤除。

优选地，所述预设的字符分割规则为：将包含时间的图块灰度化；采用大 津阈值法对灰度化图块做二值化处理；采用findContours函数对二值化图块取轮 廓，并获取所有字符图块的最小外接矩形框；把得到的最小外接矩形框中的图 块一一分割开来，以分割成各个单字符图块。

优选地，所述支持向量机模型的生成过程包括：获取预设数量的照片样本， 按照预设的图块定位规则对获取的每一个图片样本中预设位置的图块进行定 位；对定位出的各个图块进行预处理，以过滤掉不符合预设条件的图块；将包 含时间信息的图块和未包含时间信息的图块分发到两个不同的文件夹里；从两 个文件夹下各提取第一预设比例的图块作为训练数据，以进行支持向量机模型 的训练，两个文件夹下各剩下的第二预设比例的图块作为测试数据，用以评估 模型的分类识别效果；利用提取的第一预设比例的图块数据进行支持向量机模 型训练以生成对应的支持向量机模型，利用剩下的第二预设比例的图块数据对 生成的支持向量机模型进行准确性验证；若训练得到的支持向量机模型识别准 确率小于预设准确率，则增加训练数据集的图块数量，重复上述支持向量机模 型的生成过程，直到生成的支持向量机模型准确率大于等于预设准确率。

优选地，所述字符识别模型的生成过程包括：获取预设数量的包含时间信 息的图块样本，按照上述预设的字符分割规则对每一个图块样本进行字符图块 分割；对分割的所有字符图块按照字符类型进行分类，以将同一字符类型的字 符图块分为一类，不同字符类型的字符图块分为不同类；从各个类下各提取第 一预设比例的字符图块作为训练数据，以进行多层感知器模型的训练，各个类 下各剩下的第二预设比例的字符图块作为测试数据，用以评估模型的分类识别 效果；利用提取的第一预设比例的字符图块数据进行人工神经网络训练以生成 对应的多层感知器模型，利用剩下的第二预设比例的字符图块数据对生成的多 层感知器模型进行准确性验证；若生成的多层感知器模型准确率小于预设准确 率，则增加训练数据集的图块数量，重复上述多层感知器模型的生成过程，直 到生成的多层感知器模型准确率大于等于预设准确率。

一种适用于上述方法的服务器，该服务器包括存储设备以及处理器，其中：

所述存储单元，存储有一个基于理赔照片深度学习实现保险理赔反欺诈的 系统；

所述处理器，用于调用并执行所述基于理赔照片深度学习实现保险理赔反 欺诈的系统，以执行如下步骤：

在接收到用户提交的理赔照片时，基于二维离散余弦变换函数对获取的照 片进行频域转换，根据预设的分析规则并基于频域转换后的照片在各个颜通 道上的颜值，对所述照片进行真实性验证；

若获取的图片是不真实的，则生成提醒信息以提醒获取的图片对应的理赔 申请存在欺诈行为；

若获取的图片是真实的，则按照预先确定的时间识别规则，识别出获取的 照片中的拍摄时间；

提取出获取的照片对应的理赔申请中填写的理赔事件发生时间；及

在提取的理赔事件发生时间与识别的拍摄时间不匹配时，生成提醒信息以 提醒获取的图片对应的理赔申请存在欺诈行为。

优选地，所述预设的分析规则为：提取频域转换后的照片在各个RGB颜 通道上的颜值变化幅度，若有颜通道上的颜值变化幅度大于预设阈值， 则判断获取的照片是不真实的照片；若没有颜频道上的颜值变化幅度大于 所述预设阈值，则判断获取的照片是真实的照片。

优选地，所述预先确定的时间识别规则为：按照预设的图块定位规则对获 取的图片中预设位置的图块进行定位；按照预先生成的支持向量机模型识别出 已定位的图块中是否包含时间信息；按照预设的字符分割规则对识别出的图块 进行字符图块分割；按照预先生成的字符识别模型识别出分割的各个字符图块 对应的字符数据。

本发明所述基于理赔照片深度学习实现保险理赔反欺诈的方法、系统及适 用于上述系统的服务器，能够自动检查出篡改的理赔照片，以及自动判断出理 赔照片与对应的理赔申请是否匹配，从而自动识别欺诈的理赔行为。

图1是本发明基于理赔照片深度学习实现保险理赔反欺诈的系统较佳实施 例的硬件环境图。

图2是本发明基于理赔照片深度学习实现保险理赔反欺诈的系统较佳实施 例的功能模块图。

图3是本发明基于理赔照片深度学习实现保险理赔反欺诈的方法较佳实施 例的方法实施流程图。

图4是图3中其中一个步骤的详细实施流程图。

参阅图1所示，是本发明基于理赔照片深度学习实现保险理赔反欺诈的系 统较佳实施例的硬件环境图。

本实施例所述基于理赔照片深度学习实现保险理赔反欺诈的系统(以下简 称为“保险理赔反欺诈系统”)10可以安装并运行于一个服务器1中。该服务器1 可以是一个理赔服务器。所述理赔服务器1可以通过通讯模块(未图示)与至 少一台终端2通讯连接，以接收终端2的用户提交的理赔申请。所述理赔申请 可以是一个交通事故理赔申请，其可以包括理赔申请书以及相关证据，如交通 事故的现场照片等。

所述终端3可以是个人电脑、智能手机、平板电脑等设备。

所述服务器1可以包括有存储设备以及处理器(未图示)。所述存储设备 可以是一个或者多个非易失性存储单元，如ROM、EPROM或FlashMemory(快 闪存储单元)等。所述存储设备可以内置或者外接于服务器1。所述处理器是服 务器1的运算核心(CoreUnit)和控制核心(ControlUnit)，用于解释计算机 指令以及处理计算机软件中的数据。

本实施例中，所述保险理赔反欺诈系统10可以是一种计算机软件，其包括 计算机可执行的程序代码，该程序代码可以存储于所述存储设备中，在处理器 的执行下，实现下述功能：在接收到用户提交的理赔申请后，获取该理赔申请 中的照片，利用图片PS检测技术检测照片本身是否有经过人为修改，以及利用 深度学习方法对照片表面的拍摄时间信息进行提取与识别，将识别出来的时间 信息与所述理赔申请中填写的理赔事件发生时间相比较，以判断所述识别出来 的时间与所述理赔事件发生时间是否匹配，从而做出是否对所述理赔申请拒赔 或者理赔的决定。

参阅图2所示，是本发保险理赔反欺诈系统较佳实施例的功能模块图。

本发明所述保险理赔反欺诈系统10的程序代码根据其不同的功能，可以划 分为多个功能模块。本发明较佳实施例中，所述保险理赔反欺诈系统10可以包 括通讯模块100、照片检验模块101、警报模块102、时间识别模块103、匹配 模块104以及决定模块105。

所述通讯模块100用于实现与终端2的信息交互，例如接收终端2的用户 提交的理赔申请，以及传送对该理赔申请的决定给所述终端2的用户。

所述照片检验模块101用于获取所述理赔申请中的理赔照片，并对所述照 片进行真实性验证，以检测照片本身是否有经过人为修改。本实施例中，所述 照片检验模块101基于二维离散余弦变换函数对获取的照片进行频域转换，根 据预设的分析规则并基于频域转换后的照片在各个颜通道上的颜值对所述 照片进行真实性验证。

本发明较佳实施例中，所述预设的分析规则为：提取频域转换后的照片在 各个RGB颜通道上的颜值变化幅度；若有颜通道上的颜值变化幅度大 于预设阈值，则判断获取的照片是不真实的照片“例如，合成的照片、篡改的照 片”；若没有颜频道上的颜值变化幅度大于所述预设阈值，则判断获取的照 片是真实的照片。本实施例中，所述预设阈值可以是0.1。

所述警报模块102用于在确定所述获取的图片是不真实的图片时，向系统 管理员，如理赔申请审核人员提醒所述获取的照片对应的理赔申请存在欺诈行 为。

所述时间识别模块103用于在确定所述照片是真实的照片时，按照预先确 定的时间识别规则，识别出获取的照片中的拍摄时间。

本发明较佳实施例中，所述预先确定的时间识别规则为：按照预设的图块 定位规则对获取的图片中预设位置，例如，右下角的图块进行定位，以在照片 的画面中，发现并确定照片中的日期时间信息所在的具体位置；按照预先生成 的分类预测模型，如支持向量机(SupportVectorMachine，SVM)模型，识别 出已定位的图块中是否包含时间信息(例如，包含拍摄日期和时间点)；按照 预设的字符分割规则对识别出的图块进行字符图块分割；按照预先生成的字符 识别模型(例如，通过人工神经网络训练生成的MLP模型)识别出分割的各个 字符图块对应的字符数据。

本发明较佳实施例中，所述预设的图块定位规则为：应用高斯模糊方法对 照片预设位置进行预处理，降低照片预设位置的细节层次(预处理步骤的目的 是为后续计算去除噪声，优选采用该预处理步骤，在本发明的其他实施例中， 也可以不包括该预处理步骤)；将预处理后的预设位置图像灰度化；对灰度化 后的图像进行Sobel边缘检测运算，从而得到图像的一阶水平方向导数(此时拍 摄时间信息也将被明显区分出来)；将灰度化的图像转换成二值图像(这一步 骤过后，拍摄时间区域将被连接成一个矩形状区域)；确定出二值图像中的所 有轮廓块，并按照预设的筛选规则筛选出待分析的轮廓块，并为筛选出的轮廓 块生成最小外接矩形框；将存在倾斜角度的由矩形框包围的轮廓块滤除。本实 施例中，所述预设的筛选规则为依据事先预估的显示面积大小验证每块轮廓的 最小外接矩形，筛选出最后备选的矩形框。

本发明较佳实施例中，所述支持向量机模型的生成过程包括：获取预设数 量的照片样本，按照所述预设的图块定位规则对获取的每一个图片样本中预设 位置的图块进行定位，确定照片中的日期时间信息所在的具体位置；对定位出 的各个图块进行预处理，以过滤掉不符合预设条件(例如，倾斜角度大于预设 角度极值、面积大于预设面积极值)的图块；将包含时间信息的图块和未包含 时间信息的图块分发到两个不同的文件夹里；从两个文件夹下各提取第一预设 比例(例如，70％)的图块作为训练数据，以进行支持向量机(SupportVector Machine，简称为SVM)模型的训练，两个文件夹下各剩下的第二预设比例(例 如，30％)的图块作为测试数据，用以评估模型的分类识别效果；利用提取的第 一预设比例的图块数据进行SVM模型训练以生成对应的SVM模型，利用剩下 的第二预设比例的图块数据对生成的SVM模型进行准确性验证；若训练得到的 SVM模型识别准确率小于预设准确率(例如，99％)，则增加训练数据集的图 块数量，重复上述SVM模型的生成过程，直到生成的SVM模型准确率大于等 于预设准确率(例如，99％)。

本发明较佳实施例中，所述预设的字符分割规则为：将包含时间的图块灰 度化；采用大津阈值法对灰度化图块做二值化处理；采用findContours函数对二 值化图块取轮廓，并获取所有字符图块的最小外接矩形框；把得到的最小外接 矩形框中的图块一一分割开来，以分割成各个单字符图块。

本发明较佳实施例中，所述预先生成的字符识别模型的生成过程包括：获 取预设数量的包含时间信息的图块样本，按照上述预设的字符分割规则对每一 个图块样本进行字符图块分割；对分割的所有字符图块按照字符类型进行分类， 以将同一字符类型的字符图块分为一类，不同字符类型的字符图块分为不同类 (比如包含数字的，按0-9分为十类，包含符号的，按“/”、“-”、“:”等分为另外 几类)；从各个类下各提取第一预设比例(例如，70％)的字符图块作为训练数 据，以进行人工神经网络(ArtificialNeuralNetworks，简写为ANN)中的多层 感知器(multi-layerperceptrons，简称为MLP)模型的训练，各个类下各剩下的 第二预设比例(例如，30％)的字符图块作为测试数据，用以评估模型的分类识 别效果；利用提取的第一预设比例的字符图块数据进行人工神经网络训练以生 成对应的MLP模型，利用剩下的第二预设比例的字符图块数据对生成的MLP 模型进行准确性验证；若生成的MLP模型准确率小于预设准确率(例如，99％)， 则增加训练数据集的图块数量，重复上述MLP模型的生成过程，直到生成的 MLP模型准确率大于等于预设准确率(例如，99％)。

所述匹配模块104用于提取出获取的照片对应的理赔申请中填写的理赔事 件发生时间，判断照片中的拍摄时间与所填写的理赔事件发生时间是否相匹配。 例如，所述照片中的拍摄时间与所填写的理赔事件发生时间是否相同。

所述决定模块105用于根据所述的匹配结果生成对所述理赔申请的决定， 如拒赔或者理赔。

进一步地，当照片中的拍摄时间与所填写的理赔事件发生时间不匹配时， 所述警报模块102也可以向系统管理员，如理赔申请审核人员提醒所述获取的 照片对应的理赔申请存在欺诈行为。

参阅图3所示，是本发明基于理赔照片深度学习实现保险理赔反欺诈的方 法较佳实施例的方法实施流程图。本实施例所述基于理赔照片深度学习实现保 险理赔反欺诈的方法并不限于流程图中所示步骤，此外流程图中所示步骤中， 某些步骤可以省略、步骤之间的顺序可以改变。

步骤S10，通讯模块100判断是否从终端2接收到用户提交的理赔申请。本 实施例中，所述理赔申请可以是一个交通事故理赔申请，其可以包括理赔申请 书以及相关证据，如交通事故的现场照片等。

步骤S11，照片检验模块101获取所述理赔申请中的照片，基于二维离散余 弦变换函数对获取的照片进行频域转换，根据预设的分析规则并基于频域转换 后的照片在各个颜通道上的颜值，对所述照片进行真实性验证，以检测照 片本身是否有经过人为修改。

本发明较佳实施例中，所述预设的分析规则为：提取频域转换后的照片在 各个RGB颜通道上的颜值变化幅度，若有颜通道上的颜值变化幅度大 于预设阈值，则判断获取的照片是不真实的照片“例如，合成的照片、篡改的照 片”；若没有颜频道上的颜值变化幅度大于所述预设阈值，则判断获取的照 片是真实的照片。本实施例中，所述预设阈值可以是0.1。

步骤S12，所述照片检验模块101根据上述的真实性检验结果，判断所述照 片是否是不真实的照片，如经过篡改。若所述照片经过篡改，则流程执行步骤 S17，警报模块102提醒获取的照片对应的理赔申请存在欺诈行为，并于步骤S18 中，决定模块105生成拒赔决定，以对所述理赔申请进行拒赔。

否则，若所述照片没有经过篡改，则执行步骤S13，时间识别模块103按照 预先确定的时间识别规则，识别出获取的照片中的拍摄时间。步骤S13中预先 确定的时间识别规则请参阅下述的图4中的描述。

步骤S14，匹配模块104提取出获取的照片对应的理赔申请中填写的理赔事 件发生时间。

步骤S15，匹配模块104进一步判断照片中的拍摄时间与所填写的理赔事件 发生时间是否相匹配。例如，所述照片中的拍摄时间与所填写的理赔事件发生 时间是否相同。若照片中的拍摄时间与所填写的理赔事件发生时间相匹配，则 流程执行下述的步骤S16。或者，若照片中的拍摄时间与所填写的理赔事件发生 时间是否不相匹配，则流程执行下述的步骤S17至S18。

其中，步骤S16，决定模块105生成理赔决定，以对所述理赔申请进行赔付。

其中，步骤S17，警报模块102提醒获取的照片对应的理赔申请存在欺诈行 为，并于步骤S18中，决定模块105生成拒赔决定，以对所述理赔申请进行拒 赔。

步骤S19，通讯模块100通知用户所述决定，即拒赔或者理赔的决定。

参阅图4所述，是图3中步骤S13的详细实施流程图，即如何识别出获取 的照片中的拍摄时间。

步骤S130，所述时间识别模块103按照预设的图块定位规则对获取的图片 中预设位置的图块进行定位，以在照片的画面中，发现并确定照片中的日期时 间信息所在的具体位置。所述的预设位置为图片右下角。

本发明较佳实施例中，所述预设的图块定位规则为：应用高斯模糊方法对 照片预设位置进行预处理，降低照片预设位置的细节层次(预处理步骤的目的 是为后续计算去除噪声，优选采用该预处理步骤，在本发明的其他实施例中， 也可以不包括该预处理步骤)；将预处理后的预设位置图像灰度化；对灰度化 后的图像进行Sobel边缘检测运算，从而得到图像的一阶水平方向导数(此时拍 摄时间信息也将被明显区分出来)；将灰度化的图像转换成二值图像(这一步 骤过后，拍摄时间区域将被连接成一个矩形状区域)；确定出二值图像中的所 有轮廓块，并按照预设的筛选规则筛选出待分析的轮廓块，并为筛选出的轮廓 块生成最小外接矩形框；将存在倾斜角度的由矩形框包围的轮廓块滤除。本实 施例中，所述预设的筛选规则为依据事先预估的显示面积大小验证每块轮廓的 最小外接矩形，筛选出最后备选的矩形框。

步骤S131，所述时间识别模块103按照预先生成的分类预测模型识别出已 定位的图块中是否包含时间信息。所述预先生成的分类预测模型为持向量机 (SupportVectorMachine，SVM)模型。

本发明较佳实施例中，所述支持向量机模型的生成过程包括：获取预设数 量的照片样本，按照所述预设的图块定位规则对获取的每一个图片样本中预设 位置的图块进行定位，确定照片中的日期时间信息所在的具体位置；对定位出 的各个图块进行预处理，以过滤掉不符合预设条件(例如，倾斜角度大于预设 角度极值、面积大于预设面积极值)的图块；将包含时间信息的图块和未包含 时间信息的图块分发到两个不同的文件夹里；从两个文件夹下各提取第一预设 比例(例如，70％)的图块作为训练数据，以进行支持向量机(SupportVector Machine，简称为SVM)模型的训练，两个文件夹下各剩下的第二预设比例(例 如，30％)的图块作为测试数据，用以评估模型的分类识别效果；利用提取的第 一预设比例的图块数据进行SVM模型训练以生成对应的SVM模型，利用剩下 的第二预设比例的图块数据对生成的SVM模型进行准确性验证；若训练得到的 SVM模型识别准确率小于预设准确率(例如，99％)，则增加训练数据集的图 块数量，重复上述SVM模型的生成过程，直到生成的SVM模型准确率大于等 于预设准确率(例如，99％)。

步骤S132，所述时间识别模块103按照预设的字符分割规则对识别出的图 块进行字符图块分割。

本发明较佳实施例中，所述预设的字符分割规则为：将包含时间的图块灰 度化；采用大津阈值法对灰度化图块做二值化处理；采用findContours函数对二 值化图块取轮廓，并获取所有字符图块的最小外接矩形框；把得到的最小外接 矩形框中的图块一一分割开来，以分割成各个单字符图块。

步骤S133，所述时间识别模块103按照预先生成的字符识别模型识别出分 割的各个字符图块对应的字符数据。本实施例中，所述预先生成的字符识别模 型为人工神经网络(ArtificialNeuralNetworks，简写为ANN)训练生成的MLP 模型。

本发明较佳实施例中，所述预先生成的字符识别模型的生成过程包括：获 取预设数量的包含时间信息的图块样本，按照上述预设的字符分割规则对每一 个图块样本进行字符图块分割；对分割的所有字符图块按照字符类型进行分类， 以将同一字符类型的字符图块分为一类，不同字符类型的字符图块分为不同类 (比如包含数字的，按0-9分为十类，包含符号的，按“/”、“-”、“:”等分为另外 几类)；从各个类下各提取第一预设比例(例如，70％)的字符图块作为训练数 据，以进行人工神经网络中的多层感知器(multi-layerperceptrons，简称为MLP) 模型的训练，各个类下各剩下的第二预设比例(例如，30％)的字符图块作为测 试数据，用以评估模型的分类识别效果；利用提取的第一预设比例的字符图块 数据进行人工神经网络训练以生成对应的MLP模型，利用剩下的第二预设比例 的字符图块数据对生成的MLP模型进行准确性验证；若生成的MLP模型准确 率小于预设准确率(例如，99％)，则增加训练数据集的图块数量，重复上述 MLP模型的生成过程，直到生成的MLP模型准确率大于等于预设准确率(例如， 99％)。

步骤S134，根据所识别出来的字符数据生成照片中的拍摄时间。

最后所应说明的是，以上实施例仅用以说明本发明的技术方案而非限制， 尽管参照较佳实施例对本发明进行了详细说明，本领域的普通技术人员应当理 解，可以对本发明的技术方案进行修改或等同替换，而不脱离本发明技术方案 的精神和范围。