CN111753568A

CN111753568A - 单据信息处理方法及装置、电子设备及存储介质

Info

Publication number: CN111753568A
Application number: CN201910702528.6A
Authority: CN
Inventors: 陈楷佳; 李刚; 李延存; 王艺然; 董亚魁; 牛学真
Original assignee: Beijing Sensetime Technology Development Co Ltd
Current assignee: Beijing Sensetime Technology Development Co Ltd
Priority date: 2019-07-31
Filing date: 2019-07-31
Publication date: 2020-10-09
Anticipated expiration: 2039-07-31
Also published as: CN111753568B

Abstract

本申请实施例公开了一种单据信息处理方法及装置、电子设备及存储介质。所述单据信息处理方法，包括：采集位于预定景深范围内的采集对象的第一图像；从所述第一图像中获取单据图形所在的目标区域；检测所述目标区域，得到所述单据图形所包含的单据信息；基于所述单据信息，对所述采集对象进行入库或出库操作。

Description

单据信息处理方法及装置、电子设备及存储介质

技术领域

本申请涉及信息技术领域，尤其涉及一种单据信息处理方法及装置、电子设备及存储介质。

背景技术

单据是生活中常用的凭据。常见的单据包括但不限于：快递单、发票或运货单等。

一般单据上都设置有条码，这些条码扫描识别后，能够得到该单据的单据序列号(简称单据号)等信息。

但是在相关技术中，扫描条码信息时，一般使用激光摄像头、红绿蓝(RGB)摄像头来进行条码信息的扫描。此时，需要摄像头对准条码，并且使得摄像头的大部分采集区域对准所述条码信息所在区域；操作繁琐，且会使得条码信息的获取速率慢。

发明内容

有鉴于此，本申请实施例期望提供一种单据信息处理方法及装置、电子设备及存储介质。

本申请的技术方案是这样实现的：

根据本申请第一方面提供一种单据信息处理方法，包括：采集位于预定景深范围内的采集对象的第一图像；从所述第一图像中获取单据图形所在的目标区域；检测所述目标区域，得到所述单据图形所包含的单据信息；基于所述单据信息，对所述采集对象进行入库或出库操作。

基于上述方案，在采集位于预定景深范围内的采集对象的第一图像之前，所述方法还包括：检测是否有采集对象进入到所述预定景深范围内；在检测到有采集对象进入到所述预定景深范围内的情况下，开启图像采集功能。

基于上述方案，所述从所述第一图像中获取单据图形所在的目标区域，包括：从所述第一图像中确定出所述单据图形作为所述目标区域；或者，从所述第一图像中确定出单据内条码的成像区域作为所述目标区域。

基于上述方案，所述从所述第一图像中获取单据图形所在的目标区域，包括：从所述第一图像中确定出所述单据图形的文字区域，其中，所述文字区域为所述单据中文字的成像区域；从所述第一图像中确定出所述单据图形的条码区域，其中，所述条码区域为所述单据中条码的成像区域。

基于上述方案，所述检测所述目标区域，得到所述单据图形所包含的单据信息，包括：获取检测所述文字区域得到的第一识别信息；获取检测所述条码区域得到的第二识别信息；在所述第一识别信息和所述第二识别信息满足预设匹配条件的情况下，根据所述第一识别信息和/或所述第二识别信息，得到所述单据图形所包含的单据信息。

基于上述方案，所述方法还包括：在所述第一识别信息和所述第二识别信息不满足预设匹配条件的情况下，输出重新采集的提示信息。

基于上述方案，所述单据信息包含第一账户信息；在对所述对象进行入库或者出库操作之前，所述方法还包括：采集第二图像，其中，所述第二图像至少包括第一人脸图像；确定所述第一人脸图像所对应的第一生物特征与所述第一账户信息是否建立有绑定关系；在所述第一生物特征与所述第一账号信息具有绑定关系的情况下，确定对所述采集对象进行入库或者出库操作的验证通过。

基于上述方案，所述方法还包括：在所述第一生物特征与所述第一账号信息未建立有所述绑定关系的情况下，输出输入验证信息的验证提示；基于输入的所述验证信息，确定对所述采集对象进行入库或者出库操作的验证通过。

基于上述方案，所述方法还包括：采集第三图像，其中，所述第三图像至少包括第二人脸图像；获取第二单据上的第二账户信息；根据所述第二人脸图像所对应的第二生物特征及所述第二账户信息，关联所述第二生物特征及所述第二账户信息得到关联关系；在所述第二生物特征和所述第二账户信息的关联次数满足设定的绑定条件的情况下，基于所述关联关系建立所述第二生物特征和所述第二账户信息的绑定关系。

根据本申请第二方面提供一种单据信息处理装置，包括：第一采集模块，用于采集位于预定景深范围内的单据的采集对象的第一图像；获取模块，用于从所述第一图像中获取单据图形所在的目标区域；第一检测模块，用于检测所述目标区域，得到所述单据图形所包含的单据信息，其中，所述单据信息用于产生包含所述单据信息的记录信息；执行模块，用于基于所述单据信息，对所述采集对象进行入库或出库操作。

基于上述方案，所述装置还包括：第二检测模块，用于在采集位于预定景深范围内的采集对象的第一图像之前，检测是否有采集对象进入到所述预定景深范围内；开启模块，用于当有采集对象进入到所述预定景深范围内，开启图像采集功能；所述第一采集模块，用于在开启所述图像采集功能后，采集位于所述预定景深范围内的单据的第一图像。

基于上述方案，所述获取模块，具体用于从所述第一图像中确定出所述单据图形作为所述目标区域；或者，从所述第一图像中确定出单据内条码的成像区域作为所述目标区域。

基于上述方案，所述获取模块，具体用于从所述第一图像中确定出所述单据图形的文字区域，其中，所述文字区域为所述单据中文字的成像区域；从所述第一图像中确定出所述单据图形的条码区域，其中，所述条码区域为所述单据中条码的成像区域。

基于上述方案，所述第一检测模块，具体用于获取检测所述文字区域得到的第一识别信息；获取检测所述条码区域得到的第二识别信息；在所述第一识别信息和所述第二识别信息满足预设匹配条件的情况下，根据所述第一识别信息和/或所述第二识别信息，得到所述单据图形所包含的单据信息。

基于上述方案，所述装置还包括：输出模块，用于在所述第一识别信息和所述第二识别信息不满足预设匹配条件的情况下，输出重新采集的提示信息。

基于上述方案，所述单据信息包括：第一账户信息；所述装置还包括：第二采集模块，用于在对所述对象进行入库或者出库操作之前，采集第二图像，其中，所述第二图像至少包括第一人脸图像；确定模块，用于确定所述第一人脸图像所对应的第一生物特征与所述第一账户信息是否建立有绑定关系；第一验证模块，用于在所述第一生物特征与所述第一账号信息具有绑定关系的情况下，确定对所述采集对象进行入库或者出库操作预定操作执行的验证通过。

基于上述方案，所述装置还包括：第一输出模块，用于在所述第一生物特征与所述第一账号信息未建立有所述绑定关系的情况下，输出输入验证信息的验证提示；第二验证模块，用于基于输入的所述验证信息，确定对所述采集对象进行入库或者出库操作的验证通过。

基于上述方案，所述装置还包括：第三采集模块，用于采集第三图像，其中，所述第三图像至少包括第二人脸图像；第二账户信息模块，用于获取第二单据上的第二账户信息；关联模块，用于根据所述第二人脸图像所对应的第二生物特征所述第二账户信息，关联所述第二生物特征及所述第二账户信息得到关联关系；建立模块，用于在所述第二生物特征和第二账户信息的关联次数满足设定的绑定条件的情况下，基于所述关联关系建立所述第二生物特征和所述第二账户信息的绑定关系。

本申请实施例第三方面提供一种电子设备，包括：存储器，处理器，与所述存储器连接，用于通过存储在所述存储器上的计算机可执行指令的执行，能够实现前述任意技术方案提供的单据信息处理方法。

本申请实施例提供的一种计算机存储介质，所述计算机存储介质存储有计算机可执行指令；所述计算机可执行指令被处理器执行后，能够实现前述任意技术方案提供的单据信息处理方法。

本公开实施例提供的技术方案，可以采用景深范围较大的摄像头，直接采集预设景深范围内的第一图像；而不是通过调焦的方式，使得摄像头的景深范围与单据之间的距离相适配，如此可以减少用户的调焦操作导致的用户操作繁琐及采集延时的问题。

与此同时，在获取单据信息之前会自动从第一图像中获取单据图形所在的目标区域；然后仅对目标区域进行检测，得到单据信息；如此，相对直接对整个第一图像处理，无需将摄像头的大部分采集区域对准第一图像，从而图像采集过程中对准所产生的时延；提升了单据信息的获取速率。与此同时，通过初步检测得到单据图形所在的目标区域，然后再对目标区域进行进一步精细检测，减少了需要处理的图像区域面积，从而减少了数据处理量，进一步提升了速率。此外，在单据信息的精细检测时，是对包含单据信息的单据图形所在的目标区域检测，相当于从所述第一图像中切除了单据图形以外的背景区域(即噪声区域)，减少了噪声区域的噪声干扰，可以提升检测到的单据信息的精确度。

附图说明

图1为本公开实施例提供的一种单据信息处理方法的流程示意图；

图2为本公开实施例提供的另一种单据信息处理方法的流程示意图；

图3为本公开实施例提供的一种终端设备的结构示意图；

图4为本公开实施例提供的再一种单据信息处理方法的流程示意图；

图5为本公开实施例提供的一种基于绑定关系的验证流程示意图；

图6为本公开实施例提供的一种建立绑定关系的流程示意图；

图7为本公开实施例提供的一种单据信息处理装置的结构示意图；

图8为本公开实施例提供的一种电子设备的结构示意图。

具体实施方式

以下结合说明书附图及具体实施例对本公开的技术方案做进一步的详细阐述。

如图1所示，本实施例提供一种单据信息处理方法，包括：

步骤S110：采集位于预定景深范围内的单据的采集对象的第一图像；

步骤S120：从所述第一图像中获取单据图形所在的目标区域；

步骤S130：检测所述目标区域，得到所述单据图形所包含的单据信息；

步骤S140：基于所述单据信息，对所述采集对象进行入库或出库操作。

本实施例提供的单据信息处理方法，可以应用于各种单据处理的终端设备或者终端设备和云端设备形成的信息系统中。

在本实施例中，图像采集模组的景深范围可是预定的，若单据位于该区域内，则第一图像必然是清晰的。所述预定景深范围的上限值大于预设值，例如，50cm、60cm等。

例如，采集所述第一图像的图像采集模组可包括：工业摄像头，该工业摄像头被预先配置了预定景深范围，例如，0-50cm之内，若单据距离该工业摄像头小于或等于50cm时，采集的第一图像都是清晰的；如此，减少了采集过程中使用景深范围较小的摄像头需要通过调焦控制当前景深距离图像采集模组距离导致的调焦操作，从而简化了用户操作，并减少了因为调焦导致的识别延时等。

如此，在采集第一图像时，摄像头不用在对焦，减少了因对焦不好导致的第一图像的清晰度不够的现象；同时减少了因为对焦导致的采集延时大的现象。

在本公开实施例中，所述单据图形为单据的成像。

所述单据可为各种类型的单据，例如，快递单据、发票、门票或运货单等。

所述单据上有单据信息，所述单据信息至少包括以下至少之一：单据的单据号，例如，快递单的快递单号；门票的门票号、发票的发票号。

在一些实施例中，所述单据信息还包括：单据上的单据持有人的关联信息，例如，持有人的联系方式、持有人的地址信息、单据的签发时间信息、单据有的有效时间信息等其他单据信息，不限于所述单据号。

在本实施例中，采集所述单据得到第一图像。

在得到第一图像之后，会从第一图像中获取单据信息的目标区域，例如，通过粗略的匹配识别，确定出所述单据在所述第一图像中的成像区域。

在步骤S120中通过从第一图像中确定出目标区域，相当于会使得包含有单据信息的目标区域和背景区域进行分离。如此，在步骤S130中可以仅检测目标区域，一方面减少了不必要的检测，提升了单据信息的获取速率，另一方面，由于通过初步识别得到至少包含所述单据图形的目标区域之后，仅对目标区域进行检测，减少了目标区域以外的背景区域对单据信息检测的干扰，从而减少了因为干扰导致的检测精确度低的现象，提升了检测精确度。

在步骤S130中将对所述目标区域进行检测，得到所述单据信息。在一些实施例中，所述单据信息用于产生包含所述单据信息的记录信息。

例如，所述单据为快递单，所述记录信息可包括：快递入库的入库记录，该入库记录包含所述单据信息及入库信息，该入库信息可包括：入库时间、入库地点、入库设备等信息。再例如，所述记录信息还可包括：快递出库的出库记录，该出库记录包含所述单据信息及出库信息，该出库信息可包括：出库时间、出库地点、出库设备等信息。

再例如，所述单据为发票，所述记录信息可包括：发票的电子入库信息。

例如，将所述目标区域输入到检测模型，由检测模型通过特征的提取等方式，输出所述单据信息。

例如，所述检测模块可为机器学习模型或者深度学习模型。

在一些实施例中，为了提升所述单据信息的检测精确度，所述方法还包括：

将从所述第一图像中裁剪出的目标区域进行变形处理，使得变形处理之后的目标区域满足检测模型的图像处理要求。

所述变形处理可包括以下至少之一：

将第一形状的所述目标区域，通过拉伸和/或压缩等形状变换得到第二形状的目标区域，其中，所述第二形状可为标准形状，和/或所述第一形状为非标准形状；

对低于预设图像分辨率的目标区域进行像素上采样，得到至少等于预设图像景区度的目标区域；

将第一方向的所述目标区域，进行旋转和/或镜像处理等朝向变换得到朝向第二方向的所述目标区域，例如，将文字方向颠倒的目标区域翻转为文字朝向正确的目标区域；

对所述目标区域进行逆透视变换，得到各子区域景深深度一致的所述目标区域。例如，在采集单据时，若单据的某一个部分比另一个部分离摄像头更近，就可能出现采集的单据的各部分景深不一样，在第一图像中呈现出透视效果。在本实施例中，通过透视变换的逆向处理，得到不再有透视效果差异的目标区域。

如此，通过变形处理后的目标区域，输入到所述检测模型之后，一方面使得检测模型可以快速检测出所述单据信息，另一方面可以提升检测精确度。

在一些实施例中，如图2所示，在采集位于预定景深范围内的采集对象的第一图像之前，所述方法还包括：

步骤S101：检测是否有采集对象进入到所述预定景深范围内；

步骤S102：当有采集对象进入到所述预定景深范围内，开启图像采集功能；

所述步骤S110可包括：在开启所述图像采集功能后，采集位于所述预定景深范围内的单据的第一图像。

例如，利用距离传感器进行所述是否有采集对象进入到所述预定景深范围内的采集。所述距离传感器包括但不限于：红外传感器、可见光传感器、激光传感器等。

摄像头保持开启状态是非常耗能的，但是基于用户触发进行图像采集，虽然执行可以，但是会引入采集时延。

在本实施例中，利用一个开启状态下功耗小于图像采集模组开启状态下功耗的传感器通过距离的采集，触发图像采集模组从关闭状态进入到采集状态，或者，从休眠状态进入到采集状态，进行图像采集，一方面节省了终端的功耗，另一方面减少了不必要图像的采集，减少了因为处理不必要图像导致的功耗。

图3所示为一种能够处理单据信息的终端设备。该终端设备包括：顶部摄像头，该顶部摄像头可以扫描放置在放置区上的单据得到所述第一图像；该终端设备还包括：人脸识别的摄像头，可采集到人脸图像，并提取出生物特征来。所述终端设备还可包括触摸显示屏等人机交互接口，用于接收用户操作，并基于用户操作进行单据信息的处理。该触摸显示屏可以用于进行单据入口的操作，例如，贴有单据的包裹或快递的入库。该触摸显示屏还可以用于进行单据出库的操作，例如，贴有单据的包裹或快递的出库。

在一些实施例中，所述图3所示的设备为一种连接到网络的网络终端；即所述终端设备具有通信模组。所述通信设备发现快递员等携带有单据的包裹分发到终端设备后，终端设备会自动在包裹入库过程中扫描快递单上的单据信息。此处单据信息的获取方式可以如图1所示。在获得所述单据信息中的账户信息之后，根据所述账户信息与所述账户信息建立有绑定关系的用户终端发送取货信息。该取货信息可以提醒用户来取货。所述取货信息中至少包括：取货地址。在一些实施例中，所述取货信息还可包括：取货凭证等。

若用户自身没有时间取货，可以请人帮忙取货，此时，可以人脸图像不用自动取货，故替人取货的用户就可以拼着取货凭证进行取货。

这样，快递员等单据入库员，可以将所述单据放到放置区扫描之后，就可以简便的完成单据入库，无需在手动编辑消息通知对应的客户进行取货。

在一些实施例中，为了清晰采集第一图像和/或第二图像，在终端设备的顶部还设置有补光灯，在环境光照不够的情况下，能够通过补光灯的开启或者亮度的调整，以采集到足够亮度的第一图像和/或第二图像。

在一些实施例中观，所述步骤S110可包括：从所述第一图像中确定出所述单据图形作为所述目标区域；或者，从所述第一图像中确定出单据内条码的成像区域作为所述目标区域。

在一些实施例中，所述目标区域可为整个所述单据被采集形成的单据图形的成像区域；例如，所述第一图像单据的成像区域(即单据图形)和单据的成像区域以外的背景区域，直接对整个第一图像进行识别，会使得背景区域干扰单据的成像区域的识别，故在本实施例中，可以先初步识别出所述单据的成像区域(即所述单据图形)，然后仅对单据成像区域进行进一步识别，一方面提升单据的识别速率，另一方面减少不必要的干扰。

在另一些实施例中，所述目标区域也可以是所述单据中条码的成像区域。此时，单据上的信息也许在网络设备中已经记录，但是当前用户持单据进行操作，需要至少获取单据中条码所对应的单据标识等，进而可以从网络设备中获取整个单据的单据信息。

所述条码包括：一维码和/或二维码；所述二维码包括：矩形二维码和/或圆形二维码。在一些实施例中，所述条码可为：一个或多个。

在一些实施例中，所述方法还包括：

根据单据信息的获取需求，确定所需的目标区域；

例如，在所述获取需求为获取单据号时，确定所需的目标区域为所述条码的成像区域；再例如，在所述获取信息为获取单据号及单据号以外的其他信息时，确定所需的目标区域为整个单据的成像区域。

例如，单据入库时，则认为获取需求包括单据号以外的单据信息；再例如，对入库的单据进行出库时，则可认为获取需求仅包括单据号。

当然，以上仅是举例，具体的可以根据单据信息的获取需求具体来实现，如此满足不同场景下的不同需求。

在一些实施例中，所述步骤S120可包括：

从所述第一图像中确定出所述单据图形的文字区域，其中，所述单据上文字的成像区域为所述文字区域；

从所述第一图像中确定出所述单据图形的条码区域，其中，所述单据上条码的成像区域为所述条码区域。

在单据上不仅会有条码还会有文字，该文字包括但不限于：数字、字母和/或中文等。总之，这些文字所在的成像区域即为所述文字区域。条码所在的成像区域为条码区域。

在一些实施例中，如图4所示，所述步骤S130可包括：

步骤S131：获取检测所述文字区域得到的第一识别信息；

步骤S132：获取检测所述条码区域得到的第二识别信息；

步骤S133：在所述第一识别信息和所述第二识别信息满足预设匹配条件的情况下，根据所述第一识别信息和/或所述第二识别信息，得到所述单据图形所包含的单据信息。

在本实施例中可以光学字符识别(Optical Character Recognition，OCR)识别所述文字区域，得到第一识别信息。例如，通过OCR技术等识别出图像中的文字信息得到所述第一识别信息。

在步骤S132中通过各种检测模型条码区域，解码提出条码就将得到所述第二识别信息。

在本实施中例中，会基于所述第一识别信息和所述第二识别信息进行交叉比对，通过交叉比对确保信息的准确性。

在本实施例中，采集单据时不要求整个采集区域的大部分对准单据的条码区域，故可以减少手动对焦或者自动对焦所产生的时间，仅需采集到清晰的包括单据的第一图像即可；从而提高了采集速率。

在一些实施例中，所述步骤S131可包括：将所述文字区域发送给云端设备，接收云端设备识别所述文字区域得到的第一识别信息。

在另一些实施例中，所述步骤S132可包括：将所述条码区域发送给云端设备，接收云端设备识别所述条码区域得到的所述第二识别信息。

当然在一些实施例中，终端设备也可以自身识别所述文字区域和所述条码区域得到所述第一识别信息及第二识别信息。

例如，所述第一识别信息和所述第二识别信息的匹配度达到预设匹配度值时，认为所述第一识别信息和所述第二识别信息满足所述预设匹配条件。比如，将第一识别信息中的单据号和所述第二识别信息中的第二单据号，逐个号码的比对，统计匹配一致的个数；根据匹配一致的个数和总字符个数，确定出所述匹配度。例如，当匹配度达到90％或者95％以上，确定所述第一识别信息和所述第二识别信息的匹配度达到预设匹配度值。

当所述第一识别信息和所述第二识别信息完全匹配时，根据所述第一识别信息或所述第二识别信息，确定所述单据的单据信息。

当所述第一识别信息和所述第二识别信息不完全匹配时，根据第一识别信息和第二识别信息的识别状况信息，确定所述单据信息。

例如，单据号所包含的字符数一定的，或者，单据号的编码是满足一定规则的，若第一识别信息和第二识别信息中某一个出现了字符数少了或多了等不满足单据号的匹配规则的一个时，根据另一个确定所述单据的单据信息。

在还有一些实施例中，根据所述文字区域和所述条码区域的状况信息，确定是根据第一识别信息还是第二识别信息确定所述单据的单据信息。例如，比对文字区域和条码区域的清晰度，确定出清晰度较高的一个；根据清晰度较高的一个所对应的识别信息，最终得到所述单据信息。

在一些实施例中，所述方法还包括：在所述第一识别信息和所述第二识别信息不满足预设匹配条件的情况下，输出重新采集的提示信息。

若第一识别信息和第二识别信息的匹配不满足预设匹配条件，将输出提示信息，该提示信息将触发重新采集，如此，可以减少因为一次采集无法获得精准的单据信息时，将自动触发再次采集以获得精准的单据信息。

如图5所示，本实施例提供一种信息处理方法包括：

步骤S210：采集第二图像，其中，所述第二图像至少包括第一人脸图像；

步骤S220：确定所述第一人脸图像所对应的第一生物特征与所述第一账户信息是否建立有绑定关系；

步骤S230：在所述第一生物特征与所述第一账号信息具有绑定关系的情况下，确定对所述采集对象进行入库或者出库操作预定操作执行的验证通过。

在本实施例中，第二图像的采集可为单据的入库或者出库过程中采集的图像。

所述第二图像可至少包括人脸图像，通过人脸识别得到第一生物特征，所述第一生物特征可包括：人脸特征和/或虹膜特征等可以唯一识别用户的特征。

在一些实施例中，在采集到第一生物特征之后，还可以利用前述步骤S110至步骤S130得到所述单据上包含的第一账户信息，如此，可以无需在用户特意操作的情况下，可以确定第一生物特征及所述第一账户信息之间的绑定关系。

如果发现有建立绑定关系，可认为当前用户的身份特征验证通过，从而在验证通过之后就执行所述预定操作。该预定操作可包括：单据的出库。

在一些实施例中，所述预定操作包括：所述单据所在包裹的出货操作；

所述方法还包括：在所述预定操作执行的验证通过，执行所述单据所在包裹的出货操作。

例如，所述单据为快递单据，所述快递单据通常贴在快递的物品上，若通过步骤S210至步骤S230的验证之后，说明当前是快递的接收方来取货了，故可以执行包裹的出货操作。

执行所述包裹的出货操作可包括：打开所述包裹所在的柜面。

在一些实施例中，所述第一账户信息包括以下至少之一：

移动通信标识；

即时通信标识；

身份标识。

所述移动通信标识包括但不限于手机号。

所述即时通信标识可包括各种即时通信应用的账号，例如，微信号、微博号、飞信号等。

所述身份标识包括但不限于身份证的身份证号及护照上的护照号。

在一些实施例中，所述方法还包括：在所述第一生物特征与所述第一账号信息未建立有所述绑定关系的情况下，输出输入验证信息的验证提示；基于输入的所述验证信息，确定对所述采集对象进行入库或者出库操作的验证通过。

在本实施例中，基于采集的第二图像信息，并基于预先建立的绑定关系来进行执行预定操作的执行验证，如此，不用用户输入单据号、取货号或者自己的账户信息等，简化了用户操作。

若利用具有预定景深范围的摄像头采集所述第二图像，如此用户仅需要进入到所述预定景深范围内，就会触发摄像头进行第二图像的采集，采集完之后通过绑定关系的查询就能完成验证。若所述摄像头具有较大的预定景深范围时，则用户在靠近所述摄像头的过程中就能够完成所述验证；如此，用户走进所述验证设备就完成了验证，用户直接到对应的取货柜取包裹即可，简化了用户操作。

如图6所示，本实施例提供一种信息处理方法，可包括：

步骤S310：采集第三图像，其中，所述第三图像至少包括第二人脸图像；

步骤S320：获取第二单据的第二账户信息；

步骤S330：根据所述第二人脸图像所对应的第二生物特征及所述第二账户信息，关联所述第二生物特征及所述第二账户信息得到关联关系；

步骤S340：在所述第二生物特征和第二账户信息的关联次数满足设定的绑定条件的情况下，基于所述关联关系建立所述第二生物特征和所述第二账户信息的绑定关系。

在本实施例中，所述第三图像的采集可为单据在入库和/或单据的出库过程中实现。

所述第二生物特征可为从所述第二人脸图像中提取的生物特征，例如，用户的脸部特征和/或用户的虹膜特征等。总之，所述第二生物特征能够唯一标识用户的生物特征信息。

在本实施例中，会在单据出库和/或入库的过程中，甚至单据的填写过程中，才起摄像头进行所述第三图像的采集。从采集的第三图像中第二生物特征，再和入库或者出库的单据上的第二账户信息进行关联，建立关联关系。

每执行一次所述步骤S310至步骤330，所述关联次数就加1；当所述关联次数达到预定次数时，可认为关联次数满足了预设的绑定条件，进一步可认为该第二用户账号所对应的合法用户的生物特征即为所述第二生物特征；此时，可以将所述关联关系正式转换为所述绑定关系。

在一些实施例中，所述步骤S330可包括：

根据所述关联次数，确定所述关联关系的置信度值；

当所述置信度值达到预设值时，将所述关联关系转换为所述绑定关系。

例如，第一次建立所述关联关系时，确定所述置信度值为40％；第二次建立一个相同的关联关系时，确定所述置信度值为60％；第三次建立同一个关联关系时，所述置信度值增加到70％；依次类推；一个关联关系的关联次数越多，则所述置信度值越高，当所述关联关系的置信度值达到预设值时，直接将所述关系转换为所述绑定关系。

将所述关联关系转换为所述绑定关系的方式有多种，以下提供两种可选方式：

将所述关联关系添加到包含绑定关系的关系表中；

将所述关联关系的类型字段更改为绑定关系的类型字段。

在一些实施例中，所述第二账户信息包括以下至少之一：移动通信标识；即时通信标识；身份标识。

在一些实施例中，所述方法还包括：

根据所述人脸信息，输出所述人脸信息所对应用户画像对应的多媒体信息。

所述人脸信息中可以提取出一种或多种能够标识用户身份的信息。

在本实施例中，根据所述人脸信息将可以获得当前正在处理单据用户的用户画像。

所述用户画像可用于指示以下信息至少之一：

用户的喜好；

用户的厌恶；

用户的消费需求；

用户的消费习惯；

用户的支付能力；

用户的审美能力等。

在本实施例中，会根据所述用户画像输出所述多媒体信息。所述终端设备在进行单据的入库或出库的过程中，可能会存在信息录入等等待时间，在该时间内输出与用户画像相适配的多媒体信息，可以提升用户体验。

所述多媒体信息包括各种推广信息，例如，商品和/或服务的广告。

如图7所示，本实施例提供一种单据信息处理装置，包括：

第一采集模块110，用于采集位于预定景深范围内的单据的采集对象的第一图像；

获取模块120，用于从所述第一图像中获取单据图形所在的目标区域；

第一检测模块130，用于检测所述目标区域，得到所述单据图形所包含的单据信息；

执行模块140，用于基于所述单据信息，对所述采集对象进行入库或出库操作。

在一些实施例中，所述单据信息用于产生包含所述单据信息的记录信息。

本实施例提供的单据信息处理装置，可以应用于终端设备或者云端设备中。若应用云端设备中，则所述第一采集模块110为：所述云端设备通过网络连接的图像采集模组。

在一些实施例中，所述第一采集模块110、获取模块120、所述第一检测模块130及执行模块140，可均为程序模块，该程序模块被处理器执行后，能够实现所述第一图像的采集、目标区域的确定及单据信息的得到。

在另一些实施例中，所述第一采集模块110、获取模块120、所述第一检测模块130及执行模块140，可均为软硬结合模块；所述软硬结合模块可包括各种可编程阵列；所述可编程阵列包括但不限于复杂可编程阵列或者现场可编程阵列。

在还有一些实施例中，所述第一采集模块110、获取模块120、所述第一检测模块130及执行模块140可包括纯硬件模块；所述纯硬件模块包括但不限于专用集成电路。

采集位于预定景深范围内的单据的采集对象的第一图像在一些实施例中，所述装置还包括：

第二检测模块，用于在采集位于预定景深范围内的采集对象的第一图像之前，检测是否有采集对象进入到所述预定景深范围内；

开启模块，用于当有采集对象进入到所述预定景深范围内，开启图像采集功能；

所述第一采集模块110，用于在开启所述图像采集功能后，采集位于所述预定景深范围内的单据的第一图像。

在一些实施例中，所述获取模块120，具体用于从所述第一图像中确定出所述单据图形作为所述目标区域；或者，从所述第一图像中确定出单据内条码的成像区域作为所述目标区域。

在一些实施例中，所述获取模块120，具体用于从所述第一图像中确定出所述单据图形的文字区域，其中，所述文字区域为所述单据中文字的成像区域；

从所述第一图像中确定出所述单据图形的条码区域，其中，所述条码区域为所述单据中条码的成像区域。

在一些实施例中，所述检测所述目标区域，得到所述单据图形所包含的单据信息，包括：

获取检测所述文字区域得到的第一识别信息；

获取检测所述条码区域得到的第二识别信息；

在所述第一识别信息和所述第二识别信息满足预设匹配条件的情况下，根据所述第一识别信息和/或所述第二识别信息，得到所述单据图形所包含的单据信息。

在一些实施例中，所述方法还包括：

在所述第一识别信息和所述第二识别信息不满足预设匹配条件的情况下，输出重新采集的提示信息。

在一些实施例中，所述单据信息包括：第一账户信息；所述装置还包括：

第二采集模块，用于采集第二图像，其中，所述第二图像至少包括第一人脸图像；

确定模块，用于确定所述第一人脸图像所对应的第一生物特征与所述第一账户信息是否建立有绑定关系；

第一验证模块，用于在所述第一生物特征与所述第一账号信息具有绑定关系的情况下，确定对所述采集对象进行入库或者出库操作预定操作执行的验证通过。

所述装置还包括：

出货模块，用于在所述预定操作执行的验证通过，执行所述单据所在包裹的出货操作。

在一些实施例中，所述第一账户信息包括以下至少之一：

移动通信标识；

即时通信标识；

身份标识。

在一些实施例中，所述装置还包括：

第一输出模块，用于在所述第一生物特征与所述第一账号信息未建立有所述绑定关系的情况下，输出输入验证信息的验证提示；

第二验证模块，用于基于输入的所述验证信息，确定对所述采集对象进行入库或者出库操作的验证通过。

在一些实施例中，所述装置还包括：

第三采集模块，用于采集第三图像，其中，所述第三图像至少包括第二人脸图像；

第二账户信息模块，用于获取第二单据上的第二账户信息；

关联模块，用于根据所述第二人脸图像所对应的第二生物特征及所述第二账户信息，关联所述第二生物特征及所述第二账户信息得到关联关系；

建立模块，用于在所述第二生物特征和第二账户信息的关联次数满足设定的绑定条件的情况下，基于所述关联关系建立所述第二生物特征和所述第二账户信息的绑定关系。

在一些实施例中，所述装置还包括：第二输出模块，用于根据所述人脸信息，输出所述人脸信息所对应用户画像对应的多媒体信息。

以下结合上述任意实施例提供两个具体示例：

示例1：

本示例提供一种信息处理方法，本方案主要基于快递OCR识别，提取快递面单上的所有文字信息。其中，快递单号的识别同时采用了文字OCR识别和条形码识别，并采用了交叉校验的方式，保证了在该复杂场景下的高准确率。

同时，通过人脸识别和快递单识别的方式，进行验证，保证了快递的正确高效领取。

快递单号识别：本场景使用的快递单号主要分几个阶段完成。

首先，广告机端(安卓端)试试检测快递单，当检测到快递面单时，进行拍照并将快递面单部分抠图；

广告机端将快递面单部分图片，回传至云端，由云服务进行OCR检测，将条形码区域和快递单号区域检测出来，并分别使用条码识别及OCR识别。针对条码得到一个识别信息；同时基于OCR识别得到另一个识别信息；通过这两个识别信息的交叉比对，将得到这个快递单号的交叉比对结果。

云端再将两个结果进行交叉比对，从而得出高置信度的结果；若比对结果不一致，则置信度较低，可重新检测拍照及识别。

人脸识别验证：在快递出库时，用户扫描快递单识别单号和手机号的同时，一体机同时识别用户人脸，并根据事先完成的人脸和手机号绑定关系，关联出该用户账户(即手机号)，并与快递面单收件人手机号进行比对，若比对正确，则验证通过。该方式可以极大提升快递出库效率，传统的方式是人工签字并撕下底单，总耗时约15至30s，而该自助出库方式仅需1至2s时间，大大提升处理效率。

示例2：

本示例提供以一种手机号和人脸之间无感绑定的方法，具体可包括：

由于产品初期未有用户人脸和手机号的关联关系，因此需要有一套关联机制。本产品采用无感绑定的方式，由于用户领取快递和其本人身份有极大的关联关系，因此，可通过追踪用户领取快递的行为，来逐步增强用户人脸与手机号的关联关系；如，用户甲领取一个快递(手机号为A)，则假定关联关系为60％，若下次甲有一次领取手机号为A的快递，则可递增为90％，若再次发生，则可认为99％，此参数为假设参数，实际为大数据预测数值。然后我们设定一个阈值作为关联关系的阈值(对应于前述预设值)，则可以完成用户人脸与手机号的绑定关系。

在获得用户的人脸信息等标识用户身份信息之后，就可以根据用户身份获得用户画像，从而实现目标推荐信息的定向投放。

如图8所示，本实施例提供了一种电子设备，包括：

存储器；

处理器，与所述存储器连接，用于通过执行位于所述存储器上的计算机可执行指令，能够实现前述一个或多个实施例提供的单据信息处理方法，例如，图1至图2及图4至图6所示单据信息处理方法中的一个或多个。

该存储器可为各种类型的存储器，可为随机存储器、只读存储器、闪存等。所述存储器可用于信息存储，例如，存储计算机可执行指令等。所述计算机可执行指令可为各种程序指令，例如，目标程序指令和/或源程序指令等。

所述处理器可为各种类型的处理器，例如，中央处理器、微处理器、数字信号处理器、可编程阵列、数字信号处理器、专用集成电路或图像处理器等。

所述处理器可以通过总线与所述存储器连接。所述总线可为集成电路总线等。

在一些实施例中，所述电子设备还可包括：通信接口，该通信接口可包括：网络接口、例如，局域网接口、收发天线等。所述通信接口同样与所述处理器连接，能够用于信息收发。

在一些实施例中，所述电子设备还包括人机交互接口，例如，所述人机交互接口可包括各种输入输出设备，例如，键盘、触摸屏等。

本实施例提供一种计算机存储介质，所述计算机存储介质存储有计算机可执行指令；所述计算机可执行指令被执行后，能够实现前述一个或多个实施例提供的单据信息处理方法，例如，图1及图2所示单据信息处理方法中的一个或多个。

所述计算机存储介质可为包括具有记录功能的各种记录介质，例如，CD、软盘、硬盘、磁带、光盘、U盘或移动硬盘等各种存储介质。可选的所述计算机存储介质可为非瞬间存储介质，该计算机存储介质可被处理器读取，从而使得存储在计算机存储机制上的计算机可执行指令被处理器获取并执行后，能够实现前述任意一个技术方案提供的信息处理方法，例如，执行应用于终端设备中的信息处理方法或应用服务器中的信息处理方法。

本实施例还提供一种计算机程序产品，所述计算机程序产品包括计算机可执行指令；所述计算机可执行指令被执行后，能够实现前述一个或多个实施例提供的单据信息处理方法，例如，图1至图2及图4至图6所示单据信息处理方法中的一个或多个。

所述包括有形地包含在计算机存储介质上的计算机程序，计算机程序包含用于执行流程图所示的方法的程序代码，程序代码可包括对应执行本公开实施例提供的方法步骤对应的指令。

在本公开所提供的几个实施例中，应该理解到，所揭露的设备和方法，可以通过其它的方式实现。以上所描述的设备实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，如：多个单元或组件可以结合，或可以集成到另一个系统，或一些特征可以忽略，或不执行。另外，所显示或讨论的各组成部分相互之间的耦合、或直接耦合、或通信连接可以是通过一些接口，设备或单元的间接耦合或通信连接，可以是电性的、机械的或其它形式的。

上述作为分离部件说明的单元可以是、或也可以不是物理上分开的，作为单元显示的部件可以是、或也可以不是物理单元，即可以位于一个地方，也可以分布到多个网络单元上；可以根据实际的需要选择其中的部分或全部单元来实现本实施例方案的目的。

另外，在本公开各实施例中的各功能单元可以全部集成在一个处理模块中，也可以是各单元分别单独作为一个单元，也可以两个或两个以上单元集成在一个单元中；上述集成的单元既可以采用硬件的形式实现，也可以采用硬件加软件功能单元的形式实现。

本公开任意实施例公开的技术特征，在不冲突的情况下，可以任意组合形成新的方法实施例或设备实施例。

本公开任意实施例公开的方法实施例，在不冲突的情况下，可以任意组合形成新的方法实施例。

本公开任意实施例公开的设备实施例，在不冲突的情况下，可以任意组合形成新的设备实施例。

本领域普通技术人员可以理解：实现上述方法实施例的全部或部分步骤可以通过程序指令相关的硬件来完成，前述的程序可以存储于一计算机可读取存储介质中，该程序在执行时，执行包括上述方法实施例的步骤；而前述的存储介质包括：移动存储设备、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。

以上所述，仅为本公开的具体实施方式，但本公开的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本公开揭露的技术范围内，可轻易想到变化或替换，都应涵盖在本公开的保护范围之内。因此，本公开的保护范围应以所述权利要求的保护范围为准。

Claims

1.一种单据信息处理方法，其特征在于，包括：

采集位于预定景深范围内的采集对象的第一图像；

从所述第一图像中获取单据图形所在的目标区域；

检测所述目标区域，得到所述单据图形所包含的单据信息；

基于所述单据信息，对所述采集对象进行入库或出库操作。

2.根据权利要求1所述的方法，其特征在于，在采集位于预定景深范围内的采集对象的第一图像之前，所述方法还包括：

检测是否有采集对象进入到所述预定景深范围内；

在检测到有采集对象进入到所述预定景深范围内的情况下，开启图像采集功能。

3.根据权利要求1或2所述的方法，其特征在于，所述从所述第一图像中获取单据图形所在的目标区域，包括：

从所述第一图像中确定出所述单据图形作为所述目标区域；或者，

从所述第一图像中确定出单据内条码的成像区域作为所述目标区域。

4.根据权利要求1至3任一项所述的方法，其特征在于，所述从所述第一图像中获取单据图形所在的目标区域，包括：

从所述第一图像中确定出所述单据图形的文字区域，其中，所述文字区域为单据中文字的成像区域；

5.根据权利要求4所述的方法，其特征在于，所述检测所述目标区域，得到所述单据图形所包含的单据信息，包括：

获取检测所述文字区域得到的第一识别信息；

获取检测所述条码区域得到的第二识别信息；

在所述第一识别信息和所述第二识别信息满足预设匹配条件的情况下，根据所述第一识别信息和/或所述第二识别信息，得到所述单据图形所包含的所述单据信息。

6.根据权利要求1至4任一项所述的方法，其特征在于，所述单据信息包含第一账户信息；在对所述对象进行入库或者出库操作之前，所述方法还包括：

采集第二图像，其中，所述第二图像至少包括第一人脸图像；

确定所述第一人脸图像所对应的第一生物特征与所述第一账户信息是否建立有绑定关系；

在所述第一生物特征与所述第一账号信息具有绑定关系的情况下，确定对所述采集对象进行入库或者出库操作的验证通过。

7.根据权利要求1至6任一项所述的方法，其特征在于，所述方法还包括：

采集第三图像，其中，所述第三图像至少包括第二人脸图像；

获取第二单据上的第二账户信息；

根据所述第二人脸图像所对应的第二生物特征及所述第二账户信息，关联所述第二生物特征及所述第二账户信息得到关联关系；

在所述第二生物特征和所述第二账户信息的关联次数满足设定的绑定条件的情况下，基于所述关联关系建立所述第二生物特征和所述第二账户信息的绑定关系。

8.一种单据信息处理装置，其特征在于，包括：

第一采集模块，用于采集位于预定景深范围内的单据的采集对象的第一图像；

获取模块，用于从所述第一图像中获取单据图形所在的目标区域；

第一检测模块，用于检测所述目标区域，得到所述单据图形所包含的单据信息，其中，所述单据信息用于产生包含所述单据信息的记录信息；

执行模块，用于基于所述单据信息，对所述采集对象进行入库或出库操作。

9.一种电子设备，包括：

存储器，

处理器，与所述存储器连接，用于通过存储在所述存储器上的计算机可执行指令的执行，能够实现权利要求1至7任一项提供的方法。

10.一种计算机存储介质，所述计算机存储介质存储有计算机可执行指令；所述计算机可执行指令被处理器执行后，能够实现权利要求1至7任一项提供的方法。