辅助安检方法、装置和系统

摘要

本公开公开了一种辅助安检方法、装置和系统，涉及安检领域。该方法包括：获取被检物的登记信息；基于登记信息获取被检物的标准扫描图像；将被检物的标准扫描图像以增强现实AR的方式显示，以便通过比对被检物的标准扫描图像和实际扫描图像确定被检物是否为可疑物；其中，实际扫描图像包括被检物图像。本公开为安检人员提供了看图指导，提高了安检看图准确率。另外，在开箱检查时，将标记有可疑区域的实际扫描图像以AR的方式显示在被检物所在容器上，使得检查人员能够准确定位可疑物位置，提高了开箱检查的效率。

权利要求

1.一种辅助安检方法，包括：获取被检物的登记信息，其中，所述登记信息包括货物名称；

基于所述登记信息获取所述被检物的标准扫描图像；

将所述被检物的标准扫描图像以增强现实AR的方式显示，以便通过比对所述被检物的标准扫描图像和实际扫描图像确定所述被检物是否为可疑物；

基于可疑物信息获取所述可疑物的标准扫描图像、三维模型和描述性信息中的至少一项；

将所述可疑物的标准扫描图像、三维模型和描述性信息中的至少一项以AR的方式显示；

其中，所述实际扫描图像包括被检物图像。

2.根据权利要求1所述的辅助安检方法，还包括：基于所述被检物的登记信息获取所述被检物的三维模型和描述性信息中的至少一项；

将所述被检物的三维模型和描述性信息中的至少一项以AR的方式显示。

3.根据权利要求1所述的辅助安检方法，还包括：接收标记有可疑区域的实际扫描图像，其中，若所述被检物为可疑物，则所述实际扫描图像中显示被检物图像的位置被标记为可疑区域；

将标记有可疑区域的实际扫描图像以AR的方式显示在所述被检物所在容器上。

4.根据权利要求3所述的辅助安检方法，还包括：将所述被检物的标准扫描图像、三维模型和描述性信息中的至少一项以AR的方式显示在所述被检物所在容器上。

5.根据权利要求1所述的辅助安检方法，还包括：响应于图像处理指令，对所述被检物和所述可疑物中的至少一项的标准扫描图像进行图像处理，并将处理后的标准扫描图像以AR的方式显示。

6.根据权利要求1所述的辅助安检方法，还包括：响应于模型处理指令，对所述被检物和所述可疑物中的至少一项的三维模型进行缩放和旋转操作中的至少一项操作，并将进行模型操作后的三维模型以AR的方式显示。

7.根据权利要求1至6任一所述的辅助安检方法，其中，所述标准扫描图像为多角度标准X光扫描图像。

8.一种辅助安检装置，包括：输入接口，用于获取被检物的登记信息，其中，所述登记信息包括货物名称；

处理器，用于基于所述登记信息获取所述被检物的标准扫描图像，以及基于可疑物信息获取所述可疑物的标准扫描图像、三维模型和描述性信息中的至少一项；和显示器，用于将所述被检物的标准扫描图像以增强现实AR的方式显示，以便通过比对所述被检物的标准扫描图像和实际扫描图像确定所述被检物是否为可疑物，以及将所述可疑物的标准扫描图像、三维模型和描述性信息中的至少一项以AR的方式显示；

其中，所述实际扫描图像包括被检物图像。

9.根据权利要求8所述的辅助安检装置，其中，所述处理器还用于基于所述登记信息获取所述被检物的三维模型和描述性信息中的至少一项；

所述显示器还用于将所述被检物的三维模型和描述性信息中的至少一项以AR的方式显示。

10.根据权利要求8所述的辅助安检装置，其中，所述输入接口还用于接收标记有可疑区域的实际扫描图像，其中，若所述被检物为可疑物，则所述实际扫描图像中显示被检物图像的位置被标记为可疑区域；

所述显示器还用于将标记有可疑区域的实际扫描图像以AR的方式显示在所述被检物所在容器上。

11.根据权利要求10所述的辅助安检装置，其中，所述显示器还用于将所述被检物的标准扫描图像、三维模型和描述性信息中的至少一项以AR的方式显示在所述被检物所在容器上。

12.根据权利要求8所述的辅助安检装置，其中，所述处理器还用于响应于图像处理指令，对所述被检物和所述可疑物中的至少一项的标准扫描图像进行图像处理；

所述显示器还用于将处理后的标准扫描图像以AR的方式显示。

13.根据权利要求8所述的辅助安检装置，其中，所述处理器还用于响应于模型处理指令，对所述被检物和所述可疑物中的至少一项的三维模型进行缩放和旋转操作中的至少一项操作；

所述显示器还用于将进行模型操作后的三维模型以AR的方式显示。

14.根据权利要求8至13任一所述的辅助安检装置，其中，所述标准扫描图像为多角度标准X光扫描图像。

15.一种辅助安检系统，包括服务器、数据库和权利要求8至14任一所述的辅助安检装置；

其中，所述服务器用于存储被检物和可疑物的标准扫描图像和三维模型中的至少一项；

所述数据库用于存放所述被检物和所述可疑物的标准扫描图像和三维模型在所述服务器中的地址、以及所述被检物和所述可疑物的描述性信息。

16.一种辅助安检装置，包括：存储器；以及

耦接至所述存储器的处理器，所述处理器被配置为基于存储在所述存储器的指令执行如权利要求1至7任一项所述的辅助安检方法。

17.一种计算机可读存储介质，其上存储有计算机程序指令，该指令被处理器执行时实现权利要求1至7任一项所述的辅助安检方法的步骤。

说明书

辅助安检方法、装置和系统

技术领域

[0001] 本公开涉及安检领域，尤其涉及一种辅助安检方法、装置和系统。

背景技术

[0002] 利用集装箱或车辆夹带走私，以及偷运枪支、武器、毒品、爆炸物甚至大规模杀伤性武器和放射性散布装置等违禁品，已经成为困扰各国政府、干扰国际货物运输正常秩序
的国际公害。货物/车辆安全检查是全世界共同关注的课题。X射线透视成像技术是违禁品
检查领域最基本的、也是最早得到广泛应用的技术，目前仍然是全世界应用最广泛的集装
箱、货物、车辆检查技术。

[0003] X射线透视图像与自然光图像差别较大，各类货物的不同角度X光透视图像并不为多数人所熟知，所以看图人员必须通过经验积累或培训掌握大量的商品知识，对各类货物
在X光下的透视图像有一定的预判，才能有效地进行查图工作。

发明内容

[0004] 本公开要解决的一个技术问题是提供一种辅助安检方法、装置和系统，能够提高安检看图准确率。

[0005] 根据本公开一方面，提出一种辅助安检方法，包括：获取被检物的登记信息；基于登记信息获取被检物的标准扫描图像；将被检物的标准扫描图像以增强现实AR的方式显
示，以便通过比对被检物的标准扫描图像和实际扫描图像确定被检物是否为可疑物；其中，
实际扫描图像包括被检物图像。

[0006] 可选地，该方法还包括：基于被检物的登记信息获取被检物的三维模型和描述性信息中的至少一项；将被检物的三维模型和描述性信息中的至少一项以AR的方式显示。

[0007] 可选地，该方法还包括：接收标记有可疑区域的实际扫描图像，其中，若被检物为可疑物，则实际扫描图像中显示被检物图像的位置被标记为可疑区域；将标记有可疑区域
的实际扫描图像以AR的方式显示在被检物所在容器上。

[0008] 可选地，该方法还包括：将被检物的标准扫描图像、三维模型和描述性信息中的至少一项以AR的方式显示在被检物所在容器上。

[0009] 可选地，该方法还包括：基于可疑物信息获取可疑物的标准扫描图像、三维模型和描述性信息中的至少一项；将可疑物的标准扫描图像、三维模型和描述性信息中的至少一
项以AR的方式显示。

[0010] 可选地，该方法还包括：响应于图像处理指令，对被检物和可疑物中的至少一项的标准扫描图像进行图像处理，并将处理后的标准扫描图像以AR的方式显示。

[0011] 可选地，该方法还包括：响应于模型处理指令，对被检物和可疑物中的至少一项的三维模型进行缩放和旋转操作中的至少一项操作，并将进行模型操作后的三维模型以AR的
方式显示。

[0012] 可选地，标准扫描图像为多角度标准X光扫描图像。

[0013] 根据本公开的另一方面，还提出一种辅助安检装置，包括：输入接口，用于获取被检物的登记信息；处理器，用于基于登记信息获取被检物的标准扫描图像；和显示器，用于
将被检物的标准扫描图像以增强现实AR的方式显示，以便通过比对被检物的标准扫描图像
和实际扫描图像确定被检物是否为可疑物；其中，实际扫描图像包括被检物图像。

[0014] 可选地，处理器还用于基于登记信息获取被检物的三维模型和描述性信息中的至少一项；显示器还用于将被检物的三维模型和描述性信息中的至少一项以AR的方式显示。

[0015] 可选地，输入接口还用于接收标记有可疑区域的实际扫描图像，其中，若被检物为可疑物，则实际扫描图像中显示被检物图像的位置被标记为可疑区域；显示器还用于将标
记有可疑区域的实际扫描图像以AR的方式显示在被检物所在容器上。

[0016] 可选地，显示器还用于将被检物的标准扫描图像、三维模型和描述性信息中的至少一项以AR的方式显示在被检物所在容器上。

[0017] 可选地，处理器还用于基于可疑物信息获取可疑物的标准扫描图像、三维模型和描述性信息中的至少一项；显示器还用于将可疑物的标准扫描图像、三维模型和描述性信
息中的至少一项以AR的方式显示。

[0018] 可选地，处理器还用于响应于图像处理指令，对被检物和可疑物中的至少一项的标准扫描图像进行图像处理；显示器还用于将处理后的标准扫描图像以AR的方式显示。

[0019] 可选地，处理器还用于响应于模型处理指令，对被检物和可疑物中的至少一项的三维模型进行缩放和旋转操作中的至少一项操作；显示器还用于将进行模型操作后的三维
模型以AR的方式显示。

[0020] 可选地，标准扫描图像为多角度标准X光扫描图像。

[0021] 根据本公开的另一方面，还提出一种辅助安检系统，包括服务器、数据库和上述的辅助安检装置；其中，服务器用于存储被检物和可疑物的标准扫描图像和三维模型中的至
少一项；数据库用于存放被检物和可疑物的标准扫描图像和三维模型在服务器中的地址、
以及被检物和可疑物的描述性信息。

[0022] 根据本公开的另一方面，还提出一种辅助安检装置，包括：存储器；以及耦接至存储器的处理器，处理器被配置为基于存储在存储器的指令执行如上述的辅助安检方法。

[0023] 根据本公开的另一方面，还提出一种计算机可读存储介质，其上存储有计算机程序指令，该指令被处理器执行时实现上述的辅助安检方法的步骤。

[0024] 本公开通过被检物的登记信息获取被检物的标准扫描图像，并以AR的方式进行显示，安检人员通过比对被检物的标准扫描图像和实际扫描图像确定被检物是否为可疑物，
满足了安检人员对货物知识的需求，为安检人员提供了看图指导，提高了安检看图准确率。

[0025] 通过以下参照附图对本公开的示例性实施例的详细描述，本公开的其它特征及其优点将会变得清楚。

附图说明

[0026] 构成说明书的一部分的附图描述了本公开的实施例，并且连同说明书一起用于解释本公开的原理。

[0027] 参照附图，根据下面的详细描述，可以更加清楚地理解本公开，其中：

[0028] 图1为本公开辅助安检方法的一个实施例的流程示意图。

[0029] 图2为本公开辅助安检方法的另一个实施例的流程示意图。

[0030] 图3为本公开辅助安检方法的再一个实施例的流程示意图。

[0031] 图4为本公开辅助安检方法的又一个实施例的流程示意图。

[0032] 图5为本公开辅助安检方法的一个应用实施例的示意图。

[0033] 图6为本公开辅助安检装置的一个实施例的结构示意图。

[0034] 图7为本公开辅助安检系统的一个实施例的结构示意图。

[0035] 图8为本公开辅助安检装置的另一个实施例的结构示意图。

[0036] 图9为本公开辅助安检装置的又一个实施例的结构示意图。

具体实施方式

[0037] 现在将参照附图来详细描述本公开的各种示例性实施例。应注意到：除非另外具体说明，否则在这些实施例中阐述的部件和步骤的相对布置、数字表达式和数值不限制本
公开的范围。

[0038] 同时，应当明白，为了便于描述，附图中所示出的各个部分的尺寸并不是按照实际的比例关系绘制的。

[0039] 以下对至少一个示例性实施例的描述实际上仅仅是说明性的，决不作为对本公开及其应用或使用的任何限制。

[0040] 对于相关领域普通技术人员已知的技术、方法和设备可能不作详细讨论，但在适当情况下，所述技术、方法和设备应当被视为授权说明书的一部分。

[0041] 在这里示出和讨论的所有示例中，任何具体值应被解释为仅仅是示例性的，而不是作为限制。因此，示例性实施例的其它示例可以具有不同的值。

[0042] 应注意到：相似的标号和字母在下面的附图中表示类似项，因此，一旦某一项在一个附图中被定义，则在随后的附图中不需要对其进行进一步讨论。

[0043] 为使本公开的目的、技术方案和优点更加清楚明白，以下结合具体实施例，并参照附图，对本公开进一步详细说明。

[0044] 图1为本公开辅助安检方法的一个实施例的流程示意图。

[0045] 在步骤110，获取被检物的登记信息。被检物可以为容器里的具体货物，其中，容器例如可以为车辆、集装箱、包裹等。

[0046] 在对集装箱进行安检时，通过查看报关单可以获取报关单所列货物名称，该货物名称即为货物的登记信息。

[0047] 在步骤120，基于登记信息获取被检物的标准扫描图像。其中，可以预先在存储器中存储各货物的多角度标准X光扫描图像，通过货物的名称可以在存储器中查找到该货物
的多角度标准X光扫描图像。如报关单显示正在安检的集装箱内有某品牌手机，通过该品牌
手机的名称可以找到对应的多角度标准X光扫描图像。

[0048] 在步骤130，将被检物的标准扫描图像以AR(Augmented Reality,增强现实)的方式显示，以便通过比对被检物的标准扫描图像和实际扫描图像确定被检物是否为可疑物，
其中，实际扫描图像包括被检物图像。

[0049] 近年来，AR技术飞速发展，数字虚拟世界与现实世界得以无缝连接，给人类带来了一种全新的视觉体验和交互方式。本公开实施例中将AR技术应用到安检领域，例如，货箱在
通过安检设备时，安检人员佩戴AR设备，通过AR设备可以在预定位置看到该货箱内货物的
多角度标准X光扫描图像，同时，安检人员还可以看到包含该货箱内货物的当前X光扫描图
像，通过比对货物的多角度标准X光扫描图像与当前X光扫描图像可以判断出该货物是否为
可疑物。

[0050] 在该实施例中，通过被检物的登记信息获取被检物的标准扫描图像，并以AR的方式进行显示，安检人员通过比对被检物的标准扫描图像和实际扫描图像确定被检物是否为
可疑物，满足了安检人员对货物知识的需求，为安检人员提供了看图指导，提高了安检看图
准确率。

[0051] 图2为本公开辅助安检方法的另一个实施例的流程示意图。其中，安检人员佩戴AR设备，AR设备例如为AR眼镜，实施例中的安检人员可以为人也可以为自动化设备。

[0052] 在步骤210，AR设备获取被检物的登记信息。

[0053] 在步骤220，AR设备基于登记信息获取被检物的标准扫描图像、三维模型和描述性信息。其中，被检物的描述性信息包括被检物的名字、数量、定义、用途、在扫描图像上的特
征部位、通常使用的包装材料等。

[0054] 在步骤230，AR设备将被检物的标准扫描图像、三维模型和描述性信息以AR的方式显示在预定位置。其中，可以在预定位置设置一个识别图贴，AR设备对摄像头拍摄的每一帧
图像计算特征点，并与识别图贴的特征点进行比对，从而识别出该预定位置，然后将被检物
的标准扫描图像、三维模型和描述性信息以AR的方式显示在预定位置。另外，AR设备还可以
响应于手势移动指令，移动被检物的标准扫描图像、三维模型和描述性信息的显示位置，方
便安检人员查看。

[0055] 在步骤240，安检人员可以比对当前扫描图像与被检物的标准扫描图像是否一致，并查看被检物的三维模型和描述性信息，综合判断该被检物是否为可疑物。例如，报关单上
显示被检物为手机，安检人员通过佩戴AR设备，在预定位置看到手机的标准扫描图像、三维
模型和描述性信息，但在当前的扫描图像中显示为手枪形状图像，则确定被检物与报关单
中的信息不相符，该被检物可能为可疑物。

[0056] 在该实施例中，将被检物的标准扫描图像、三维模型和描述性信息以AR的方式显示在预定位置，辅助安检人员看图，满足安检人员对商品知识的需求，降低安检人员培训成
本，为安检人员提供看图指导，提高看图准确率，并提高了安检人员的用户体验。

[0057] 在本公开的另一个实施例中，AR设备还可以基于可疑物信息获取可疑物的标准扫描图像、三维模型和描述性信息，然后将可疑物的标准扫描图像、三维模型和描述性信息以
AR的方式显示在预定位置，以便安检人员比对可疑物的标准扫描图像和实际扫描图像。例
如，若报关单显示被检物为手机，被检物通过安检设备时，安检设备扫描出被检物的X光扫
描图像后，通过预定算法识别出被检物可能为手枪，则将手枪信息发送至AR设备，AR设备可
以获取手枪的标准扫描图像、三维模型以及描述性信息，然后以AR的方式进行显示。

[0058] 即在该实施例中，不仅以AR方式显示手机的标准扫描图像、三维模型以及描述性信息，同时可以显示手枪的标准扫描图像、三维模型以及描述性信息。安检人员看图时，以
AR方式看到手枪的标准扫描图像和手机的标准扫描图像，同时看到当前的扫描图像中显示
为手枪形状图像，则可以基本确定被检物为手枪，进一步提高了看图准确率。

[0059] 在本公开的另一个实施例中，AR设备还响应于图像处理指令，对被检物或可疑物的标准扫描图像进行图像处理，并将处理后的标准扫描图像以AR的方式显示。例如，对被检
物或可疑物的标准扫描图像进行直方图均衡、对数变换等操作，以对图像进行增强显示，例
如，将图像中之前比较窄的灰度范围映射到更宽的灰度范围，使图像对比度变大，方便安检
人员看图。

[0060] 在本公开的另一个实施例中，AR设备还响应于模型处理指令，对被检物或可疑物的三维模型进行缩放和旋转操作等，并将进行模型操作后的三维模型以AR的方式显示。例
如，AR设备中保存用户手势、货物、操作指令的对应关系，通过识别用户手势和货物，将货物
的三维模型进行缩放、旋转等操作。

[0061] 图3为本公开辅助安检方法的再一个实施例的流程示意图。

[0062] 在步骤310，接收标记有可疑区域的实际扫描图像，其中，若被检物为可疑物，则实际扫描图像中显示被检物图像的位置被标记为可疑区域。例如，安检人员通过比对货物的
标准扫描图像和实际扫描图像，确定该货物为可疑物，则可以在实际扫描图像中标记出可
疑区域，并将图像发送至另一台AR设备，以便在开箱检查时供佩戴AR设备的检查人员查看。

[0063] 在步骤320，将标记有可疑区域的实际扫描图像以AR的方式显示在被检物所在容器上。其中，在开箱检查时，开箱检查人员佩戴AR设备，可以在货物所在货箱预定位置看到
标记的可疑区域，方便检查人员准确定位可疑物位置。

[0064] 在相关技术中，安检时开箱检查和看图是分离的两个部分，虽然在看图时标记了可疑区域，但在开箱检查时，仅凭一张带可疑标记的图像，检查人员只能靠感觉对可疑物在
集装箱内的位置做一个大概的定位，不够准确，而且降低了开箱检查的效率，而在本实施例
中，在开箱检查时，将标记有可疑区域的实际扫描图像以AR的方式显示在被检物所在容器
上，使得检查人员能够准确定位可疑物位置，提高了开箱检查的效率。

[0065] 图4为本公开辅助安检方法的又一个实施例的流程示意图。其中，可以预先建立数据库和服务器，其中，服务器中存放有货物的多角度标准X光扫描图像和三维模型等。数据
库中存放该货物的多角度标准X光扫描图像和三维模型在服务器中的地址，以及该货物的
一些描述性信息。

[0066] 在步骤410，安检人员佩戴AR设备查看当前扫描图像。例如，集装箱内装有多种货物，集装箱通过安检设备时，安检人员可以看到包含集装箱内各个货物的扫描图像。

[0067] 在步骤420，AR设备通过网络载入数据库和服务器中获取当前货物对应的描述性信息、多角度标准X光扫描图像和三维模型等，并将当前货物对应的描述性信息、多角度标
准X光扫描图像和三维模型以AR的方式在指定位置显示。其中，货物对应的描述性信息、多
角度标准X光扫描图像和三维模型可以显示在同一个位置，也可以显示在不同位置。

[0068] 在步骤430，AR设备响应于图像处理指令或模型处理指令，对货物的多角度标准X光扫描图像进行图像处理或对货物的三维模型进行缩放和旋转等操作，并以AR的方式显示
进行图像处理后的多角度标准X光扫描图像或进行模型操作后的三维模型，供安检人员参
考。例如，安检人员通过手势或语音通过AR设备对多角度标准X光扫描图像进行直方图均衡
或对数变换等图像处理操作或对货物的三维模型进行缩放和旋转，安检人员参考以AR方式
显示的图像和三维模型，可以判断出对应的货物是否为可疑物。

[0069] 在步骤440，安检人员判断货物是否为可疑物，若是，则执行步骤450，否则，执行步骤410。

[0070] 在步骤450，安检人员在看图软件上标记可疑区域，并将标有可疑区域的扫描图像、报关单信息等发送至另一台AR设备。另外，还可以将货物的标准扫描图像、三维模型和
描述性信息发送至另一台AR设备。

[0071] 在步骤460，开箱检查时，开箱检查人员佩戴AR设备，将报关单信息、扫描图像与集装箱关联。其中，安检人员在室内看扫描图时，可以获得当前待检查集装箱的报关单信息和
实际扫描图像，这样报关单和实际扫描图像是关联起来的，若发现实际扫描图像上有可疑
区域，则将报关单信息和实际扫描图像发送至另一台AR设备，开箱检查人员佩戴这个AR设
备，可以通过集装箱箱号识别等手段，定位到这个集装箱，这样就能够关联报关单信息、扫
描图像与集装箱。

[0072] 在步骤470，将标记有可疑区域的实际扫描图像以AR的方式显示在货物所在集装箱上。另外，还可以将货物的标准扫描图像、三维模型和描述性信息也以AR的方式显示在货
物所在集装箱上，方便开箱检查人员定位可疑物。

[0073] 在该实施例中，在看图部分，看图人员佩戴AR设备，通过网络载入数据库和服务器中当前货物对应的描述性信息、标准X光扫描图像和三维模型等，并以AR的方式显示在指定
位置，辅助看图人员看图。另外，看图人员可通过手势或语音对标准X光图像进行图像处理，
如直方图均衡、对数变换等，对三维模型进行缩放、旋转等操作。满足看图人员对商品知识
的需求，降低看图人员培训成本，为看图人员提供看图指导，提高看图准确率和看图人员的
用户体验。开箱检查时，开箱检查人员佩戴AR设备，将报关单信息、扫描图像与集装箱关联
起来，并以AR的方式在空间中显示出可疑区域，方便查验人员定位可疑物，提高开箱检查效
率。

[0074] 在本公开的另一个实施例中，在开箱检查时，还可以将可疑物信息的标准扫描图像、三维模型和描述性信息以AR的方式显示在货物所在集装箱上，以便开箱检查人员更快
的定位可疑物，以及了解可疑物的具体信息。

[0075] 图5为本公开辅助安检方法的一个应用实施例的示意图。该实施例中AR设备以HoloLens为例进行说明。

[0076] 在步骤510，建立数据库和服务器，其中，服务器可以使用Tomcat服务器，存放货物的多角度标准X光扫描图像和三维模型等。数据库可以使用MySQL，存放货物的多角度标准X
光扫描图像和三维模型在服务器中的地址，以及货物的一些描述性信息。

[0077] 在步骤520，确定Hololens的网络连接正常，该设备使用时无需外接电源。开机之后，在应用程序界面将视界中的焦点置于应用程序之上，然后将手置于Hololens视界之内，
手握拳，食指拇指张开然后二指快速并拢完成点击操作。

[0078] 在步骤530，进入应用程序后，Hololens读取当前扫描图像对应的报关单，获取该报关单下所列货物名称。

[0079] 在步骤540，看图人员用步骤520中所描述的手势点击或直接通过语音念出需要查看的货物名称，此时，该请求会被服务器端的Servlet处理，根据货物名称对预先建立好的
数据库进行检索，查询出该货物对应的标准X光扫描图像和三维模型在服务器中的存放路
径，以及该货物的描述性信息。

[0080] 在步骤550，Hololens以AR的方式显示货物的描述性信息，并且根据步骤560获得的存放路径，通过网络加载并显示服务器中的标准X光扫描图像和三维模型。

[0081] 在步骤560，当标准X光扫描图像和三维模型加载完毕之后，看图人员可通过手势或语音进行多种操作，如放大、缩小、模型旋转、图像处理等。例如，看图人员说直方图均衡，
Hololens识别后，获取标准X光扫描图像的像素矩阵，从而进行直方图均衡等图像处理。

[0082] 在步骤570，若发现可疑区域，看图人员可在看图软件上标记可疑区域，并将保存在服务器上的报关单信息、扫描图像和可疑物位置信息发送至HoloLens。此处，服务器端套
接字并不定位具体的AR设备客户端套接字，而是处于等待连接的状态，实时监控网络状态。
由客户端的套接字提出连接请求，连接指定地址与端口号的服务器端套接字。当服务器端
套接字监听到客户端套接字的连接请求，响应客户端套接字的请求，建立一个新的线程，读
取图像信息，并将图片信息发送给客户端。

[0083] 在步骤580，开箱检查人员佩戴HoloLens，通过手势、空间映射、箱号识别、图像识别或GPS定位等方式将待检查集装箱、扫描图像以及报关单信息关联，并以AR的方式显示出
扫描图像和报关单信息。根据步骤570中的可疑物位置信息，在空间中标记出可疑物位置。

[0084] 在该实施例中，在看图时，满足看图人员对商品知识的需求，降低看图人员培训成本，为看图人员提供看图指导，提高看图准确率和看图人员的用户体验。在开箱检查时，关
联待检查集装箱、报关单信息和扫描图像，准确定位嫌疑物位置，提高开箱检查效率。

[0085] 图6为本公开辅助安检装置的一个实施例的结构示意图。该辅助安检装置可以为AR设备，包括输入接口610、处理器620和显示器630，其中：

[0086] 输入接口610用于获取被检物的登记信息。被检物可以为容器里的具体货物，其中，容器例如可以为车辆、集装箱、包裹等。

[0087] 在对集装箱进行安检时，通过查看报关单可以获取报关单所列货物名称，该货物名称即为货物的登记信息。

[0088] 处理器620用于基于登记信息获取被检物的标准扫描图像。其中，可以预先在存储器中存储各货物的多角度标准X光扫描图像，通过货物的名称可以在存储器中查找到该货
物的多角度标准X光扫描图像。如报关单显示正在安检的集装箱内有某品牌手机，通过该品
牌手机的名称可以找到对应的多角度标准X光扫描图像。

[0089] 显示器630用于将被检物的标准扫描图像以增强现实AR的方式显示，以便通过比对被检物的标准扫描图像和实际扫描图像确定被检物是否为可疑物；其中，实际扫描图像
包括被检物图像。例如，货箱在通过安检设备时，安检人员佩戴AR设备，通过AR设备可以在
预定位置看到该货箱内货物的多角度标准X光扫描图像，同时，安检人员还可以看到包含该
货箱内货物的当前X光扫描图像，通过比对货物的多角度标准X光扫描图像与当前X光扫描
图像可以判断出该货物是否为可疑物。

[0090] 在该实施例中，通过被检物的登记信息获取被检物的标准扫描图像，并以AR的方式进行显示，安检人员通过比对被检物的标准扫描图像和实际扫描图像确定被检物是否为
可疑物，满足了安检人员对货物知识的需求，为安检人员提供了看图指导，提高了安检看图
准确率。

[0091] 在本公开的另一个实施例中，处理器620还可以用于基于登记信息获取被检物的标准扫描图像、三维模型和描述性信息。其中，被检物的描述性信息包括被检物的名字、数
量、定义、用途、在扫描图像上的特征部位、通常使用的包装材料等。

[0092] 显示器630用于将被检物的标准扫描图像、三维模型和描述性信息以AR的方式显示在预定位置。安检人员可以比对当前扫描图像与被检物的标准扫描图像是否一致，并查
看被检物的三维模型和描述性信息，综合判断该被检物是否为可疑物。例如，报关单上显示
被检物为手机，安检人员通过佩戴AR设备，在预定位置看到手机的标准扫描图像、三维模型
和描述性信息，但在当前的扫描图像中显示为手枪形状图像，则确定被检物与报关单中的
信息不相符，该被检物可能为可疑物。

[0093] 在该实施例中，将被检物的标准扫描图像、三维模型和描述性信息以AR的方式显示在预定位置，辅助安检人员看图，满足安检人员对商品知识的需求，降低安检人员培训成
本，为安检人员提供看图指导，提高看图准确率，并提高了安检人员的用户体验。

[0094] 在本公开的另一个实施例中，处理器620还可以用于基于可疑物信息获取可疑物的标准扫描图像、三维模型和描述性信息，显示器630还用于将可疑物的标准扫描图像、三
维模型和描述性信息以AR的方式显示在预定位置，以便安检人员比对可疑物的标准扫描图
像和实际扫描图像，提高看图准确率。

[0095] 在本公开的另一个实施例中，处理器620还可以用于响应于图像处理指令，对被检物或可疑物的标准扫描图像进行图像处理，显示器630用于将处理后的标准扫描图像以AR
的方式显示。例如，对被检物或可疑物的标准扫描图像进行直方图均衡、对数变换等操作，
以对图像进行增强显示，例如，将图像中之前比较窄的灰度范围映射到更宽的灰度范围，使
图像对比度变大，方便安检人员看图。

[0096] 在本公开的另一个实施例中，处理器620还可以用于响应于模型处理指令，对被检物或可疑物的三维模型进行缩放和旋转操作等，显示器630用于将进行模型操作后的三维
模型以AR的方式显示。例如，AR设备中保存用户手势、货物、操作指令的对应关系，处理器
620通过识别用户手势和货物，将货物的三维模型进行缩放、旋转等操作。

[0097] 在本公开的另一个实施例中，输入接口610还用于接收标记有可疑区域的实际扫描图像，其中，若被检物为可疑物，则实际扫描图像中显示被检物图像的位置被标记为可疑
区域。例如，安检人员通过比对货物的标准扫描图像和实际扫描图像，确定该货物为可疑
物，则可以在实际扫描图像中标记出可疑区域，并将图像发送至另一台AR设备，以便在开箱
检查时供佩戴AR设备的检查人员查看。

[0098] 显示器630还用于将标记有可疑区域的实际扫描图像以AR的方式显示在被检物所在容器上。其中，在开箱检查时，开箱检查人员佩戴AR设备，可以在货物所在货箱预定位置
看到标记的可疑区域，方便检查人员准确定位可疑物位置。

[0099] 显示器630还用于将被检物或可疑物的标准扫描图像、三维模型和描述性信息以AR的方式显示在被检物所在容器上，方便开箱检查人员定位可疑物。

[0100] 在本实施例中，在开箱检查时，将标记有可疑区域的实际扫描图像以AR的方式显示在被检物所在容器上，使得检查人员能够准确定位可疑物位置，提高了开箱检查的效率。

[0101] 图7为本公开辅助安检系统的一个实施例的结构示意图。该辅助安检系统包括服务器710、数据库720和辅助安检装置730，其中，辅助安检装置730可以为AR设备，且已在上
述实施例中进行了详细介绍。

[0102] 服务器710用于存储货物的标准扫描图像和三维模型，数据库720用于存放货物的标准扫描图像和三维模型在服务器710中的地址、以及被检物的描述性信息。其中，货物既
可以为登记信息中的货物，也可以为实际检测出的货物。

[0103] 辅助安检装置730可以通过数据库720、服务器710获取被检物的标准扫描图像、三维模型和描述性信息，并以AR方式进行显示，同时若安检设备已经识别出被检物可能为某
可疑物，则辅助安检装置730还可以获取可疑物的标准扫描图像、三维模型和描述性信息，
并以AR方式进行显示。以便安检人员进行图像识别，提高看图准确率和开箱检查效率。

[0104] 图8为本公开辅助安检装置的另一个实施例的结构示意图。该辅助安检装置包括存储器810和处理器820。其中：存储器810可以是磁盘、闪存或其它任何非易失性存储介质。
存储器用于存储图1-5所对应实施例中的指令。处理器820耦接至存储器810，可以作为一个
或多个集成电路来实施，例如微处理器或微控制器。该处理器820用于执行存储器中存储的
指令。

[0105] 在一个实施例中，还可以如图9所示，该辅助安检装置900包括存储器910和处理器920。处理器920通过BUS总线930耦合至存储器910。该辅助安检装置900还可以通过存储接
口940连接至外部存储装置950以便调用外部数据，还可以通过网络接口960连接至网络或
者另外一台计算机系统(未标出)。此处不再进行详细介绍。

[0106] 在该实施例中，通过存储器存储数据指令，再通过处理器处理上述指令，能够提高安检看图准确率，另外，还能够帮助安检人员准确定位可疑物位置，提高开箱检查效率。

[0107] 在另一个实施例中，一种计算机可读存储介质，其上存储有计算机程序指令，该指令被处理器执行时实现图1-5所对应实施例中的方法的步骤。本领域内的技术人员应明白，
本公开的实施例可提供为方法、装置、或计算机程序产品。因此，本公开可采用完全硬件实
施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本公开可采用在一
个或多个其中包含有计算机可用程序代码的计算机可用非瞬时性存储介质(包括但不限于
磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。

[0108] 本公开是参照根据本公开实施例的方法、设备(系统)和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程
和/或方框以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指
令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生
一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现
在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。

[0109] 这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指
令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或
多个方框中指定的功能。

[0110] 这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或
其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一
个方框或多个方框中指定的功能的步骤。

[0111] 至此，已经详细描述了本公开。为了避免遮蔽本公开的构思，没有描述本领域所公知的一些细节。本领域技术人员根据上面的描述，完全可以明白如何实施这里公开的技术
方案。

[0112] 虽然已经通过示例对本公开的一些特定实施例进行了详细说明，但是本领域的技术人员应该理解，以上示例仅是为了进行说明，而不是为了限制本公开的范围。本领域的技
术人员应该理解，可在不脱离本公开的范围和精神的情况下，对以上实施例进行修改。本公
开的范围由所附权利要求来限定。