1、扬州市公安局人脸识别大数据市县一体化系统测试方案 1、 测试投标人投标人： 。2、 测试时间安排测试时间前 1 天 用于各投标人系统部署，调试，人像建库等准备工作。正式测试时间 2019 年 1 月 22 日具体时间安排如下：09： 00 18：00 动态比对测试；注：测试正式开始时，测试投标人不能私自接触各自的识别设备。3、 测试软硬件准备3.1前端摄像头前端在 3 个点位共安装 4 个 200 万像素的网络高清摄像头，用于动态人脸识别。3.2后端服务器后端识别服务器为 1 台物理服务器，作为人脸识别计算服务，由参加测试投标人自行准备，服务器需要在如下基础配置以内，性能不能高于如下配置；基础
2、配置如下（总体计算能力）：CPU：配置性能 2 颗 E5-2680 V4；GPU：数量 2 块 Tesla P4 GPU 卡；内存：内存性能 256G；3.3 网络环境测试投标人的服务器全部放置在市公安局机房同一个机柜中，使用共同的电源、交换机，保证电源和网络质量相同。测试开始后任何人不得进入机房。3.4 自带 U 盘。1 / 63.5 测试数据3.5.1 图片数据20 万外地人员证件照用作黑名单布控库，测试人员会混在这批证件照之中；3.5.2 视频数据通过 4 台测试摄像机提供实时视频，若出现前端网络带宽不够，直连相机变更为对接 GB28181 视频平台。4、 测试内容与步骤4.1 动态比对
3、测试A. 黑名单布控库此类样本数据主要应用于动态人脸识别的黑名单布控场景，通过实时视频识别比对，测试对黑名单对象的发现能力。黑名单样本数据总量约 20 万张，由采购人通过U 盘在测试现场下发，同一个存储介质按照顺序进行拷贝。数据全部拷贝完成后，各投标同时开始进行样本库建库操作，限时 120 分钟。B. 测试方法由采购人现场提供 4 台测试摄像机的 IP 地址、账号、密码，限定 30 分钟进行摄像机接入、调整报警阈值。动态测试开始，各参测投标人脸系统开始对摄像机内通过人员进行人脸识别抓取，采购人同时对测试视频进行实际通过人员计数，采购人提供测试的起始时间和结束时间，以供下面的结果导出使用。测试人
4、员（不低于 10 人，具体数量不定）单独、聚集、穿插等形式于正常人群中以正常、戴口罩、戴帽子、戴墨镜等姿态通过摄像头，由参测投标人系统进行人脸抓取和比对报警。C. 动态比对测试视频人脸识别抓取：所有投标人在指定时间段对同一指定摄像机的视频流进行人脸识别处理，统计出抓取测试人员的人脸数量，计算抓拍率、重复率、误拍率。单人在一次通过摄像机画面中被多次抓拍的图片记为 1 次。2 / 6布控报警：将抓取的人脸照片与黑名单库进行比对，统计首位比中测试人员的报警数和误报数。各参测投标人谨慎设置预警相似度门槛阈值，测试过程中不得修改。正确报警：测试人员在指定时间内通过摄像头报警，单人一次通行多次正确报警，计
5、一次正确报警。错误报警：测试人员通过摄像头，报警输出为非测试人员布控照片，计一次错误报警；非测试人员通过摄像头，有测试人员的报警结果计一次错误报警；其他非测试人员报警；D. 结果输出 在评委的监督下,按照下表要求输出测试采购人规定的某个时间段内的所有抓拍的测试人员的人脸照片，命名为：投标人名称_ 动态人脸抓取.xls，拷贝至 U 盘，采购人根据导出表格对照实际通过人员数量进行核验并计分。序号 抓拍时间时间 抓拍图 全景图12N 在评委的监督下，按照下表要求，将命中布控人员的报警信息文件导出，命名为：投标名称_命中报警.xls，拷贝至 U 盘，采购人根据导出表格对照实际通过人员数量进行核验并计分
6、。其中，触发报警人员照片是指系统现场抓取的人脸照片，命中人员照片是指重点对象样本库中的已知人员照片，命中人员编号是指命中人员照片所对应的身份编号。告警序号 报警抓拍图命中人员照片命中人员编号抓拍全景图告警时间 告警相机点位123 / 6N4.2测试结果本次测试总分为 100 分，由评委按照以上测试内容，分别统计各项测试得分，最后进行汇总和排名。4.2.1 视频人脸识别抓取，30 分。将各投标人提交的测试人员人脸抓取数量与实际通过人员数量进行比较； 计分规则：M=去重后抓拍人脸数量/ 实际通过的人员数量*15 (分数只保留到小数点后两位)；N=最少厂家重复人脸数/ 本厂家重复人脸数 * 10 (
7、分数只保留到小数点后两位，若最少厂家重复人脸数为 0，以 1 计) ；P=5-错误抓拍人脸数，最低得 0 分；计分表格如下：视频人脸抓拍序号 投标人名称 抓拍人脸数(去重 ) 重复人脸数 误拍人脸数 得分(M+N+p)12N4.2.2 视频布控报警，70 分。4 / 6所有测试人通行总和为 A，测试后统计报警正确的数量总和为 M；统计报警错误的数量总和为 N；漏报警不计分。计分规则：(M-N)/A70（分数只保留到小数点后两位），最低得 0 分。计分表格如下：目标人编号 正确报警数（去重） 错误报警数 有效报警数12A报警计数总和 M= N= M-N=得 分 (M-N)/ A705、 测试得分
8、由评委根据产品测试结果当场计算得分，测试分数=视频人脸识别抓取得分+视频布控报警得分。6、相关事项说明 保密工作要求1、按照公安机关有关规定，参测投标人应与扬州市公安局签订保密协议，确保各项测试工作有序开展。2、测试期间，将对测试服务器进行 IP 限制，只有参加测试的客户端电脑可以登陆访问。3、测试相关数据均为公安机关内部资料，参测投标人不得拍照、录像、外接存储设备拷贝、传输至参测设备以外设备等任何迁移或复制数据的行为，一旦发现，取消测试资格，对涉及设备进行相应处理，并依法追究相关人员法律责任。5 / 64、按照公安机关信息安全管理规定有关要求，测试结束后，参测设备需在 5 天内撤回，测试服务
9、器所用硬盘数据现场监督进行格式化清理。测试使用的计算机经测试采购人检查并处理后方可撤回。 测试结果适用范围1、本次测试工作只针对于扬州市公安局人脸识别大数据市县一体化项目，此次测试结果不适用于第三方。2、测试结果归扬州市公安局所有。 其它事项说明1、各参测投标人应准确认识此次测试工作目的，以技术交流和测试为出发点，极配合测试工作组，确保测试工作达到预期效果。2、测试期间，各参测投标人需遵守扬州市公安局相关管理规定，杜绝不文明行为发生。3、测试期间，各参测投标人工作人员差旅、食宿等相关费用自理。参测投标人提供的测试设备所产生的购置费、运费、损坏等所有费用由参测投标人承担。设备上架安装，环境搭建，网络调试等，由参测投标人负责将各自设备搬运至指定场所，测试工作组指定专人对接，并协助完成相关工作。4、针对本测试所有内容，各参测投标人应充分解读和掌握，测试工作组负责进行解释，有关意见建议应在开展测试工作前向测试工作组提出，合理的予以釆纳，并在实施测试前加以改进完善，测试开始后视同默认测试所有规定。5、针对以上测试内容、规则、方法及要求等相关规定，采购人具有独立解释和调整权力。
