技术摘要：
本发明涉及一种基于视频检测的4S店销售服务管理方法和系统，包括前端高速采集模块利用多路FPGA和4S店人脸摄像头采集图像数据；后端图像处理模块采用人脸识别技术确认顾客身份、追踪顾客轨迹、追踪销售人员服务情况；销售管理模块分析需求和4S店销售服务管理情况；消息  全部
背景技术：
远程视频监控早已广泛应用于交通、建筑、安保、商场等各类场景中，人脸识别技 术进一步扩大了并细化了视频监控的应用场景，如门禁管理、电子设备及移动应用的身份 管理、移动支付、智能家居设备权限管理、安检身份审核检验等。人脸识别已成为监控视频 分析应用的热点，但主要集中于需要确认个体身份的安防场景和金融支付场景中，针对识 别出人脸个体的定制化服务还很少。 在4S店的销售服务场景中广泛分布着大量摄像头，主要用来远程监控和防盗，离 开了监控人员无法发挥作用。4S店中产品展示场地大，但能够容纳的产品仍然有限，加上产 品本身技术含量高、配置复杂，交易达成高度依赖销售服务质量，即高度依赖销售人员的自 发性与心理博弈能力，存在不少因销售服务不到位而丢单的案例。
技术实现要素：
本发明要解决的技术问题是：为了克服现有技术中的不足，提供一种基于视频检 测的4S店销售服务管理方法和系统，能够第一时间确认到店顾客身份信息、跟踪顾客商品 浏览轨迹，同时跟踪销售人员服务情况，进而帮助销售人员分析顾客需求、提供精准服务。 本发明解决其技术问题所采用的技术方案是：一种基于视频检测的4S店销售服务 管理方法，包括以下步骤： 第一步：收集4S店人脸图像和运动图像：所述人脸图像是各4S店来访顾客和销售 服务人员的脸部图像数据，所述运动图像是4S店来访顾客浏览、咨询商品过程中的图像； 进一步地：收集4S店人脸图像和运动图像时，通过安装在4S店中的多路人脸摄像 头采集人脸图像和运动图像，然后通过多路FPGA高速采集单元同时采集各4S店图像并上 传，多路FPGA高速采集单元通过公开人脸数据集训练的AI算法模型实现，采集高精度人脸 图像。 进一步地：人脸摄像头的安装以利于抓拍顾客脸部图像为准则调整摄像头角度。 第二步:确认顾客和销售人员身份、追踪顾客和销售人员行为：读取人脸图像和运 动图像后，分析确认顾客和销售人员身份、追踪顾客和销售人员行为； 进一步地：确认顾客身份、追踪顾客行为时，利用消息队列异步架构开启多任务处 理模式，多任务包括： 图像预处理任务：图像预处理任务采用开源机器学习算法库TensorFlow的MTCNN 网络对读取的人脸图像和运动图像进行图像对齐处理； 人脸特征识别任务：人脸特征识别任务采用TensorFlow的Facenet网络从对齐的 图像中提取人脸特征矩阵； 5 CN 111597999 A 说　明　书 2/7 页 人脸身份识别任务：人脸身份识别任务是将获得的人脸特征矩阵与人脸模型库进 行比对，确定顾客和销售人员身份、输出并标记顾客和销售员、并将确定后的新顾客存入人 脸模型库；进一步的，所述人脸模型库包括提前建立信息和后期存入信息，提前建立信息通 过打标签的方式提前建立，4S店销售人员注册时即提取人脸照片存入模型库；后期存入信 息是4S店实时检测到的顾客通过网络筛查和销售人员打标签相结合的方式确定身份，确认 身份后人脸信息自动存入人脸模型库。 车辆检测任务：车辆检测任务是识别输入图像中的车辆和车型，输入图像是识别 标记了人脸的图像剩余部分，通过提前训练好的检测器基于TensorFlow检测图像中的车型 检测目标车辆并将其裁剪出来，然后用分类模型进行分类检测识别车型，最后用车型检测 结果为车辆做标记；进一步的，本任务单元通过Slim分类和Object  Detection实现。 行为识别任务：行为识别任务是检测顾客的商品浏览轨迹、顾客与销售人员的互 动关系，提前训练“顾客-车型”和“顾客-销售人员”两种行为关系检测模型，向检测模型内 输入标记了人脸和车型的图像，检测模型检测顾客对某车型的外部浏览、试驾及提车行为； 检测顾客与销售人员相遇后的交谈和行动，并将检测结果输出； 追踪顾客轨迹任务：所述追踪顾客轨迹任务是利用行为识别单元输出的结果整理 输出顾客的商品浏览轨迹和顾客与销售人员的互动关系；进一步地，顾客轨迹包括：顾客浏 览某一车型的时间、向销售人员咨询某车型的时间、向销售人员咨询的时间、在某4S店停留 的时间、试驾车型及时间。 第三步:分析顾客需求和销售服务情况：读取确认出的顾客身份和追踪到的顾客 行为，分析追踪顾客需求，形成客户需求报告；读取确认出的销售人员身份和追踪到的销售 人员行为，分析管理销售人员的服务情况，形成4S店销售报告； 进一步地：分析顾客需求和销售服务时，读取人脸身份识别任务数据、行为识别任 务数据和追踪顾客轨迹任务数据，系统分别分析顾客需求和销售服务；分析顾客需求时，系 统收集同一顾客的所有相关信息分析其需求并形成报告，相关信息包括：顾客身份、到访过 的4S店及其位置和日期、浏览过的车型及时长和销售员服务时长、试驾过的车型及时长；分 析销售服务时，针对每个4S店，搜集每个销售人员的活动信息，分析整个4S店的销售服务特 点并形成报告，活动信息包括：服务过的顾客、陪同浏览过的车型及服务时长、陪顾客试驾 时长、是否及时获取客户身份及联系方式、是否及时上报每次的顾客服务信息，评估销售人 员服务的服务情况。 第四步:顾客需求和销售服务情况的读取：接收现场销售人员消息订阅请求并提 取客户需求报告后，反馈顾客相关信息；接收4S店的消息订阅请求，从销售管理模块中提取 4S店销售报告，并反馈给4S店。 进一步地：当4S店检测到首次到访顾客时及时向该店发出提醒，销售人员可及时 提供服务；4S店或销售人员可向系统订阅该顾客所有信息，信息来源于客户需求报告，帮助 销售人员精准制定销售对策、提高服务质量；4S店可向系统订阅本店销售服务情况相关信 息，信息来源于4S店销售报告。 为了实现上述发明方法，本申请提供一种基于视频检测的4S店销售服务管理系 统，包括： 前端高速采集模块：用于抓拍收集并上传4S店人脸图像和运动图像； 6 CN 111597999 A 说　明　书 3/7 页 后端图像处理模块：用于接收前端高速采集模块中收集到的人脸图像和运动图 像，并确认顾客和销售人员身份、追踪顾客和销售人员行为； 销售管理模块：用于接收后端图像处理模块输出的顾客身份和追踪到的顾客行 为，分析顾客需求，形成客户需求报告；接收后端图像处理模块输出的销售人员身份和追踪 到的销售人员行为，分析销售服务情况，形成4S店销售报告； 消息订阅分发模块：用于接收订阅者订购消息，并从销售管理模块中提取客户需 求报告和4S店销售报告后进行反馈。 进一步的，所述前端高速采集模块包括人脸摄像头和多路FPGA高速采集单元，所 述人脸摄像头安装在4S店中，用于采集人脸图像和运动图像，所述多路FPGA高速采集单元 与人脸摄像头信号连接，用于同时采集各4S店人脸图像和运动图像，并上传至后端图像处 理模块。 进一步的，所述后端图像处理模块包括： 图像预处理单元：用于接收人脸图像和运动图像，并对人脸图像和运动图像进行 图像对齐处理； 人脸特征识别单元：用于从对齐的人脸图像和运动图像中提取人脸特征矩阵； 人脸身份识别单元：用于将获得的人脸特征矩阵与人脸模型库进行比对，确定顾 客和销售人员身份、输出并标记顾客和销售员、并将确定后的新顾客存入人脸模型库； 车辆检测单元：用于识别标记了人脸的图像剩余部分中的车辆和车型，并未为车 辆做标记； 行为识别单元：用于检测顾客的商品浏览轨迹、顾客与销售人员的互动关系； 追踪顾客轨迹单元：用于接收行为识别单元输出的结果，并整理输出顾客的商品 浏览和顾客与销售人员的互动关系。 进一步的：所述销售管理模块基于python开发，包括： 顾客需求分析单元：用于接收人脸身份识别单元确定出的顾客身份，提取追踪顾 客轨迹单元整理出的顾客的商品浏览轨迹，分析顾客需求，形成客户需求报告；提取追踪顾 客轨迹单元整理出的顾客的商品浏览轨迹，每一位顾客按照时间顺序排列的全流程到访信 息，提取顾客访问的店铺位置和车型预测其品牌爱好，通过顾客浏览车型的价位、外观风 格、内饰档次及行为轨迹中顾客浏览所有车型的时长、试驾情况预测顾客的商品需求，形成 客户需求报告。 销售人员服务分析单元：用于接收人脸身份识别单元确定出的销售人员身份，提 取追踪顾客轨迹单元整理出的顾客与销售人员的互动关系，分析销售服务情况，形成4S店 销售报告。提取每一位销售人员按照时间顺序排列的全流程销售服务信息，通过流程信息 计算获取销售人员的日均接待率(平均每天接待顾客人数)、每个车型接待时长、每次接待 时长、总试驾率(试驾次数/所有车型接待总次数)、车型接待率(特定车型试驾次数/特定车 型接待总次数)、到店与离店时间；针对同一4S店，收集到店顾客数量、顾客到访时长、试驾 率、销售人员数量及销售人员上下班时间，形成4S店销售报告。 进一步的：所述消息订阅分发模块基于python开发，包括： 顾客到店提醒单元：用于接收人脸特征识别单元发出的首次到店顾客信息，并发 出提示信息；人脸识别单元发现首次到访4S店的顾客时，自动向顾客到店提醒单元发出提 7 CN 111597999 A 说　明　书 4/7 页 示信息，4S店根据提示及时为顾客提供服务。 顾客需求报告订阅单元：用于接收订阅者对顾客的订购消息，并从销售管理模块 中提取客户需求报告；4S店可申请订阅任一顾客的需求报告，报告来源于销售管理模块的 顾客需求分析单元。 销售服务报告订阅单元：用于接收订阅者对销售人员的订购消息，并从销售管理 模块中提取4S店销售报告。4S店可申请订阅本店任一销售人员的销售服务情况报告，报告 来源于销售管理模块的销售人员服务分析单元。4S店可申请本店销售服务报告，报告来源 于销售管理模块的销售人员服务分析单元。 本发明的有益效果是:本发明的一种基于视频检测的4S店销售服务管理方法和系 统，包括前端高速采集模块利用多路FPGA和4S店人脸摄像头采集图像数据；后端图像处理 模块采用人脸识别技术确认顾客身份、追踪顾客轨迹、追踪销售人员服务情况；销售管理模 块分析需求和4S店销售服务管理情况；消息订阅分发模块管接收4S店消息订阅请求，能够 第一时间确认到店顾客身份信息、基于视频检测追踪顾客需求，同时跟踪销售人员服务情 况，可实时反馈顾客相关信息和店铺销售服务管理情况，管理店铺销售服务，进而帮助销售 人员分析顾客需求、提供精准服务，促进4S店服务质量提高和管理精细化。 附图说明 下面结合附图和实施例对本发明进一步说明。 图1是本发明中实施例1的示意图； 图2是本发明中实施例2的示意图。