手把手教学电瓶车进电梯检测、多类别车辆追踪、异常行为检测产业级应用

BitWanderlustX
• 阅读 972

近日,媒体接连报道电动车起火爆炸造成严重人员伤亡的新闻,针对该问题,社区物业明令禁止电瓶车入户,但是依然有人忽视这个问题严重性。目前,AI应用已经可以有效地预防此类问题,在进入电梯的时候就可以采取报警和有效措施。AI在安防领域的应用非常广泛,在各类公共场合迅速识别人员摔倒、打架、争吵,以及车辆行驶异常等行为,可以及时通知安保人员进行干预。

本次飞桨产业实践范例库开源电瓶车进电梯检测、异常行为检测、多类别车辆跟踪三个典型安防场景,提供了从数据准备、模型训练优化,到模型部署的全流程可复用方案,降低产业落地门槛。⭐项目链接⭐https://github.com/PaddlePaddle/awesome-DeepLearning所有源码及教程均已开源,欢迎大家使用,star鼓励~

电瓶车进电梯检测

电瓶车进楼入户发生的火灾事故屡见不鲜,针对该现象飞桨联合天覆科技推出了相应的电瓶车进电梯检测方案,及时进行报警与干预,从源头减少这一情况的发生。

电梯场景内物体多,遮挡情况常有发生,要保证准确率、响应速度和高性价比,同时针对需求的变化可以自行优化,对技术方案提出很大挑战。

手把手教学电瓶车进电梯检测、多类别车辆追踪、异常行为检测产业级应用

基于这样高难度的要求,天覆科技CTO马纯磊通过不断的尝试、试验,最终找到了最优的解决思路:使用飞桨图像分类套件PaddleClas中的图像识别系统PP-ShiTu(即主体检测+特征提取+向量检索的方式),整体方案如下:

手把手教学电瓶车进电梯检测、多类别车辆追踪、异常行为检测产业级应用

主体检测分别选用了单阶段检测模型 YOLOv3、PP-YOLOv2、PicoDet进行实验,最终准确率高达98%,同时用户可以不断自优化模型,模型准确率不断提升。

部署使用飞桨服务化部署框架Paddle Serving的方式,根据PicoDet前处理耗时较长的特点,采用Pipeline的策略,QPS从15提升到19,性能提升20% 。同时加入kong安全网关,统一了预测服务入口,提升服务安全性。更多优化策略详解欢迎大家关注直播课。

手把手教学电瓶车进电梯检测、多类别车辆追踪、异常行为检测产业级应用

多类别车辆跟踪

车辆追踪是安防领域的重要技术,在特定场所的车流量管控、进出口检测、交通管控等经典场景都存在广泛应用场景。本项目基于飞桨目标检测套件PaddleDetection,智能高效地实现了监控场景下的多类别车辆跟踪任务。

场景难点:

  • 拍摄角度多变,受光照光线等影响对模型泛化能力要求较高;
  • 涉及车辆类型较多,需要满足多类别跟踪诉求;
  • 高空俯拍,对小目标大尺幅场景准确性要求较高,预警对实时性能要求较高。

手把手教学电瓶车进电梯检测、多类别车辆追踪、异常行为检测产业级应用

本项目使用可进行多类别跟踪的MCFairMOT算法,选择较大的图像输入尺寸 1088 x 608,从而改善小目标检测效果;考虑到速度和精度能够均衡,项目中使用 DLA-34 作为Baseline模型的骨干网络。通过多种优化策略,整体精度提升30% ,从最终可视化场景中可以看到取得非常好的多类别追踪效果。

手把手教学电瓶车进电梯检测、多类别车辆追踪、异常行为检测产业级应用

在部署上提供基于Paddle Inference 的部署方案,做到高吞吐、低时延,保证了模型在服务器端即训即用,快速部署。

异常行为检测

社会治安一直是城市、社区、商区治理的重要问题。城市内安装大量摄像头,面对海量视频数据堆积,需要及时发现安防行为问题,并做出快速反应。异常行为的动作类型有很多,比如打架、争吵、破坏公物、吸烟、摔倒等,均可以用AI技术做出快速检测。

手把手教学电瓶车进电梯检测、多类别车辆追踪、异常行为检测产业级应用

场景难点:

  • 靠单张图片很难判别行为类型
  • 行为识别标注难度大
  • 行为类内和类间变化大

针对以上难点,我们对动作检测的技术方案做了整体分析:

手把手教学电瓶车进电梯检测、多类别车辆追踪、异常行为检测产业级应用

最终选用了业界领先的基于时空信息的SlowFast_FasterRCNN模型。相比于基于骨骼点的模型,该模型对遮挡等场景更加鲁棒;相比于基于目标检测的模型,该模型能够提取时序特征,解决单张图片很难判别行为类型的问题。

手把手教学电瓶车进电梯检测、多类别车辆追踪、异常行为检测产业级应用

同时,我们提供了数据集的构建方案细节,并在该数据集上提供了多种优化方案与实验数据详解,如样本均衡策略、模型细节优化、训练策略优化等,最终在多类别分类上比原模型达到了更优的效果。最后,我们提供了基于Paddle Inference 的部署方案。

手把手教学电瓶车进电梯检测、多类别车辆追踪、异常行为检测产业级应用

产业实践范例教程

助力企业跨越AI落地鸿沟

飞桨产业实践范例,致力于加速AI在产业落地的前进路径,减少理论技术与产业应用的差距。范例来源于产业真实业务场景,通过完整的代码实现,提供从数据准备到模型部署的方案过程解析,堪称产业落地的“自动导航”。

  • 真实产业场景: 与实际具有AI应用的企业合作共建,选取企业高频需求的AI应用场景如智慧城市-安全帽检测、智能制造-表计读数等;
  • 完整代码实现: 提供可一键运行的代码,在“AI Studio一站式开发平台”上使用免费算力一键Notebook运行;
  • 详细过程解析: 深度解析从数据准备和处理、模型选择、模型优化和部署的AI落地全流程,共享可复用的模型调参和优化经验;
  • 直达项目落地: 百度高工手把手教用户进行全流程代码实践,轻松直达项目POC阶段。

精彩课程预告

为了让小伙伴们更便捷的应用这些范例教程,百度飞桨于2月24日20:00-21:30为大家准备了直播课程,深度解析从数据准备、方案设计到模型优化部署的开发全流程,手把手教大家进行代码实践。

欢迎小伙伴们扫码关注服务号报名,免费获取直播课和回放视频链接,更有机会获得覆盖智慧城市、工业制造、金融、互联网等行业的飞桨产业实践范例手册! 也欢迎感兴趣的企业和开发者与我们联系,交流技术探讨合作。

扫码报名直播课,加入技术交流群

手把手教学电瓶车进电梯检测、多类别车辆追踪、异常行为检测产业级应用

手把手教学电瓶车进电梯检测、多类别车辆追踪、异常行为检测产业级应用

点赞
收藏
评论区
推荐文章
Stella981 Stella981
3年前
FastReID:首个产业级通用目标重识别开源库
_引言_京东AI研究院近日发布了基于PyTorch的通用目标重识别(ReID)开源库FastReID,其发布对相关领域的研究起到积极的促进作用,同时也加速技术产品落地应用。FastReID已经在行人重识别、车辆重识别上都取得了优异的评测结果,在京东内部,该技术已经获得广泛地应用于智慧园区、智慧楼宇、智慧供应链、线下零售等实际项目中。在刚公布的论文
不是海碗 不是海碗
2年前
尾号限行 API 实现微信小程序车辆尾号限行查询功能
引言车辆尾号限行是一个交通出行政策,根据地方交通管理政策,在一周内的某一天,该尾号车辆不允许在规定路段行驶。这种政策不是针对特定道路和特定车辆,是在一定区域内对所有车辆都具有制约能力,而且会不定期调整。本文将从介绍一下如何用微信小程序实现一个车辆尾号限行查
数据堂 数据堂
1年前
深度学习在语音识别中的应用及挑战
一、引言随着深度学习技术的快速发展,其在语音识别领域的应用也日益广泛。深度学习技术可以有效地提高语音识别的精度和效率,并且被广泛应用于各种应用场景。本文将探讨深度学习在语音识别中的应用及所面临的挑战。二、深度学习在语音识别中的应用1.基于深度神经网络的语音
数据堂 数据堂
1年前
语音识别技术在医疗健康领域的应用与挑战
一、引言随着医疗健康领域的发展和人工智能技术的进步,语音识别技术在医疗健康领域的应用越来越广泛。本文将探讨语音识别技术在医疗健康领域的应用以及面临的挑战。二、语音识别技术在医疗健康领域的应用1.智能问诊:通过语音识别技术,可以将患者的症状和问题转化为文字信
数据堂 数据堂
1年前
语音识别技术在教育领域的应用与挑战
一、引言随着人工智能技术的不断发展,教育领域也开始应用语音识别技术来提高教学质量和学习效果。本文将探讨语音识别技术在教育领域的应用以及面临的挑战。二、语音识别技术在教育领域的应用1.在线学习辅导:通过语音识别技术,可以将教师的口头讲解或学生的问题转化为文字
胡赤儿 胡赤儿
1年前
AI影视解说:技术的魔力赋予影像新生命
随着人工智能(AI)技术的迅速发展,它已经不仅仅停留在科技领域,更在文化娱乐产业中展现出了巨大的潜力。其中,AI影视解说作为一种新兴应用,正在逐渐改变着人们对影视作品的理解与欣赏方式。本文将深入探讨AI影视解说的原理、应用以及未来发展趋势。1.AI影视解说
胡赤儿 胡赤儿
1年前
AI影视解说:技术的魔力赋予影像新生命
随着人工智能(AI)技术的迅速发展,它已经不仅仅停留在科技领域,更在文化娱乐产业中展现出了巨大的潜力。其中,AI影视解说作为一种新兴应用,正在逐渐改变着人们对影视作品的理解与欣赏方式。本文将深入探讨AI影视解说的原理、应用以及未来发展趋势。1.AI影视解说
待兔 待兔
1年前
AI大模型实战课
AI大模型实战课最近在和helloworld社区的粉丝接触的过程中,对于AI,有很多人有不少问题问题一:现在是学习AI大模型的时机吗有人会有这种想法:AI现在很火,但是没有看到现象级的应用,只是用来问个问题,辅助写个代码,写个文案认为AI是处于早期,等AI
幂简集成 幂简集成
5个月前
效率翻倍!超好用的AI+写作API接口汇总
在过去几年里,人工智能(AI)技术经过众多科技公司和科研人员的不懈努力取得了巨大进步,吸引了大众的广泛关注。这些AI技术在应用领域的新闻报道也逐渐走入人们的视野,引发了对其具体应用的浓厚兴趣。今天,我们将聊一聊AI与写作文案的结合。在传统观念中,AI技术通
幂简集成 幂简集成
3个月前
2025年全球最佳AI文本内容检测API:一个报表10个维度近100条数据对比
AI文本内容检测API是一种用于分析和评估文本内容的技术工具,能够快速识别潜在风险、敏感信息和不当内容。此API广泛应用于社交媒体平台、在线社区、电子商务网站等领域,以确保用户生成内容的安全性和合法性。面对众多的服务提供商,如何选择最适合的AI文本内容检测
网页防篡改技术:保护网站安全与完整性的关键
页防篡改需要应用多种技术手段,包括使用数字签名、监测软件、IP封堵、数据加密等方式,以便有效地检测和预防网页被恶意篡改的行为。