CN106586738A - 一种基于视觉检测的多轿厢电梯调度方法 - Google Patents
一种基于视觉检测的多轿厢电梯调度方法 Download PDFInfo
- Publication number
- CN106586738A CN106586738A CN201710060322.9A CN201710060322A CN106586738A CN 106586738 A CN106586738 A CN 106586738A CN 201710060322 A CN201710060322 A CN 201710060322A CN 106586738 A CN106586738 A CN 106586738A
- Authority
- CN
- China
- Prior art keywords
- car
- elevator
- passenger
- call
- calling
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 36
- 238000011179 visual inspection Methods 0.000 title description 2
- 238000001514 detection method Methods 0.000 claims abstract description 24
- 238000012545 processing Methods 0.000 claims abstract description 17
- 230000005540 biological transmission Effects 0.000 claims abstract description 7
- 238000012806 monitoring device Methods 0.000 claims abstract 2
- 230000006870 function Effects 0.000 claims description 19
- 238000005192 partition Methods 0.000 claims description 10
- 238000012549 training Methods 0.000 claims description 10
- 239000013598 vector Substances 0.000 claims description 8
- 238000013316 zoning Methods 0.000 claims description 6
- 230000000694 effects Effects 0.000 claims description 5
- 238000007689 inspection Methods 0.000 claims description 4
- 238000005457 optimization Methods 0.000 claims description 4
- NAWXUBYGYWOOIX-SFHVURJKSA-N (2s)-2-[[4-[2-(2,4-diaminoquinazolin-6-yl)ethyl]benzoyl]amino]-4-methylidenepentanedioic acid Chemical compound C1=CC2=NC(N)=NC(N)=C2C=C1CCC1=CC=C(C(=O)N[C@@H](CC(=C)C(O)=O)C(O)=O)C=C1 NAWXUBYGYWOOIX-SFHVURJKSA-N 0.000 claims description 3
- 238000013507 mapping Methods 0.000 claims 2
- 230000001373 regressive effect Effects 0.000 claims 2
- 230000001537 neural effect Effects 0.000 claims 1
- 238000012546 transfer Methods 0.000 claims 1
- 230000000007 visual effect Effects 0.000 abstract description 6
- SAZUGELZHZOXHB-UHFFFAOYSA-N acecarbromal Chemical compound CCC(Br)(CC)C(=O)NC(=O)NC(C)=O SAZUGELZHZOXHB-UHFFFAOYSA-N 0.000 abstract 1
- 238000013527 convolutional neural network Methods 0.000 description 31
- 238000011176 pooling Methods 0.000 description 8
- 238000010586 diagram Methods 0.000 description 5
- 238000013135 deep learning Methods 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 238000005265 energy consumption Methods 0.000 description 2
- 238000000605 extraction Methods 0.000 description 2
- 238000012544 monitoring process Methods 0.000 description 2
- 238000007781 pre-processing Methods 0.000 description 2
- 238000012360 testing method Methods 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 238000003909 pattern recognition Methods 0.000 description 1
- 238000011897 real-time detection Methods 0.000 description 1
- 238000011160 research Methods 0.000 description 1
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B66—HOISTING; LIFTING; HAULING
- B66B—ELEVATORS; ESCALATORS OR MOVING WALKWAYS
- B66B1/00—Control systems of elevators in general
- B66B1/24—Control systems with regulation, i.e. with retroactive action, for influencing travelling speed, acceleration, or deceleration
- B66B1/28—Control systems with regulation, i.e. with retroactive action, for influencing travelling speed, acceleration, or deceleration electrical
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B66—HOISTING; LIFTING; HAULING
- B66B—ELEVATORS; ESCALATORS OR MOVING WALKWAYS
- B66B1/00—Control systems of elevators in general
- B66B1/24—Control systems with regulation, i.e. with retroactive action, for influencing travelling speed, acceleration, or deceleration
- B66B1/2408—Control systems with regulation, i.e. with retroactive action, for influencing travelling speed, acceleration, or deceleration where the allocation of a call to an elevator car is of importance, i.e. by means of a supervisory or group controller
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
- H04N7/183—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a single remote source
Landscapes
- Engineering & Computer Science (AREA)
- Automation & Control Theory (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Elevator Control (AREA)
- Indicating And Signalling Devices For Elevators (AREA)
Abstract
本发明涉及一种基于视觉检测的多轿厢电梯调度方法,步骤为:如果存在未分配呼叫,则执行视频采集及传输步骤;通过监控设备获得外呼候梯乘客数和各轿厢内乘梯乘客视频传输给上位机;上位机对所获视频运用Fast R‑CNN模型进行实时处理,标定出乘客状态上位机根据上述视频处理的结果,计算各轿厢的调度时间和拥挤度;如果运用Fast R‑CNN模型检测到候梯厅有乘客,根据调度时间和拥挤度选定最佳轿厢;根据分配给各轿厢的外呼情况,重新划分轿厢区域;删除本次处理分配的呼叫,返回判断是否存在未分配呼叫。本发明避免电梯“空呼叫现象”、“超载现象”和“拥挤现象”,提高了电梯运载效率,保证了电梯运行的安全性和高效性。
Description
技术领域
本发明涉及一种基于深度学习的视觉检测技术,具体的说是一种基于视觉检测的多轿厢电梯调度方法。
背景技术
随着建筑高层化和大型化发展,国内外垂直交通运输电梯业面临着两大挑战:一是减小占用空间,降低建筑成本,要求电梯设备占用的空间尽可能的小;二是减小用户等待时间,改善运输性能,要求对乘客提供快捷、安全的服务。如何应对挑战、如何在提高电梯运送效率的同时减小电梯占地成本是急需解决的重要问题之一。
在一个井道中配置多部电梯,采用联合驱动的方式减少电梯井道占用面积,在国际上已经引起电梯业界专家的重视;多轿厢电梯交通系统是目前国际公认的解决垂直交通拥挤、提高运行效率、减少占地空间、节约能源等的最佳选择,也是全世界垂直交通运输领域研究的前沿问题。
目前多轿厢电梯可分为五种:双层轿厢电梯、单井道多轿厢电梯、循环式多轿厢电梯、分叉循环式多轿厢电梯、立体循环式多轿厢电梯。多轿厢电梯控制系统普遍使用分区控制法去实现合理调度避免轿厢碰撞问题,然而分区控制虽然能够有效地避免轿厢碰撞,但对轿厢运行区域有较大的限制,使其运行效率降低。
发明内容
针对现有技术中电梯垂直交通拥挤、运送效率低、存在“空呼叫现象”、“超载现象”和“拥挤现象”、占地空间和能耗较高等不足,本发明要解决的技术问题是提供一种候梯厅前、轿厢内检测乘客数目的模型、在检测的基础上优化各轿厢调度,提高运载效率的基于视觉检测的多轿厢电梯调度方法。
为解决上述技术问题,本发明采用的技术方案是:
本发明一种基于视觉检测的多轿厢电梯调度方法,包括以下步骤:
1)外呼检验:是否存在未分配呼叫,若存在则执行视频采集及传输步骤;
2)视频采集及传输:通过监控设备获得外呼候梯乘客数和各轿厢内乘梯乘客视频传输给上位机;
3)视频处理:上位机对所获视频运用Fast R-CNN模型进行实时处理,标定出乘客状态;
4)派梯方案:上位机根据上述视频处理的结果,计算各轿厢的调度时间Ti和拥挤度ηi;再次运用Fast R-CNN模型检测候梯厅是否有乘客,若有乘客,根据调度时间和拥挤度选定最佳轿厢;若无乘客则为“空呼叫”,在未分配的呼叫队列中删除该呼叫;
5)分区划定:根据分配给各轿厢的外呼情况,重新划分轿厢区域;
6)删除本次处理分配的呼叫,返回判断是否存在未分配呼叫。
多轿厢电梯轿厢的状态及外呼定义为:
在某一时刻轿厢ci的状态及外呼定义如下:
ci=(fi,pi,di,Ci,zi) (1)
Ci={(si1,gi1,ni1,cdi1),(si2,gi2,ni2,cdi2),
…,(sik,gik,nik,cdik),…,(siN,giN,niN,cdiN)} (2)
其中,ci表示编号为i的轿厢;fi表示该轿厢当前位置;pi表示该轿厢内的乘客数;di表示当前轿厢的运行状态,其运行状态有上行、下行、停止;Ci是分配给ci的一组外呼集合,外呼集合中的N表示外呼集合总数;sik为呼梯乘客的出发层,i为轿厢的编号,k为分配给轿厢ci的集合Ci中外呼编号,1≤k≤N;gik为乘客的目的层;nik为该层呼梯乘客数;cdik为从出发层到目的层时电梯的运行方向,如果sik<gik,电梯为上行,sik>gik,电梯为下行;zi表示给轿厢ci所划分的区域。
所述视频处理包括以下步骤:
图像获取:使用抽帧检测的方法获取视频中图像,使得最终的显示达到实时的效果;
图像预处理:预先找出图像中人可能出现的位置作为候选区域,运用多层卷积神经网络和最大池化层处理候选区域的图像,得到卷积特征映射;
图像池化:把得到的卷积特征映射通过region of interest池化方式获得固定维数的特征向量;
图像输出:经过两个全连接层把上述特征向量分别输入到softmax分类器、边界框回归器,进而输出两个优化目标,分别为图片上的边界框和相似度。
所述图像输出包括以下步骤:
Fast R-CNN模型处理图像有两个输出,一个是由softmax分类器输出K+1个分类的概率分布,p=(p0,…pK);另一个是由回归器输出的各分类回归补偿,引入的多任务损失函数用来训练分类和边界框回归,多任务损失函数如下:
L(p,u,tu,v)=Lcls(p,u)+λ[u≥1]Lloc(tu,v) (9)
Lcls(p,u)=-log pu (10)
其中,L(p,u,tu,v)为损失函数,p为分类概率,u为标准分类,tu为分类回归预测参数,v为标准边界回归目标参数,v=(vx,vy,vw,vh);λ为控制两个函数均衡的系数;Lcls(p,u)为标准分类u的损失函数,由式(10)得出;pu为分类u对应的概率;Lloc(tu,v)为分类u对应的矩形框回归目标的损失函数,由式(11)得出;x,y,w,h分别为边界框左上角的横坐标,纵坐标及边框的宽度和高度;为标准值与预测值对应的坐标差距,由式(12)得出。
所述派梯方案中各轿厢的调度时间Ti和拥挤度ηi公式如下:
Ti=tp+tx+td (3)
其中,tp为乘客进出电梯时间,tx为门操作时间,td为电梯运行时间;pi为轿厢内乘客数,M为额定人数,p为设定的无影响人数。
所述分区划定采用动态分区,包括以下步骤:
每个轿厢所占领的区域是受派梯方案和运行时间变化而改变的,划分给轿厢ci的区域zi定义如下:
zi=(ti,bi,zdi) (5)
其中,ti表示划分区域的顶端;bi表示划分区域的底端;zi的范围是顶端ti到底端bi之间的区域,同时需要保证ti>bi;zdi表示安排给轿厢ci的呼叫相对于轿厢的方向,如果方向为向上,则bi为轿厢ci的起始位置,ti为轿厢ci的终止位置,如果方向为向下,则ti为轿厢ci的起始位置,bi为轿厢ci的终止位置。
为避免同一井道轿厢越限,zi和zj(i≠j)需要满足如下条件:
tj<bi或ti<bj (6)
同时,Ci,ti和bi满足如下的条件:
ti=max(si1,si2,…sik,…,siN,gi1,gi2,…gik,…,giN) (7)
bi=min(si1,si2,…sik,…,siN,gi1,gi2,…gik,…,giN) (8)
zi的划分是依据分配给轿厢ci的呼叫,如果分配给轿厢一个呼叫,则划分给该轿厢的区域范围为乘客的出发层到目的层,当ci完成派送的所有任务时zi不再具有区域。
在判断是否存在“空呼叫现象”中,若存在,则删除该呼叫,再次运用Fast R-CNN模型检测候梯厅是否有乘客,若有乘客根据调度时间和拥挤度选定最佳轿厢;若无乘客则为“空呼叫现象”,在未分配的呼叫队列中删除该呼叫。
如果不存在未分配呼叫,轿厢返回基站。
本发明具有以下有益效果及优点:
1.本发明利用先进的机器视觉理论、模式识别及图像处理技术,提出一种利用深度学习中Fast R-CNN检测模型,避免电梯“空呼叫现象”、“超载现象”和“拥挤现象”,利用候梯厅前和轿厢内监控器,采集乘客状态信息,自动检测乘客情况,对空呼叫、拥挤情况进行自动处理,提高了电梯运载效率。
2.本发明将机器视觉与多轿厢电梯调度相结合,运用基于视觉检测的动态分区控制方法,保证了电梯运行的安全性和高效性,降低了电梯占地空间和能耗。
附图说明
图1为单井道多轿厢电梯图;
图2为Fast R-CNN模型原理图;
图3为动态分区示意图;
图4为本发明所用的轿厢调度流程图;
图5A为本发明实施例中Fast R-CNN模型厅前检测图像第1帧;
图5B为本发明实施例中Fast R-CNN模型厅前检测图像第30帧;
图5C为本发明实施例中Fast R-CNN模型厅前检测图像第136帧。
具体实施方式
下面结合说明书附图对本发明作进一步阐述。
本发明一种基于视觉检测的多轿厢电梯调度方法,其特征在于包括以下步骤:
1)外呼检验:是否存在未分配呼叫,若存在则执行视频采集及传输步骤;
2)视频采集及传输:通过监控设备获得外呼候梯乘客数和各轿厢内乘梯乘客视频传输给上位机;
3)视频处理:上位机对所获视频运用Fast R-CNN模型进行实时处理,标定出乘客状态;
4)派梯方案:上位机根据上述视频处理的结果,计算各轿厢的调度时间Ti和拥挤度ηi;
再次运用Fast R-CNN模型检测候梯厅是否有乘客,若有乘客,根据调度时间和拥挤度选定最佳轿厢;若无乘客则为“空呼叫”,在未分配的呼叫队列中删除该呼叫;
5)分区划定:根据分配给各轿厢的外呼情况,重新划分轿厢区域;
6)删除本次处理分配的呼叫,返回判断是否存在未分配呼叫步骤。
在判断是否存在“空呼叫现象”中,若存在,则删除该呼叫;
如果不存在未分配呼叫,轿厢返回基站。
如图1所示,为本发明中所采用的多轿厢电梯示意图。当乘客在门厅使用按钮进行呼梯时,需要明确目的层、出发层。在某一时刻轿厢ci的状态及外呼定义如下:
ci=(fi,pi,di,Ci,zi) (1)
Ci={(si1,gi1,ni1,cdi1),(si2,gi2,ni2,cdi2),
…,(sik,gik,nik,cdik),…,(siN,giN,niN,cdiN)} (2)
其中,ci表示编号为i的轿厢;fi表示该轿厢当前位置;pi表示该轿厢内的乘客数;di表示当前轿厢的运行状态,其运行状态有上行、下行、停止;Ci是分配给ci的一组外呼集合,外呼集合中的N表示外呼集合总数;sik为呼梯乘客的出发层,i为轿厢的编号,k为分配给轿厢ci的集合Ci中外呼编号,1≤k≤N;gik为乘客的目的层;nik为该层呼梯乘客数;cdik为从出发层到目的层时电梯的运行方向,如果sik<gik,电梯为上行,sik>gik,电梯为下行;zi表示给轿厢ci所划分的区域。
所述视频处理包括以下步骤:
图像获取:使用抽帧检测的方法获取视频中图像,使得最终的显示达到实时的效果;正常录制的视频每秒20-35帧。因为Fast R-CNN检测模型0.3秒才能检测一张图片,该模型检测时间在同类模型中已经较低。
图像预处理:预先找出图像中人可能出现的位置作为候选区域,运用多层卷积神经网络和最大池化层处理候选区域的图像,得到卷积特征映射;
图像池化:把得到的卷积特征映射通过region of interest(简称RoI)池化方式获得固定维数的特征向量;
图像输出:经过两个全连接层把上述特征向量分别输入到softmax分类器、边界框回归器,进而输出两个优化目标,分别为图片上的边界框和相似度。
在深度学习中Fast R-CNN模型训练及测试时间较短,因此将Fast R-CNN模型引入到多轿厢电梯系统中,提出了基于Fast R-CNN的动态分区控制方法,主要根据Fast R-CNN检测轿厢内、外人数情况合理派梯,进而合理划分各轿厢的运行区域。Fast R-CNN模型是基于R-CNN模型和SPP-Net模型的改进,它不仅引入了多任务损失函数,使模型的训练和测试变得十分方便,而且将特征提取和分类融合进一个分类框架,实现了从提取图像到检测的一体化,提高了训练模型的速度和目标检测的准确率。
Fast R-CNN模型结构如图2所示,由图可以看出Fast R-CNN模型有两个输出,一个是由softmax分类器输出K+1个分类的概率分布,p=(p0,…pK);另一个是由回归器输出的各分类回归补偿,引入的多任务损失函数主要用来训练分类和边界框回归,多任务损失函数如下:
L(p,u,tu,v)=Lcls(p,u)+λ[u≥1]Lloc(tu,v) (9)
Lcls(p,u)=-log pu (10)
其中,L(p,u,tu,v)为损失函数,p为分类概率,u为标准分类,tu为分类回归预测参数,v为标准边界回归目标参数,v=(vx,vy,vw,vh);λ为控制两个函数均衡的系数;Lcls(p,u)为标准分类u的损失函数,由式(10)得出;pu为分类u对应的概率;Lloc(tu,v)为分类u对应的矩形框回归目标的损失函数,由式(11)得出;x,y,w,h分别为边界框左上角的横坐标,纵坐标及边框的宽度和高度;为标准值与预测值对应的坐标差距,由式(12)得出;x=t1 u-v1。
Fast R-CNN模型训练过程如下:
①获取输入图像的候选框内图像;
②运用多层卷积神经网络和最大池化层处理候选框内的图像块,得到卷积特征映射;
③接下来从特征映射中提取出的候选区域,通过region of interest(简称RoI)池化方式获得固定维数的特征向量;
④最后经过两个全连接层把特征向量分别输入到softmax分类器、边界框回归器,进而输出两个优化目标。
模型使用VGG16的网络做为底层学习网络,整个Fast R-CNN由16个卷基层及3个全连接层构成,训练阶段使用ImageNet公共的大规模数据集训练,一次迭代过程用时1天,模型完成训练共进行4次迭代。单张图片的检测速度为0.3s/帧,因为在所设定的情境中,不会对高速移动的物体有精确地识别需求,因此在视频流中,使用了抽帧检测的方法,使得最终的显示近似达到实时的效果。同时把检测的结果反馈给控制器,保证各轿厢所划分区域更加合理。
如图3所示为某一时刻使用动态分区划分的各轿厢区域示意图。在传统的分区法中,区域是每个轿厢所占领的固定范围,而在动态分区中每个轿厢所占领的区域是受派梯方案和运行时间变化而改变的。划分给轿厢ci的区域zi定义如下:
zi=(ti,bi,zdi) (5)
其中,ti表示划分区域的顶端;bi表示划分区域的底端;zi的范围就是顶端ti到底端bi之间的区域,同时需要保证ti>bi;zdi表示安排给轿厢ci的呼叫相对于轿厢的方向,如果方向为向上,则bi为轿厢ci的起始位置,ti为轿厢ci的终止位置,如果方向为向下,则ti为轿厢ci的起始位置,bi为轿厢ci的终止位置。
为了避免同一井道轿厢越限,zi和zj(i≠j)需要满足如下条件:
tj<bi或ti<bj (6)
zdj表示安排给轿厢cj的呼叫相对于轿厢的方向,如果方向为向上,则bj为轿厢cj的起始位置,tj为轿厢cj的终止位置,如果方向为向下,则tj为轿厢cj的起始位置,bj为轿厢cj的终止位置。同ci一样,只不过为了说明是两个轿厢所以换成了cj。
同时,Ci,ti和bi满足如下的条件:
ti=max(si1,si2,…sik,…,siN,gi1,gi2,…gik,…,giN) (7)
bi=min(si1,si2,…sik,…,siN,gi1,gi2,…gik,…,giN) (8)
zi的划分是依据分配给轿厢ci的呼叫,如果分配给轿厢一个呼叫,则划分给该轿厢的区域范围为乘客的出发层到目的层,当ci完成派送的所有任务时zi不再具有区域。
运用Fast R-CNN的动态分区控制方法实现多轿厢的调度,在一定程度上避免电梯的“空呼叫现象”、“超载现象”和“拥挤现象”,同时又提高了电梯运行的安全性和效率。如图4所示,为多轿厢电梯的调度流程图。
该调度方案首先根据外呼确定厅前候梯人数及各个轿厢内人数,计算各轿厢的调度时间Ti和拥挤度ηi,公式如下:
Ti=tp+tx+td (3)
其中,tp为乘客进出电梯时间,tx为门操作时间,td为电梯运行时间;pi为轿厢内乘客数,M为额定人数,p为设定的无影响人数,即当轿厢内人数为较低时,对拥挤度无影响。
接下来,判断是否存在“空呼叫现象”,若存在则删除该呼叫,再次运用Fast R-CNN模型检测候梯厅是否有乘客,若有乘客根据调度时间和拥挤度选定最佳轿厢;若无乘客则为“空呼叫现象”,在未分配的呼叫队列中删除该呼叫。如果不存在未分配呼叫,轿厢返回基站。
如图5A~5C所示为Fast R-CNN模型厅前检测乘客视频截取的一组(三幅)图像,英文字母为person,数字为判断框内是人的概率,通过大量样本训练,Fast R-CNN能够自动检测出图片中的物体类别,本发明只运用了人物样本训练,该模型能够正确标定出人。
从检测图像可以看出Fast R-CNN模型能够标定出图像中乘客与训练样本中人的相似率,并使用边界框标定出乘客,从检测结果可看出准确率较高,同时该模型单张图片的检测速度为0.3s/帧,具有快速性的优点,适用于电梯厅前的实时检测。
Claims (8)
1.一种基于视觉检测的多轿厢电梯调度方法,其特征在于包括以下步骤:
1)外呼检验:是否存在未分配呼叫,若存在则执行视频采集及传输步骤;
2)视频采集及传输:通过监控设备获得外呼候梯乘客数和各轿厢内乘梯乘客视频传输给上位机;
3)视频处理:上位机对所获视频运用Fast R-CNN模型进行实时处理,标定出乘客状态;
4)派梯方案:上位机根据上述视频处理的结果,计算各轿厢的调度时间Ti和拥挤度ηi;再次运用Fast R-CNN模型检测候梯厅是否有乘客,若有乘客,根据调度时间和拥挤度选定最佳轿厢;若无乘客则为“空呼叫”,在未分配的呼叫队列中删除该呼叫;
5)分区划定:根据分配给各轿厢的外呼情况,重新划分轿厢区域;
6)删除本次处理分配的呼叫,返回判断是否存在未分配呼叫。
2.按权利要求1所述的基于视觉检测的多轿厢电梯调度方法,其特征在于:多轿厢电梯轿厢的状态及外呼定义为:
在某一时刻轿厢ci的状态及外呼定义如下:
ci=(fi,pi,di,Ci,zi) (1)
Ci={(si1,gi1,ni1,cdi1),(si2,gi2,ni2,cdi2),
…,(sik,gik,nik,cdik),…,(siN,giN,niN,cdiN)} (2)
其中,ci表示编号为i的轿厢;fi表示该轿厢当前位置;pi表示该轿厢内的乘客数;di表示当前轿厢的运行状态,其运行状态有上行、下行、停止;Ci是分配给ci的一组外呼集合,外呼集合中的N表示外呼集合总数;sik为呼梯乘客的出发层,i为轿厢的编号,k为分配给轿厢ci的集合Ci中外呼编号,1≤k≤N;gik为乘客的目的层;nik为该层呼梯乘客数;cdik为从出发层到目的层时电梯的运行方向,如果sik<gik,电梯为上行,sik>gik,电梯为下行;zi表示给轿厢ci所划分的区域。
3.按权利要求1所述的基于视觉检测的多轿厢电梯调度方法,其特征在于:
所述视频处理包括以下步骤:
图像获取:使用抽帧检测的方法获取视频中图像,使得最终的显示达到实时的效果;
图像预处理:预先找出图像中人可能出现的位置作为候选区域,运用多层卷积神经网络和最大池化层处理候选区域的图像,得到卷积特征映射;
图像池化:把得到的卷积特征映射通过region of interest池化方式获得固定维数的特征向量;
图像输出:经过两个全连接层把上述特征向量分别输入到softmax分类器、边界框回归器,进而输出两个优化目标,分别为图片上的边界框和相似度。
4.按权利要求3所述的基于视觉检测的多轿厢电梯调度方法,其特征在于:
所述图像输出包括以下步骤:
Fast R-CNN模型处理图像有两个输出,一个是由softmax分类器输出K+1个分类的概率分布,p=(p0,…pK);另一个是由回归器输出的各分类回归补偿,引入的多任务损失函数用来训练分类和边界框回归,多任务损失函数如下:
L(p,u,tu,v)=Lcls(p,u)+λ[u≥1]Lloc(tu,v) (9)
Lcls(p,u)=-log pu (10)
其中,L(p,u,tu,v)为损失函数,p为分类概率,u为标准分类,tu为分类回归预测参数,v为标准边界回归目标参数,v=(vx,vy,vw,vh);λ为控制两个函数均衡的系数;Lcls(p,u)为标准分类u的损失函数,由式(10)得出;pu为分类u对应的概率;Lloc(tu,v)为分类u对应的矩形框回归目标的损失函数,由式(11)得出;x,y,w,h分别为边界框左上角的横坐标,纵坐标及边框的宽度和高度;为标准值与预测值对应的坐标差距,由式(12)得出。
5.按权利要求1所述的基于视觉检测的多轿厢电梯调度方法,其特征在于:
所述派梯方案中各轿厢的调度时间Ti和拥挤度ηi公式如下:
Ti=tp+tx+td (3)
其中,tp为乘客进出电梯时间,tx为门操作时间,td为电梯运行时间;pi为轿厢内乘客数,M为额定人数,p为设定的无影响人数。
6.按权利要求1所述的基于视觉检测的多轿厢电梯调度方法,其特征在于:
所述分区划定采用动态分区,包括以下步骤:
每个轿厢所占领的区域是受派梯方案和运行时间变化而改变的,划分给轿厢ci的区域zi定义如下:
zi=(ti,bi,zdi) (5)
其中,ti表示划分区域的顶端;bi表示划分区域的底端;zi的范围是顶端ti到底端bi之间的区域,同时需要保证ti>bi;zdi表示安排给轿厢ci的呼叫相对于轿厢的方向,如果方向为向上,则bi为轿厢ci的起始位置,ti为轿厢ci的终止位置,如果方向为向下,则ti为轿厢ci的起始位置,bi为轿厢ci的终止位置。
为避免同一井道轿厢越限,zi和zj(i≠j)需要满足如下条件:
tj<bi或ti<bj (6)
同时,Ci,ti和bi满足如下的条件:
ti=max(si1,si2,…sik,…,siN,gi1,gi2,…gik,…,giN) (7)
bi=min(si1,si2,…sik,…,siN,gi1,gi2,…gik,…,giN) (8)
zi的划分是依据分配给轿厢ci的呼叫,如果分配给轿厢一个呼叫,则划分给该轿厢的区域范围为乘客的出发层到目的层,当ci完成派送的所有任务时zi不再具有区域。
7.按权利要求1所述的基于视觉检测的多轿厢电梯调度方法,其特征在于:
在判断是否存在“空呼叫现象”中,若存在,则删除该呼叫,再次运用Fast R-CNN模型检测候梯厅是否有乘客,若有乘客根据调度时间和拥挤度选定最佳轿厢;若无乘客则为“空呼叫现象”,在未分配的呼叫队列中删除该呼叫。
8.按权利要求1所述的基于视觉检测的多轿厢电梯调度方法,其特征在于:如果不存在未分配呼叫,轿厢返回基站。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201710060322.9A CN106586738B (zh) | 2017-01-24 | 2017-01-24 | 一种基于视觉检测的多轿厢电梯调度方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201710060322.9A CN106586738B (zh) | 2017-01-24 | 2017-01-24 | 一种基于视觉检测的多轿厢电梯调度方法 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN106586738A true CN106586738A (zh) | 2017-04-26 |
| CN106586738B CN106586738B (zh) | 2019-05-28 |
Family
ID=58586469
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201710060322.9A Expired - Fee Related CN106586738B (zh) | 2017-01-24 | 2017-01-24 | 一种基于视觉检测的多轿厢电梯调度方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN106586738B (zh) |
Cited By (12)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN108249236A (zh) * | 2018-01-05 | 2018-07-06 | 王长贵 | 智能控制电梯的方法、装置以及计算机可读存储介质 |
| CN108675071A (zh) * | 2018-05-03 | 2018-10-19 | 中国科学院计算技术研究所 | 基于人工神经网络处理器的云端协同智能芯片 |
| CN109132744A (zh) * | 2018-08-29 | 2019-01-04 | 盐城线尚天使科技企业孵化器有限公司 | 基于深度学习的电梯调控方法及系统 |
| CN109829390A (zh) * | 2019-01-09 | 2019-05-31 | 浙江新再灵科技股份有限公司 | 一种基于深度学习的电梯智能调度系统及方法 |
| CN110008804A (zh) * | 2018-12-12 | 2019-07-12 | 浙江新再灵科技股份有限公司 | 基于深度学习的电梯监控关键帧获取及检测方法 |
| CN110386517A (zh) * | 2019-07-08 | 2019-10-29 | 上海三菱电梯有限公司 | 用于实现电梯换乘的电梯调配系统 |
| CN111144238A (zh) * | 2019-12-11 | 2020-05-12 | 重庆邮电大学 | 基于Faster R-CNN的物品检测方法及系统 |
| CN111339843A (zh) * | 2020-02-12 | 2020-06-26 | 中车青岛四方车辆研究所有限公司 | 动车组车厢拥挤度检测方法及装置 |
| CN111582251A (zh) * | 2020-06-15 | 2020-08-25 | 江苏航天大为科技股份有限公司 | 基于卷积神经网络的城市轨道交通乘客拥挤程度检测方法 |
| CN112573316A (zh) * | 2020-12-08 | 2021-03-30 | 成都睿瞳科技有限责任公司 | 一种基于计算机视觉的电梯困人检测方法 |
| CN115303901A (zh) * | 2022-08-05 | 2022-11-08 | 北京航空航天大学 | 一种基于计算机视觉的电梯交通流量识别方法 |
| CN115504341A (zh) * | 2022-09-29 | 2022-12-23 | 深圳市明源云科技有限公司 | 电梯运行方法、装置、终端设备以及存储介质 |
Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US4662479A (en) * | 1985-01-22 | 1987-05-05 | Mitsubishi Denki Kabushiki Kaisha | Operating apparatus for elevator |
| CN1931697A (zh) * | 2006-09-29 | 2007-03-21 | 浙江工业大学 | 基于图像识别技术的群控电梯智能调度装置 |
| CN101403891A (zh) * | 2008-11-14 | 2009-04-08 | 天津大学 | 电梯群控节能调度方法 |
-
2017
- 2017-01-24 CN CN201710060322.9A patent/CN106586738B/zh not_active Expired - Fee Related
Patent Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US4662479A (en) * | 1985-01-22 | 1987-05-05 | Mitsubishi Denki Kabushiki Kaisha | Operating apparatus for elevator |
| CN1931697A (zh) * | 2006-09-29 | 2007-03-21 | 浙江工业大学 | 基于图像识别技术的群控电梯智能调度装置 |
| CN101403891A (zh) * | 2008-11-14 | 2009-04-08 | 天津大学 | 电梯群控节能调度方法 |
Cited By (14)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN108249236A (zh) * | 2018-01-05 | 2018-07-06 | 王长贵 | 智能控制电梯的方法、装置以及计算机可读存储介质 |
| CN108675071A (zh) * | 2018-05-03 | 2018-10-19 | 中国科学院计算技术研究所 | 基于人工神经网络处理器的云端协同智能芯片 |
| CN109132744A (zh) * | 2018-08-29 | 2019-01-04 | 盐城线尚天使科技企业孵化器有限公司 | 基于深度学习的电梯调控方法及系统 |
| CN110008804B (zh) * | 2018-12-12 | 2021-07-06 | 浙江新再灵科技股份有限公司 | 基于深度学习的电梯监控关键帧获取及检测方法 |
| CN110008804A (zh) * | 2018-12-12 | 2019-07-12 | 浙江新再灵科技股份有限公司 | 基于深度学习的电梯监控关键帧获取及检测方法 |
| CN109829390A (zh) * | 2019-01-09 | 2019-05-31 | 浙江新再灵科技股份有限公司 | 一种基于深度学习的电梯智能调度系统及方法 |
| CN110386517A (zh) * | 2019-07-08 | 2019-10-29 | 上海三菱电梯有限公司 | 用于实现电梯换乘的电梯调配系统 |
| CN111144238A (zh) * | 2019-12-11 | 2020-05-12 | 重庆邮电大学 | 基于Faster R-CNN的物品检测方法及系统 |
| CN111339843A (zh) * | 2020-02-12 | 2020-06-26 | 中车青岛四方车辆研究所有限公司 | 动车组车厢拥挤度检测方法及装置 |
| CN111582251A (zh) * | 2020-06-15 | 2020-08-25 | 江苏航天大为科技股份有限公司 | 基于卷积神经网络的城市轨道交通乘客拥挤程度检测方法 |
| CN112573316A (zh) * | 2020-12-08 | 2021-03-30 | 成都睿瞳科技有限责任公司 | 一种基于计算机视觉的电梯困人检测方法 |
| CN115303901A (zh) * | 2022-08-05 | 2022-11-08 | 北京航空航天大学 | 一种基于计算机视觉的电梯交通流量识别方法 |
| CN115303901B (zh) * | 2022-08-05 | 2024-03-08 | 北京航空航天大学 | 一种基于计算机视觉的电梯交通流量识别方法 |
| CN115504341A (zh) * | 2022-09-29 | 2022-12-23 | 深圳市明源云科技有限公司 | 电梯运行方法、装置、终端设备以及存储介质 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN106586738B (zh) | 2019-05-28 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN106586738A (zh) | 一种基于视觉检测的多轿厢电梯调度方法 | |
| CN100595121C (zh) | 一种目标场所优化调度方法及系统 | |
| CN109292579B (zh) | 电梯系统、图像识别方法和运行控制方法 | |
| CN106553941B (zh) | 一种智能电梯群控方法及系统 | |
| CN104961009B (zh) | 基于机器视觉的多电梯并联运行协调控制方法及系统 | |
| CN102328859B (zh) | 节能派梯方法及其验证装置 | |
| CN111259714A (zh) | 一种地铁列车车厢客流检测与预测及站台候车诱导系统 | |
| CN110626891B (zh) | 用于改进的电梯调度的系统和方法 | |
| KR101584263B1 (ko) | 지하철 객실 별 실시간 냉난방 제어 시스템 | |
| JP2009096612A (ja) | 人流演算装置 | |
| CN106023605A (zh) | 一种基于深度卷积神经网络的交通信号灯控制方法 | |
| Wang et al. | Smart dispatching and optimal elevator group control through real-time occupancy-aware deep learning of usage patterns | |
| CN202600813U (zh) | 旅客自助托运值机系统 | |
| Guo et al. | Simulation of aircraft cabin evacuation strategy based on exit flow equilibrium | |
| CN115223087B (zh) | 一种群控电梯交通模式识别的方法 | |
| CN107703937A (zh) | 基于卷积神经网络的自动导航小车系统及其冲突规避方法 | |
| CN118278168A (zh) | 一种机场综合交通枢纽客流运行仿真评估方法与系统 | |
| CN107176510A (zh) | 电梯群控系统及群控方法 | |
| CN110304503A (zh) | 电梯换乘系统 | |
| Chou et al. | Improving elevator dynamic control policies based on energy and demand visibility | |
| CN115983743A (zh) | 一种基于综合体的外卖即时配送系统 | |
| CN113264442B (zh) | 并排自动扶梯运行调控系统 | |
| CN113860104B (zh) | 一种基于计算机视觉的电梯群控性能指标计算系统和方法 | |
| CN120126077A (zh) | 一种基于计算机视觉的地铁客流动态统计与实时管控方法 | |
| CN114890258A (zh) | 一种电梯智能速度控制方法和系统 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant | ||
| CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20190528 Termination date: 20220124 |
|
| CF01 | Termination of patent right due to non-payment of annual fee |