CN102136066B - 一种视频序列中人体动作的识别方法 - Google Patents
一种视频序列中人体动作的识别方法 Download PDFInfo
- Publication number
- CN102136066B CN102136066B CN 201110109440 CN201110109440A CN102136066B CN 102136066 B CN102136066 B CN 102136066B CN 201110109440 CN201110109440 CN 201110109440 CN 201110109440 A CN201110109440 A CN 201110109440A CN 102136066 B CN102136066 B CN 102136066B
- Authority
- CN
- China
- Prior art keywords
- histogram
- calculate
- video sequence
- recognition
- feature
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000000034 method Methods 0.000 title claims abstract description 49
- 230000008859 change Effects 0.000 claims abstract description 29
- 230000008569 process Effects 0.000 claims abstract description 16
- 238000012549 training Methods 0.000 claims abstract description 14
- 238000000605 extraction Methods 0.000 claims abstract description 9
- 230000009471 action Effects 0.000 claims description 21
- 238000013139 quantization Methods 0.000 claims description 8
- 239000011159 matrix material Substances 0.000 claims description 4
- 238000003064 k means clustering Methods 0.000 claims description 3
- 230000009466 transformation Effects 0.000 claims description 3
- 238000007796 conventional method Methods 0.000 abstract 1
- 230000006399 behavior Effects 0.000 description 19
- 238000012544 monitoring process Methods 0.000 description 10
- 238000010586 diagram Methods 0.000 description 8
- 230000000694 effects Effects 0.000 description 5
- 230000036544 posture Effects 0.000 description 4
- 230000008901 benefit Effects 0.000 description 2
- 239000000284 extract Substances 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 238000010801 machine learning Methods 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000011160 research Methods 0.000 description 2
- 230000005856 abnormality Effects 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000010365 information processing Effects 0.000 description 1
- 230000006855 networking Effects 0.000 description 1
- 238000010606 normalization Methods 0.000 description 1
- 238000003909 pattern recognition Methods 0.000 description 1
- 230000002265 prevention Effects 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 230000007704 transition Effects 0.000 description 1
Images
Landscapes
- Image Analysis (AREA)
Abstract
本发明公开了一种视频序列中人体动作的识别方法，本发明针对现有的视频图像中人体动作识别方法在准确率和实时性之间的矛盾而提出的。本发明的方法包括特征提取和特征训练与识别两个过程。在特征提取中，通过计算视频序列的差分边缘直方图，大大减少了所使用的视频特征，提高了识别的速度，满足了人体动作识别的实时性；通过对目标区域和若干个子区域分别求像素变化直方图和边缘梯度直方图，可以提高动作细节识别的准确率。本发明的方法既提高了识别的准确率又满足了识别的实时性。
Description
技术领域
本发明属于计算机视觉技术领域，特别涉及一种人体动作的识别方法。
背景技术
现在数字化网络化的步伐正在逐步加快，视频监控系统上升参与到全行业的管理中己成为事实，以其直观性和实时性的优点而在各行各业特别是安全防范领域倍受青睐。随着摄像机等监控设备成本的日益降低，视频监控系统可以广泛地应用于银行、邮电、监狱、法庭、大型公共设施、大型仓库及军事基地等场所，公共安全领域起着日益重要的作用。但是目前监控系统的功能大多仅仅停留在监控人员对视频信号的人工监视和事后录像分析上，并没有充分利用到目前计算机技术高速发展所提供的巨大计算能力上。事实上，多数监控系统还是模拟式的，少数数字式的系统也仅仅是提供多画面显示及硬盘录像类的简单功能。现有的监控系统都不能实现实时主动的监督作用，即监控的智能化和无人化。智能监控系统能实现全天实时监控，并自动分析摄像机捕捉的图像数据，当异常发生时，能向安全保卫人员准确及时的发送警报，从而避免犯罪的发生，而视频监控的核心在于对人体动作的识别。
目前对人体动作的识别，主要有3种方法：(1)模板匹配的方法；(2)状态空间的方法；(3)基于模型的方法。
模板匹配方法（template matching）其优点是算法单间容易实现，时间开销少，对相差比较大的行为识别效果较好，但对细微差别的行为识别效果较差，对运动持续时间的变化及噪声比较敏感。
近年来，采用状态空间法开展人体动作行为识别的研究较多，具有代表性的是马尔可夫网络，隐马尔可夫模型（HMM，Hidden Markov Model）已经被广泛应用于视频、图像序列的预测、估计、检测与行为识别中。然而，状态空间法需要大量的训练样本来训练状态转移概率参数其准确度受到训练样本数量影响很大，状态序列识别过程其原理也是模板匹配，而由于行为的复杂性只靠模板匹配显然是不够的。
现在更多的人体动作行为识别研究者更倾向于把目光投向使用自然语言描述的方法对人体动作行为进行识别，使得人体动作行为的语义描述分析研究得到了一定的进展，用于视频图像中人体动作行为的自然语言描述，如建立2D、3D模型：首先，使用3D模型对人体瞬时姿势描述，使构建的模型尽可能与人体目标姿态相似，即图像中人体的边缘信息，或是把行为看成是2D静态姿势序列，通过基于模型的方法，对人体二维、三维姿势、角度、位置以及与环境中其它一些目标相对距离的变化等进行重建与估计最后生成人体动作行为描述的自然语言文本。但基于模型的方法的构建复杂度高难于实现，而目前自然语言描述的特征提取方法提取的特征非常的多，一个一百帧左右的视频提取出几百到几千个特征，处理时间开销大，因而不易于应用于实时系统。最近国外主要是以自然语言描述和各种概率模型的建立来进行为识别，但行为识别仍处于初级阶段。
上述各种方法不能在识别正确率和实时性之间达到平衡，即要么识别正确率比较高，但计算复杂度高，实时性差；要么计算复杂度低，实时性好，但识别正确率比较低。
发明内容
本发明的目的是为了解决现有的视频图像中人体动作识别方法在准确率和实时性之间的矛盾，提出了一种视频序列中人体动作的识别方法。
本发明的技术方案是：一种视频序列中人体动作的识别方法，包括特征提取和特征训练与识别两个过程，其中，
特征提取包括如下步骤：
S1.计算视频序列的像素运动变化频率图；
S2.划分像素运动变化频率图的区域，确定像素运动变化频率图中值大于预先设定的第一阈值的区域，找到该区域中的像素的最小纵坐标和最小横坐标，以及最大纵坐标和最大横坐标，然后以此最小纵坐标和最小横坐标，最大纵坐标和最大横坐标确定一个目标区域，并按一定的比例在纵轴或横轴方向上划分若干个子区域；
S3.对目标区域和若干个子区域分别求像素变化直方图，具体如下：
S31.将目标区域的像素运动变化频率图中的值非均匀量化为N个量化值；
S32.分别求出目标区域和若干个子区域各个量化值对应在像素运动变化频率图中的值的和，这样每个区域就得到一个N维的直方图；
S33.将目标区域和若干个子区域的直方图平铺成一个多维的向量并归一化，得到像素变化直方图；
S4.对目标区域和若干个子区域分别求边缘梯度直方图；
S5.计算视频序列的差分边缘直方图，具体过程如下：计算当前帧与前一帧的差分图像，如果差分图像绝对值中的元素的最大值大于预设定的第二阈值，计算差分图像的边缘直方图，得到差分边缘直方图；
S6.求运动直方图，计算视频序列的运动历史图，对得到的运动历史图求边缘梯度直方图，进而得到运动直方图；
S7.将步骤S3得到的像素变化直方图、步骤S4得到的边缘梯度直方图、步骤S5得到的差分边缘直方图和步骤S6得到的运动直方图平铺成一个特征池，为最终得到的视频序列特征。
上述特征训练与识别具体包括如下步骤：
S8.对视频序列特征在线字典训练与学习，得到字典；
S9.用字典对视频序列特征进行k近邻局部约束线性编码；
S10.对编码后得到的编码特征进行监督距离度量学习得到一个马氏距离转换矩阵代替欧氏距离k均值聚类形成码书，然后计算每个视频编码后的特征对应于码书的统计直方图；
S11.用tf_idf分类器对统计直方图进行分类,得到最终的识别结果。
上述步骤S4求边缘梯度直方图的具体过程如下：
S41.对目标区域分别求出x方向，y方向上的梯度px，py，并求出幅值平方和梯度方向，然后再对幅值归一化；
S42.把梯度方向量化为M个量化值，分别在各个区域求出各个量化区间的幅值的和，得到各个区间的直方图，为一种新的特征；
S43.求各个区域的面积与各个区域幅值和的比值，然后将其与步骤S42得到直方图相乘，得到另一种新的特征；
S44.求各个区域各个量化值所对应该的幅值的和，同时求出其所对应的幅值个数，各方向幅值的和与幅值个数的比值作为第三种新的特征。
步骤S1计算视频序列的像素运动变化频率图的具体过程如下：将视频序列当前三帧差分并把差值结果累积，得到一张与视频帧同样大小的图像，然后对其各个点的值取平方再除以最大值，即为像素运动变化频率图。
本发明的有益效果：本发明的方法通过计算视频序列的差分边缘直方图，大大减少了所使用的视频特征，提高了识别的速度，满足了人体动作识别的实时性；通过对目标区域和若干个子区域分别求像素变化直方图和边缘梯度直方图，可以提高动作细节识别的准确率。
附图说明
图1是本发明的具体流程图。
图2是本发明实施例的跑步的像素变化概率图的示意图。
图3是本发明实施例的跑步像素变化概率图的统计直方图示意图。
图4是本发明实施例的差分图像梯度幅值示意图。
图5是本发明实施例的差分图像的边缘梯度直方图示意图。
图6是本发明实施例的运动历史图示意图。
图7是本发明实施例的运动历史图的边缘梯度直方图示意图。
图8是本发明实施例的识别结果示意图。
具体实施方式
为使本发明的技术方案更加清楚，下面结合附图和具体的实施例对本发明作进一步的描述。
本实施例以视频监控为例。先调好监控区域，在监控区域内对从摄像头采集特定帧数图像，本实施例中帧数为100，也即是100帧构成一个视频，视频序列的大小为240*320，以四个人体动作——“打架、伸手、跑步、走路”为例进行说明。
本发明的视频序列中人体动作的识别方法，具体流程如图1所示，包括特征提取和特征训练与识别两个过程，其中，特征提取包括如下步骤：
S1.计算视频序列的像素运动变化频率图,具体过程如下：将视频序列当前三帧差分并把差值结果累积，得到一张与视频帧同样大小的图像，然后对其各个点的值取平方再除以最大值（也就是完成了图像的归一化操作），即得到了像素运动变化频率图。图2是“跑步”像素变化概率图的示意图。
S2.划分像素运动变化频率图的区域，确定像素运动变化频率图中值大于预先设定的第一阈值的区域，在这里预先设定的第一阈值取0.03（相对于0~1图像），进而找到该区域中的像素的最小纵坐标和最小横坐标，以及最大纵坐标和最大横坐标，然后以此最小纵坐标和最小横坐标，最大纵坐标和最大横坐标确定一个目标区域，并按一定的比例在纵轴或横轴方向上划分若干个子区域；
为了与人体图像结构相吻合，这里按3：4：8在横轴方向上分成三个子区域。
S3.对目标区域和三个子区域分别求像素变化直方图，具体如下：
S31.将目标区域的像素运动变化频率图中的值非均匀量化为N个量化值，这里N为自然数，为了达到最优效果，本实施例中N取8；
S32.分别求目标区域和三个子区域各个量化值对应在像素运动变化频率图中的值，这样每个区域就得到一个8维的直方图；
S33.将目标区域和三个子区域的直方图平铺成一个多维的向量并归一化，得到像素变化直方图，本实例一个视频最终只得到一个像素变化直方图，结果如图3所示；
S4.对目标区域和三个个子区域分别求边缘梯度直方图。具体过程如下：
S41.对目标区域分别求出x方向，y方向上的梯度px，py，并求出梯度幅值平方和梯度方向，然后再对幅值归一化；
P=px2+py2，这里P表示梯度幅值，py(x,y)表示y方向的梯度图、px(x,y)表示x方向的梯度图，θ表示梯度方向角度。
S42.把梯度方向量化为M个量化值，这里M为自然数，为了达到最优效果，本实施例中M取8，然后分别在各个区域求出各个量化区间的幅值的和，得到各个区间的直方图，为一种新的特征；
S43.求各个区域的面积与各个区域幅值和的比值，然后将其与步骤S42得到直方图相乘，得到另一种新的特征；
S44.求各个区域各个量化值所对应该的幅值的和，同时求出其所对应的幅值个数，各方向幅值的和与幅值个数的比值作为第三种新的特征。
S45.把目标区域和三个子区域的S42、S43、S44三种子特征平铺成一个特征池并且归一化得到边缘梯度直方图，本实施例一个视频最终只得到一个这样的边缘梯度直方图。
S5.计算视频序列的差分边缘直方图，具体过程如下：计算当前帧Ii与前一帧Ii-1的差分图像d(x,y)=Ii-Ii-1，如果差分图像d(x,y)绝对值中的元素的最大值大于预设定的第二阈值，这里预设定的取7.65（相对于0~255灰度图像），计算差分图像d(x,y)边缘直方图，其方法使用步骤S4所述的方法；差分梯度幅值图像如图4所示，差分边缘直方图如图5所示，横坐标为特征维数，纵坐标为各个维数值大小，这里特征的维数为96维。一个视频如果有L帧，最多只得到L-1个这样的差分边缘直方图。
S6.计算视频序列的运动历史图，对得到的运动历史图求边缘梯度直方图，得到运动直方图；运动历史图如图6所示，本实施例一个视频最终只得到一个这样的运动直方图，如图7所示，横坐标为特征维数，纵坐标为各个维数值大小，这里特征的维数为96维。
步骤S3和步骤S6中也可以把100帧图像化分成好几个子片段来得到几个子像素变化直方图及子运动直方图。
S7.将步骤S3得到的像素变化直方图、步骤S4得到的边缘梯度直方图、步骤S5得到的差分边缘直方图和步骤S6得到的运动直方图平铺成一个特征池，为最终得到的视频序列特征。在平铺成一个特征池过程中，每一个差分边缘直方图特征共用像素变化直方图特征、边缘梯度直方图特征、运动直方图特征，这样一个视频最终只得到与差分边缘直方图数量一样多的特征，最多为L-1个特征，特征数量比其它自然语言描述方法提取的特征大大减少。
得到视频序列特征之后，进而可以进行特征训练与识别。为了进一步提高识别的准备率，采用如下步骤进行特征训练与识别：
S8.对样本视频序列特征在线字典训练与学习，得到字典；在线字典学习可具体参考文献Julien Mairal，Online Learning for Matrix Factorization and Sparse Coding，Journal ofMachine Learning Research 11(2010)，19-60。
S9.用训练得到的字典对视频序列特征进行k近邻局部约束线性编码；局部约束线性编码具体可参见文献：Wang,Jinjun；Yang,Jianchao，Locality-constrained Linear Coding for ImageClassification，Computer Vision and Pattern Recognition(CVPR),2010，3360—3367。
S10.对编码后得到的编码特征进行监督距离度量学习得到一个马氏距离转换矩阵代替欧氏距离k均值聚类形成码书，然后计算每个视频编码后的特征对应于码书的统计直方图。监督距离度量学习具体可参见文献：Kilian Q.Weinberger，Distance Metric Learning for LargeMargin Nearest Neighbor Classification，Journal of Machine Learning Research 10(2009)207-244。
S11.用tf_idf分类器对统计直方图进行分类,得到最终的识别结果。如图8所示。tf_idf分类器具体可参见文献：Salton,G.and Buckley，C.1988Term-weighting approaches inautomatic text retrieval.Information Processing&Managemen 24(5):513–523。
从识别结果可以看出：本方法用于人体动作行为识别是有效的，不仅能够识别简单的、跑步、走路的普通正常行为,也能够识别可疑的伸手行为（偷盗经常发生的伸手行为）复杂的打架行为。图8中对角线数据为正确识别率，其余数据为错误识别率，如第四行表示走路行为正确识别率为91%，其中有3%误判为打架行为，6%误判为伸手行为。
本发明的方法具有较快的执行速度，用matlab2009a开发的仿真程序，在双核2.5GCPU，2G内存的PC机平台上，对240*320像素的视频图像进行识别，识别每100帧的视频图像需要7~9s。如果程序改为用C，在VC环境下，可以达到实时的效果。
本发明的方法通过计算视频序列的差分边缘直方图，大大减少了所使用的视频特征，提高了识别的速度，满足了人体动作识别的实时性；通过对目标区域和若干个子区域分别求像素变化直方图和边缘梯度直方图，可以提高动作细节识别的准确率。
本领域的普通技术人员将会意识到，这里所述的实施例是为了帮助读者理解本发明的原理，应被理解为本发明的保护范围并不局限于这样的特别陈述和实施例。本领域的普通技术人员可以根据本发明公开的这些技术启示做出各种不脱离本发明实质的其它各种具体变形和组合，这些变形和组合仍然在本发明的保护范围内。
Claims (6)
1.一种视频序列中人体动作的识别方法，包括特征提取和特征训练与识别两个过程，其特征在于，特征提取包括如下步骤：
S1.计算视频序列的像素运动变化频率图，具体过程如下：将视频序列当前三帧差分并把差值结果累积，得到一张与视频帧同样大小的图像，然后对其各个点的值取平方再除以最大值，即为像素运动变化频率图；
S2.划分像素运动变化频率图的区域，确定像素运动变化频率图中值大于预先设定的第一阈值的区域，找到该区域中的像素的最小纵坐标和最小横坐标，以及最大纵坐标和最大横坐标，然后以此最小纵坐标和最小横坐标，最大纵坐标和最大横坐标确定一个目标区域，并按一定的比例在纵轴或横轴方向上划分若干个子区域；
S3.对目标区域和若干个子区域分别求像素变化直方图，具体如下：
S31.将目标区域的像素运动变化频率图中的值非均匀量化为N个量化值；
S32.分别求出目标区域和若干个子区域各个量化值对应在像素运动变化频率图中的值的和，这样每个区域就得到一个N维的直方图；
S33.将目标区域和若干个子区域的直方图平铺成一个多维的向量并归一化，得到像素变化直方图；
S4.对目标区域和若干个子区域分别求边缘梯度直方图；
S5.计算视频序列的差分边缘直方图，具体过程如下：计算当前帧与前一帧的差分图像，如果差分图像绝对值中的元素的最大值大于预设定的第二阈值，计算差分图像的边缘直方图，得到差分边缘直方图；
S6.计算视频序列的运动历史图，对得到的运动历史图求边缘梯度直方图，得到运动直方图；
S7.将步骤S3得到的像素变化直方图、步骤S4得到的边缘梯度直方图、步骤S5得到的差分边缘直方图和步骤S6得到的运动直方图平铺成一个特征池，为最终得到的视频序列特征。
2.根据权利要求1所述的视频序列中人体动作的识别方法，其特征在于，所述特征训练与识别具体包括如下步骤：
S8.对视频序列特征在线字典训练与学习，得到字典；
S9.用字典对视频序列特征进行k近邻局部约束线性编码；
S10.对编码后得到的编码特征进行监督距离度量学习得到一个马氏距离转换矩阵代替欧氏距离k均值聚类形成码书，然后计算每个视频编码后的特征对应于码书的统计直方图；
S11.用tf_idf分类器对统计直方图进行分类,得到最终的识别结果。
3.根据权利要求1或2所述的视频序列中人体动作的识别方法，其特征在于，步骤S4求边缘梯度直方图的具体过程如下：
S41.对目标区域分别求出x方向，y方向上的梯度px，py，并求出幅值平方和梯度方向，然后再对幅值归一化；
S42.把梯度方向量化为M个量化值，分别在各个区域求出各个量化区间的幅值的和，得到各个区间的直方图，为一种新的特征；
S43.求各个区域的面积与各个区域幅值和的比值，然后将其与步骤S42得到直方图相乘，得到另一种新的特征；
S44.求各个区域各个量化值所对应该的幅值的和，同时求出其所对应的幅值个数，各方向幅值的和与幅值个数的比值作为第三种新的特征。
4.根据权利要求1或2所述的视频序列中人体动作的识别方法，其特征在于，步骤S2所述的按一定的比例在纵轴或横轴方向上划分若干个子区域为按照3：4：8在横轴方向上分成三个子区域。
5.根据权利要求1或2所述的视频序列中人体动作的识别方法，其特征在于，步骤S31和步骤S32所述的N为8。
6.根据权利要求3所述的视频序列中人体动作的识别方法，其特征在于，步骤S42所述的M为8。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN 201110109440 CN102136066B (zh) | 2011-04-29 | 2011-04-29 | 一种视频序列中人体动作的识别方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN 201110109440 CN102136066B (zh) | 2011-04-29 | 2011-04-29 | 一种视频序列中人体动作的识别方法 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN102136066A CN102136066A (zh) | 2011-07-27 |
| CN102136066B true CN102136066B (zh) | 2013-04-03 |
Family
ID=44295848
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN 201110109440 Expired - Fee Related CN102136066B (zh) | 2011-04-29 | 2011-04-29 | 一种视频序列中人体动作的识别方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN102136066B (zh) |
Families Citing this family (17)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102592112B (zh) * | 2011-12-20 | 2014-01-29 | 四川长虹电器股份有限公司 | 基于隐马尔科夫模型判断手势运动方向的方法 |
| CN103077383B (zh) * | 2013-01-09 | 2015-12-09 | 西安电子科技大学 | 基于时空梯度特征的分部位的人体运动识别方法 |
| JP6052997B2 (ja) * | 2013-02-28 | 2016-12-27 | 株式会社Pfu | オーバヘッドスキャナ装置、画像取得方法、および、プログラム |
| CN103473544A (zh) * | 2013-04-28 | 2013-12-25 | 南京理工大学 | 一种鲁棒的人体特征快速提取方法 |
| CN104200203B (zh) * | 2014-08-30 | 2017-07-11 | 电子科技大学 | 一种基于动作字典学习的人体动作检测方法 |
| WO2017050140A1 (zh) | 2015-09-23 | 2017-03-30 | 歌尔股份有限公司 | 一种人体动作识别方法、识别用户动作的方法和智能终端 |
| CN105184325B (zh) * | 2015-09-23 | 2021-02-23 | 歌尔股份有限公司 | 一种移动智能终端 |
| CN105938544B (zh) * | 2016-04-05 | 2020-05-19 | 大连理工大学 | 基于综合型线性分类器和解析型字典的行为识别方法 |
| CN106022310B (zh) * | 2016-06-14 | 2021-08-17 | 湖南大学 | 基于htg-hog和stg特征的人体行为识别方法 |
| CN106295532B (zh) * | 2016-08-01 | 2019-09-24 | 河海大学 | 一种视频图像中的人体动作识别方法 |
| CN106599882A (zh) * | 2017-01-07 | 2017-04-26 | 武克易 | 一种体感动作识别装置 |
| CN108197589B (zh) * | 2018-01-19 | 2019-05-31 | 北京儒博科技有限公司 | 动态人体姿态的语义理解方法、装置、设备和存储介质 |
| CN108597223B (zh) * | 2018-04-28 | 2021-05-07 | 北京智行者科技有限公司 | 一种用于智能车辆行为描述的数据处理方法和系统 |
| CN112749658A (zh) * | 2020-04-30 | 2021-05-04 | 杨九妹 | 大数据金融安防系统行人行为分析方法、系统及机器人 |
| CN114821456A (zh) * | 2022-02-28 | 2022-07-29 | 上海商汤临港智能科技有限公司 | 危险事件检测方法、装置、电子设备及存储介质 |
| CN116704405B (zh) * | 2023-05-22 | 2024-06-25 | 阿里巴巴（中国）有限公司 | 行为识别方法、电子设备及存储介质 |
| CN117523664B (zh) * | 2023-11-13 | 2024-06-25 | 书行科技(北京)有限公司 | 人体动作预测模型的训练方法、人机交互方法及对应的装置、设备和存储介质 |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US6226388B1 (en) * | 1999-01-05 | 2001-05-01 | Sharp Labs Of America, Inc. | Method and apparatus for object tracking for automatic controls in video devices |
| US6647131B1 (en) * | 1999-08-27 | 2003-11-11 | Intel Corporation | Motion detection using normal optical flow |
| CN101853388A (zh) * | 2009-04-01 | 2010-10-06 | 中国科学院自动化研究所 | 一种基于几何不变量的视角不变的行为识别方法 |
| CN101866429A (zh) * | 2010-06-01 | 2010-10-20 | 中国科学院计算技术研究所 | 多运动目标动作行为识别的训练方法和识别方法 |
| CN101894276A (zh) * | 2010-06-01 | 2010-11-24 | 中国科学院计算技术研究所 | 人体动作识别的训练方法和识别方法 |
-
2011
- 2011-04-29 CN CN 201110109440 patent/CN102136066B/zh not_active Expired - Fee Related
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US6226388B1 (en) * | 1999-01-05 | 2001-05-01 | Sharp Labs Of America, Inc. | Method and apparatus for object tracking for automatic controls in video devices |
| US6647131B1 (en) * | 1999-08-27 | 2003-11-11 | Intel Corporation | Motion detection using normal optical flow |
| CN101853388A (zh) * | 2009-04-01 | 2010-10-06 | 中国科学院自动化研究所 | 一种基于几何不变量的视角不变的行为识别方法 |
| CN101866429A (zh) * | 2010-06-01 | 2010-10-20 | 中国科学院计算技术研究所 | 多运动目标动作行为识别的训练方法和识别方法 |
| CN101894276A (zh) * | 2010-06-01 | 2010-11-24 | 中国科学院计算技术研究所 | 人体动作识别的训练方法和识别方法 |
Non-Patent Citations (1)
| Title |
|---|
| Yao-Hui Qin;Hong-Liang Li;Guang-Hui Liu;Zheng-Ning Wang.Human action recognition using PEM histogram.《IEEE 2010 International Conference on Computational Problem-Solving(ICCP)》.2010,323-325. * |
Also Published As
| Publication number | Publication date |
|---|---|
| CN102136066A (zh) | 2011-07-27 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN102136066B (zh) | 一种视频序列中人体动作的识别方法 | |
| Duman et al. | Anomaly detection in videos using optical flow and convolutional autoencoder | |
| CN105550678B (zh) | 基于全局显著边缘区域的人体动作特征提取方法 | |
| CN104008370B (zh) | 一种视频人脸识别方法 | |
| CN114022910A (zh) | 泳池防溺水监管方法、装置、计算机设备及存储介质 | |
| Avgerinakis et al. | Recognition of activities of daily living for smart home environments | |
| CN110147743A (zh) | 一种复杂场景下的实时在线行人分析与计数系统及方法 | |
| CN103854016B (zh) | 基于方向性共同发生特征的人体行为分类识别方法及系统 | |
| Dimokranitou | Adversarial autoencoders for anomalous event detection in images | |
| Singh et al. | A deep learning based technique for anomaly detection in surveillance videos | |
| CN104933417A (zh) | 一种基于稀疏时空特征的行为识别方法 | |
| EP3161791A1 (en) | System and method for visual event description and event analysis | |
| Xian et al. | Evaluation of low-level features for real-world surveillance event detection | |
| CN110390308B (zh) | 一种基于时空对抗生成网络的视频行为识别方法 | |
| CN103077423A (zh) | 基于视频流的人群数量估计、局部人群聚集状态以及人群跑动状态检测方法 | |
| CN105069434A (zh) | 一种视频中人体动作行为识别方法 | |
| CN108875655A (zh) | 一种基于多特征的实时目标视频跟踪方法及系统 | |
| Tan et al. | A multiple object tracking algorithm based on YOLO detection | |
| Islam et al. | Representation for action recognition with motion vector termed as: SDQIO | |
| CN107301382B (zh) | 基于时间依赖约束下深度非负矩阵分解的行为识别方法 | |
| CN103699874A (zh) | 基于surf流和lle稀疏表示的人群异常行为识别方法 | |
| CN107818307A (zh) | 一种基于lstm网络的多标签视频事件检测方法 | |
| CN102938153B (zh) | 基于约束谱聚类和马尔科夫随机场的视频图像分割方法 | |
| CN105957103B (zh) | 一种基于视觉的运动特征提取方法 | |
| CN105469050A (zh) | 基于局部时空特征描述与金字塔词汇树的视频行为识别方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| C14 | Grant of patent or utility model | ||
| GR01 | Patent grant | ||
| CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20130403 Termination date: 20160429 |