[go: up one dir, main page]

CN116224357A - 一种结合二维激光点云与超声波的玻璃检测方法 - Google Patents

一种结合二维激光点云与超声波的玻璃检测方法 Download PDF

Info

Publication number
CN116224357A
CN116224357A CN202211710591.2A CN202211710591A CN116224357A CN 116224357 A CN116224357 A CN 116224357A CN 202211710591 A CN202211710591 A CN 202211710591A CN 116224357 A CN116224357 A CN 116224357A
Authority
CN
China
Prior art keywords
point cloud
glass
ultrasonic
laser
clustering
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202211710591.2A
Other languages
English (en)
Inventor
闫瑞君
黄智超
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Xiazhi Technology Co ltd
Original Assignee
Xiazhi Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Xiazhi Technology Co ltd filed Critical Xiazhi Technology Co ltd
Priority to CN202211710591.2A priority Critical patent/CN116224357A/zh
Publication of CN116224357A publication Critical patent/CN116224357A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/86Combinations of lidar systems with systems other than lidar, radar or sonar, e.g. with direction finders
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02ATECHNOLOGIES FOR ADAPTATION TO CLIMATE CHANGE
    • Y02A90/00Technologies having an indirect contribution to adaptation to climate change
    • Y02A90/10Information and communication technologies [ICT] supporting adaptation to climate change, e.g. for weather forecasting or climate simulation

Landscapes

  • Engineering & Computer Science (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Electromagnetism (AREA)
  • General Physics & Mathematics (AREA)
  • Length Measuring Devices Characterised By Use Of Acoustic Means (AREA)

Abstract

本发明提供一种结合二维激光点云与超声波的玻璃检测方法,其特征在于,包括激光雷达和超声波传感器,所述超声波传感器的个数为二,还包括以下步骤:处理激光雷达传感器数据,并分类激光点云数据;通过欧式距离方法分析点云基本特征,依据玻璃方向的点云聚类密集且强度高的特征,对分类的点云进行筛选,从而确定聚类的激光点云的位置;同时,通过超声波辅助激光雷达点的判定。本发明通过聚类激光点云,利用激光点云在玻璃法线方向的聚集特征作为玻璃存在判断前提,提高了算法处理速度。

Description

一种结合二维激光点云与超声波的玻璃检测方法
技术领域
本发明属于光学技术领域,具体涉及一种结合二维激光点云与超声波的玻璃检测方法。
背景技术
随着工业与智能化技术的进步,越来越多的智能化产品在工业化4.0时代涌现,智能移动机器人等是其中的典型代表。智能移动机器人在产品落地中,需要和显示的活动场景进行有效地结合,如仓库、商超、户外巡检路线等,而在机器人产品智能化落地中,玻璃的检测,是大家都绕不开的。通常情况下,玻璃是一种高透视、高透光材料,此类材料地应用丰富了建筑设计,优化了审美体验,但移动机器人中需要反射光数据以进行测量的光学传感器而言,如激光、单目、双目及深度相机等,严重影响测量精度和测绘效果。
就激光而言,激光点云大多会透过玻璃,无法检测到玻璃的存在,进而移动机器人无法有效避障玻璃,影响移动机器人在玻璃较多的酒店、商超等产品落地使用。独特的是,激光点云会在垂直于玻璃方向上聚集,此点云强度高、点云密度大,而其他方向的点云都会扩散并穿过玻璃。基础此种独特点云特性,有玻璃识别技术以此为玻璃初筛条件,进而引入卷积图像修复,试图识别玻璃轮廓,进而判断玻璃存在并在地图中标记。在玻璃较多的商场场景中,轮廓无法基于墙体进行推算,进而无法有效构建损失函数去反向更行卷积参数,对玻璃检测,仍有许多局限性。
发明内容
本发明提供一种结合二维激光点云与超声波的玻璃检测方法,运用点云的聚类及少量点云数据处理,节约大量算力,能够更有效地落地于实际机器。
本发明为解决上述技术问题采用以下技术方案:
一种结合二维激光点云与超声波的玻璃检测方法,包括激光雷达和超声波传感器,所述超声波传感器的个数为二,还包括以下步骤:
步骤S1、处理激光雷达传感器数据,并分类激光点云数据;
步骤S2、通过欧式距离方法分析点云基本特征,依据玻璃方向的点云聚类密集且强度高的特征,对分类的点云进行筛选,从而确定聚类的激光点云的位置;
步骤S3、在步骤S2的同时,通过超声波辅助激光雷达点的判定。
进一步地,步骤S1具体如下:
激光雷达的数据通过欧式聚类方法进行初步处理,即通过欧式距离分类激光点云,聚类基本公式为:
Figure BDA0004027391910000021
式中,L表示聚类函数,xi表示第i个激光点的位姿,l表示聚类个数,n为最大值。
进一步地,步骤S2具体如下:
各聚类点云的数据特征包括点云重心位姿、点云平均强度、点云聚类半径参数,
点云重心位姿的计算方法为:
Figure BDA0004027391910000022
式中,xmean表示点云重心位姿,n表示聚类点综述,xi表示第i点的激光点云位姿。
点云平均强度的计算方法为:
Figure BDA0004027391910000023
式中,kmean表示点云平均强度值,n表示聚类点综述,li表示第i点的激光点云强度值。
点云聚类半径的计算方法为:
Figure BDA0004027391910000024
式中,rmean表示点云聚类半径,n表示聚类点综述,||xi-xmean||表示第i点的激光点云位姿到点云重心的二范式,记两点距离。
进一步地,步骤S3公式具体如下:
Figure BDA0004027391910000025
Figure BDA0004027391910000031
s1和s2分别表示超声波1和超声波2测量玻璃墙时,所得的最小距离为超声波弧形测量模型与玻璃墙的内切圆半径;l表示激光雷达的玻璃墙特征点距激光雷达的距离信息,由点云聚类信息得到;d表示在移动机器人中,激光雷达相对于两个对称的超声波的雷达所在直线的测量距离;θ0表示超声波1与移动机器人中轴线的角度信息,该信息由传感器的设计与安装位置决定;θglass表示移动机器人与玻璃墙的角度;g1、g2分别表示超声波1和超声波2在玻璃墙的激光雷达入射点处的测量距离。
本发明采用以上技术方案与现有技术相比,具有以下技术效果:
1、本发明通过联合构建超声波及激光雷达的测量模型,提高了玻璃检测的精度;
2、本发明通过聚类激光点云,利用激光点云在玻璃法线方向的聚集特征作为玻璃存在判断前提,提高了算法处理速度。
相较于人工标定方法,本发明所提出方法人工成本更低、更加适用于大型场景;
3、相较于基于图像的检测方法,本发明所提出的方法检测方法更加高效、算力要求更低且对模型训练数据要求更低,更有利于产品快速落地验证。
附图说明
图1是玻璃墙测量模型示意图;
图2是激光点云聚类分析流程图;
图3是超声波与激光雷达协同测量示意图。
具体实施方式
以下基于实施例对本发明进行描述,但是本发明并不仅仅限于这些实施例。在下文对本发明的细节描述中,详尽描述了一些特定的细节部分。对本领域技术人员来说没有这些细节部分的描述也可以完全理解本发明。为了避免混淆本发明的实质,公知的方法、过程、流程、元件和电路并没有详细叙述。
此外,本领域普通技术人员应当理解,在此提供的附图都是为了说明的目的,并且附图不一定是按比例绘制的。
同时,应当理解,在以下的描述中,“电路”是指由至少一个元件或子电路通过电气连接或电磁连接构成的导电回路。当称元件或电路“连接到”另一元件或称元件/电路“连接在”两个节点之间时,它可以是直接耦接或连接到另一元件或者可以存在中间元件,元件之间的连接可以是物理上的、逻辑上的、或者其结合。相反,当称元件“直接耦接到”或“直接连接到”另一元件时,意味着两者不存在中间元件。
除非上下文明确要求,否则整个说明书和权利要求书中的“包括”、“包含”等类似词语应当解释为包含的含义而不是排他或穷举的含义;也就是说,是“包括但不限于”的含义。
在本发明的描述中,需要理解的是,术语“第一”、“第二”等仅用于描述目的,而不能理解为指示或暗示相对重要性。此外,在本发明的描述中,除非另有说明,“多个”的含义是两个或两个以上。
本发明提出地测量模型中含有激光雷达、2个超声波传感器,如图1所示。首先,应处理激光雷达传感器数据,以构建超声波协同测量模型。
如图2所示,激光雷达的数据通过聚类方法进行初步处理,通过欧式距离分类激光点云。其次,计算各聚类点云的数据特征:点云位置、点云平均强度、点云强度正太分布参数。之后,依据玻璃方向的点云聚类密集且强度高的特征,对分类的点云进行筛选,从而确定了聚类的激光点云的位置。
超声波与激光雷达的测量模型如图3所示,图示中,s1和s2分别表示超声波1和超声波2测量玻璃墙时,所得的最小距离为超声波弧形测量模型与玻璃墙的内切圆半径;l表示激光雷达的玻璃墙特征点距激光雷达的距离信息,由点云聚类信息得到;d表示在移动机器人中,激光雷达相对于两个对称的超声波的雷达所在直线的测量距离;θ0表示超声波1与移动机器人中轴线的角度信息,该信息由传感器的设计与安装位置决定;θglass表示移动机器人与玻璃墙的角度;g1、g2分别表示超声波1和超声波2在玻璃墙的激光雷达入射点处的测量距离。
从测量模型可以得知,在玻璃激光点云特征清楚的情况下,只需要依据模型求解θglass、g1及g2,就可以从玻璃激光点云特征轻易解算出玻璃边界的范围及在世界中的坐标,进而可以将其应用与地图中,以便于导航避障。
由阴影三角形投影的关系,可以得到:
Figure BDA0004027391910000051
Figure BDA0004027391910000052

Claims (4)

1.一种结合二维激光点云与超声波的玻璃检测方法,其特征在于,包括激光雷达和超声波传感器,所述超声波传感器的个数为二,还包括以下步骤:
步骤S1、处理激光雷达传感器数据,并分类激光点云数据;
步骤S2、通过欧式距离方法分析点云基本特征,依据玻璃方向的点云聚类密集且强度高的特征,对分类的点云进行筛选,从而确定聚类的激光点云的位置;
步骤S3、在步骤S2的同时,通过超声波辅助激光雷达点的判定。
2.根据权利要求1所述的一种结合二维激光点云与超声波的玻璃检测方法,其特征在于,步骤S1具体如下:
激光雷达的数据通过欧式聚类方法进行初步处理,即通过欧式距离分类激光点云,聚类基本公式为:
Figure FDA0004027391900000011
式中,L表示聚类函数,xi表示第i个激光点的位姿,l表示聚类个数,n为最大值。
3.根据权利要求1所述的一种结合二维激光点云与超声波的玻璃检测方法,步骤S2具体如下:
各聚类点云的数据特征包括点云重心位姿、点云平均强度、点云聚类半径参数,
点云重心位姿的计算方法为:
Figure FDA0004027391900000012
式中,xmean表示点云重心位姿,n表示聚类点综述,xi表示第i点的激光点云位姿。
点云平均强度的计算方法为:
Figure FDA0004027391900000013
式中,kmean表示点云平均强度值,n表示聚类点综述,li表示第i点的激光点云强度值。
点云聚类半径的计算方法为:
Figure FDA0004027391900000021
式中,rmean表示点云聚类半径,n表示聚类点综述,||xi-xmean||表示第i点的激光点云位姿到点云重心的二范式,记两点距离。
4.根据权利要求1所述的一种结合二维激光点云与超声波的玻璃检测方法,其特征在于,步骤S3公式具体如下:
Figure FDA0004027391900000022
Figure FDA0004027391900000023
s1和s2分别表示超声波1和超声波2测量玻璃墙时,所得的最小距离为超声波弧形测量模型与玻璃墙的内切圆半径;l表示激光雷达的玻璃墙特征点距激光雷达的距离信息,由点云聚类信息得到;d表示在移动机器人中,激光雷达相对于两个对称的超声波的雷达所在直线的测量距离;θ0表示超声波1与移动机器人中轴线的角度信息,该信息由传感器的设计与安装位置决定;θglass表示移动机器人与玻璃墙的角度;g1、g2分别表示超声波1和超声波2在玻璃墙的激光雷达入射点处的测量距离。
CN202211710591.2A 2022-12-29 2022-12-29 一种结合二维激光点云与超声波的玻璃检测方法 Pending CN116224357A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202211710591.2A CN116224357A (zh) 2022-12-29 2022-12-29 一种结合二维激光点云与超声波的玻璃检测方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202211710591.2A CN116224357A (zh) 2022-12-29 2022-12-29 一种结合二维激光点云与超声波的玻璃检测方法

Publications (1)

Publication Number Publication Date
CN116224357A true CN116224357A (zh) 2023-06-06

Family

ID=86588286

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202211710591.2A Pending CN116224357A (zh) 2022-12-29 2022-12-29 一种结合二维激光点云与超声波的玻璃检测方法

Country Status (1)

Country Link
CN (1) CN116224357A (zh)

Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2014022664A2 (en) * 2012-08-02 2014-02-06 Memsic, Inc. Method and apparatus for data fusion of a three axis magnetometer and three axis accelerometer
WO2017009083A1 (de) * 2015-07-14 2017-01-19 Vorwerk & Co. Interholding Gmbh Verfahren zum betrieb eines flächenbearbeitungsgerätes
US20170184399A1 (en) * 2011-06-30 2017-06-29 The Regents Of The University Of Colorado Remote measurement of shallow depths in semi-transparent media
CN107727091A (zh) * 2017-09-07 2018-02-23 山东省科学院海洋仪器仪表研究所 基于三轴地磁传感器的海洋监测浮标防避碰系统及方法
CN111337022A (zh) * 2020-04-10 2020-06-26 深圳市银星智能科技股份有限公司 一种目标障碍物的检测方法、装置和机器人
CN111880532A (zh) * 2020-07-13 2020-11-03 珠海格力电器股份有限公司 自主移动设备及其方法、装置、设备和存储介质
CN112130569A (zh) * 2020-09-27 2020-12-25 上海木木聚枞机器人科技有限公司 一种超声波量程设置方法及系统
CN112432644A (zh) * 2020-11-11 2021-03-02 杭州电子科技大学 基于鲁棒自适应无迹卡尔曼滤波的无人艇组合导航方法
CN113203409A (zh) * 2021-07-05 2021-08-03 北京航空航天大学 一种复杂室内环境移动机器人导航地图构建方法
CN113640826A (zh) * 2021-08-11 2021-11-12 山东大学 一种基于3d激光点云的障碍物识别方法及系统
CN114549467A (zh) * 2022-02-21 2022-05-27 上海高仙自动化科技发展有限公司 单线激光玻璃噪点过滤方法、装置、探测设备及存储介质
CN114637024A (zh) * 2022-04-01 2022-06-17 北京石头世纪科技股份有限公司 激光定位系统及方法

Patent Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20170184399A1 (en) * 2011-06-30 2017-06-29 The Regents Of The University Of Colorado Remote measurement of shallow depths in semi-transparent media
WO2014022664A2 (en) * 2012-08-02 2014-02-06 Memsic, Inc. Method and apparatus for data fusion of a three axis magnetometer and three axis accelerometer
WO2017009083A1 (de) * 2015-07-14 2017-01-19 Vorwerk & Co. Interholding Gmbh Verfahren zum betrieb eines flächenbearbeitungsgerätes
CN107727091A (zh) * 2017-09-07 2018-02-23 山东省科学院海洋仪器仪表研究所 基于三轴地磁传感器的海洋监测浮标防避碰系统及方法
CN111337022A (zh) * 2020-04-10 2020-06-26 深圳市银星智能科技股份有限公司 一种目标障碍物的检测方法、装置和机器人
CN111880532A (zh) * 2020-07-13 2020-11-03 珠海格力电器股份有限公司 自主移动设备及其方法、装置、设备和存储介质
CN112130569A (zh) * 2020-09-27 2020-12-25 上海木木聚枞机器人科技有限公司 一种超声波量程设置方法及系统
CN112432644A (zh) * 2020-11-11 2021-03-02 杭州电子科技大学 基于鲁棒自适应无迹卡尔曼滤波的无人艇组合导航方法
CN113203409A (zh) * 2021-07-05 2021-08-03 北京航空航天大学 一种复杂室内环境移动机器人导航地图构建方法
CN113640826A (zh) * 2021-08-11 2021-11-12 山东大学 一种基于3d激光点云的障碍物识别方法及系统
CN114549467A (zh) * 2022-02-21 2022-05-27 上海高仙自动化科技发展有限公司 单线激光玻璃噪点过滤方法、装置、探测设备及存储介质
CN114637024A (zh) * 2022-04-01 2022-06-17 北京石头世纪科技股份有限公司 激光定位系统及方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
齐博文: ""室内玻璃场景中移动机器人SLAM与避障技术研究"", 《中国优秀硕士学位论文全文数据库 信息科技辑》, 15 January 2022 (2022-01-15) *

Similar Documents

Publication Publication Date Title
CN115761550B (zh) 一种基于激光雷达点云和相机图像融合的水面目标检测方法
CN103268729B (zh) 基于混合特征的移动机器人级联式地图创建方法
CN111461023A (zh) 基于三维激光雷达的四足机器人自主跟随领航员的方法
CN108955702B (zh) 基于三维激光和gps惯性导航系统的车道级地图创建系统
CN107038717B (zh) 一种基于立体栅格自动分析3d点云配准误差的方法
CN109598765B (zh) 基于球形标定物的单目相机与毫米波雷达外参联合标定方法
CN112001958A (zh) 基于有监督单目深度估计的虚拟点云三维目标检测方法
CN110223302A (zh) 一种基于旋转区域提取的舰船多目标检测方法
CN111080627A (zh) 一种基于深度学习的2d+3d大飞机外形缺陷检测与分析方法
CN110390696A (zh) 一种基于图像超分辨率重建的圆孔位姿视觉检测方法
CN111781608A (zh) 一种基于fmcw激光雷达的运动目标检测方法及系统
CN110189375B (zh) 一种基于单目视觉测量的图像目标识别方法
CN110097593A (zh) 一种从多线激光雷达点云数据中识别圆柱面的方法
CN114089329A (zh) 一种基于长短焦相机与毫米波雷达融合的目标检测方法
CN108520197A (zh) 一种遥感图像目标检测方法及装置
CN103697883B (zh) 一种基于天际线成像的飞行器水平姿态确定方法
CN105160649A (zh) 基于核函数非监督聚类的多目标跟踪方法及系统
WO2024216523A1 (zh) 城市轨道列车行驶限界异物感知方法、系统、装置和介质
Zhou et al. 6-D pose estimation method for large gear structure assembly using monocular vision
CN112365592A (zh) 一种基于双向高程模型的局部环境特征描述方法
CN111880197A (zh) 一种基于四线激光雷达的道路边界检测方法
CN114764885B (zh) 障碍物的检测方法、装置、计算机可读存储介质和处理器
WO2020093631A1 (zh) 一种基于深度实例分割网络的天线下倾角测量方法
CN109613557A (zh) 一种补全激光雷达三维点云目标的系统及方法
CN103810489B (zh) 基于不规则三角网的LiDAR点云数据水上桥梁提取方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination