CN110298864B - 一种高尔夫推杆设备的视觉感测方法及装置 - Google Patents
一种高尔夫推杆设备的视觉感测方法及装置 Download PDFInfo
- Publication number
- CN110298864B CN110298864B CN201810244598.7A CN201810244598A CN110298864B CN 110298864 B CN110298864 B CN 110298864B CN 201810244598 A CN201810244598 A CN 201810244598A CN 110298864 B CN110298864 B CN 110298864B
- Authority
- CN
- China
- Prior art keywords
- golf ball
- golf
- state
- camera
- fitting
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T17/00—Three dimensional [3D] modelling, e.g. data description of 3D objects
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/20—Analysis of motion
- G06T7/246—Analysis of motion using feature-based methods, e.g. the tracking of corners or segments
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/40—Scenes; Scene-specific elements in video content
- G06V20/41—Higher-level, semantic clustering, classification or understanding of video scenes, e.g. detection, labelling or Markovian modelling of sport events or news items
- G06V20/42—Higher-level, semantic clustering, classification or understanding of video scenes, e.g. detection, labelling or Markovian modelling of sport events or news items of sport video content
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/40—Scenes; Scene-specific elements in video content
- G06V20/46—Extracting features or characteristics from the video content, e.g. video fingerprints, representative shots or key frames
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2200/00—Indexing scheme for image data processing or generation, in general
- G06T2200/04—Indexing scheme for image data processing or generation, in general involving 3D image data
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10016—Video; Image sequence
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2210/00—Indexing scheme for image generation or computer graphics
- G06T2210/61—Scene description
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Multimedia (AREA)
- Software Systems (AREA)
- Computer Graphics (AREA)
- Geometry (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Computational Linguistics (AREA)
- Image Analysis (AREA)
- Length Measuring Devices By Optical Means (AREA)
- Studio Devices (AREA)
Abstract
本发明提供了一种高尔夫推杆器的视觉感测方法及装置,所述方法包括:通过摄像头拍摄到的视频图像中的高尔夫球的位置来判断高尔夫球的击打状态,并在连续的视频图像中进行有效帧的截取;利用高尔夫球的特征对摄像头拍摄到的视频序列内的高尔夫球进行连续的定位与追踪;利用摄像头标定步骤得到的映射关系,将视频序列内高尔夫球的二维位置坐标还原成真实场景的三维坐标;利用3D信息还原步骤得到的高尔夫球在真实场景下的三维坐标,进行高尔夫球运动轨迹的拟合,并根据拟合结果,计算击打瞬间的偏角。采用所述方法,只需使用单个普通民用摄像头,就可以实现高尔夫球推杆练习器的视觉感测功能,降低了成本。
Description
技术领域
本发明属于高尔夫推杆设备领域,尤其涉及一种高尔夫推杆设备的视觉感测方法及装置。
背景技术
视觉感测装置可以连续感测场景以及环境图像,每一幅图像都蕴含着大量的信息,其中既包含有效信息,也包含大量的无用信息。而那些感兴趣的有效信息,可以通过单幅或者多幅图像的分析、提取、比对等方式获得。
目前已知的运动物体感测装置,特别是高尔夫的视觉感测装置,需要借助多个摄像头或者结合其他传感器进行感测。如在高尔夫击打触发的判断上,常采用红外传感器或声呐传感器实现(当球越过红外线,或击打后的声音被声呐传感器接受到,再经过一定的处理判断,实现触发),而后高尔夫球的定位于运动轨迹估计,再使用摄像头感测处理得到。并且普遍的这类感测设备对环境有较高要求(如特定的光照条件、简单的地板样式、视野内只有目标物体、且不可有多个目标等)。此外,由于不具备运动拍摄能力的普通民用摄像头在拍摄运动物体时会产生运动模糊(称之为拖影现象),目前的常用的这类视觉感测设备需要配备高速摄像头且具备运动物体拍摄能力(如配备全局快门),导致成本高。
发明内容
为满足以上业务场景需求及解决现有技术存在的缺陷,本发明的目的在于提供一种高尔夫推杆设备的视觉感测装置,其可以采用普通的民用摄像头来拍摄运动物体,从而降低成本。
在本发明实施例中,提供了一种高尔夫推杆器的视觉感测方法,其包括
摄像头标定步骤:通过采集多个场景内真实点的三维坐标、以及这些点所对应的摄像头图像内的二维坐标,建立三维坐标点与二维坐标点的映射关系;
高尔夫球击打状态判断步骤:通过摄像头拍摄到的视频图像中的高尔夫球的位置来判断高尔夫球的击打状态,并在连续的视频图像中进行有效帧的截取;
高尔夫球定位与追踪步骤:利用高尔夫球的特征对摄像头拍摄到的视频序列内的高尔夫球进行连续的定位与追踪;
3D信息还原步骤:利用摄像头标定步骤得到的映射关系,将视频序列内高尔夫球的二维位置坐标还原成真实场景的三维坐标;
高尔夫球轨迹拟合步骤:利用3D信息还原步骤得到的高尔夫球在真实场景下的三维坐标,进行高尔夫球运动轨迹的拟合,并根据拟合结果,计算击打瞬间的偏角。
本发明实施例中,所述高尔夫球击打状态判断步骤包括:
摄像头设置:通过加快镜头的快门速度、与减小光圈大小,缩短拍摄所得图像的曝光时间;
图像预处理:提高图像的对比度,去除噪声与无用信息,使摄像头捕获的图像变成可以被进一步处理、提取有用信息的图像;
高尔夫球击打状态判断:根据高尔夫球在连续的图像帧中的位置来对高尔夫球的击打状态进行判断,所述高尔夫球的击打状态包括初始状态、准备状态和击打状态;
触发后处理:判断截取到的图像帧是否有效,并按时间顺序排列有效帧和为每一有效帧添加一个时间戳。
本发明实施例中,所述高尔夫球击打状态判断步骤中,在初始状态切换到准备状态之前,学习当前的环境内高尔夫球的特征,记为静止高尔夫球特征;在准备状态切换到击打状态前,学习并构建当前场景的背景模型;在切换到击打状态后,在当前环境内学习另一组高尔夫球的特征,记为运动高尔夫球特征。
本发明实施例中,所述方法还包括
测速步骤:根据所述高尔夫球击打状态判断步骤截取到的有效帧的时间戳和所述3D信息还原步骤得到的高尔夫球真实坐标以及所述高尔夫球轨迹拟合步骤得到的轨迹,计算击打瞬间高尔夫球的初始速度。
本发明实施例中,所述高尔夫球轨迹拟合步骤包括:
读入检测得到的高尔夫球在真实场景中的相对坐标;
根据所有相对坐标的位置,拟合出一条轨迹,并以此轨迹作为检测到的高尔夫球的最终运动轨迹;
将各个相对坐标的位置,根据拟合的轨迹结果,重新映射到轨迹上,去消除检测坐标结果存在的误差;
根据映射在轨迹上的各个点的距离,结合截取到的有效帧的时间戳,计算各点上的相对速度估计值;
根据各点上的相对速度估计值估算摩擦力造成的加速度,进而拟合出初速度曲线,并求得击打瞬间的初始速度。
本发明实施例中,还提供了一种高尔夫推杆器的视觉感测系统,其包括:
摄像头标定模块,用于通过采集多个场景内真实点的三维坐标以及这些点所对应的摄像头图像内的二维坐标,建立三维坐标点与二维坐标点的映射关系;
高尔夫球击打状态判断模块,用于通过摄像头拍摄到的视频图像中的高尔夫球的位置来判断高尔夫球的击打状态,并在连续的视频图像中进行有效帧的截取;
高尔夫球定位与追踪模块,用于利用高尔夫球的特征对摄像头拍摄到的视频序列内的高尔夫球进行连续的定位与追踪;
3D信息还原模块,用于根据所述摄像头标定模块得到的三维坐标点与二维坐标点的映射关系,将视频序列内高尔夫球的二维位置坐标还原成真实场景的三维坐标;
高尔夫球轨迹拟合模块,用于利用所述3D信息还原模块得到的高尔夫球在真实场景下的三维坐标,进行高尔夫球运动轨迹的拟合,并根据拟合结果,计算击打瞬间的偏角。
本发明实施例中,所述高尔夫球击打状态判断模块包括:
摄像头设置单元,用于通过加快镜头的快门速度、与减小光圈大小,缩短拍摄所得图像的曝光时间;
图像预处理单元,用于提高图像的对比度,去除噪声与无用信息,使摄像头捕获的图像变成可以被进一步处理、提取有用信息的图像;
高尔夫球击打状态判断单元,用于根据高尔夫球在连续的图像帧中的位置来对高尔夫球的击打状态进行判断,所述高尔夫球的击打状态包括初始状态、准备状态和击打状态;
触发后处理单元,用于判断截取到的图像帧是否有效,并按时间顺序排列有效帧和为每一有效帧添加一个时间戳。
本发明实施例中,所述高尔夫球击打状态判断模块在初始状态切换到准备状态之前,学习当前的环境内高尔夫球的特征,记为静止高尔夫球特征;在准备状态切换到击打状态前,学习并构建当前场景的背景模型;在切换到击打状态后,在当前环境内学习另一组高尔夫球的特征,记为运动高尔夫球特征。
本发明实施例中,所述装置还包括:
测速模块,用于根据所述高尔夫球击打状态判断模块截取到的有效帧的时间戳和所述3D信息还原模块得到的高尔夫球真实坐标以及所述高尔夫球轨迹拟合模块得到的轨迹,计算击打瞬间高尔夫球的初始速度。
本发明实施例中,所述高尔夫球轨迹拟合模块包括:
读入单元,用于读入检测得到的高尔夫球在真实场景中的相对坐标;
拟合单元,用于根据所有相对坐标的位置,拟合出一条轨迹,并以此轨迹作为检测到的高尔夫球的最终运动轨迹;
校正单元,用于将各个相对坐标的位置根据拟合的轨迹结果重新映射到轨迹上,以消除检测坐标结果存在的误差。
与现有技术相比较,本发明的高尔夫推杆器的视觉感测方法及装置,利用图像处理算法,提高此高尔夫球推杆练习设备对多种环境因素的抗性,最终用户可以利用设备提供的数据传输形式,将高尔夫球推杆的场景显示在电视或者其他显示设备上,只需使用单个普通民用摄像头,就可以实现高尔夫球推杆练习器的视觉感测功能,降低了成本。
附图说明
图1是本发明实施例一提供的高尔夫推杆器的视觉感测方法的流程图;
图2是本发明实施例一提供的判断高尔夫球击打状态的流程图;
图3是本发明实施例一提供的高尔夫球定位与追踪的的流程图;
图4是本发明实施例一提供的高尔夫球轨迹拟合的的流程图;
图5是本发明实施例二提供的高尔夫推杆器的视觉感测装置的结构示意图;
图6是本发明实施例二提供的高尔夫球击打状态判断模块的结构示意图;
图7是本发明实施例二提供的高尔夫球轨迹拟合模块的结构示意图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本发明进行进一步详细说明。应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
以下结合具体实施例对本发明的实现进行详细描述:
实施例一
图1示出了本发明实施例一提供一种高尔夫推杆器的视觉感测方法,其包括步骤S1-S6,下面分别进行详细说明。
步骤S1、摄像头标定步骤:通过采集多个场景内真实点的三维坐标、以及这些点所对应的摄像头图像内的二维坐标,建立三维坐标点与二维坐标点的映射关系。
需要说明的是,不同于传统的寻找摄像头内、外参数的标定方法,步骤S1中,采用了曲面拟合的标定方法,通过采集几十个(数量可增减)场景内真实点的三维坐标、以及这些点所对应的摄像头图像内的二维点的坐标进行标定。通过曲面拟合的方法,得到点与点的直接映射关系。这样标定的参数个数可根据要求的精确度进行调整,且更加准确。摄像头标定过程,一般是在系统第一次使用之前完成的,而且由于在本发明实施例中,摄像头的位置固定,一次标定便可一直使用,无需重复进行。
步骤S2、高尔夫球击打状态判断步骤:通过摄像头拍摄到的视频图像中的高尔夫球的位置来判断高尔夫球的击打状态,并在连续的视频图像中进行有效帧的截取。
需要说明的是,所述高尔夫球的击打状态包括初始状态、准备状态和击打状态,分别说明如下:
初始状态,表示无球状态,用户没有准备好要进行高尔夫的推杆。这时系统持续不断的检测高尔夫球是否进入指定位置,并维持静止状态到达一定的时间。若是,进入准备状态,反之维持初始状态。在切换到准备状态之前系统将学习当前的环境内高尔夫球的特征,记为静止高尔夫球特征。与一般的提前训练特征不同,直接在当前环境提取的特征,在这一环境内将有更高的识别率,表现在设备性能上就是对环境适应性更强,干扰的抗性也更强。
准备状态,表示高尔夫球进入可击打状态,用户可以击打高尔夫球进行推杆的练习。在准备状态时,系统根据持续的静止的球位置,结合当前时刻球的位置以及运动状态进行判断。若球移动且处于击打的运动状态,系统进入击打状态。若球不处于击打的运动状态,根据当前球的位置重新回到初始状态或维持准备状态。
在切换到击打状态前,系统连续学习并构建当前场景的背景模型,所谓背景模型,包含了所有处于场景视野内的静止物体,此背景模型将在后续的高尔夫球定位与追踪模块得到使用。可大大提高系统的抗干扰能力与运算效率。
击打状态,表示用户击打高尔夫球的瞬间,又称之为触发状态。进入击打状态,系统以触发帧为原点,按时间向后回溯以及向前延伸一定数量的帧,并将这些帧截取下来。由于触发帧必定包含高尔夫球的相关信息,所以其必为有效帧,利用触发帧的有效性,以其为原点回溯与延伸的提取帧也必定与有效帧存在交集关系。这大大简化了有效帧的提取问题,节省了大量的内存与运算时间。同时,在切换到击打状态时,系统还将在当前环境内学习另一组高尔夫球的特征,记为运动高尔夫球特征。
步骤S2具体包括:
摄像头设置:通过加快镜头的快门速度、与减小光圈大小,缩短拍摄所得图像的曝光时间;
图像预处理:提高图像的对比度,去除噪声与无用信息,使摄像头捕获的图像变成可以被进一步处理、提取有用信息的图像;
高尔夫球击打状态判断:根据高尔夫球在连续的图像帧中的位置来对高尔夫球的击打状态进行判断;
触发后处理:进入触发状态后,判断截取到的图像帧是否有效,并按时间顺序排列有效帧和为每一有效帧添加一个时间戳。
图2说明了上述高尔夫球击打状态判断的处理流程,具体如下:
先从视频序列获取一帧图像,并在指定区域显示一个击打框,击打框表示,高尔夫球推杆击打的起始位置;
然后在击打框内识别并检测高尔夫球。根据识别的结果和持续的帧数,在初始状态、准备状态、触发状态之间进行切换;
若击打框内连续10帧被识别为存在静止的高尔夫球,则系统进入准备状态,高尔夫球可击打,并将连续学习的得到的背景模型保持下来;
此时继续在击打框内进行高尔夫球的识别,当连续两帧识别不到高尔夫球,则对击打框外的高尔夫球进行识别,并判断运动状态,根据系统根据最多7帧运动状态判断系统是否进入触发状态。若否返回初始状态。
步骤S3、高尔夫球定位与追踪步骤:利用高尔夫球的特征对摄像头拍摄到的视频序列内的高尔夫球进行连续的定位与追踪。
如图3所示,步骤S3中,利用高尔夫球的特征对视频序列内的高尔夫球进行连续的定位与追踪,主要应用到的特征有纹理梯度、轮廓形状、像素密度等。由于所有的特征都是在触发状态判断时直接在场景内学习得到的,所以在当前环境下具备较强的适应能力,并且本发明所采用的特征均是在击打过程不易改变的,未使用如颜色、亮度等容易受到光照强度、阴影等因素影响的特征。这保证了系统对如光照变化等多种环境因素具有较高的抗性以及环境内较高的识别率。
步骤S4、3D信息还原步骤:利用摄像头标定步骤得到的映射关系,将视频序列内高尔夫球的二维位置坐标还原成真实场景的三维坐标。
步骤S5、高尔夫球轨迹拟合步骤:利用3D信息还原步骤得到的高尔夫球在真实场景下的三维坐标,进行高尔夫球运动轨迹的拟合,并根据拟合结果,计算击打瞬间的偏角。
如图4所示,本发明实施例中,所述高尔夫球轨迹拟合步骤包括:
读入检测得到的高尔夫球在真实场景中的相对坐标;
根据所有相对坐标的位置,拟合出一条轨迹,并以此轨迹作为检测到的高尔夫球的最终运动轨迹;
将各个相对坐标的位置,根据拟合的轨迹结果,重新映射到轨迹上,去消除检测坐标结果存在的误差。
步骤S6、测速步骤:根据所述高尔夫球击打状态判断步骤截取到的有效帧的时间戳和所述3D信息还原步骤得到的高尔夫球真实坐标以及所述高尔夫球轨迹拟合步骤得到的轨迹,计算击打瞬间高尔夫球的初始速度。
具体地,计算击打瞬间高尔夫球的初始速度的过程如下:
根据映射在轨迹上的各个点的距离,结合截取到的有效帧的时间戳,计算各点上的相对速度估计值;
根据各点上的相对速度估计值估算摩擦力造成的加速度,进而拟合出初速度曲线,并求得击打瞬间的初始速度。
实施例二
如图5所示,本发明实施例二中,还提供了一种高尔夫推杆器的视觉感测装置,其包括:
摄像头标定模块1,用于通过采集多个场景内真实点的三维坐标以及这些点所对应的摄像头图像内的二维坐标,建立三维坐标点与二维坐标点的映射关系;
高尔夫球击打状态判断模块2,用于通过摄像头拍摄到的视频图像中的高尔夫球的位置来判断高尔夫球的击打状态,并在连续的视频图像中进行有效帧的截取;
高尔夫球定位与追踪模块3,用于利用高尔夫球的特征对摄像头拍摄到的视频序列内的高尔夫球进行连续的定位与追踪;
3D信息还原模块4,用于根据所述摄像头标定模块得到的三维坐标点与二维坐标点的映射关系,将视频序列内高尔夫球的二维位置坐标还原成真实场景的三维坐标;
高尔夫球轨迹拟合模块5,用于利用所述3D信息还原模块4得到的高尔夫球在真实场景下的三维坐标,进行高尔夫球运动轨迹的拟合,并根据拟合结果,计算击打瞬间的偏角;
测速模块6,用于根据所述高尔夫球击打状态判断模块2截取到的有效帧的时间戳和所述3D信息还原模块4得到的高尔夫球真实坐标以及所述高尔夫球轨迹拟合模块5得到的轨迹,计算击打瞬间高尔夫球的初始速度。
如图6所示,所述高尔夫球击打状态判断模块2包括:
摄像头设置单元21,用于通过加快镜头的快门速度、与减小光圈大小,缩短拍摄所得图像的曝光时间;
图像预处理单元22,用于提高图像的对比度,去除噪声与无用信息,使摄像头捕获的图像变成可以被进一步处理、提取有用信息的图像;
高尔夫球击打状态判断单元23,用于根据高尔夫球在连续的图像帧中的位置来对高尔夫球的击打状态进行判断,所述高尔夫球的击打状态包括初始状态、准备状态和击打状态;
触发后处理单元24,用于判断截取到的图像帧是否有效,并按时间顺序排列有效帧和为每一有效帧添加一个时间戳。
如图7所示,所述高尔夫球轨迹拟合模块5包括:
读入单元51,用于读入检测得到的高尔夫球在真实场景中的相对坐标;
拟合单元52,用于根据所有相对坐标的位置,拟合出一条轨迹,并以此轨迹作为检测到的高尔夫球的最终运动轨迹;
校正单元53,用于将各个相对坐标的位置根据拟合的轨迹结果重新映射到轨迹上,以消除检测坐标结果存在的误差。
需要说明的是,本发明实施例二所述的高尔夫推杆器的视觉感测装置与本发明实施例一所述的高尔夫推杆器的视觉感测方法基于同一构思,其具体实现方式和带来的技术效果与实施例一基本相同,此处不再赘述。
综上所述,本发明的高尔夫推杆器的视觉感测方法及装置,利用图像处理算法,提高此高尔夫球推杆练习设备对多种环境因素的抗性,最终用户可以利用设备提供的数据传输形式,将高尔夫球推杆的场景显示在电视或者其他显示设备上,只需使用单个普通民用摄像头,就可以实现高尔夫球推杆练习器的视觉感测功能,降低了成本。
以上所述仅为本发明的较佳实施例而已,并不用以限制本发明,凡在本发明的精神和原则之内所作的任何修改、等同替换和改进等,均应包含在本发明的保护范围之内。
Claims (8)
1.一种高尔夫推杆器的视觉感测方法,其特征在于,包括
摄像头标定步骤:通过采集多个场景内真实点的三维坐标、以及这些点所对应的摄像头图像内的二维坐标,建立三维坐标点与二维坐标点的映射关系;
高尔夫球击打状态判断步骤:通过摄像头拍摄到的视频图像中的高尔夫球的位置来判断高尔夫球的击打状态,并在连续的视频图像中进行有效帧的截取;
高尔夫球定位与追踪步骤:利用高尔夫球的特征对摄像头拍摄到的视频序列内的高尔夫球进行连续的定位与追踪;
3D信息还原步骤:利用摄像头标定步骤得到的映射关系,将视频序列内高尔夫球的二维位置坐标还原成真实场景的三维坐标;
高尔夫球轨迹拟合步骤:利用3D信息还原步骤得到的高尔夫球在真实场景下的三维坐标,进行高尔夫球运动轨迹的拟合,并根据拟合结果,计算击打瞬间的偏角,
所述高尔夫球轨迹拟合步骤包括:
读入检测得到的高尔夫球在真实场景中的相对坐标;
根据所有相对坐标的位置,拟合出一条轨迹,并以此轨迹作为检测到的高尔夫球的最终运动轨迹;
将各个相对坐标的位置,根据拟合的轨迹结果,重新映射到轨迹上,去消除检测坐标结果存在的误差;
根据映射在轨迹上的各个点的距离,结合截取到的有效帧的时间戳,计算各点上的相对速度估计值;
根据各点上的相对速度估计值估算摩擦力造成的加速度,进而拟合出初速度曲线,并求得击打瞬间的初始速度。
2.如权利要求1所述的高尔夫推杆器的视觉感测方法,其特征在于,所述高尔夫球击打状态判断步骤包括:
摄像头设置:通过加快镜头的快门速度、与减小光圈大小,缩短拍摄所得图像的曝光时间;
图像预处理:提高图像的对比度,去除噪声与无用信息,使摄像头捕获的图像变成可以被进一步处理、提取有用信息的图像;
高尔夫球击打状态判断:根据高尔夫球在连续的图像帧中的位置来对高尔夫球的击打状态进行判断,所述高尔夫球的击打状态包括初始状态、准备状态和击打状态;
触发后处理:判断截取到的图像帧是否有效,并按时间顺序排列有效帧和为每一有效帧添加一个时间戳。
3.如权利要求2所述的高尔夫推杆器的视觉感测方法,其特征在于
所述高尔夫球击打状态判断步骤中,在初始状态切换到准备状态之前,学习当前的环境内高尔夫球的特征,记为静止高尔夫球特征;在准备状态切换到击打状态前,学习并构建当前场景的背景模型;在切换到击打状态后,在当前环境内学习另一组高尔夫球的特征,记为运动高尔夫球特征。
4.如权利要求2所述的高尔夫推杆器的视觉感测方法,其特征在于,所述方法还包括
测速步骤:根据所述高尔夫球击打状态判断步骤截取到的有效帧的时间戳和所述3D信息还原步骤得到的高尔夫球真实坐标以及所述高尔夫球轨迹拟合步骤得到的轨迹,计算击打瞬间高尔夫球的初始速度。
5.一种高尔夫推杆器的视觉感测装置,其特征在于,包括:
摄像头标定模块,用于通过采集多个场景内真实点的三维坐标以及这些点所对应的摄像头图像内的二维坐标,建立三维坐标点与二维坐标点的映射关系;
高尔夫球击打状态判断模块,用于通过摄像头拍摄到的视频图像中的高尔夫球的位置来判断高尔夫球的击打状态,并在连续的视频图像中进行有效帧的截取;
高尔夫球定位与追踪模块,用于利用高尔夫球的特征对摄像头拍摄到的视频序列内的高尔夫球进行连续的定位与追踪;
3D信息还原模块,用于根据所述摄像头标定模块得到的三维坐标点与二维坐标点的映射关系,将视频序列内高尔夫球的二维位置坐标还原成真实场景的三维坐标;
高尔夫球轨迹拟合模块,用于利用所述3D信息还原模块得到的高尔夫球在真实场景下的三维坐标,进行高尔夫球运动轨迹的拟合,并根据拟合结果,计算击打瞬间的偏角,
所述高尔夫球轨迹拟合模块包括:
读入单元,用于读入检测得到的高尔夫球在真实场景中的相对坐标;
拟合单元,用于根据所有相对坐标的位置,拟合出一条轨迹,并以此轨迹作为检测到的高尔夫球的最终运动轨迹;
校正单元,用于将各个相对坐标的位置根据拟合的轨迹结果重新映射到轨迹上,以消除检测坐标结果存在的误差。
6.如权利要求5所述的高尔夫推杆器的视觉感测装置,其特征在于,所述高尔夫球击打状态判断模块包括:
摄像头设置单元,用于通过加快镜头的快门速度、与减小光圈大小,缩短拍摄所得图像的曝光时间;
图像预处理单元,用于提高图像的对比度,去除噪声与无用信息,使摄像头捕获的图像变成可以被进一步处理、提取有用信息的图像;
高尔夫球击打状态判断单元,用于根据高尔夫球在连续的图像帧中的位置来对高尔夫球的击打状态进行判断,所述高尔夫球的击打状态包括初始状态、准备状态和击打状态;
触发后处理单元,用于判断截取到的图像帧是否有效,并按时间顺序排列有效帧和为每一有效帧添加一个时间戳。
7.如权利要求6所述的高尔夫推杆器的视觉感测装置,其特征在于
所述高尔夫球击打状态判断模块在初始状态切换到准备状态之前,学习当前的环境内高尔夫球的特征,记为静止高尔夫球特征;在准备状态切换到击打状态前,学习并构建当前场景的背景模型;在切换到击打状态后,在当前环境内学习另一组高尔夫球的特征,记为运动高尔夫球特征。
8.如权利要求6所述的高尔夫推杆器的视觉感测装置,其特征在于,所述装置还包括:
测速模块,用于根据所述高尔夫球击打状态判断模块截取到的有效帧的时间戳和所述3D信息还原模块得到的高尔夫球真实坐标以及所述高尔夫球轨迹拟合模块得到的轨迹,计算击打瞬间高尔夫球的初始速度。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810244598.7A CN110298864B (zh) | 2018-03-23 | 2018-03-23 | 一种高尔夫推杆设备的视觉感测方法及装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810244598.7A CN110298864B (zh) | 2018-03-23 | 2018-03-23 | 一种高尔夫推杆设备的视觉感测方法及装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN110298864A CN110298864A (zh) | 2019-10-01 |
CN110298864B true CN110298864B (zh) | 2021-05-11 |
Family
ID=68025893
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201810244598.7A Active CN110298864B (zh) | 2018-03-23 | 2018-03-23 | 一种高尔夫推杆设备的视觉感测方法及装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN110298864B (zh) |
Families Citing this family (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
AU2020449440B2 (en) * | 2020-09-22 | 2023-04-06 | Shenzhen Greenjoy Technology Co., Ltd. | Overlooking-type golf ball detection method, system and storage medium |
CN112184808A (zh) * | 2020-09-22 | 2021-01-05 | 深圳市衡泰信科技有限公司 | 一种高尔夫球置顶式检测方法、系统及存储介质 |
CN113538550A (zh) * | 2021-06-21 | 2021-10-22 | 深圳市如歌科技有限公司 | 高尔夫球感测方法、系统及存储介质 |
CN114470717A (zh) * | 2022-02-21 | 2022-05-13 | 华拓智造机械设备(天津)有限公司 | 一种用于桌球类运动中击球位置的精确检测方法 |
Citations (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1667352A (zh) * | 2004-03-09 | 2005-09-14 | 横滨橡胶株式会社 | 测量移动体的移动信息的装置 |
CN101410153A (zh) * | 2006-01-19 | 2009-04-15 | 朗吉泰蒙特股份有限公司 | 成像设备和高尔夫球分析设备 |
CN101483770A (zh) * | 2008-01-08 | 2009-07-15 | 华为技术有限公司 | 一种编解码方法及装置 |
CN101918089A (zh) * | 2007-09-21 | 2010-12-15 | 游戏数据有限责任公司 | 对象定位及移动检测系统和方法 |
CN101934134A (zh) * | 2009-07-01 | 2011-01-05 | 高夫准株式会社 | 虚拟高尔夫模拟装置、设置在其中的传感器及虚拟高尔夫模拟装置的传感方法 |
CN102527017A (zh) * | 2010-11-26 | 2012-07-04 | 株式会社普利司通 | 高尔夫挥杆动作的分类方法、分类系统以及分析装置 |
CN103203096A (zh) * | 2012-01-11 | 2013-07-17 | 幻音科技(深圳)有限公司 | 高尔夫挥杆信息分析方法、相关装置及分析系统 |
CN103203097A (zh) * | 2012-01-11 | 2013-07-17 | 幻音科技(深圳)有限公司 | 高尔夫球挥杆过程分析方法、相关装置及分析系统 |
CN103458977A (zh) * | 2011-03-22 | 2013-12-18 | 高夫准株式会社 | 用于虚拟高尔夫模拟装置的感测装置及感测方法 |
CN204522203U (zh) * | 2015-03-18 | 2015-08-05 | 绍兴智慧鸽信息科技有限公司 | 一种智能型的拳击球 |
CN105080107A (zh) * | 2014-05-20 | 2015-11-25 | 求才军 | 一种高尔夫球练习装置 |
CN106075853A (zh) * | 2016-07-07 | 2016-11-09 | 安徽理工大学 | 一种羽毛球陪练机器人 |
CN106139542A (zh) * | 2016-08-01 | 2016-11-23 | 深圳市衡泰信科技有限公司 | 高尔夫击打触发器及其感测方法 |
CN106890436A (zh) * | 2017-04-12 | 2017-06-27 | 广东亮子科技有限公司 | 高尔夫球杆及高尔夫vr模拟系统 |
Family Cites Families (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20090300551A1 (en) * | 2008-06-03 | 2009-12-03 | French Barry J | Interactive physical activity and information-imparting system and method |
CN104867172B (zh) * | 2015-05-28 | 2017-12-26 | 大连理工大学 | 一种实现刚体运动的方法 |
KR20170103365A (ko) * | 2016-03-04 | 2017-09-13 | 한국전자통신연구원 | 고속 동작 물체의 객체 궤적 추적장치 및 그 방법 |
-
2018
- 2018-03-23 CN CN201810244598.7A patent/CN110298864B/zh active Active
Patent Citations (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1667352A (zh) * | 2004-03-09 | 2005-09-14 | 横滨橡胶株式会社 | 测量移动体的移动信息的装置 |
CN101410153A (zh) * | 2006-01-19 | 2009-04-15 | 朗吉泰蒙特股份有限公司 | 成像设备和高尔夫球分析设备 |
CN101918089A (zh) * | 2007-09-21 | 2010-12-15 | 游戏数据有限责任公司 | 对象定位及移动检测系统和方法 |
CN101483770A (zh) * | 2008-01-08 | 2009-07-15 | 华为技术有限公司 | 一种编解码方法及装置 |
CN101934134A (zh) * | 2009-07-01 | 2011-01-05 | 高夫准株式会社 | 虚拟高尔夫模拟装置、设置在其中的传感器及虚拟高尔夫模拟装置的传感方法 |
CN102527017A (zh) * | 2010-11-26 | 2012-07-04 | 株式会社普利司通 | 高尔夫挥杆动作的分类方法、分类系统以及分析装置 |
CN103458977A (zh) * | 2011-03-22 | 2013-12-18 | 高夫准株式会社 | 用于虚拟高尔夫模拟装置的感测装置及感测方法 |
CN103203096A (zh) * | 2012-01-11 | 2013-07-17 | 幻音科技(深圳)有限公司 | 高尔夫挥杆信息分析方法、相关装置及分析系统 |
CN103203097A (zh) * | 2012-01-11 | 2013-07-17 | 幻音科技(深圳)有限公司 | 高尔夫球挥杆过程分析方法、相关装置及分析系统 |
CN105080107A (zh) * | 2014-05-20 | 2015-11-25 | 求才军 | 一种高尔夫球练习装置 |
CN204522203U (zh) * | 2015-03-18 | 2015-08-05 | 绍兴智慧鸽信息科技有限公司 | 一种智能型的拳击球 |
CN106075853A (zh) * | 2016-07-07 | 2016-11-09 | 安徽理工大学 | 一种羽毛球陪练机器人 |
CN106139542A (zh) * | 2016-08-01 | 2016-11-23 | 深圳市衡泰信科技有限公司 | 高尔夫击打触发器及其感测方法 |
CN106890436A (zh) * | 2017-04-12 | 2017-06-27 | 广东亮子科技有限公司 | 高尔夫球杆及高尔夫vr模拟系统 |
Also Published As
Publication number | Publication date |
---|---|
CN110298864A (zh) | 2019-10-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110298864B (zh) | 一种高尔夫推杆设备的视觉感测方法及装置 | |
JP6763559B1 (ja) | ボール追跡装置及びボール追跡方法 | |
Wang et al. | Tracking a golf ball with high-speed stereo vision system | |
JP5297677B2 (ja) | 検出装置および方法、プログラム、記録媒体、並びにシミュレーションシステム | |
US20220277463A1 (en) | Tracking dynamics using a computerized device | |
CN110287907A (zh) | 一种对象检测方法和装置 | |
KR101703316B1 (ko) | 영상을 기반으로 속도를 측정하는 방법 및 장치 | |
CN113223050A (zh) | 一种基于ArUco码的机器人运动轨迹实时采集方法 | |
WO2018076170A1 (en) | A camera system for filming golf game and the method for the same | |
US11229824B2 (en) | Determining golf club head location in an image using line detection and contour separation | |
CN104937608B (zh) | 道路区域检测 | |
CN110377033B (zh) | 一种基于rgbd信息的小型足球机器人识别与追踪抓取方法 | |
US20230364468A1 (en) | Deep learning method of determining golf swing and golf ball parameters from radar signal and image data | |
CN117333550A (zh) | 基于计算机视觉检测的羽毛球发球高度违例判别方法 | |
CN109871727A (zh) | 一种冰箱存取方向的判断方法 | |
CN110717931B (zh) | 一种羽毛球发球时击球点的高度检测系统及其方法 | |
CN115272417A (zh) | 图像数据的处理方法、图像处理设备以及可读存储介质 | |
CN106139542B (zh) | 高尔夫击打触发器及其感测方法 | |
CN111738093A (zh) | 一种基于梯度特征的冰壶球自动测速方法 | |
WO2021056552A1 (zh) | 视频的处理方法和装置 | |
CN114612522B (zh) | 乒乓球运动参数检测方法、装置及乒乓球训练辅助系统 | |
TWI775636B (zh) | 高爾夫揮桿解析系統、高爾夫揮桿解析方法及資訊記憶媒體 | |
CN114681885B (zh) | 高尔夫挥杆解析系统、高尔夫挥杆解析方法及信息存储媒体 | |
US20230070986A1 (en) | Deep learning method of determining golf club parameters from both radar signal and image data | |
Zupančič et al. | Automatic golf ball trajectory reconstruction and visualization |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |