本发明公开基于时空滤波和联合空间Kmeans的手指运动检测与定位方法，首先将演奏者手指贴上十种不同颜色（除黑、白外）的标签，拍摄演奏者手指弹奏键盘乐器的视频；然后对输入的视频帧，用时空滤波的方法检测手指运动目标，将空域滤波结果反馈指导动态背景更新；用联合空间Kmeans进行手指运动目标定位，结合R、G、B直方图统计特性自适应决定聚类数目和初始化类中心，从而实现计算复杂度低、收敛速度快、定位准确度高、实时性能好的指法识别、记录功能。