本发明公开了一种基于改进ＶｉＢｅ算法的运动物体检测跟踪方法，具体包括以下步骤：Ｓ１、在ＶｉＢｅ背景模型初始化前采用判断视频稳定的策略，并在视频稳定后采用多个稳定且无需连续的输入帧构建背景模型；Ｓ２、在ＶｉＢｅ提取到前景图像后，进行第一次背景模型修正；Ｓ３、在运动物体定位和跟踪时，利用几何比较，对当前帧中的运动物体框集与由此前一定时间内的运动物体框集构建的运动物体动态矩形框集进行匹配；Ｓ４、在运动物体检测和跟踪后，进行第二次背景模型修正。本发明具有提高了背景稳定性、减少了背景噪点和误判概率、解决了“影子”遗留问题、减少了定位与跟踪的计算复杂度等优点。