本发明公开了一种基于机器视觉的乘客越过扶手带检测方法，包括步骤：1)视频图像采集及感兴趣区域(ROI区域)选取；2)利用CodeBook算法建立视频的背景模型，并进行背景差分；3)对得到的前景进行图像处理；4)通过扶手带的灰度直方图模板判断前景是否是乘客；5)利用camshift算法跟踪前景中属于人体的部分；6)计算属于人体对应前景的面积大小，中心点坐标；7)通过扶手带上、外侧前景面积的比例，以及它们中心点位置的关系分析是否有乘客越过扶手带。通过本发明方法可以有效提高手扶电梯的安全质量，避免了突发事件后的情况进一步恶化，把手扶电梯上有乘客攀爬扶手带后的损伤降到最低。