提出了一种结合颜色直方图和改进的模型更新算法进行人物跟踪的新方法。首先,利用减背景法检测出监控区域的所有候选运动模型;其次,在HSV颜色空间对目标模型和候选模型的颜色分量进行非等间隔量化并形成特征矢量,通过相似性计算选出最优相似模型替换当前目标模型,从而实现了多目标的跟踪。本文在目标遇到遮挡情况时,对模型更新算法进行改进,使其依然能准确地跟踪运动目标。实验显示,该算法计算简单,对非刚性目标的旋转、尺度变化以及多目标的交叉遮挡具有鲁棒性。