本发明涉及一种融合颜色与SURF特征的基于粒子滤波的目标追踪方法，包括下列的步骤：根据具有跟踪目标的视频帧，获取目标区域矩形窗口，即跟踪窗口后，利用最小二乘法使用椭圆拟合目标形状，得到目标模板，在HSV空间定义目标模板的颜色直方图；进行目标进行跟踪时，确定候选区域，包括粒子i=1,...,N，并确定粒子观测概率；进行特征点集更新。本发明可以解决目标运动和被遮挡导致追踪失败的问题。