本文提出了在最新的DavinciSoC DM6446上实现智能视频跟踪系统的方案。在模板匹配跟踪算法的基础上，多种改进算法来提高跟踪的精确性和鲁棒性。整个系统充分利用DavinciSoC上的ARM核和DSP核的强大处理能力。经过算法优化和编程优化，跟踪算法可以在DSP核上实时跟踪128×128像素的目标。同时，ARM核并行负责视频采集，显示，算法控制，网络传送等任务。测试结果表明，系统可以在目标形变、部分或全部遮挡、背景干扰等情况下也具有较好的性能。