目前高速公路上由于车道偏离而导致的交通事故造成了巨大的损失，从而使得车道偏离预警系统的研究成为了社会的一大热点。本文基于DSP计算和FPGA计算，构造出一套基于视觉的车道偏离预警系统。本文给出了系统的框架结构以及硬件实现方式，并基于所提出的系统详细研究了视觉系统中大容量数据的传输、存储和处理等问题。最后，基于构造的系统，通过一系列典型的视觉处理算法和应用于车道跑偏决策的软件算法，验证了系统的可行性。