作为一个有着广泛应用背景的研究领域，视频序列分析通常具有很强的任务依赖性，往往是针对不同的应用假设，选用不同的算法。实际中，常常对不同的算法进行添加特定步骤来进行测试、分析。面对这种研究现状，本文试图通过分析视频目标跟踪较为复杂的算法，探索各种算法与程序设计的关系，设计并实现在不同程度上可被复用的视频目标跟踪系统底层框架。 本文通过对视频目标跟踪整体流程的研究，分析自适应的颜色和纹理组合分割算法，并对算法在流程上由于多个环节的绑定而导致的算法设计的不灵活性进行改进。此外，将软件设计中基于对象的设计思想引入算法设计。实验表明，新的设计使得算法在测试、使用方面更为方便。 在视频处理可复用框架方面，本文从视频处理系统的特点分析入手，对视频处理系统体系结构和模块进行了研究，从解决视频处理系统设计问题出发实现了系统的主要构成，并给出了在相关设计下的框架结构图。 在图像处理可复用框架方面，从分析特定领域的问题开始，将框架设计所面临的问题与解决问题的设计模式联系在一起。给出了设计图像处理软件的整体设计思路，以及此方案下的一个较为完整的可复用框架。