互联网是个巨大的信息资源库，从这个资源库中提取和检索出有用信息是个很重要的课题。搜索引擎是通用的信息检索服务。 搜索引擎一般由Crawler、索引库、检索器和用户接口组成。Crawler从Web上下载页面：分析器对下载页面的内容进行分析以用于建立索引：索引器将文档表示为一种便于检索的方式并存储在索引数据库中：检索器实现用户查询关键词和目标文档匹配度的计算：用户接口为用户提供一个输入查询请求，定制查询结果的Web页面并将查询结果格式化后返回给浏览器。 由于搜索引擎处理的对象是十分庞大的数据量，同时互联网的结构是分布式的，搜索引擎设计成分布式并行处理的系统同时用若干机器协同计算处理，分布式并行的方法可以取得更好的性价比。本文论述构建一种基于分布式并行计算技术的Web搜索引擎模型架构。采用分布式并行编程模式，选用了任务分发模式。在并行编程中线程是流行的模型，在并行计算上采用C++ Thread Pool的编程模型。消息传递对分布式的并行编程是有效的，在分布式计算的消息传递上采用C++的Socket通信方式。 在Web搜索引擎的设计上，主要论述了缓存优化的相关技术。缓存设计的好坏直接影响搜索引擎的相应速度，本文论述了一种搜索引擎缓存的设计方法。