网络爬虫(spider)程序的编程实现

 
      随着网络的快速发展，万维网成为大批信息的载体，如何有效地提取并应用这些信息成为一个伟大的挑衅。搜索引擎(Search Engine)，例如传统的通用搜索引擎AltaVista，百度,Yahoo!和Google等，作为一个帮助人们检索信息的工具成为用户拜访万维网的入口和指南。       随着网络的快速发展，万维网成为大批信息的载体，如何有效地提取并应用这些信息成为一个伟