爬虫系统用例图
2017-04-16 16:07:13 0 举报
爬虫系统用例图主要描述了该系统的主要参与者(用户、爬虫程序)以及它们之间的交互。用户可以通过界面输入需要爬取的网址,爬虫程序接收到指令后,开始访问该网址并获取网页内容。在获取过程中,爬虫程序可能会遇到各种问题,如网络连接问题、网页结构变化等,这些问题都需要爬虫程序能够自动处理。同时,为了防止对目标网站造成过大压力,爬虫程序还需要能够控制爬取速度。爬取完成后,爬虫程序将网页内容返回给用户,用户可以对这些内容进行进一步的处理和分析。