Web Crawler的体系结构

以下三张图片说明了网络爬虫的体系结构。