搜索引擎爬过(crawl)网站来看它在哪儿。这个工作是由软件来执行,被成为爬虫或蜘蛛(或者 Googlebot, 因为它与 Google 有关)。蜘蛛跟着链接从一个页面到另一个页面,并且索引(index)他们发现任何东西。要知道网上有海量的网页(大约200亿),对于蜘蛛而言,要每天访问一个网站查看是否有新的页面或已有页面是否被更改是不可能的。有时候,蜘蛛可能一两个月都不会访问你的页面,
搜索引擎爬过(crawl)网站来看它在哪儿。这个工作是由软件来执行,被成为爬虫或蜘蛛(或者 Googlebot, 因为它与 Google 有关)。蜘蛛跟着链接从一个页面到另一个页面,并且索引(index)他们发现任何东西。要知道网上有海量的网页(大约200亿),对于蜘蛛而言,要每天访问一个网站查看是否有新的页面或已有页面是否被更改是不可能的。有时候,蜘蛛可能一两个月都不会访问你的页面,
网站推广 (2009-2-7 17:52:53)
ERP大牌企业 (2009-2-7 17:52:16)
ERP厂商 (2009-2-7 17:51:38)
沈阳软件开发ERP系统 (2009-2-7 17:50:55)
CIO们面临的挑战 (2009-2-7 17:48:55)
沈阳软件开发前景 (2009-2-7 15:24:27)
沈阳软件开发现状 (2009-2-7 15:23:29)
CRM之运行环境 (2009-2-5 11:31:36)
企业组织行为管理信息化体现了以人为本 (2009-2-5 11:21:35)
信息技术应用于企业组织行为管理的核心意义 (2009-2-5 11:19:24)
◎欢迎参与讨论,请在这里发表您的看法、交流您的观点。