全球主机交流论坛

标题: 很多SEO并没有理解爬行、抓取这些概念到底指的是什么，... [打印本页]

作者: Mercure 时间: 2017-9-27 17:26
标题: 很多SEO并没有理解爬行、抓取这些概念到底指的是什么，...
　　爬行是什么？

　　爬行指的是搜索引擎蜘蛛从已知页面上解析出链接指向的URL，然后沿着链接发现新页面（也就是链接指向的URL）的过程。当然，蜘蛛并不是发现新URL马上就爬过去抓取新页面，而是把发现的URL存放到待抓地址库中，蜘蛛按照一定顺序从地址库中提取要抓取的URL。

　　抓取是什么？

　　抓取是搜索引擎蜘蛛从待抓地址库中提取要抓的URL，访问这个URL，把读取的HTML代码存入数据库。蜘蛛的抓取就是像浏览器一样打开这个页面，和用户浏览器访问一样，也会在服务器原始日志中留下记录。

作者: zguw1234 时间: 2017-9-27 19:13
学习了

欢迎光临全球主机交流论坛 (http://bbs.cuwww.com/)