南京网基网站优化技术有限公司
首页 | 联系方式 | 加入收藏 | 设为首页

服务项目

联系方式

联系人:刘小姐
电话:400-807-6757
手机:18042313315
邮箱:service@xinlecd.com

当前位置:首页 >> 优化常识 >> 正文

为什么需要访问权限的网页,也会被百度收录?

编辑:南京网基网站优化技术有限公司   时间:2013/03/29   字号:
摘要:为什么需要访问权限的网页,也会被百度收录?
百度Spider 对网页的抓取,是通过网页与网页之间的链接实现的。
网页之间的链接类型,除了站点内部的页面链接之外,还有不同网站之间的互相链接。
因此,某些网页即便通过你的网站内部链接无法访问到,但是,如果别人的网站上有指向这些页面的链接,那么这些页面还是会被搜索引擎所收录。
百度Spider 的访问权限,和普通用户是一样的。因此,普通用户没有权限访问的内容,Spider 也没有权限访问。之所以看上去某些访问权限限制内容被百度收录,原因有两点:
?? 该内容在Spider 访问时是没有权限限制的,但抓取之后,内容的权限发生了变化;?? 该内容有权限限制,但是由于网站安全漏洞问题,导致用户可以通过某些特殊路径直接访问。而一旦这样的路径被公布在互联网上,则Spider 就会循着这条路径抓出受限内容。
上一条:商务信息发布应注意的事项 下一条:网站排列位置由什么决定?