我的网站内一些不设链接的私密性网页,甚至是需要访问权限的网页,也会被百度收
- 来源:
- 发布者:
- 进入论坛
- 百度Spider对网页的抓取,是通过网页与网页之间的链接实现的。
- 网页之间的链接类型,除了站点内部的页面链接之外,还有不同网站之间的互相链接。因此,某些网页即便通过您的网站内部链接无法访问到,但是,如果别人的网站上有指向这些页面的链接,那么这些页面还是会被搜索引擎所收录。
- 百度Spider的访问权限,和普通用户是一样的。因此,普通用户没有权限访问的内容,Spider也没有权限访问。之所以看上去某些访问权限限制内容被百度收录,原因有两点:
A. 该内容在Spider访问时是没有权限限制的,但抓取之后,内容的权限发生了变化
B. 该内容有权限限制,但是由于网站安全漏洞问题,导致用户可以通过某些特殊路径直接访问。而一旦这样的路径被公布在互联网上,则Spider就会循着这条路径抓出受限内容 - 如果您不希望这些私密性内容被百度收录,一方面可以通过Robots协议加以限制;另一方面,也可以联系webmaster@baidu.com进行解决。
(编辑:aisy)
更多相关文章
- · 百度给站长的建站建议2007-11-02
- · 百度商业客户相关的问题2007-11-02
- · 百度网页排序问题问答2007-11-02
- · 我的网站更新了,可是百度收录的内容还没更新怎么办?2007-11-02
- · 如果我的网站因为作弊行为而从百度搜索结果中消失,是2007-11-02
- · 什么样的网页会被百度认为是没有价值而不被百度收录或2007-11-02
- · 我的网页为什么会从百度搜索结果中消失?2007-11-02
- · 为什么我的网站内一些不设链接的私密性网页,甚至是需2007-11-02
- · 如何让我的网页不被百度收录?2007-11-02
- · 如何让我的网站(独立网站或者blog)被百度收录?2007-11-02




