关于百度和GG的收录问题

wang10107 · 发表于 2006-6-5

我的一个网站里以前有个私人栏目，仅供俺个人看，并未在网站上连接，其他访问俺网站的人看不到这个栏目。可是过了几天百度居然把这个栏目里的网页都收录了，而GG是一个页面也没收录！
俺的问题是百度和GG为什么有这个区别？他们收录是直接去你网站空间里爬，还是去你的首页里分栏目一个一个的收录？
GG的收录和这个栏目在网站里是否做连接有关系没？
大家都讨论下下啦！

xueyhfeng · 发表于 2006-6-5

如果不想搜索引擎收录某些页面，你可以通过robots.txt文件来定义。

davidyin · 发表于 2006-6-5

某些破搜索，才不管了。
最好加上密码保护该目录。

Shift · 发表于 2006-6-5

你的栏目,确定在网上任何地方都没有连接吗?

davidyin · 发表于 2006-6-6

如果你的栏目被别人链接，也会被search engine cached

你好 · 发表于 2006-6-6

如果你的网页没有任何公共开放连接的话,任何搜索都不会索引的,如果被索引了那肯定是你在某个页面有该连接存在,完毕!

wang10107 · 发表于 2006-6-6

原帖由 Shift 于 2006-6-6 04:25 发表你的栏目,确定在网上任何地方都没有连接吗?

确实没做连接啊，一个很私人的栏目
GG没收录，百度收录个精光
百度还是牛

alai · 发表于 2006-6-6

原帖由 wang10107 于 2006-6-6 13:35 发表
确实没做连接啊，一个很私人的栏目
GG没收录，百度收录个精光
百度还是牛

和工具栏有关,工具栏有探测新网址功能

很多不明白 · 发表于 2006-6-8

是的，我也碰到了，自己用来测试新版本的论坛被百度收录，而正式论坛几年都不肯收录，所以我就把正式论坛换到测试论坛的地址，呵呵

cambrain · 发表于 2006-6-14

会收录的。我看过这样的一文章，所以才要用到robot.txt啊。要不这个文件不就没用了？？

		自动登录	找回密码
密码			注册