robots.txt 的相关文章

刚才去百度site:taobao.com 发现百度已经收录了上千万的页面.但我看淘宝的robots.txt,发现还是禁止百度抓取的..额...好纠结啊.

文章分类

一些"答非所问"的段子
1.问：“去相亲，对面那女的咧嘴一笑，脸上好厚一块粉掉下来了，我该怎么办？”……答：“您太客气了，第一次...
浏览器出现：HTTP ERROR 414是什么原因？
如果你的浏览器打开网站的时候出现：HTTP ERROR 414，不要慌，这一般是这个网站的程序有问题了，出现了URL过...
使用了nofollow属性后,再别人的博客里留外链还有效果吗?
使用了nofollow属性后,再别人的博客里留外链还有效果吗?博客经常受到很多内容牛头不对马嘴的留言,但这些留言...
竞价交流
今天见了飞帆,从他那里学了很多知识.在学习的道路上,就要多和别人交流,这样才能提高自己.
与吴彦祖"插肩而过"
理发前，幻想自己理完之后肯定会像吴彦祖一样帅气，因为我花了巨资请了这个店的设计总监亲自操刀理发。在理的...