标签‘抓取’

屏蔽Google蜘蛛还需留意meta形式的noindex

分类：网站建设 | 2012-07-31 09:07:29 | 浏览(15,343)

38条评论

之前一直使用All in one SEO pack，也一直知道这个插件的优缺点，这段时间在家没事，就索性卸载了插件，不但效率高起来了，后台主题列表也一下子清爽了许多，之后通过修改代码处理了title、description等，将近半个月时间过去了，Google、百度的收录还算稳定，但是在Google、百度的搜索结果中就是不出现关于、链接等页面的收录。

开始一直以为是因为最近设置了robots.txt屏蔽tag和归档页的收录，屏蔽了相关的收录，使用Google的在线管理平台测试也是通过的，没有任何问题，设置了robots.txt屏蔽后也确实不少不希望收录的页面收录受到影响，但在Sitemap.xml里面出现的网址很多是robots.txt里面所不允许的 查看更多...

博客被蜘蛛关注了？或因为PR提高？

分类：生活纪实 | 2011-06-28 10:06:18 | 浏览(17,755)

33条评论

有一段没有更新博客了，原因有很多，身边的朋友估计也都知道了，暑假了，不想在家待着，出来找地方打工了，来到了昆山仁宝，据说是世界第二的笔记本生产商，可也不见得有多好，相比去年去过的上海英华达，差远了。题外话到此为止，下面说正题：

因为在外面上网不方便，需要上网吧才能接触到网络，加上上班加班什么的，一直没时间，今天因为朋友发信息说道名网备案的情况，才不得以来网吧了。办完正式就看看博客吧，一看吓一跳，平时没有多少留言的博客，这几天还真增加不少留言，只系统默认评定的垃圾评论就30多条，暂不提通过审核的，先打开垃圾评论看下，却失望了，只有七八条是有实际意义的评论。其余的全部是英文留言，也不带什么链接，不知道是做什么用的。 查看更多...