今天想把自己对网站中robots.txt文件介绍一下，对一个接触seo的朋友来说这个文件肯定不陌生，应为他就是给我们敬爱的引擎蜘蛛“大爷”准备的，告诉他：我们这些整天伺候它们的人给他们准备的食物，那些能吃，那些不能吃！哈哈！下面用我的seo博客中“robots.txt”文件举例：
User-Agent: *
Allow: /
Disallow: /tags.asp
Disallow: /login.asp
...
对于许多seo老手来说sitemap肯定不陌生，但是对于像我这样的初学者来说，就有些摸不到头脑，记得刚刚听说这个词的时候，是我还不知道google管理员工具是什么的时候（纯粹菜鸟，哈哈），不过当我真正了解并是用了sitemap以后，才知道这玩意是这么的强大（或者说没有用的话，谷歌就就不会提供给各位站长了），那对于初学者来说，我觉得应该把我当时对于sitemap的困惑告诉大家，免得再走弯路，这样进步要快好多。
首先说一下什么是sitemap？
sitemap简单来说就是给引擎看的“网站地图”；是一个xml格式的文件，文件名用sitemap.xml命名，放在网站站点的根目录下，最简单的话来说，Sitemap 就是您网站上网页的列表。
...
1. spider拜访的频率
Googlebot怎样决定对一个url的拜访频率?以一段时间的链接测试得到结论:内容的原创性和页面质量应该都占有比较大的权重,而baidu 和yahoo则不同,一些机械性的造访并不能说明什么问题,所以本条规则仅仅针对googlebot
2.平均每次页面的抓取数量
这个和很多方面都有关系,当搜索引擎决定大量大规模收录网站的时候,可以从侧面证明一个网站的重要性,当然本规则仅仅针对googlebot,因为从近期的测试发现,baidu无论网页质量如何,当收录时间达到一定期限之后,总会进行大规模收录(以后是否删除另当别论),yahoo.cn和soso等引擎观察时间比较少,不好做结论
...
博客是记录我们思绪的地方，大部分内容是我们生活和学习的精华，我们愿意和别人分享它们！阅读别人的博客其实就是和他心灵的交谈，比看新闻好多了……
我们都知道pr是什么东西，都想办法努力的提高自己网站的pr；对个人博客来说，方法很多，但是速度有快慢！
最简单的快速提高你博客的PR的方法就是搞原创的内容，包括博客内容和其他的东西：譬如发表评论、做博客主题、汉化软件、开发插件等等；最快速的莫过于做一个受欢迎的博客主题了；如果你的不擅长设计，做不了博客主题，那你就汉化主题，然后把它发到博客论坛里面去；if你会写程序，那么你就开发插件，免费供其他人使用；如果你英文很好，可以翻译国外精彩的文章；可是如果你不会设计英语又不好还不会写程序，那么发表评论也不错，但是你得有自己的想法！原创的东西搜索引擎喜欢，读者也喜欢，他们会到处转载你的文章，尽管大部分是把你的链接删除了的，至少有一部分是有用的！
...
转眼间做网站设计已经五年了，在07初年非主流这个新兴的词汇悄然在互联网上出现的时候，一个偶然的机会让我了解了个人网站，并辞掉了在广州一间大公司的工作，来到湖南的一个城市工作，自己也开始做个人网站，以后的日子每天在论坛潜水看看经验心得，也获益不少，并在随后的一个月里完成了第一个个人网站，直到现在一直以之努力着，
我的站被百度降权过，被Goole清过排名，清过PR，那时续几天都没心情更新网站，想到过放弃，倍感冤枉和压抑，在朋友的鼓励下还是坚持了下来。直到现在依然每天坚持更新网站。介绍下自己做站的一些心得。两年的坎坷与喜悦愿与大家分享：
...
1.首先将你的网站提交到dmoz.org 目录下。它可能需要一段时间,如果被收录它至少会将你的网站PR值和反向链接提高一半。
2. 经常到一些PR值高的论坛发布信息,在发布信息的时候要记得带上签名,签名里一般都可以带上网址。注意不要随意发广告信息,好的论坛一般都有管理员在审核,实发现你的IP很容易很屏蔽了。
3. 把好文章提交到专业的文章目录,在国外有许多专业的英文文章目录。如果你写了一文章,它只会给你带来很低的PR值,因为新文章的更新的,你的文章很快就会被其他新文章所代替。但如果你能写几十篇文章并提交到PR6或PR7的文章目录网站,你的文章内容,结构新颖,能排在这些网站的首页,那么每篇文章至少可以给你带来10个有效的反向链接。这个链接将使Google相信你的网站页面是一个重要的网站,Google可能会给的页面PR值定为5或6。
...
本文将告诉大家怎么向dmoz提交网站。
为什么要向dmoz提交网站，重要性我就不多描述了，自己去网上查就知道了。本文具体告诉大家怎么提交。
当然首先要确定你的网站是否有资格向dmoz提交，如果你的网站还在建设中，或者还没有备案，没有被谷歌百度都收录下文也没必要看了。
打开：www.dmoz.org
找到suggest URL 点击进入。
呵呵，全部都是英文的吧。我给大家翻译下，如果有不好的地方欢迎找出来。
...
网站建设的初期一定要注意你网站的结构，这里的结构一方面是网站程序结构，程序结构包括基础程序导航设计，H1设计等等，这里不多讲了。
最重要的是逻辑结构，你要让站在用户的角度思考你要让用户怎么来用你的网站达到他想要的东西，这对你以后网站的可持续优化是很有帮助的。
首先是关键词的设置，以前说关键词堆砌就是：seo-seo-seo,现在不一样了，如果你网站设计是“成人用品-成人用品网-广州成人用品-成人用品店”这样不是很合理的。如果你网站标题只有一个关键词“成人用品-你的店名”那么搜索引擎会把相关关键词一起算进你的网站，然后根据你的网站的权威（各个因素）和你内容来设计你的相关关键词，比如你的内容中“成人用品店”关键词出现多，然后你权威高，关键词“成人用品店”你也可以排名很好，当然我们建议你把“成人用品店”放在你的H1里面，或者描述里面（描述作用越来越小）。然后你整个网站就围绕着“成人用品”做文章。你可以卖成人用品，也可以成人用品文化指导，可以成人用品加盟，成人用品论坛，成人用品博客等等。
...
PR劫持，也就是用欺骗手段获得工具条上比较高的PR值显示。方法是利用跳转。一般搜索引擎在处理301和302转向的时候，都是把目标URL当作实际应该收录的URL。当然也有特例，不过在大部分情况下是这样处理的。所以如果你从域名A做301或302跳转到域名B，而域名B的PR值比较高，域名A在PR更新后，也会显示域名B的PR值。最简单的就是先做301或302跳转到高PR的域名B，等PR更新过后，立刻取消转向，同时也获得了和B站相同的PR值。这个做假的PR显示值至少维持到下一次PR更新，一般有两三个月或更长的时间。
...
前面的文章提到过此博客在Google中降权，排名统一的拖后5页左右，任何关键词首页均不显示，此现象让自己头疼了很久，也一直在琢磨如何逃过Google降权惩罚。也试过很多方法，但是怎么都未能逃出这一劫，有的SEO界的朋友把此现象当作了Google沙盒，这个理解完全是错误的，降权惩罚是与沙盒现象完全不相同的。
我在前面有一文写了如何在3天之内逃出Google沙盒，此方法也百十百灵，但是用在了Google降权惩罚当中却毫无作用，当然也试过各种各样的方法来解脱，例如管理员工具写信给Google，博客已经远离作弊了，请求从新核审等种种方法均试过了，但是未见到一丝效果。
