洛都博客

Google，雅虎，微软就合作共同遵守统一的Sitemaps标准，又宣布，共同遵守的robots.txt文件标准。Google，雅虎，微软各自在自己的官方博客上发了一篇帖子，公布三家都支持的robots.txt文件及Meta标签的标准，以及一些各自特有的标准。下面做一个总结。

三家都支持的robots文件记录包括：

Disallow - 告诉蜘蛛不要抓取某些文件或目录。如下面代码将阻止蜘蛛抓取所有的网站文件：

User-agent: *

Disallow: /

Allow - 告诉蜘蛛应该抓取某些文件。Allow和Disallow配合使用，可以告诉蜘蛛某个目录下，大部分都不抓取，只抓取一部分。如下面代码将使蜘蛛不抓取ab目录下其他文件，而只抓取其中cd下的文件：
...

http://rcs.datashed.net
http://rcs.datashed.net/RPC2
http://rpc.blogbuzzmachine.com/RPC2
http://rpc.blogrolling.com/pinger/
http://rpc.britblog.com
http://rpc.feedsky.com/ping
http://rpc.icerocket.com:10080/
http://rpc.newsgator.com/
http://rpc.pingomatic.com
...

李兴平，1979年出生于广东兴宁县，父母均为当地农民，兴平初中毕业后即返家谋生。2005年前第一次出远门，地点是深圳。1999年，网络在中国逐渐普及，兴宁县也开始有了网吧。这时，开始迷上了上网的李兴平在当地网吧找了一份网吧管理员的工作。

因为要帮人攒电脑赚钱，他需要用网络查询配件报价之类的信息，很快他发觉在网上找资料非常困难，当时的中文网站不仅内容不够丰富，数量有限，而且要把那些用英文字母表示的网址一个个记下来，并不是一件容易的事情。于是，他想到一个解决办法，设计了一个个人网页，把他认为好的网站搜集在一起，并和它们建立链接。当下次上网时，他就很方便地直接进入这些常用的网站。
...

一、谷歌 adsense广告单位不可放置於日志标题或分类之下，从而让网友误解为不是广告。例如标题是「今日热门点击」、「千戴难逢的良机」、「点击观看精采日志」等。

二、模仿谷歌 adsense广告的格式，无论颜色、字形、字体大小，都与相同，造成网友误以为是你的网站的一部份。

若你存心欺骗，渐渐的广告商读了有关谷歌提供点击交易CTR的统计数字，当然，他有权不在你的网址放广告，以免不必要的化费，羊毛出在羊身上，故老老实实放置谷歌 adsense广告单位方为上策。

谷歌只允许真正对谷歌广告有兴趣者的点击，任何虚假的都不允许。例如参加点击交换、利用程式自动点击或页显示。
...

百度的收录数量直接反映了一个站的内容和地位，虽然和流量没有直接的关系，但至少也是一个指数，特别是当你网站的百度收录少于100或者只有一个首页的时候，你就得认真对待，否则，你的网站就面临被K无法翻身的窘境，就此本人总结了下面几点与大大家分享下。

1、如果用相同的模板、内容严重的重复先修改

我做企业站都不会用同一类型的模板，内容都是来自于采集，特别是现在做小说网站的非常多，采来采去的都是那几个程序模版，试问有几万个内容相同的站，叫百度那个机器怎么收录?

2、放广告是有影响的

本人也尝试过多次，被百度K掉后，去掉了阿里妈妈的广告，第2天马上重新收录，由于本人不信邪，来回试了几次都得出同样的效果。有一次阿里妈妈广告的客户打电话给我要求我的网站做他的包月广告，我把阿里妈妈广告影响百度收录情事说了一下，他说确有此事并说了抱歉。他还告诉我此事阿里妈妈正与百度商谈之中。不过这也得看具体的对象，如果你的站权重高，建站时间长，那一般来说影响不是很大，但如果你是个新站，对不起，估计马上被K了，所以新站放广告一定要慎重。宁可少收点，也不要影响到整站的发展。
...

一、操作流程

1、将全部帖子列表分成9组进行分组审核，每个人分别负责一组，在后台以浏览帖子的形式进行审核。

2、在浏览帖子时，首先应注意的是贴吧名称，是否属于已经指定的敏感贴吧，或者未被列入，但根据贴吧的吧名很容易联想到一些黄、反信息或本身就是一个代表黄、反信息的吧名，来判断帖子的审核尺度和帖子的删除和保留情况。同时如发现属于易联想到或本身就属于黄、反信息的贴吧，又未被列为敏感贴吧，应进入该吧，对其进行相应的评估，确认该吧的讨论主题和讨论范围，如果为需要注意的内容，视其严重程度，则可对该吧提请关闭、只读、巡视等相应操作，如果不含有需要注意的内容，则保留该吧的吧名，过段时间后再对其进行二次确认，如果确实属于正常讨论，这可放过该吧。
...