如果你有一个网页希望在某个时期后不希望搜索引擎抓起应该怎么做呢? google提供了unavailable_after标签
方法 <META NAME=”GOOGLEBOT” CONTENT=”unavailable_after: 日期 时间 时区”> 其中的日期、时间、时区（缩写）分别用23-Jul-2008、20:18:17、EST这种格式。当Google的爬虫看到网页里包含这个标签时，它不仅会不再抓取这个网页，还会在一天左右的时间内将网页从Google的搜索结果里除去。
如果你希望从移除Google Cache里的记录，得给网页加上noarchive标签。
相关信息
NOINDEX：告诉Google不要索引含此标签的网页。但根据实际经验，Google并非100%遵守。
NOFOLLOW：告诉Google不要关注含此标签的网页里的特定链接。这是为了解决链接spam而设计的Meta标签。
NOARCHIVE：告诉Google不要保存含此标签的网页的快照。
NOSNIPPET：告诉Google不要在搜索结果页的列表里显示含此标签的网站的描述语句，并且不要在列表里显示快照链接。
技术手册1 Comment
我也遇到类似的问题来着，正在权衡中……
Comment by Eureka — 04/02/2008 at 13:30