如何允许Google的抓取工具访问我的需要登录的网页

一直以来Google Adsense服务小组都十分明确地告诉广告发布者，禁止在需要登录的页面投放广告，不过不久前Google Adsense取消了这个限制，并且在技术上实现了密码保护页面的广告匹配。

在过去，如果将广告投放在需要登录的页面，出现的通常是一个通用的广告，不一定和网站主题很相关，要么就出现公益广告，因为Google adsense的蜘蛛不能从这些页面获取关键词以匹配广告。

Google Adsense帮助中心对设置方法做了比较详细的说明：如何允许 Google 的抓取工具访问我的需要登录的网页