湮没内容或独霸暗码呵护内容

为页面内容设置暗码或湮没起来可以有效阻拦谷歌蜘蛛抓取，面内请寄看：假定暗码被删除或消弭湮没，若何容谷歌会从头收录这些内容。阻拦抓取站页

独霸noindex轨则

noindex是谷歌用来陈述搜刮引擎不要索引网站特定页面的指令（noindex的具体独霸编制）
，noindex只能用来束厄狭隘搜刮引擎蜘蛛，面内用户还是若何容可以经由过程多种路途访谒您的网站（来自其他网页中的链接或直接在不雅不雅不雅不雅鉴赏器中输进网站域名） 。

独霸robots.txt轨则

您可独霸robots.txt樊篱不想让谷歌索引的阻拦抓取站页肆意网页（甚至樊篱全数搜刮引擎蜘蛛） ，若无出格气候，谷歌不推荐阻拦谷歌蜘蛛抓取您的网站页面。

除夜部分网站只希看被谷歌疾速抓取，而不是阻拦谷歌抓取 。