如何不让雅虎搜索引擎抓取个别网页,可在该页的html网页代码的head之内加入以下代码:
<meta name="robots" content="noindex, nofollow">
noindex -- 不索引当前页面
nofollow -- 不跟踪当前页面中所有的链接
这样雅虎搜索引擎就不会再抓取我们想要保护的个别页面。