禁止网页中的某部分内容被搜索引擎抓取的方法

一般情况下,搜索引擎是(包括Google)不会抓取JS生成的内容的,想要Google抓取JS内容还是需要一些配置呢,Making AJAX Applications Crawlable(可能需翻墙),因此,我觉得使用JS生成内容可行。也可以写iframe 然后写robot.txt,robot.txt 指明指定的路径不希望被抓,然后在该页面引入,具体搜索引擎的robot说明,请去各自搜索引擎官方查看,还可以拿js脚本来生成,脚本里面可以存放unicode转义形式,或者url编码过的文本。

【本文关键词】:禁止搜索引擎抓取