一般来说,尽量让搜索引擎抓取和索引更多内容是SEO们经常头疼的一个问题,没有收录、索引就无从谈排名。尤其对达到一定规模的网站来说,使网站充分收录是个颇令人费神的SEO技术,当页面达到比如说几十万,无论网站架构怎么设计、多么优化,100%收录都是不可能的,只能尽量提高收录率。 但有时候怎么阻止搜索引擎收录也可能成为一个问题,最近越来越成为问题。需要阻止收录的情况如保密信息、复制内容、广告链接等。过去常用的阻止收录方法包括密码保护、把内容放在表格后面、使用JS/Ajax、使用Flash等。今天看到Google网管博客一篇文章,这些方法都不保险。 使用Flash Google几年前就开始尝试抓取Flash内容了,简单文字性内容已经能抓取。Flash里面的链接也能被跟踪。 表格 Google蜘蛛也能填表,也能抓取POST请求页面。这个早就能从日志中看到。 JS/Ajax 使用JS链接一直以来被当作不搜索引擎友好的方法,因此可以阻止蜘蛛爬行,但两三年前我就看到JS链接不能阻止Google蜘蛛抓取,不仅JS中出现的URL会被爬,简单的JS还能被执行找到更多URL。 前几天有人发现很多网站使用的Facebook评论插件里的评论被爬、被收录,插件本身是个AJAX。这是个好消息。我的一个实验电子商务网站产品评论功能就因为这个费了不少心思,用Facebook comments插件好处大大的,具体什么好处以后有时间再说,唯一的问题就是评论是AJAX实现的,不能被抓取,而产品评论被收录是目的之一(产生原创内容)。我当时想了半天也没有解决方法,只好先傻傻地既放上Facebook comments插件又打开购物车本身的评论功能。现在好了,Facebook comments里的评论能被收录,就不用两套评论功能了。 Robots文件 目前唯一确保内容不被抓取的方法是robots文件禁止。但也有个坏处,会流失权重,虽然内容是不能抓取了,但页面成了只接受链接权重、不流出权重的无底洞。而且禁止抓取不一定不能被索引。 Nofollow Nofollow并不能保证不被收录。就算自己网站所有指向页面的链接都加了NF,也不能保证别人网站不给这个页面弄个链接,搜索引擎还是能发现这个页面。 Meta Noindex + Follow (11月3日补充)读者no1se提醒,为防止收录又能传递权重,可以在页面上使用meta noindex和 meta follow,这样页面不收录,但能流出权重。确实如此,也是个比较好的方法。也有一个问题,还是会浪费蜘蛛爬行时间。哪位读者有能防止收录、又没有权重流失、又不浪费爬行时间的方法,请留言,对SEO界功德无量。 怎样使页面不被收录是个值得思考的问题,没意识到严重性的童鞋可以想想自己网站上有多少复制内容、低质量内容、各种无搜索价值(但用户觉得方便、有用所以又不能拿掉)的分类、过滤URL。 你可能想看: 对象是精挑细选出来的?也可能是差不多得了 除了人们对约会对象没那么挑剔以外,他们更倾向于推进恋爱关系,而不是结束它。 继续回答新浪微访谈SEO问题 昨天(3月31号)下午4-5点在新浪微博做关于SEO的微访谈。据微访谈页面最后统计,共有810个问题,我和另三位嘉宾回答了113个。 3月31号下午在新浪微博做微访谈回答SEO问题 有不少人通过各种方式问我SEO问题,我前些天提过,不会通过email、私信、QQ等回答只对一个人有帮助的SEO问题,性价比太低。想问SEO问题的朋友可以参与这个活动。 关于SEO问题 我几乎每天会收到10封以上邮件,问我关于SEO的问题。QQ、微博、博客留言中也经常有类似问题。 在这里声明一下,以后这类问题我一律不回复,最多回复让提问的人来看看这个帖子。 几个网上从来没有人提到的SEO问题 前几天一位叫Friagan的朋友给我写email,问了几个他认为是网上从来没有人提到过的SEO问题。 别做梦 外贸网站做Google SEO不是给钱就能成的 对于一些没有接触过自己建网站的站长或者公司老总来说,他们会天真的认为一个外贸网站只需要花钱找建站公司搭建出样子后花钱让他们帮忙做Google SEO就可以获得很好的排名,从而吸引流量到网站转化成订单。 关系中最致命的情绪霸凌,却隐藏得很好 我们需要的是从根源上重置情绪劳动的分配,双方以平等的方式承担起维系家庭氛围和谐的责任。 “贾玲减重100斤了,你还在胖吗?”减肥仅靠意志力就能成功? 当你找到自己内在的动力,发现自己的主动性时,减肥也许便不会是一件痛苦但又必须坚持的事情了。 SEO新手入门系列2021(六):站内SEO内容篇 这是《SEO新手入门系列2021》中的第六篇文章,前面几篇文章主要是介绍了SEO中的基础知识部份,关于什么是SEO,搜索引擎的工作原理,关键词挖掘等,从这篇开始就要实际分享一些内容,SEO可以分为站内... 开通SEO问答板块 找了个WordPress的问答功能插件装上,开通了SEO问答板块,读者有SEO方面的问题可以在这里提问。我会尽量回答。希望这个SEO问答成为小小的、但高质量的交流社区。
如何隐藏内容也可能成为SEO问题
2024-07-04 | 浏览: 25
一般来说,尽量让搜索引擎抓取和索引更多内容是SEO们经常头疼的一个问题,没有收录、索引就无从谈排名。尤其对达到一定规模的网站来说,使网站充分收录是个颇令人费神的SEO技术,当页面达到比如说几十万,无论网站架构怎么设计、多么优化,100%收录都是不可能的,只能尽量提高收录率。
但有时候怎么阻止搜索引擎收录也可能成为一个问题,最近越来越成为问题。需要阻止收录的情况如保密信息、复制内容、广告链接等。过去常用的阻止收录方法包括密码保护、把内容放在表格后面、使用JS/Ajax、使用Flash等。今天看到Google网管博客一篇文章,这些方法都不保险。
使用FlashGoogle几年前就开始尝试抓取Flash内容了,简单文字性内容已经能抓取。Flash里面的链接也能被跟踪。
表格Google蜘蛛也能填表,也能抓取POST请求页面。这个早就能从日志中看到。
JS/Ajax使用JS链接一直以来被当作不搜索引擎友好的方法,因此可以阻止蜘蛛爬行,但两三年前我就看到JS链接不能阻止Google蜘蛛抓取,不仅JS中出现的URL会被爬,简单的JS还能被执行找到更多URL。
前几天有人发现很多网站使用的Facebook评论插件里的评论被爬、被收录,插件本身是个AJAX。这是个好消息。我的一个实验电子商务网站产品评论功能就因为这个费了不少心思,用Facebook comments插件好处大大的,具体什么好处以后有时间再说,唯一的问题就是评论是AJAX实现的,不能被抓取,而产品评论被收录是目的之一(产生原创内容)。我当时想了半天也没有解决方法,只好先傻傻地既放上Facebook comments插件又打开购物车本身的评论功能。现在好了,Facebook comments里的评论能被收录,就不用两套评论功能了。
Robots文件目前唯一确保内容不被抓取的方法是robots文件禁止。但也有个坏处,会流失权重,虽然内容是不能抓取了,但页面成了只接受链接权重、不流出权重的无底洞。而且禁止抓取不一定不能被索引。
NofollowNofollow并不能保证不被收录。就算自己网站所有指向页面的链接都加了NF,也不能保证别人网站不给这个页面弄个链接,搜索引擎还是能发现这个页面。
Meta Noindex + Follow(11月3日补充)读者no1se提醒,为防止收录又能传递权重,可以在页面上使用meta noindex和 meta follow,这样页面不收录,但能流出权重。确实如此,也是个比较好的方法。也有一个问题,还是会浪费蜘蛛爬行时间。哪位读者有能防止收录、又没有权重流失、又不浪费爬行时间的方法,请留言,对SEO界功德无量。
怎样使页面不被收录是个值得思考的问题,没意识到严重性的童鞋可以想想自己网站上有多少复制内容、低质量内容、各种无搜索价值(但用户觉得方便、有用所以又不能拿掉)的分类、过滤URL。
对象是精挑细选出来的?也可能是差不多得了
除了人们对约会对象没那么挑剔以外,他们更倾向于推进恋爱关系,而不是结束它。
继续回答新浪微访谈SEO问题
昨天(3月31号)下午4-5点在新浪微博做关于SEO的微访谈。据微访谈页面最后统计,共有810个问题,我和另三位嘉宾回答了113个。
3月31号下午在新浪微博做微访谈回答SEO问题
有不少人通过各种方式问我SEO问题,我前些天提过,不会通过email、私信、QQ等回答只对一个人有帮助的SEO问题,性价比太低。想问SEO问题的朋友可以参与这个活动。
关于SEO问题
我几乎每天会收到10封以上邮件,问我关于SEO的问题。QQ、微博、博客留言中也经常有类似问题。 在这里声明一下,以后这类问题我一律不回复,最多回复让提问的人来看看这个帖子。
几个网上从来没有人提到的SEO问题
前几天一位叫Friagan的朋友给我写email,问了几个他认为是网上从来没有人提到过的SEO问题。
别做梦 外贸网站做Google SEO不是给钱就能成的
对于一些没有接触过自己建网站的站长或者公司老总来说,他们会天真的认为一个外贸网站只需要花钱找建站公司搭建出样子后花钱让他们帮忙做Google SEO就可以获得很好的排名,从而吸引流量到网站转化成订单。
关系中最致命的情绪霸凌,却隐藏得很好
我们需要的是从根源上重置情绪劳动的分配,双方以平等的方式承担起维系家庭氛围和谐的责任。
“贾玲减重100斤了,你还在胖吗?”减肥仅靠意志力就能成功?
当你找到自己内在的动力,发现自己的主动性时,减肥也许便不会是一件痛苦但又必须坚持的事情了。
SEO新手入门系列2021(六):站内SEO内容篇
这是《SEO新手入门系列2021》中的第六篇文章,前面几篇文章主要是介绍了SEO中的基础知识部份,关于什么是SEO,搜索引擎的工作原理,关键词挖掘等,从这篇开始就要实际分享一些内容,SEO可以分为站内...
开通SEO问答板块
找了个WordPress的问答功能插件装上,开通了SEO问答板块,读者有SEO方面的问题可以在这里提问。我会尽量回答。希望这个SEO问答成为小小的、但高质量的交流社区。