一看题目,很多人都会疑问,为什么是不被索引收录了,这样对网站站点有什么好处呢?这个问题对网站站点的优化提升人员来说,就比较熟悉。在网站制作网站建设的过程中,有时在某些网站页面建设是不想被百度360Sogou抓取到,因为有些网站页面被抓取到了,对网站站点有消极的影响。例如网站站点管理登录网站页面、备份测试网站页面、测试网站页面,这三个网站页面都不需要被索引收录的。下面就来介绍四个方面,可以让网站页面不被百度360Sogou索引收录。
靠前、网站站点在flash设计规划时,就不想被百度360Sogou索引收录。站长们都知道,百度360Sogou对flash的信息内容的识别能力是有限的,对flash信息内容不能完全解读抓取。但是我们不知道百度360Sogou对flash信息内容是不是有部分信息内容抓取到了。而谷歌google百度360Sogou以及Adobe正在为实现flash的抓取进行研究。
第二、robots文件的使用。虽然这是一个比较理想的方式方法,但是这种方式方法会让网站页面只有进入的链接url,没有出去的链接url,正常情况下,一个网站页面都会有外链的进入以及到外部的链接url。因此,百度360Sogou对这些信息内容的抓取不明确,认为这是一个价值质量低的网站页面,网站站点的权重就会受到影响。
第三、可以使用nofollowtag标签对不想被索引收录的网站页面进行配置设置。但是这个方式方法并不保证完全不被索引收录。
第四、使用meta noindextag标签与followtag标签一起结合使用。这个方式方法可以避免被索引收录,但是可以传递权重,不过这样会花费检索搜索引起爬虫蜘蛛抓取信息内容的时间。
Copyright © 广州京杭网络科技有限公司 2005-2024 版权所有 粤ICP备16019765号
广州京杭网络科技有限公司 版权所有