查找引擎优化高手robots.txt的写法

　　近几日有不少同学反响，他们看了许多大站，robots的写法也是各有不同，有的不知道为什么要这么写，这样写robots针对查找引擎优化的含义在哪里?今日查找引擎优化小编分析2个站点，为大家具体解说，下面是干货时刻：

　　查找引擎优化视频教程：robots.txt写法

　　首要，咱们先看这个站点，他的robots写法是：

　　红框括起来的，一看就知道这个站点是dedecms建立的。下面还有2个就是站长自己创建。重点说一下：

　　Disallow: /*?* 解说：url中只需包含了问号(“?”)，那么将屏蔽蜘蛛的抓取

　　Disallow: /*list* 解说：url中只需包含了list字符(“list”)，那么将屏蔽蜘蛛的抓取

　　具体解读：

　　靠前个，为什么屏蔽带“?”的url：因为带“?”的url都是动态地址，对查找引擎并不友爱，都晓得静态地址是对查找引擎优化排名较好的。所以屏蔽带“?”的url是有必要的。

　　第二个，为什么屏蔽url中只需包含了list字符：因为带list的url，一般都是列表页，列表页都会有许多分页，而有分页的话，这些页面有一个共同点：title根本都是相同的，只是末尾会有不同的“第几页”，而这样会被查找认为都是重复title，所以有必要屏蔽。推荐阅读：SEO优化百度分词的4个原理是什么?

　　再来看一个大站，2345电影站，他的robots：

　　大站的一个共同点：都屏蔽了带“?”url的抓取。并且屏蔽了：Disallow: /search_*

　　查找结果页面的抓取。其他的不做多解说，屏蔽的目的只要一个：这些页面不想被查找录入，因为这些页面不在参与排名的页面当中。

　　再扩展点讲讲：当你要做某个网站时，网站建立之初，网站关键词发掘，布局，参与排名的页面(url)都有哪些，站内优化，站外优化的方式是什么。这些问题，在网站建设前就要部署方案好。所以说查找引擎优化也是一个体系的工程。(成功之前，是要有准备、有铺垫。)

　　可是查找引擎优化学习难吗，真的一点也不难，引荐观看学习根底的查找引擎优化视频教程：怎么学习查找引擎优化 免费：2周通晓SEO自学教程!相关阅读：seo专家分享seo关键词排名优化(核心解析)

未经允许不得转载：深深算网络 » 查找引擎优化高手robots.txt的写法