网址URL规范化（URL canonicalization）是近一年来在Google搜索结果中出现的一个很大的问题。它指的是搜索引擎挑选最好的URL网址作为真正网址的过程。举例来说，下面这几个URL一般来说指的是同一个文件或网页：
http://www.domainname.com
http://domainname.com
http://www.domainname.com/index.html
http://domainname.com/index.html
但是从技术上来讲，这几个URL网址都是不同的。虽然在绝大部分情况下，这些网址所返回的都是相同的文件，也就是你的主页。但是从技术上来说，主机完全可以对这几个网址返回不同的内容。
当搜索引擎要规范化网址时，搜索引擎需要从这些选择当中挑一个最好的代表。一般来说，你的主页应该是固定的，只有一个。但是有的时候，在很多网站上站长在链接回主页时，所使用的URL并不是唯一的。很可能在你的网站上，一会连到URL http://www.domainname.com，一会儿连到URL http://www.domainname.com/index.html 。
虽然这不会给访客造成什么麻烦，因为这些网址都是同一个文件，但是对Google来说却是造成了困惑，哪一个网址是你真正的主页呢？如果在你的网站上，不同的版本网址都大量出现，那么这两个URL可能都会被Google收录进数据库，这时就会造成复制内容网页。
所谓复制内容网页，指的是两个或多个网页的内容是相同或大部分相似的。很多时候，复制网页有可能是作弊手段。就算不是作弊手段的时候，搜索引擎通常也只会挑出其中一个返回搜索结果，而把其他的复制网页都排在最后面，以至于根本找不到。
当你的网站出现网址URL规范化问题的时候，就有可能造成被怀疑为复制网页，因而影响搜索引擎结果排名。
从Google的角度来说，他们正在发展所谓大爸爸数据中心基本架构，来解决包括URL规范化的问题。但谁知道能不能解决呢？
从站长的角度来考虑，你应该做两件事：
1）你的网站内部在链接到其他网页，尤其是主页时，只使用一种URL。不管是包含www或不包含www，你要由始至终只使用一个版本。这样搜索引擎也就明白哪一个是规范化的主页网址。
2）但是你没办法控制别的网站用哪一个网址连向你的主页。所以你应该在你的主机服务器上，把所有有可能成为主页网址的URL，做301重定向到你所选择的主页网址版本。也就是说，从下面这几个网址
http://domainname.com
http://www.domainname.com/index.html
http://domainname.com/index.html
都要做301重定向到这个网址
http://www.domainname.com
很重要的一点是，如果你的网站出现了URL规范化的问题，千万不能使用Google的网址删除反馈表，来要求删除其中的一个网址版本。比如说，你所要的是带有www的版本
http://www.domainname.com
你千万不能到Google的网站上填表，要求没有www的主页网址
http://domainname.com
被删除掉。因为那样做的话，你整个的域名有可能被删除6个月。
当然，除了包含www和不包含www的两个版本以外，还有其他类型的URL规范化问题。比如有的时候，搜索引擎会去掉或加上网址尾端最后的斜线。有的时候会尝试把大写字母换成小写字母，有的时候可能尝试去掉会话ID（session ID）等等，这些都有可能造成网址规范化问题。
作者: Zac@SEO每天一贴
版权所有。转载时必须以链接形式注明作者和原始出处及本声明。

现在的Google Sandbox不幸有两个级别，你只有获得了Google的信任，才会得到网页排名。实际上，这时考虑网页排名为时尚早，因为网页首先必须被编入索引才有排名这个问题。因为，如果当你的页面大多数被归类于补充材料时，你其实并没有真正被索引!
为什么页面会被归类于“补充材料”，究竟发生了什么事?显然，Google索引页面文件是非常挑剔的，据传她唯一感兴趣的站点是那些长期的、值得信赖的站点。
“那么补充材料到底是什么?”
我不会根据Google的官方答案来鹦鹉学舌，我总结了以下几条：
Google补充材料会把页面打入西伯利亚的牢房。
Google补充材料是和正常Google索引相对的。
Google补充材料会被赋予极低的信任值。
Google补充材料不会被用于任何重要的排名。
现在，假定你的页面已经进入了Google的补充材料，这里有五个方法，可以助你尽快逃离这个地狱。
给每个页面不同的标题尽管这极其简单，但依旧很多人没有这么做。我们绝对没有理由不这样做，这有助于SEO，可读性提高，获得高点击率等。
给每个页面不同的META DESCRIPTION 标记记得我们都以为META标记已经没用了，不，Google还在利用这些标记。让我们不要浪费时间了，只要给所有页面一个唯一的 META DESCRIPTION 就可以了，甚至只是复制一下标题内容到里面也可以。
做到每页都具有良好的独特的内容这个问题很常见，原因也有不少，最常见的是在不同的URL地址中有很多内容块是相同的，这通常是因为网站的CMS或者购物车造成的，一些内容较少的页面或者空白也会存在这样的问题，凭我的经验(可能权威性不够，只是我的猜测)，一个页面要有至少100个字才能成为较为独特的内容。
多增加一些权威度高的反向链接链接通常是很有效的，少数几个来自已被评级的老域名的链接会使得一个新站具有更高的权威度，从一个高PageRank的网站获得链接的效果更佳。
在站内页面中多建立内部链接这可以让Google觉得你的网站并不是一个空架子，想想看，当一个只有20多页、数十个坏链接，而且这些无效链接百分之百是指向同一个页面。通常情况下，网站页面会被正常索引，不过大多数内部页面已经进入补充材料了。
做到上面那些后，大致就可以恢复正常了。通常情况下最难的部分是建立外部的有效反向链接，以取得可信的权威度，这方面的只是可以参考我的其他相关内容。
翻译人：William Long
英文原文：How to： Escape Google‘s Supplemental Index
原载: 点石互动搜索引擎优化博客

 
内部因�
URL中出现关键词
网页Title中出现关键词
常规内容中出现关键词
在页面的第一段中出现关键词
在页面的最后一段中出现关键词
Heading 标签 比如h1,h2中出现关键词
站内的链接中出现关键词
导向相关内容的导出链接
导出链接中出现关键词
图片文件名中出现关键词
Alt标签中出现关键词
comment中出现关键词
合理的频率更新内容
内容对搜索引擎的展示位置
网站结构循环PR，而非散发PR
外部因�
大量的导入链接
从高PR值得网页获得导入链接
从相关内容网站获得导入链接
导入链接指向的网页有具体内容
锚文字中有关键词
锚文字周围有相关词
锚文字存在于文章或句子中
导入链接的时间长度，一般导入链接的存在时间有3-6个月
单向链接的价值高于交换链接
导入链接的页面的导出链接小于100个，流出链接越少越好
链接来自不同IP
合理的导入链接增长频率
你需要避免的事情
关键词堆积
所有的锚文字都相同
使用CSS或背景色隐藏内容，这是十恶不赦的大恶
使用JavaScript跳转
相同ip之下的网页直接进行大量交换链接
桥页和Cloaking，诱导搜索引擎的爬虫，这是十恶不赦的大恶
成人内容，违禁药品，赌博相关内容
内容重复
连向作弊的网站
站内的绝大部分网页有相同的网页title
加入到Link Farm或则Link交换类网站
尽量避免的问题
地址中存在动态变量
单一图片和Flash的网站
用Javascript制作的网站导航条或目录
用图片做网站导航而不加ALT标签
〈head〉〈/head〉之间有太多的代码
存在太多与网站主题无关的内容
导入链接中购买链接占多数

SEO工具集(最新整理)
(1)内容与结构工具
搜索引擎抓取内容模拟器——可以模拟蜘蛛抓取指定网页Text,Link,Keywords及Description信息
http://www.webconfs.com/search-engine-spider-simulator.php
相似页面检测工具——检验两个页面的相似度.如果相似度达80%以上,将可能受到惩罚
http://www.webconfs.com/similar-page-checker.php
Google Sitemaps 在线创建——在线创建 Google Sitemaps 网站地图文件
中文:http://www.xinqj.com/sitemap/sitemap.asp
英文:http://www.xml-sitemaps.com/
(2)综合查询工具
Webmaster Toolbox——可查询某个站点的Google Pagerank、Alexa世界排名、中国网站排名，以及在几大主要搜索引擎中的收录反向链接的情况。
http://www.flashplayer.cn/webmaster-toolbox/
网站收录查询——同时查询Google,百度,Yahoo等8个搜索引擎的收录状况
http://tool.cndw.com/Shoulu/Index.asp
关键词排名查询——可以同时在3个搜索引擎中查询指定网页指定关键词的排名情况.
http://www.seores.com/search/keywordrank.asp
Google各服务器关键词排名查询——查询在Google各个服务器中,指定网页指定关键词的排名情况,可以作为一个升降的参考
http://tool.cndw.com/Rank/Index.asp
 
(3)关键词工具
Google Adwords关键词工具——查询指定关键词的扩展匹配,搜索量,趋势和受欢迎度.
https://adwords.google.com/select/KeywordToolExternal
百度相关搜索——按热门程序排序,列出指定关键词相关的扩展匹配及热门程度
http://d.baidu.com/rs.php
关键词密度分析工具——分析指定关键词在指定页面中出现的次数,及相应的百分比密度
中文:http://tool.cndw.com/Seo/Key_Density.asp
英文:http://www.keyworddensity.com/
(4)关键词热门排行及指数
百度排行榜:http://top.baidu.com
百度指数:http://index.baidu.com/
Yahoo排行榜:http://misc.yahoo.com.cn/top_index.html
搜狗指数:http://www.sogou.com/top/?IPLOC=CN1102
搜搜龙虎榜:http://www.soso.com/lhb/s_i_sosolhb.shtml
(5)Google工具
Google Sitemaps——Google推出的一项免费服务,一个杰出的SEO工具
http://www.google.com/webmasters/sitemaps/docs/zh_CN/about.html
Google Analytics——Google推出的免费分析服务.在市场营销和内容优化上提供很多专业报表.对搜索引擎营销有很大帮助.
http://www.google.com/analytics/zh-CN/
Google Dance 查询工具——不仅可以查询Dance情况,还可以通过E-mail及时获得每月google dance通知
http://www.seochat.com/googledance/
查看在GOOGLE各服务器上的PR值——利用这个工具,可以判断PR是否更新,预测更新后的PR值
http://www.seochat.com/seo-tools/future-pagerank
Google PR历史更新时间表——看看Google 2000看至今更新PR的具体时间和周期时长
http://www.seocompany.ca/pagerank/page-rank-update-list.html
(6)链接工具
链接广泛度检测工具——反向链接查询工具.同时支持Google,百度,Yahoo等8个搜索引擎
http://tool.cndw.com/LinkIn/Index.asp
查询Google中链接的工具——可以抓取文本标题和链接.中文标题显示的是乱码
http://www.webconfs.com/google-backlink-checker.php
Yahoo新推出的链接检查工具——可以查询网站中所有被检索的页面以及反向链接情况
http://siteexplorer.search.yahoo.com/
同时查询Google,Yahoo,MSN中的链接数量
http://www.trafficzap.com/linkpopularity.php
(7)无效链接检查工具
检查指定页面内的链接——包括链接有效性检查,链接文字,链接类型
http://www.seores.com/search/checkurl.asp
W3C GLink Checker
http://validator.w3.org/checklink
(8)其他工具
PageRank 查询
http://www.521yy.com/tools/php/pr.php
网站历史查询工具——美国互联网档案馆(The Internet Archive)保存了自1996年开始,借助Alexa搜索引擎获取的网站资料
http://web.archive.org/collections/web/advanced.html
分类目录收录查询——检查网站是否登录多个重要分类目录
http://www.123promotion.co.uk/directory/index.php
 

此招是非常恐怖的一招，如果把握不好，会因为外链太多而被搜索引擎注意到，可能会过尤不及地受到负面影响。新网站绝不适合用此招，就算是很强的老网站在使用此招时也必须想方设法控制外链的增长速率。
吸星大法并不好练，需要很强的实力，适合于行政部门，拥有数量众多的员工的大公司，拥有很多“人力资源”的学校，拥有众多用户的网站或者软件，军队的小领导也可以用这招（不过要注意别引起更高领导的注意，使用时要讲究技巧。
有史以来吸星大法炼到了最高境界的是——你看看每个网站首页的底部就知道了，那几个字：沪ICP备XXXXX。呵呵，对了，就是君临中国互联网的信产部备案网站，它要求每个备案的网站都必须在首页放置备案号，并有链接指向它的网站。
导出链接何其宝贵，虽然从没有见百度等搜索引擎官方承认no follow标签，我还是给备案网站的导出链接加了no follow，以示不满，吸星大法就是邪教的功夫，讨厌！中国PR值最高的网站，就是吸星大法带来的SEO成就。
写到这里，可能有些朋友对这招吸星大法感到失望了，我又不是日月神教，又不是官府，哪来那么强的资源去练吸星大法啊？呵呵，这仅仅是举出一个例子，咱们布衣百姓自然也可以学小成境界的吸星大法，比如：建立一个广告联盟。
大家有没有发现很多的小广告联盟都要求你在首页放置他们的链接，以便“检查”，当然这个检查是名，造链接是实。这些小联盟，不需要很多的资金就可以建一个，它带来的丰厚链接回报，是你意料之外的。中国有太多的站长们，至今找不到适合的网络广告，他们总想改变一下，特别对于新手。
你也可以发起一次营销活动，什么征文啊，什么象棋比赛啊，什么SEO大赛啊，作为官方网站，参赛的选手自然把你看成了临时的“官府”，造链有门路。在国外的链接建设理论中，营销活动是经常被提到，而且被实践检验认为非常有效的链接诱饵。
如果你有一个公司，员工足够多，可以要求或鼓励他们写博客，免费空间也可以，独立博客也可以。这里提醒一下：百度空间的友情链接是放在 JavaScript里面的，真贼。如果你公司没有那么多的员工，可以来一场博客招聘，要求他们在博客中展示自己的能力和对公司所在行业的看法，诸如此类。让前来应聘的人未入职先做贡献。中国的人力资源极大丰富，这招用得好，恐怕也是一种很厉害的吸星大法。欣赏一下兔兔的漫画：
我知道，你想问有没有免费的、简单的、轻轻松松立等可取的吸星大法。答案是：有。但是吸星大法的核心在于用权威去强行夺取链接，如果你真的没有权威在手上，恐怕只能用孙子兵法里的“兵者，诡道也”和“不能而示之能”了。具体的就不能说了，有兴趣玩的可以自己想出一个诡道来。