百度站长平台lee:建立符合搜索抓取习惯的网站(2)
时间:2013-09-13 12:33 来源:未知 作者:名站库 人气:
【导读】:2、简洁美观的url规则 (1)唯一性网站中同一内容页只与唯一一个url相对应,过多形式的url将分散该页面的权重,并且目标url在系统中有被滤重的风险; (2)简洁性动态参数尽量少,保证url尽量短; (3)美观性使得...
2、简洁美观的url规则
(1)唯一性网站中同一内容页只与唯一一个url相对应,过多形式的url将分散该页面的权重,并且目标url在系统中有被滤重的风险;
(2)简洁性动态参数尽量少,保证url尽量短;
(3)美观性使得用户及机器能够通过url即可判断出页面内容的主旨;
我们推荐如下形式的url:url尽量短且易读使得用户能够快速理解,例如使用拼音作为目录名称;同一内容在系统中只产生唯一的url与之对应,去掉无意义的参数;如果无法保证url的唯一性,尽量使不同形式的url301到目标url;防止用户输错的备用域名301至主域名。
3、其他注意事项
(1)不要忽略倒霉的robots文件,默认情况下部分系统robots是封禁搜索引擎抓取的,当网站建立后及时查看并书写合适的robots文件,网站日常维护过程中也要注意定期检查;
(2)建立网站sitemap文件、死链文件,并及时通过百度站长平台进行提交;
(3)部分电商网站存在地域跳转问题,有货无货建议统一做成一个页面,在页面中标识有无货即可,不要此地区无货即返回一个无效页面,由于spider出口的有限性将造成正常页面无法收录。
(4)合理利用站长平台提供的robots、sitemap、索引量、抓取压力、死链提交、网站改版等工具。