|
|
互联网前期，网站数量有限，百度权重千牛帮所以人工整理是可行的，洪正维比方就有DMOZ这样的人工编辑的网站数据库，分门别类的整理好各种网址。后来全球网站数量爆炸性添加，人工整理就不实际了，所以有了网络爬虫(也叫蜘蛛)替代人工去拜访抓取网站，这便是最原始的搜索引擎。尽管互联网是一个网状结构，可是抓取整个互联网上的一切网站还是有难度的，首先要处理的问题便是如何发现这些网站。
为了处理这个问题，搜索引擎都会有一个根底的网站数据库，从这里的网站开始爬取，期望能抓取整个互联网上的信息。并且依托链接之间的引证关系和运用的链接文本来核算网页的权重，从而能对搜索结果排序。比方Google的PageRank算法。
Yahoo算是十分早的搜索引擎，它就运用DMOZ的网站作为爬虫的抓取起点，并且我置疑Google也运用DMOZ数据，洪正维由于10多年前做网站时，咱们都期望自己的网站能被DMOZ录入，甚至贿赂DMOZ的编辑人员。
还有那时分咱们都拼命交换友情链接，百度权重千牛帮PR值高的网站便是大爷。这背面对应着网站的录入速度和排名高低。一个新网站，假如有PR值高的网站给你加友情链接，很快网站就能够被抓取录入。前期互联网内容贫乏，随意做个网站，找有权重的网站交换友情链接，这些搜索引擎爬虫都如饥似渴的抓取录入。可现在互联网上的内容太多了(Google的总索引页面数477亿左右))，搜索引擎也变得越来越挑剔，所以新站起流量越来越难了。
那怎么处理新网站的百度录入问题呢？
借尸还魂法：
用新注册的域名做网站，从被百度录入到有排名需求很长的时刻。就像你遇到一个陌生人，你彻底不知道他的内幕，考核调查的时刻就会很长。洪正维所以期望网站快速被录入，建议花钱买老域名，并且最好选域名注册历史久、没有不良记录、各大搜索引擎还有残留索引记录的为佳。
什么叫“没有不良记录”？域名没有做过黄、赌、毒、医疗等违法或灰色职业。多点击一些网页快照，看看年头的月份，再看看近期的快照。还有一点便是，检查快照时分，右键检查下页面源码，看底部的友情链接部分有没有违法网站，百度权重千牛帮防止挑选被黑过的网站。并且假如一个域名长达一年多没有做过网站，可能也要抛弃。
关于购买老域名，能够上聚名网或其他供给老域名抢注或交易的网站，平均价格在100-200之间。根底的域名数据，比方百度权重，各个搜索引擎的录入情况，能够运用爱站SEO帮手或自己写程序抓取。
投怀送抱法：
百度不录入，那咱们要自动投怀送抱。百度站长渠道供给了四种方法来提交抓取恳求。
1、自动推送：最为快速的提交方法。
适用场景：把网站当天新产生的链接经过这种方法推给百度，百度权重千牛帮确保新链接能够及时被百度录入。在站长渠道后台点击“网页抓取”->“链接提交”能够看到详细的运用说明，百度供给有curl、php和ruby等样例代码。
2、自动推送：最为便利的提交方法。
运用方法：将自动推送的JS代码加到网站每个页面里，当有用户拜访这个页面时，页面链接就会自动推送给百度。能够配合自动推送运用。
3、Sitemap：传统提交方法。
许多网站CMS都供给生成Sitemap的功用，假如没有的话，需求借助东西或自己写代码生成。经过Sitemap告诉百度蜘蛛哪些网页期望被抓取洪正维。百度Sitemap支撑3种格局：txt文本格局、xml格局、Sitemap索引格局。假如是小网站，页面数量小于5万，能够运用txt或xml格局的sitemap文件放到网站根目录下就能够。假如是网页数量超越5万，能够网址拆分红5万为一组的xml文件，然后放到Sitemap索引文件中，经过站长渠道提交给百度。详细格局参考百度官方说明：Sitemap提交东西站长资讯百度站长渠道Sitemap提交方法录入速度慢于自动推送。
4、手动提交：最偷闲的后台提交方法。
经过百度站长后台手动提交，一次只能提交20个网址。但这里有原创提交入口，原创内容能够经过这里提交。有几个问题需求留意：自动提交Sitemap有利于百度对你网站内容的识别抓取，但不一定会录入一切网址，页面质量高才会录入。重复提交没有用，反而会浪费自动推送配额。有专门的移动版Sitemap格局，需求按百度要求格局制造提交。
老司机带带我：
搜索引擎尽管越来越高级，可是爬虫(蜘蛛)的基本原理并没有大变化。想要页面被录入，就需求蜘蛛拜访抓取页面，洪正维假如没有蜘蛛光临，网站被录入就无从谈起。所以自动推行，交换链接依然是加速录入的有用手法。
假如你有一个百度抓取频率很高的网站，在首要页面上添加链接文本指向新站，引导蜘蛛抓取你的新站。有“老司机”领路，便是不一样。还有些人会用一些黑帽手法，比方蜘蛛池，利用抓取的缝隙把百度蜘蛛困在资源站中，最终导出外链到新站以加速录入。
总结建网站只是万里长征第一步。如何推行，如何获取流量，如何给用户带来价值是更值得深入讨论的问题。今后咱们渐渐讲。
|
|
发表于 2019-4-18 21:51
