疯狂的谷歌Googlebot爬虫
前段时间我给SEO禅站点加了一个搜索引擎抓取记录的功能,来看一看各大搜索引擎爬虫抓取情况,基本都是谷歌的蜘蛛。
百度大部分时间抓取都是
sitemap
文件,偶尔抓下其它界面,这对比真的是天差地别啊,虽然我知道SEO禅还在百度的观察期,这种情况最好不要进行什么骚操作,只要发一些高质量的外链和进行一些
网站内部优化
就可以,保持自己的节奏就行。
前几天我对SEO禅做了些 网站内链优化 和 网站外链建设 的工作,从谷歌蜘蛛爬取的频次来说是非常有效果的,但是百度蜘蛛不是特别理想,应该还是在沙盒的观察期中,不知道怎么做网站外链的朋友,可以看看《 》这篇文章。
做完外链和内链优化没几天,蜘蛛来的频率和渠道明显多了许多,可以看到很多蜘蛛的IP地址是不一样的,抓取的页面也是不同的,这说明搜索引擎蜘蛛顺着网站外链来到SEO禅站点,我也去谷歌搜索了下,发现有一些发在外链平台上的文章被其它网站集采转载了。
再看看 Google Search Console 的情况,图表中可以看到这条几乎是垂直上升的收录效果。
再用
site
指令看看具体收录了多少界面。
这是我做完网站内链和外链几天后的情况,但是实际情况并没有这么多,写文章的这两天又降回正常值,因为我总的文章数也才20多篇,加上一些标签页,目录页,不可能达到这么高的收录量,有些页面因为我改动过名字所以重复收录了一些。
很有意思的一个地方,电脑端的网页没有SEO禅的排名,但是移动端SEO禅的这篇文章却排到了第2位,因为我发到不同平台的文章会做一些不同的标记,我可以知道大概这篇文章是从哪个平台发布的,也方便追踪在哪个平台发布外链效果比较好。
现在下去主要就是把文章的数量提升,其它没有什么特别需要做的地方了,也许网站的速度还可以再优化下,也考虑看情况加个CDN,过几天就要准备去三亚长住学习冲浪潜水了,调整下生活状态。
相关文章
常见搜索引擎蜘蛛用户代理(User Agent)列表
说明:最近在修订《SEO实战密码》第5版,主要会增加人工智能在SEO领域应用的内容。为了缩减篇幅(第4版已经达到了可怕的555页,不大用户友好啊),我会把一些资料性的内容删减掉,不太变化的(如搜索引...
JS脚本与SEO优化
读者lin在问答板块问了一个纯技术问题,关于网站JavaScript的使用和SEO注意事项。JS的SEO是近年越来越重要的问题,以前还没写过这方面的话题。无论是异步调用内容,还是增加页面互动,现在的...
买来的域名能否保持原来的外链和权重?
Google几年前就成为域名注册商,但一直没有向用户提供域名注册服务。所以大部分SEO都认为Google之所以成为域名注册商,是为了更大规模、更方便地获得域名注册信息,帮助提高搜索质量。这一点Goo...
Twitter技术问题导致抓取和URL规范化问题
6月27号Google工具条PR更新了一次,然后很多人注意到Twitter首页PR降为零。(Google首页也降到9,不过这不是重点。)7月19号Google居然又更新一次工具条PR。Google更...
追逐算法更新何时了?
终于胜利回到新加坡。这次颇为不顺的旅程确实不顺到底,最后过了安检,直冲登机口,险些没赶上飞机。还好,最终安全回到新加坡。 回到家做一些例行的SEO检查,有点感想,简短写一下。 做SEO的肯定定期监测...
Google内幕
正在加州举行的SMX West大会今天进入第二天。昨天的内容没太多值得惊喜的(虽然主题访谈是微软的鲍尔默),今天一早的主题访谈对象是现Google研发部门董事,也是前搜索质量部门董事,Peter....