怎么看百度蜘蛛抓取日志(百度蜘蛛抓取状态200)

   360SEO    

随着互联网的快速发展,手机已经成为我们日常生活中不可或缺的一部分。移动网站的优化和建设已经成为许多企业网站不得不面对的问题,甚至许多企业将 网站建设 的重点直接放在移动网站的建设上。这也导致许多网站优化不得不挖掘和研究移动手机网站的优化技巧~那么移动网站如何适应和获得有效的网站优化呢?让我们悄悄地看看不为人知的获得排名的秘密!

第一,架构和代码篇。

(1)确认开发结构、页面生成方式、单页应用程序和异步加载。

(2)使用工具确认spider可以抓取网站内容。

(3)确认页面URL部署方案、响应式(PC和H5共享URL)或分站,据报道,百度推荐使用分站,但是对于Google来说,是一个自适应页面设计,有相关文档。

URL的设计是否符合层次分明的原则,参数是否整齐,长度是否正常,结构是否清晰,命名是否符合HTML5标准。

title,description,keyword的使用是否正确,h标签是否正常使用,附着的关键字是否有计划和正确部署,所谓target,有主有次,基于数据。

(6)图有title和alt标签,比这更重要的是图片是否被移动优化,大小,加载速度,错误监控,以及不必要的图片显示。

写出搜索引擎喜欢的标题,以及是否有跟踪关键字部署效果的监控机制,以数据为指导作为调整依据,需要有自己的抓取、入库、报表等一整套关键字竞争情报工具。

2.如何优化移动网站?

(1)服务器、域名解析、CDN是否都使用可靠的供应商,并建立了快速反应监控机制,是否有完善的日志系统,以确定问题是否有依据可循,抓取量、返回码、抓取时间分布、URL分布、入口效率分析、spider抓取性能指标。

(2)是否有方便蜘蛛抓取的途径,如HTML版的SITEMAP,各XML版的sitemap是否制作,提交平台是否正确,定期关注平台报错。如今百度,搜狗,神马,好搜都有相应的XML提交入口和规范。

(3)内部链接是否在位置部署上结构清晰,抓取深度设计足够平坦,如果内容复杂,是否有其他通道保持复杂平衡。

(4)是否运行了DNS反解析,保证了spider的顺利抓取,不能支持反解析的搜索引擎是否在防火墙和安全部门开通了UA白名单。

(5)检查机器人和nofollow标签的使用情况,不要误屏蔽,并根据数据和经验设置。

(6)确保PC页面被移动设备访问时的跳转计划,绝对保证相应页面的跳转。这里应该有自动测试工具定期运行case。

(7)确保设备清单的长期维护和更新,包括移动spider和最新的设备标志。按照蜘蛛和人看同样的内容,分开移动和PC蜘蛛,按照移动蜘蛛和移动设备看同样的内容原则。

(8)瀑布流,分页如何处理,入口不能丢失,另外,如果是网站优化页面,一些功能是否真的需要实现。

是否有重复页面,要干掉重复页面,干不掉的其它方案都是补救,再谈谈Canonical标签。

(10)关注搜索引擎算法更新,避免相关处罚规则,如冰桶算法,用于移动页面。

(11)修改网站需求和功能对搜索引擎有害的功能。



3.手机网站代码埋点。

(1)PC端和移动端是否增加了地理位置信息。

(2)是否在PC端部署了各页面匹配代码。

(3)微格式是否在移动终端上使用(Google是提高页面质量的好方法),百度也会有针对性的使用这些数据,表现为搜索结果显示评论数、星、电话、位置。

(4)流量统计代码部署正确,指标齐全,产出漏斗构建正确。

(5)性能统计代码部署正确,指标齐全,对设备进行性能测试和监控。

(6)各站长工具代码部署是否正确,如下按需添加,同时完成网站地图及适配文件的提交。

(7)是否有自动测试方案,确保全页上线后功能和代码标签正确。

(8)是否建立和维护词库,词库是否由移动用户的真实搜索词组成。

(9)是否监视词库中各搜索引擎的SERP,网站的优化,索引的是移动页面的PC页面的转换页面(为了进一步改善这些页面的URL)

(10)有PC排名和移动排名的比较吗?有没有搜索结果防黑监控?

(11)同一系统是否覆盖竞争者。

4.手机网站适应。

(1)响应设计,确保百度META标签的适应方式完全正确,谷歌注意alternate和canonical标签的使用。

(2)分站设计,跳跃是否达到相应页面的跳跃,PC重复页面是否也达到相应页面跳跃的收口,是否遵循移动蜘蛛与移动用户看到的内容一致的原则。

(3)是否有相应页面的PC页面,是否按照优化手机用户体验但不扰乱蜘蛛的原则进行跳跃,如JS跳跃。

(4)如何监控适配效果。

(5)如果你的WAP站有流量,考虑转到HTML5站。

(6)是否有对跳转页面、返回码(301,302)、移动页面可用性的日常监控系统。

手机网站对于一个企业来说很重要,性不言而喻,作为一个网站优化专员,我们所要做的就是尽最大努力让网站在手机端有一个好的排名。今天的手机支付模式和手机营销方式比PC端更方便快捷。如果网站能有一个好的排名,相信这一定会给企业带来更多的流量转化。



 标签:

评论留言

我要留言

欢迎参与讨论,请在这里发表您的看法、交流您的观点。