错误的robots文件设置对SEO的影响及优化策略解析

2025-01-01
来源:网络整理

错误的文件设置对SEO的影响

对于一个新网站来说,当搜索引擎爬虫来抓取你的网站时,他们就像叔叔一样。他们必须为您提供美味的食物和饮料。不能让别人自己端茶递水,累死别人。你说这他回去会不会对他的主人(搜索引擎)说些什么好话呢?

那么怎样才能让他们吃好喝好呢?其实很简单,就是让他们少做,我们多做。对于一个网站来说,那就是让目录结构尽可能的扁平化,但是你一定要掌握好。当蜘蛛来到你的网站时,一切都会逆转。想办法尽快拿走最好的文章和你最想排名最高的关键词。对于网站管理员来说,与蜘蛛通信的唯一方法是通过.txt 文件。不知道这个吗?那么你可以先阅读这篇文章《.txt文件简介》

搜索引擎无用网页

由于本网站是SEO小爷搭建的,所以默认使用虚拟.txt文件。内容比较简单,而且feed页面没有被屏蔽。该页面对搜索引擎没有影响,基本不收录。

所以排除这些文件,让搜索引擎蜘蛛只爬行那些对他们有用的文件,因为蜘蛛爬行一个网站是有时间限制的。如果你把宝贵的时间花在这些无用的内容上,你将无法优化网站。真是太浪费了。

错误的 .txt 规则

为了省事,我上网查了一段适用于.txt的规则。当时我没有多想,直接写到了文件中。可是没过两天,就出现了错误信息?

您是说我的移动设备存在兼容性问题吗?这是不可能的。我前段时间刚刚花了一天时间做了一个响应式布局?难道我老了就没有用处了吗?响应能力错误?带着这么多疑问,我看了错误信息:

通过.txt

原来是我上次的尴尬操作把wp-.里面的资源文件给屏蔽了。以下是我修改后的.txt文件的完整内容,可以作为参考:

User-agent: *Disallow: /wp-admin/Disallow: /wp-content/Disallow: /wp-includes/Disallow: /*/comment-page-*Disallow: /*?replytocom=*Disallow: /category/*/page/Disallow: /tag/*/page/Disallow: /*/trackbackDisallow: /feedDisallow: /*/feedDisallow: /comments/feedDisallow: /?s=*Disallow: /*/?s=*\Disallow: /attachment/Allow:/wp-content/uploads/Allow:/wp-content/themes/seozen2021/Allow:/wp-content/plugins/Sitemap:https://www.seozen.top/sitemap.xml

以上规则简单介绍一下:

1.: /wp-/,: /wp-/ 和: /wp-/

用于告诉搜索引擎不要抓取后台程序文件页面。

2.: /*/-page-* 和: /*?=*

seo优化中的陷阱你知道多少_seo优化中怎么发链接_陷阱计划

禁止搜索引擎抓取评论分页等相关链接。

3.: //*/page/ 和: /tag/*/page/

禁止搜索引擎抓取包含类别和标签的页面。

4.: /*/

禁止搜索引擎抓取和包含垃圾信息

5. : /feed、: /*/feed 和 : //feed

禁止搜索引擎抓取和收集提要链接。 Feed仅用于订阅本网站,与搜索引擎无关。

6.: /?s=* 和: /*/?s=*\

阻止搜索引擎抓取网站上的搜索结果

7.: //

防止搜索引擎抓取附件页面,例如无意义的图像附件页面。

8.: /wp-//

允许搜索引擎抓取资源文件。这非常重要,可以用来确定移动设备的兼容性。

因为这次操作,对SEO小爷的收录不但没有增加反而下降了一些。我重新配置了.txt文件,观察了几天情况才看了一下。

盘点网站SEO优化过程中常见的技术错误

俗话说,谁得流量,谁得天下。 SEO优化仍然是目前企业主获取客户的主要方式,因为它可以将精准的客户引流到自己的企业,也是网络销售最精准的获取客户的方式。然而,随着搜索引擎的不断调整和优化,SEO优化技术也在发生变化。真正做好SEO优化并不容易,因为很多优化公司都陷入了错误执行SEO优化的陷阱,最终看不到好的结果。流量和转化。本期汇源网络将为您讲解网站SEO优化时常犯的技术错误!

seo优化中怎么发链接_seo优化中的陷阱你知道多少_陷阱计划

1、拦截文件,阻止搜索引擎访问网站

有时网站上线后,站长会因为粗心而忘记设置协议。从而导致搜索引擎蜘蛛无法访问该网站,也就没有后续的抓取和抓取操作。但在某些情况下,如果网站页面的HTML代码中没有索引元标记,搜索引擎也可能会显示你的网站,因为这种情况很有可能是因为网站内容与大量用户的搜索高度相关条款。 。

2、网站迁移需要网站301重定向

网站移动时需要做301重定向。主要作用是保证链路的畅通。如果不进行重定向,所有访问者和所有链接都可能会丢失。因此,在迁移网站时,需要检查所有链接是否都设置了URL重定向。这可以通过访问服务器来实现。如需验证报告,您需要下载并使用验证URL的功能。如果您对这个操作不明白,可以咨询汇源网络优化讲师。我们提供免费的教学指导。

3、网站优化中尽量不要使用循环重定向

如果一个网站页面有多个重定向的页面,可能会出现循环重定向,也可能是服务器配置问题。这时,访问该网站的浏览器可能会返回:“ 310 (net: TS)”,这意味着该网站的重定向次数过多。

解决循环重定向问题的方法是删除网站或者检测.文件。只有清理这个文件才能保证网站的安全。同时应检查网站代码,清理不必要的重定向代码。

4、正确设置网站页面404页面

搜索引擎程序会检测网站的错误页面,即404页面。 404页面是为了保证用户体验,让用户在访问网站中的错误页面时不会迷失方向,同时降低网站的跳出率。必须设置404页面才能保证您能自动返回首页。如果您需要为您的网站设计404页面,可以联系汇源网络。我们将为您提供专业的建议和404源代码程序。

5.记住经常弹出在线客服弹窗

很多人在优化了一些网站流量后,急功近利,过于重视客户咨询。他们在整个网站页面上设置频繁的弹窗,从而大大提高了网站的跳出率。所以出现此类问题的网站建议检查客服代码。查看弹出窗口的触发器,记住一条规则: “少即是多”。

以上问题是汇源网络为您讲解的一些SEO优化中经常遇到的技术误区。当然,还有一些更深层次的。我们会更新内容,在后面的内容中给大家讲解。如果您觉得本期内容对您有用,欢迎分享给更多站长朋友;如果您对本期内容还有其他好的见解,也欢迎您与我们交流,为大家提供更好的SEO优化知识。我们下一期再见。

分享