网站可以访问打开，但是百度蜘蛛抓取网站页面失败的解决方法

博主： blanklin
发布时间：2021 年 09 月 23 日
1197 次浏览
1 条评论
253字数
分类：其他分享

Loading...

span

<p>今天在百度提交网站收录的时候，使用了抓取诊断功能，想测试以下抓取结果，结果发现抓取失败。</p>

<div class="wp-block-image"><figure class="aligncenter size-large is-resized"><img src="https://www.linyafeng.com/usr/uploads/2021/09/23110904-1024x668.png" alt="" class="wp-image-1694" width="684" height="446"style=""></figure></div>

<div class="wp-block-image"><figure class="aligncenter size-large is-resized"><img src="https://www.linyafeng.com/usr/uploads/2021/09/image-1024x532.png" alt="" class="wp-image-1695" width="647" height="336"style=""></figure></div>

<p>抓取异常提示原因是dns无法解析。但是网站是可以正常打开的，所以首先就是想到了肯定是使用了腾讯云CDN的原因导致的。</p>

<p>那么解决方法如下，也就是在域名解析的地方，单独给搜索引擎添加一条记录。如下图：</p>

<div class="wp-block-image"><figure class="aligncenter size-large is-resized"><img src="https://www.linyafeng.com/usr/uploads/2021/09/image-1-1024x619.png" alt="" class="wp-image-1696" width="677" height="409"style=""></figure></div>

<p>好了，添加好搜索引擎这条记录后，过一会儿再去百度抓取诊断那边试试。应该就可以抓取成功了。</p>

最后修改：2022 年 02 月 22 日

© 允许规范转载

如果觉得我的文章对你有用，请随意赞赏

1 条评论

林生
2021 年 09 月 24 日

这个方法不错噢。学习了。

回复

发表评论取消回复
使用cookie技术保留您的个人信息以便您下次快速评论，继续评论表示您已同意该条款

评论 *

私密评论

名称 *

🎲

邮箱 *

地址

kalye
你好，麻烦博主分享一下，谢谢790946356@qq.com
亦封
爱吃肉的猫更换网站icon图标最新icon图标链接为：http...
亦封
网站地址：https://meuicat.com/网站名称：爱...
george
你肯定是64误装arm64，或者arm64误装64版本的了，第...
wys
懒，可以解决许多事情，以不作为的方式进行。|´・ω・)ノ

网站可以访问打开，但是百度蜘蛛抓取网站页面失败的解决方法

blanklin • 2021 年 09 月 23 日

Loading...

span

<p>今天在百度提交网站收录的时候，使用了抓取诊断功能，想测试以下抓取结果，结果发现抓取失败。</p>

<div class="wp-block-image"><figure class="aligncenter size-large is-resized"><img src="https://www.linyafeng.com/usr/uploads/2021/09/23110904-1024x668.png" alt="" class="wp-image-1694" width="684" height="446"style=""></figure></div>

<div class="wp-block-image"><figure class="aligncenter size-large is-resized"><img src="https://www.linyafeng.com/usr/uploads/2021/09/image-1024x532.png" alt="" class="wp-image-1695" width="647" height="336"style=""></figure></div>

<p>抓取异常提示原因是dns无法解析。但是网站是可以正常打开的，所以首先就是想到了肯定是使用了腾讯云CDN的原因导致的。</p>

<p>那么解决方法如下，也就是在域名解析的地方，单独给搜索引擎添加一条记录。如下图：</p>

<div class="wp-block-image"><figure class="aligncenter size-large is-resized"><img src="https://www.linyafeng.com/usr/uploads/2021/09/image-1-1024x619.png" alt="" class="wp-image-1696" width="677" height="409"style=""></figure></div>

<p>好了，添加好搜索引擎这条记录后，过一会儿再去百度抓取诊断那边试试。应该就可以抓取成功了。</p>