问题:百度资源抓取诊断,DNS无法解析IP怎么办?
解答1:
1.检查Robots.txt是否有任何禁止抓取的语句
首先要检查robots.txt中是否没有爬行句子,教你一个简单的方法。首先要删除根目录下的robots.txt,然后进行爬行诊断。如果爬行成功,就证明是robots.txt的问题,我们需要纠正这个文件。如果爬行仍然失败,请继续阅读。
2.更改域名解析(一般有效时间为24小时)
一般来说,抓取失败是DNS无法解析IP的问题。我们需要切换由我们自己的域名解析的域名系统。建议你切换到阿里巴巴云解析的DNS。有效时间比较快。切换后最好等24小时。在全国范围内生效后,这个问题在正常情况下可以在爬行诊断中解决。
3.网站是否打不开,服务器是否不稳定,防火墙是否被蜘蛛屏蔽
第三点是我们网站本身的问题。有时候,会有卡壳,导致蜘蛛爬行不成功。你可以手动测量网站的速度,然后在稳定性好,确认网站可以打开的情况下测试蜘蛛爬行。一般来说,在这种情况下,虚拟主机存在许多问题。
另外,有些服务器配备了硬防护,会自动阻止一些IP的抓取,或者你安装的防护软件会自动屏蔽抓取的IP,因为防护系统会认为这类IP在攻击你的网站,你可以给技术方发工单不关闭你的防火墙,你也可以关闭自己的防御软件,测试的时候就OK了。
4.百度不正常。查看日志,看看是否有蜘蛛来抓它
如果以上方法都尝试过了,但是你的抓取还是失败了,不排除百度自身的问题。你可以通过日志每天查看是否有蜘蛛。如果有,而且很规律很正常,可以忽略百度后台爬行的蜘蛛。
我们要明白,其实百度后台的蜘蛛爬行并不代表实际的蜘蛛爬行。你可以自己分析网站蜘蛛日志。当你发现没有蜘蛛的时候,恰好在百度站长后台爬行的蜘蛛也失败了。此时,它是你的网站或服务器。如果您已经尝试了上面提到的所有问题,如果不起作用,您可以考虑请空间供应商帮助您更改IP或尝试另一台服务器。这个问题通常可以解决。
解答2:
1.百度站长认证成功,提交错误;
2.新站和换空间服务器的都会遇到这种情况。如果一切正常,他们会在后期取得成功。如果他们担心,可以反馈,一般问题不大。
上面是“百度资源抓取诊断,DNS无法解析IP怎么办?”的全面内容,想了解更多关于 seo教程 内容,请继续关注web建站教程。
当前网址:https://ipkd.cn/webs_1600.html
workflows工作流
- 丛林里坐着一尊佛像
- 一个闪闪发光的金属球ComfyUI工作流
- 汗血宝马ComfyUI工作流
- 停在音乐节露营地的一辆复古大众巴士由羊毛制成
- 一桌精致的美食,桌上几杯白葡萄酒
- 一个可爱的人形小机器人和一只蜗牛在森林
- 潜水员,珊瑚,鲸鱼,潜水艇comfyui工作流
- 一个浑身皮毛看起来像丘巴卡的3d动漫人物
猜你喜欢
声明:本站提供的所有资源部分来自互联网,如果有侵犯您的版权或其他权益,请发送到邮箱:admin@ipkd.cn,我们会在看到邮件的第一时间内为您处理!