1.CloudFlare与百度的矛盾 目前已知，有部分百度的爬虫会被cf挡住，所以需要去cf后台添加url规则，让百度爬虫正常通过cf防火墙，步骤如下图 点击左边红色箭头的WAF按钮 点击右边红色箭头的 Create Rule 按钮 进入到另一个界面后，填写具体的百度rules规则，如下图 解释一下，百度爬虫会使用不同的UserAgent头去爬取数…

最近发现百度一直不收录我的网站，所以就花点时间去看下什么情况，暂时发现以下问题 1.Cloud与百度的矛盾 这个问题貌似再详细说，大概就是cf的waf和百度craw的阻拦问题，改一下waf可以解决 2.百度的robots文件检测 跳转：百度检测robots地址 进入上面的url后，点击 检测并更新 按钮，百度会马上先发两个请求，但这两个请求不是请求…

近日在忙收录的事，说一下bing收录存在的问题解决方案，测试地址：bing webmasters 1.缺少图像的 Alt 属性 如上图，检测后得到提示是img 缺少alt，但这个不能完全解决，因为发现他会检测全局的所有img标签。那就是包括头像、背景图等等的img，而不是正文的img，如果你的正文也缺少alt，那可以用以下代码解决 // Wordp…