之前写了文章《尝试解决必应站长错误信息“许多页面具有相同标题”(收录了很多replyTo的URL)》,今天小陶又重新登陆了必应的站长后台,看了看直接少了将近一半,这充分说明了设置robots.txt规则解决“具有相同标题”问题的有效性。
但是还是觉得必应的蜘蛛有些bug,我觉得这种问题应该简单筛选一下就能解决,这不是自己找事吗。