今天去百度看看我博客的收录情况,发现一个奇怪的问题.
百度说我的网站存在 robots.txt 指令限制? 我立马检查了一下我的 robots.txt
发现我的 robos.txt 并没有问题 之前百度收录也是正常的 https://wujunze.com
** 我看看 Google 和 360 收录是否正常
This topic created in 3880 days ago, the information mentioned may be changed or developed.
 |
1
有没有知道的?
|
 |
LullabyMar 26, 2016
2
你之前有没有限制过 BaiduSpider ？
|
|
3
@Lullaby 重来没有限制过 BaiduSpider
|
 |
m939594960Mar 26, 2016
4
去站长工具看看 有个 robots 检测
还有百度出现这种问题挺正常的。 site:***.com 经常会出问题，有的时候还会混进别的额网站，有的时候关键词描述 完全不符 你可以随便查个关键词（能找到你的网站的） 看看底下的东西对不 |
|
5
@m939594960 去站长工具检测 robots.txt 了 是没有限制的
 我网站的百度收录全掉了 * 现在搜关键词搜不到我的网站了 |
|
m939594960Mar 26, 2016
6
观察了半天 发现真的没什么问题。。 mark 下等高人解密
|
 |
just1Mar 27, 2016
7
请问一下 sitemap 是用什么生成的呢。之前用百度提供的 wordpress 插件，刚刚看了一下，从 20151122 之后就再也没更新了 wtf ，怪不得几个月没新收录
|
 |
cxh116Mar 27, 2016 via Android
8
开了 https ，百度掉了正常。
|
|
9
|
|
10
|
|
LullabyMar 27, 2016
11
看下你 80/443 端口的 access 日志有没有机器人爬取记录
实在不行把 robots.txt 先去掉 不一定是技术原因，人为原因也是可能的你懂的，百度这货谁知道 |
 |
techyanMar 27, 2016 via iPhone
12
百度，你懂的。反正我自己的站开全站 https+HSTS ，百度索引完全正常，并且很勤。
|
|
13
|
 |
zangbobMar 27, 2016
14
如果不太懂设计 robots.txt ，就直接删了，不要放。
|
|
15
@zangbob robots.txt 的指令是没有问题的
|
Select Language