查看: 9487|回复: 24
站长工具问题反馈（死链接提交和抓取异常问题）
问题描述：由于网站进行较大的改版，所以申请了闭站保护，网站于7月14日改版完成，并申请恢复抓取，然后7月15日上传网站死链接sitemap，之后就开试了每七天一次的审核，每次都是显示如下如所示，（最重要的是需要把网站的排名恢复啊，你这一直不通过，我这网站就一直没有任何排名！！）：
后来发现在网站抓取异常工具中有大量404页面链接出现。查看提供的前2000条发现，只有前5页是改版前产生以及12年改版时被删除的页面还保存在百度的索引库中，由于时间太多久远，已经无法给前面这两种类型制作死链接sitemap了，但是从第5页往后的这些404页面链接全是我在7月15日提交的死链接sitemap中的链接，前链接中，我于7月15日提交的死链接sitemap包含了大概有1500条左右，但是不知道为什么百度一直不删除我提交的死链接sitemap中的链接。就是一直提示我死链接很多，如图
提交的死链接sitemap设置成了每天更新，如图：
而且最近还发现一个问题，网址异常工具对我的网站不更新了，一直显示8月10号的网址异常数据，这9天一直都是“404 （错误页面数量：6949）”，没有任何变化……
现在已经尝试各种办法，都行不通，希望@ 或者其他大神能帮助解答一下，或者给个解决办法，十分感谢
本帖子中包含更多资源
才可以下载或查看，没有帐号？
冒险岛私服 bbs.mgxsfm.com
本帖最后由 fansart 于
11:35 编辑
我来解答一下你的问题, 主要是你改版后的死链比较多, 影响用户和搜索引擎体验, 所以百度会保护性的闭站.
解决的方法: 找出并提交删除这些死链, 因为百度只是抽样检测, 并不会列出所有的死链, 所以这些死链还是要站长自己找出来.
我大概看了一下你这些死链都是同一个格式的, 只是id不同而已, 要找出这些死链也比较容易, 给你说一下解决方法:
php可以用 get_header('http://xxxxx.com/28-***.html'); 逐条扫描, 只要返回404的就记录下来, 找出来后提交死链后问题解决.
备注: 如果这些死链是因为改版原因造成的, 原文章还在只是改变了url, 我的建议是301到新的url, 这样既避免了损失又不会影响正常开启闭站.
fansart 发表于
我来解答一下你的问题, 主要是你改版后的死链比较多, 影响用户和搜索引擎体验, 所以百度会保护性的闭站.
一看就是没有仔细看我的问题……
我这大部分的死链接都是已经提交过了，但是百度还是一直显示在抓取异常中的
首先说实话，你描述问题的时候，我都没弄清你的重点疑问，建议下次分步骤列出问题，如问题标题、问题中心概括、问题截图文字等描述，虽然相同站长工具，但毕竟每个人理解问题及遇到的问题角度不一样。
本帖最后由 fansart 于
12:01 编辑
twwtn0 发表于
一看就是没有仔细看我的问题……
我这大部分的死链接都是已经提交过了，但是百度还是一直显示在抓取异常 ...
大量的死链, 百度能不提示异常吗?
抓取异常返回404不是百度的问题,&&返回码是你服务器对ua的一个反应, 应该是你程序或服务器问题, 另外就是百度给你列出了的404是否是存在的, 如果是存在的那么你的疑问是什么?
百度有抓取诊断工具, 你可以用诊断工具查看是否正常.
如果你把所有的404都提交删除了, 那么百度需要处理完你提交的死链才会给你开启的.
不开启我认为是对站点的保护,&&如果站点中大量404百度放出来后影响用户体验和百度蜘蛛的正常抓取反而对网站不利.
本帖最后由 lvxianlei2010 于
12:57 编辑
twwtn0 发表于
我的问题是： 现在百度抓取异常中提示的404链接，大部分都是我在7月15日提交的死链接sitemap中，但是百度 ...
网址异常工具如果经过2、3两步还有，那么就是这个工具的问题，到时再反馈给百度。不要纠结于为什么抓取异常一直显示。找到你网站上存在死链接的页面，把这些页面上的死链或错误链（重定向到其他页面）都清理掉，避免蜘蛛再爬行。外部平台上你们推广的页面上的链接到你们网站的死链及错误链能清理的也清理下。你们这么多文章页需要删，都是违法信息？或者都是采集信息？直接闭站保护，这个过程感觉处理逻辑上有点问题，要对症下药，多想几套解决方案。
本帖最后由 lvxianlei2010 于
11:56 编辑
twwtn0 发表于
一看就是没有仔细看我的问题……
我这大部分的死链接都是已经提交过了，但是百度还是一直显示在抓取异常 ...
首先说实话，你描述问题的时候，我都没弄清你的重点疑问，建议下次分步骤列出问题，如问题标题、问题中心概括、问题截图文字等描述，虽然相同站长工具，但毕竟每个人理解问题及遇到的问题角度不一样。
1、关于大部分死链接已经提交，建议你按fansart 提供的方法尽量抓全，不要遗漏；
2、关于你说网址异常工具一直提醒，从我个人及其他人使用的经验来说，有些站长工具有时候确实会出现一些问题，不过建议你分批次提交按日期命名的死链接文档，然后查看死链接处理工具提示的“死链删除状态”，删除ok，把之前的死链接文档删掉，再重新提交新日期的死链接文档。网址异常工具的情况，由于属于数据再调用，所以和死链接工具有可能数据延迟等情况发生，自己及时关注死链接工具状态，死链接提交到最后都清理完毕了，过一周左右再看网址异常工具。
3、有一点还是很重要的，找到你网站上存在死链接的页面，把这些死链或错误链（重定向到其他页面）都清理掉，避免蜘蛛再爬行，网址异常工具如果经过2、3两步还有，那么就是这个工具的问题，到时再反馈给百度。
fansart 发表于
你大量的死链, 百度能不提示异常吗?
抓取异常返回404不是百度的问题,&&返回码是你服务器对ua的一个反应,&&...
我的问题是： 现在百度抓取异常中提示的404链接，大部分都是我在7月15日提交的死链接sitemap中，但是百度一直不删除，一直显示在抓取异常中
网址异常工具如果经过2、3两步还有，那么就是这个工具的问题，到时再反馈给百度。不要纠结于为什么抓取异常一直显示。&
本帖最后由 fansart 于
12:07 编辑
twwtn0 发表于
我的问题是： 现在百度抓取异常中提示的404链接，大部分都是我在7月15日提交的死链接sitemap中，但是百度 ...
你能把提交删除的状态截图看一下吗? 提交了多久了, 更新频率是多少, 提交什么格式的死链表?
还有千万不用用robots屏蔽死链, 不然没有删除状态.
删除死链的速度和你网站得到的配额有关, 也就是众多站长所谓的权重, 一般的周期是4天以上. 只要有进度就耐心等等.
其实我有个疑问, 网站改版造成的这么多404是因为原文章删除了吗?& &
如果只是换了目录建议301到新的目录上并在百度站长工具提交改版.
如果真是删除了这么多有用的文章挺可惜的.
fansart 发表于
你能把提交删除的状态截图看一下吗? 提交了多久了, 更新频率是多少, 提交什么格式的死链表?
还有千万不 ...
一直显示这个，我是7月15日提交的，更新频率是1天。txt文件
死链接提交成功截图
本帖子中包含更多资源
才可以下载或查看，没有帐号？
Powered by为什么我搜索栏里有字的时候打开百度知道会提示出错呢？_百度知道
为什么我搜索栏里有字的时候打开百度知道会提示出错呢？
我在百度 网页 搜索框里打入字后，切换到百度知道，会提示我出错。访问页面不存在。为什么啊？
我有更好的答案
你好，很多朋友来问类似问题了，空间、文库、贴吧、知道、登陆等问题，，，不是这里有问题就是那里有问题，总之近来怪事连连，，我个人中心里面的关注分类是如此情形，，，，关注的分类： 镞犲垎绫�，，，，打开以后是全部问题情况是这样，你不用着急的,一段时间以来，类似的问题有许多朋友问过,自己也遇到过诸如此类现象,可能是系统比较繁忙或网速问题,刷新几下试试看,或者换个时间段再试,,，，前一时期，我在回答提问时，总是出现下列情形，，很抱歉，您的提交过程发生异常错误O_O，，，，，并且要验证码，，一段时间以来许多朋友说是抽风……百度系统出现异常是正常的，更多的只能是无奈近期我回答问题总是遇到百度的提示说违规，或者不规范，暂时仅自己可见，有时提交回答要点提交多次才行。。。。还有在知道问题分类的页面上刷新十几次，页面上仍然是一个小时以前的提问，无法回答提问，，，还有就是连续两周时间不能直接在百度上登陆，只有从HAO123上面用QQ或者新浪帐号登陆总之，百度这里目前问题多多。。。对百度期望值不能太高，同样对百度出现问题要有很高的容忍度才行
采纳率：45%
有时我也会这样的，可以重新试一下。
为您推荐：
其他类似问题
您可能关注的内容
百度知道的相关知识
换一换
回答问题，赢新手礼包
个人、企业类
违法有害信息,请在下方选择后提交
色情、暴力
我们会通过消息、邮箱等方式尽快将举报结果通知您。评百度知道上的某些最佳答案_百度文库
两大类热门资源免费畅读
续费一年阅读会员，立省24元！
评百度知道上的某些最佳答案
阅读已结束，下载本文需要
想免费下载更多文档？
定制HR最喜欢的简历
下载文档到电脑，同时保存到云知识，更方便管理
加入VIP
还剩3页未读，
定制HR最喜欢的简历
你可能喜欢我的百度知道怎么了，在IE上每次提问问题点“提交问题的时候都会出现：对不起你访问的页面不存在”_百度知道
我的百度知道怎么了，在IE上每次提问问题点“提交问题的时候都会出现：对不起你访问的页面不存在”
但是换成谷歌浏览器就没事了，而且用IE的时候选择最佳答案也不成功，是哪里出现的问题啊
我有更好的答案
你好，百度系统问题，误伤的太多了，在百度知道里很多提问和回答都是要通过审核才能上线的，所以如果你是刚提交不久，有可能还在！以下是具体被删除的原因：有些问题不能提交的原因如下、1、图片、电话号码、链接、基本要审核。2、同一时间提问次数过多。3、问题或回答中包含敏感字系统过滤出来需要审核。4、注册时间比较短，还没被百度设置成信任用户。5、提问或回答的时候是百度的高峰时期。6、提问字数过少，被系统自动判断为灌水问答。7、回答字数过多，需要审核。8、问答或提问中包含阿拉伯数字过多，留有联系方式等，违反了知道的基本原则审核不通过。9、被恶意“检举”造成删贴。10、如果上下楼有明显抄袭的行为，那么按时间顺序后提交的回答，将被删除。11、求网络游戏的内测帐号和游戏帐号的问题，将被删除。12、如果同一用户用相同的答案，回答大量不同的问题，该用户的回答将被删除。13、多次将个人空间地址作为参考或者回答按广告处理。14、大量使用知道链接作为回答按灌水处理。15、没有正面回答问题，只留有Q号按灌水处理。16、短时间提交大量相同类型的简单提问将按灌水处理。17、误删有可能也常见，这种情况请一定投诉。18、企业招聘或个人求职问题按灌水处理。19、短时间内大量提问都采纳同一回答者将按作弊处理。注意上面的这些问题就不会被删，但不排除恶意检举跟百度系统的问题.----------------------------------------------------------------------如果确定自己的问题没有上面问题，那就是你的帐号出现异常了，在百度知道里这样的人有不少。这是因为百度系统抽风，把你给误判后关在小黑屋了。要想尽快从小黑屋里出来， 建议通过以下这3种途径去投诉：1 去”百度知道投诉吧“发贴投诉；如果失效的太多了那就是被百度列为黑名单了，明智的做法是暂时不要答题了请到“知道团队吧”跟帖反应、这里他们会很快处理的、2 去”知道意见社吧“反馈，就在这个问题的下方点”反馈建议“，就可以向百度反馈问题了；3 找du家族成员反馈，如du京京、du小佑等，她们都是百度官方的，你反馈的问题，她们会处理的。---------------------------------------------------------------
肯定不是号的问题，就是浏览器的 事儿，我只是不知道IE犯什么毛病了，因为用谷歌一切正常
百度系统问题，误伤的太多了，就是同一个浏览器
上交同一样的内容
也会有的删除
有的就通过、这事我遇到的太多了、
采纳率：75%
来自团队：
可能是IE的安全设置过滤了这个网页吧，检查修复下IE看
怎么修复啊
来自：求助得到的回答
应该是不会的，你回答的啥问题，是不是被屏蔽了啊。
是提问，我这些提问都是在谷歌上提问的，上IE 就不能提问，显示:你访问的页面不存在就现在恢复你的回答也得用谷歌，IE就不行
来自：求助得到的回答
为您推荐：
其他类似问题
百度知道的相关知识
换一换
回答问题，赢新手礼包
个人、企业类
违法有害信息,请在下方选择后提交
色情、暴力
我们会通过消息、邮箱等方式尽快将举报结果通知您。“您所请求的页面有异常”是什么意思_百度知道
“您所请求的页面有异常”是什么意思
“您所请求的页面有异常”是什么意思！！？？每次打开网页时都会弹出这一对话框！！！
我有更好的答案
您所请求的页面有异常，出现这样的提示可能的原因如下：网页当中存在代码错误，无法在浏览器中显示。这种情况，需要开发人员检查一下连接是否有拼写错误、界面代码是否存在致命错误，解决之后，重新访问。服务器奔溃，无法加载网页。这种情况，只能是重启服务器。当然也会存在访问的已经不再使用，被强制关停了，需要联系管理员。
软件工程师
本回答被提问者采纳
为您推荐：
其他类似问题
您可能关注的内容
换一换
回答问题，赢新手礼包
个人、企业类
违法有害信息,请在下方选择后提交
色情、暴力
我们会通过消息、邮箱等方式尽快将举报结果通知您。