如何利用shell脚本批量提交网站404死链给百度

本篇内容介绍了“如何利用shell脚本批量提交网站404死链给百度”的有关知识，在实际案例的操作过程中，不少人都会遇到这样的困境，接下来就让小编带领大家学习一下如何处理这些情况吧！希望大家仔细阅读，能够学有所成！

百度站长平台提供的死链提交工具,可将网站存在的死链(协议死链、404页面)进行提交,可快速删除死链,帮助网站SEO优化。在提交死链的文件中逐个手动填写死链的话太麻烦，工作中我们提倡复杂自动化，所以本文我们一起交流分享Apache服务中通过shell脚本整理网站死链，便于我们提交。

 
默认采用的是common，这里我们只需要将common这一行前面加#注释掉,然后将combined这一行前的#去掉即可。然后保存重启Apache服务。

注：如果你的服务器上添加了多个站点，每个站点有单独的配置文件，则我们只需要在相应站点的配置文件中设置CustomLog项即可，例如：

vim /usr/local/apache/conf/vhost/www.chanzhi.org.conf    ServerAdmin [email protected] DocumentRoot "/data/wwwroot/www.chanzhi.org"    ServerName www.chanzhi.org    ServerAlias chanzhi.org    ErrorLog "/data/wwwlogs/www.chanzhi.org_error_apache.log"    CustomLog "/data/wwwlogs/www.chanzhi.org_apache.log" combined    SetOutputFilter DEFLATE    Options FollowSymLinks ExecCGI    Require all granted    AllowOverride All    Order allow,deny    Allow from all    DirectoryIndex index.html index.PHP

下面是配置前后的网站日志记录格式：

配置前：

大家在使用该脚本时，根据自己服务器情况调整下路径和字段即可，然后执行脚本,：

bash deathlink.sh

3.提交死链

执行上面脚本时候，就会在指定目录下生成包含所有获取的404页面链接的文件，每个连接占一行。例如：

https://www.linuxprobe.com/shell-apache.html

百度在审核通过之后，会将已经收录的失效链接删除，以避免失效页面链接对网站造成不良的影响。

“如何利用shell脚本批量提交网站404死链给百度”的内容就介绍到这里了，感谢大家的阅读。如果想了解更多行业相关的知识可以关注编程网网站，小编将为大家输出更多高质量的实用文章！