Jtti广告广告
返回顶部
首页 > 资讯 > 后端开发 > PHP编程 >php如何只抓取网页头
  • 353
分享到

php如何只抓取网页头

php 2019-01-18 19:01:43 353人浏览 无得
摘要

本文操作环境:windows7系统、PHP7.1版、DELL G3电脑php如何只抓取网页头?php获取网页header信息的4种方法php获取网页header信息的方法多种多样,就php语言来说,我知道的方法有4种, 下面逐一献上。方法一

本文操作环境:windows7系统、PHP7.1版、DELL G3电脑

php如何只抓取网页头?

php获取网页header信息的4种方法

php获取网页header信息的方法多种多样,就php语言来说,我知道的方法有4种, 下面逐一献上。

方法一:使用get_headers()函数

推荐指数: ★★★★★

get_header方法最简单只要两行代码即可搞定。如下:

$thisurl = "Http://www.lao8.org/";
print_r(get_headers($thisurl, 1));

得到的结果为:

Array
(
    [0] => HTTP/1.1 200 OK
    [Cache-Control] => max-age=86400
    [Content-Length] => 76102
    [Content-Type] => text/html
    [Content-Location] => http://www.lao8.org/index.html
    [Last-Modified] => Fri, 19 Jul 2013 03:52:30 GMT
    [Accept-Ranges] => bytes
    [ETag] => "50bc48643384ce1:5cb3"
    [Server] => Microsoft-IIS/6.0
    [X-Powered-By] => asp.net
    [Date] => Fri, 19 Jul 2013 09:06:39 GMT
    [Connection] => close
)

方法二:使用http_response_header

推荐指数: ★★★

http_response_headerf方法也很简单,仅三行:

$thisurl = "http://www.lao8.org";
$html = file_get_contents($thisurl ); 
print_r($http_response_header);

得到的结果为:

Array
(
    [0] => HTTP/1.1 200 OK
    [1] => Cache-Control: max-age=86400
    [2] => Content-Length: 76102
    [3] => Content-Type: text/html
    [4] => Content-Location: http://www.lao8.org/index.html
    [5] => Last-Modified: Fri, 19 Jul 2013 03:52:30 GMT
    [6] => Accept-Ranges: bytes
    [7] => ETag: "50bc48643384ce1:5cb3"
    [8] => Server: Microsoft-IIS/6.0
    [9] => X-Powered-By: ASP.net
    [10] => Date: Fri, 19 Jul 2013 09:06:41 GMT
    [11] => Connection: close
)

方法三:使用stream_get_meta_data()函数

推荐指数: ★★★

使用stream_get_meta_data()代码也只需三行:

$thisurl = "http://www.lao8.org/";
$fp = fopen($thisurl, 'r'); 
print_r(stream_get_meta_data($fp));

得到的结果为:

Array
(
    [wrapper_data] => Array
        (
            [0] => HTTP/1.1 200 OK
            [1] => Cache-Control: max-age=86400
            [2] => Content-Length: 76102
            [3] => Content-Type: text/html
            [4] => Content-Location: http://www.lao8.org/index.html
            [5] => Last-Modified: Fri, 19 Jul 2013 03:52:30 GMT
            [6] => Accept-Ranges: bytes
            [7] => ETag: "50bc48643384ce1:5cb3"
            [8] => Server: Microsoft-IIS/6.0
            [9] => X-Powered-By: ASP.NET
            [10] => Date: Fri, 19 Jul 2013 09:06:41 GMT
            [11] => Connection: close
        )
    [wrapper_type] => http
    [stream_type] => tcp_Socket
    [mode] => r+
    [unread_bytes] => 1086
    [seekable] => 
    [uri] => http://www.lao8.org/
    [timed_out] => 
    [blocked] => 1
    [eof] => 
)

第四种方法: 使用php的高级函数 CURL()来获取

推荐指数: ★★★★

上面的三种方法能获取一般的网页header信息,如果想要获取更详细的header信息比如网页是否启用了GZip压缩。这时候可以用php的高级函数curl()来获取。

使用curl获得header可以检测GZip压缩

先贴出代码:

<?php
$szUrl = 'http://www.lao8.org/';
$curl = curl_init();
curl_setopt($curl, CURLOPT_URL, $szUrl);
curl_setopt($curl, CURLOPT_HEADER, 1);  //输出header信息
curl_setopt($curl, CURLOPT_RETURNTRANSFER, 1);  //不显示网页内容
curl_setopt($curl, CURLOPT_ENcoding, ''); //允许执行gzip
$data=curl_exec($curl); 
if(!curl_errno($curl))
{
    $info = curl_getinfo($curl);
    $httpHeaderSize = $info['header_size'];  //header字符串体积
    $pHeader = substr($data, 0, $httpHeaderSize); //获得header字符串
    $split   = array("rn", "n", "r");  //需要格式化header字符串
    $pHeader = str_replace($split, '<br>', $pHeader); //使用<br>换行符格式化输出到网页上
    echo $pHeader;
}
?>

输出结果如下:

HTTP/1.1 200 OK
Cache-Control: max-age=86400
Content-Length: 15189
Content-Type: text/html
Content-Encoding: gzip
Content-Location: http://www.lao8.org/index.html
Last-Modified: Fri, 19 Jul 2013 03:52:28 GMT
Accept-Ranges: bytes
ETag: "0268633384ce1:5cb3"
Vary: Accept-Encoding
Server: Microsoft-IIS/6.0
X-Powered-By: ASP.NET
Date: Fri, 19 Jul 2013 09:27:21 GMT

可以看到使用curl获取到的header信息多了这行:Content-Encoding: gzip,网页启用了GZip压缩。

--结束END--

本文标题: php如何只抓取网页头

本文链接: https://www.lsjlt.com/news/278.html(转载时请注明来源链接)

有问题或投稿请发送至: 邮箱/279061341@qq.com    QQ/279061341

猜你喜欢
  • php如何抓取网页数据
    在PHP中,可以使用cURL库来抓取网页数据。cURL(Client URL)是一个用于在PHP中进行网络通信的库,可以发送HTTP...
    841
    2023-09-29
    php
  • 怎么用php抓取网页数据
    使用PHP抓取网页数据可以使用cURL库或者file_get_contents函数。以下是两种方法的示例:1. 使用cURL库抓取网...
    696
    2023-09-29
    php
  • php抓取网页特定div区块及图片,
    取得指定网页內的所有图片: ...
    950
    2023-09-29
    php java 开发语言
  • PHP网页抓取之抓取百度贴吧邮箱数据代码分享
    百度贴吧大家都经常逛,去逛百度贴吧的时候,经常会看到楼主分享一些资源,要求留下邮箱,楼主才给发。 对于一个热门的帖子,留下的邮箱数量是非常多的,楼主需要一个一个的去复制那些回复的邮箱,然后再粘贴发送邮件,...
    276
    2023-09-29
    贴吧 取之 邮箱
  • 怎样使用CSS实现一只鸭子头
    这篇文章将为大家详细讲解有关怎样使用CSS实现一只鸭子头,小编觉得挺实用的,因此分享给大家做个参考,希望大家阅读完这篇文章后可以有所收获。   代码解读   定义dom,容器中包含4个元素:   &l...
    459
    2023-09-29
    css
  • 如何使用Requests模块抓取网页
    这篇文章主要介绍“如何使用Requests模块抓取网页”的相关知识,小编通过实际案例向大家展示操作过程,操作方法简单快捷,实用性强,希望这篇“如何使用Requests模块抓取网页”文章能帮助大家解决问题。爬取网页其实就是通过URL获取网页信...
    592
    2023-09-29
  • Python抓取网页内容
    import urllib.request response=urllib.request.urlopen("http://www.baidu.co...
    928
    2023-09-29
    网页 内容 Python
  • Python之抓取网页元素
    ...
    339
    2023-09-29
    元素 网页 Python
  • 利用python抓取网页图片
        近期在家想看华为官方的【IP,图话技术,微图】系列文档,奈何家里是长宽,基本打不开页面,刷新多次,心力憔悴。▎下图感受下:    突然想起上次华为云大会送了台云服务器,一直被我用来做linux实验机。于是,突发奇想,利用python...
    514
    2023-09-29
    网页 图片 python
  • php如何只保留汉字
    本文将为大家详细介绍“php如何只保留汉字”,内容步骤清晰详细,细节处理妥当,而小编每天都会更新不同的知识点,希望这篇“php如何只保留汉字”能够给你意想不到的收获,请大家跟着小编的思路慢慢深入,具体内容如下,一起去收获新知识吧。php是什...
    198
    2023-09-29
  • php header头如何转码
    本篇内容介绍了“php header头如何转码”的有关知识,在实际案例的操作过程中,不少人都会遇到这样的困境,接下来就让小编带领大家学习一下如何处理这些情况吧!希望大家仔细阅读,能够学有所成!在PHP开发中,我们经常会遇到需要转换字符编码的...
    180
    2023-09-29
  • Python抓取网页图片难点分析
    目录一、网页图片抓取时代背景二、网页图片抓取难点处理1、图片地址存放位置不同2、图片地址格式解析处理3、防止IP被封可以采用代理Ip机制三、网页图片抓取场景分类一、网页图片抓取时代背...
    682
    2023-09-29
    Python抓取网页图片 Python抓取图片 Python抓取网页
  • python如何实现基本的抓取网页
    这篇文章主要介绍了python如何实现基本的抓取网页,具有一定借鉴价值,感兴趣的朋友可以参考下,希望大家阅读完这篇文章之后大有收获,下面让小编带着大家一起了解一下。基本抓取网页get方法import urllib2url ...
    851
    2023-09-29
  • php获取curl头_php中CURL请求头和响应头获取方法
    在有的时候,我们需要通过获取接口相应的请求头信息,可以在curl_exec函数执行前,添加代码 curl_setopt($ch,CURLINFO_HEADER_OUT,true); 然后在curl_exec函数执行后,通过 curl_g...
    730
    2023-09-29
    php 开发语言 服务器 CURL响应头信息获取 Powered by 金山文档
  • Python:网页的抓取、过滤和保存
    Python:网页的抓取、过滤和保存 环境:Python 2.7.3,win10 一、抓取 目的地是ZOL笑话大全 地址:http://xiaohua.zol.com.cn/new/2.html 网址的组成要灵活点,这个网站的...
    834
    2023-09-29
    网页 Python
  • Python中怎么抓取网页内容
    Python中怎么抓取网页内容,很多新手对此不是很清楚,为了帮助大家解决这个难题,下面小编将为大家详细讲解,有这方面需求的人可以来学习下,希望你能有所收获。Python抓取网页内容方法一、用urllib2/sgmllib包,将目标网页的所有...
    469
    2023-09-29
  • php curl如何只获取数据
    这篇文章主要介绍“php curl如何只获取数据”,在日常操作中,相信很多人在php curl如何只获取数据问题上存在疑惑,小编查阅了各式资料,整理出简单好用的操作方法,希望对大家解答”php curl如何只获取数据”的疑惑有所帮助!接下来...
    822
    2023-09-29
  • php header头如何实现跳转
    这篇文章主要介绍“php header头如何实现跳转”,在日常操作中,相信很多人在php header头如何实现跳转问题上存在疑惑,小编查阅了各式资料,整理出简单好用的操作方法,希望对大家解答”php header头如何实现跳转”的疑惑有所...
    689
    2023-09-29
  • android 封装抓取网页信息的实例代码
    代码如下:package cn.mypic;        import java.io.BufferedInputStre...
    799
    2023-09-29
    封装 Android
  • python 抓取的网页默认是bytes
    python 抓取的网页默认是bytes的,要转码.查看网页源码可以看到,我本次抓取的网页的编码方式是utf-8的.req = urllib.request.Request(url=myurl,headers = myheaders) d...
    602
    2023-09-29
    网页 python bytes
编程网,编程工程师的家园,是目前国内优秀的开源技术社区之一,形成了由开源软件库、代码分享、资讯、协作翻译、讨论区和博客等几大频道内容,为IT开发者提供了一个发现、使用、并交流开源技术的平台。
  • 官方手机版

  • 微信公众号

  • 商务合作