php中抓取网页内容的实例详解
php中抓取网页内容的实例详解
方法一:
使用file_get_contents方法实现
$url = "http://news.sina.com.cn/c/nd/2016-10-23/doc-ifxwztru6951143.shtml";
$html = file_get_contents($url);
//如果出现中文乱码使用下面代码
//$getcontent = iconv("gb2312", "utf-8",$html);
echo "<textarea style='width:800px;height:600px;'>".$html."</textarea>";
代码很简单，一看就懂，不解释了。
方法二：
使用curl实现
$url = "http://news.sina.com.cn/c/nd/2016-10-23/doc-ifxwztru6951143.shtml";
$ch = curl_init();
curl_setopt($ch, CURLOPT_URL, $url);
curl_setopt($ch, CURLOPT_RETURNTRANSFER, 1);
curl_setopt($ch, CURLOPT_CONNECTTIMEOUT, 10);
curl_setopt($ch, CURLOPT_FOLLOWLOCATION, 1);
$html = curl_exec($ch);
curl_close($ch);
echo "<textarea style='width:800px;height:600px;'>".$html."</textarea>";
curl_setopt($ch, CURLOPT_FOLLOWLOCATION, 1);
加上这句代码，表示如果请求被重定向时，可以访问到最终的请求页面，不然请求的结果会显示如下内容：
<head><title>Object moved</title></head> <body><h1>Object Moved</h1>This object may be found <a href="some link." rel="external nofollow" >here</a>.</body>
如意疑问请留言或者到本站社区交流讨论，感谢阅读，希望能帮助到大家，谢谢大家对本站的支持！
-
本文向大家介绍ASP.NET抓取网页内容的实现方法，包括了ASP.NET抓取网页内容的实现方法的使用技巧和注意事项，需要的朋友参考一下 本文实例讲述了ASP.NET抓取网页内容的实现方法。分享给大家供大家参考。具体实现方法如下： 一、ASP.NET 使用HttpWebRequest抓取网页内容 二、ASP.NET 使用 WebResponse 抓取网页内容 希望本文所述对大家的C#程序设计有所帮助
-
本文向大家介绍php实现递归抓取网页类实例，包括了php实现递归抓取网页类实例的使用技巧和注意事项，需要的朋友参考一下 本文实例讲述了php实现递归抓取网页类的方法。分享给大家供大家参考。具体如下： 希望本文所述对大家的php程序设计有所帮助。
-
本文向大家介绍PHP实现抓取HTTPS内容，包括了PHP实现抓取HTTPS内容的使用技巧和注意事项，需要的朋友参考一下 最近在研究Hacker News API时遇到一个HTTPS问题。因为所有的Hacker News API都是通过加密的HTTPS协议访问的，跟普通的HTTP协议不同，当使用PHP里的函数 file_get_contents() 来获取API里提供的数据时，出现错误，使用的代码是
-
主要内容：导入所需模块,拼接URL地址,向URL发送请求,保存为本地文件,函数式编程修改程序本节讲解第一个 Python 爬虫实战案例：抓取您想要的网页，并将其保存至本地计算机。 首先我们对要编写的爬虫程序进行简单地分析，该程序可分为以下三个部分： 拼接 url 地址 发送请求 将照片保存至本地 明确逻辑后，我们就可以正式编写爬虫程序了。 导入所需模块 本节内容使用 urllib 库来编写爬虫，下面导入程序所用模块： 拼接URL地址 定义 URL 变量，拼接 url 地址。代码如下所示：
-
本文向大家介绍thinkphp 抓取网站的内容并且保存到本地的实例详解，包括了thinkphp 抓取网站的内容并且保存到本地的实例详解的使用技巧和注意事项，需要的朋友参考一下 thinkphp 抓取网站的内容并且保存到本地的实例详解 我需要写这么一个例子，到电子课本网下载一本电子书。 电子课本网的电子书，是把书的每一页当成一个图片，然后一本书就是有很多张图片，我需要批量的进行下载图片操作。 下面是
-
本文向大家介绍Python实现周期性抓取网页内容的方法，包括了Python实现周期性抓取网页内容的方法的使用技巧和注意事项，需要的朋友参考一下 本文实例讲述了Python实现周期性抓取网页内容的方法。分享给大家供大家参考，具体如下： 1.使用sched模块可以周期性地执行指定函数 2.在周期性执行指定函数中抓取指定网页，并解析出想要的网页内容，代码中是六维论坛的在线人数 论坛在线人数统计代码： 希
-
本文向大家介绍PHP cURL库函数抓取页面内容，包括了PHP cURL库函数抓取页面内容的使用技巧和注意事项，需要的朋友参考一下 cURL 是一个利用URL语法规定来传输文件和数据的工具，支持很多协议和选项，如HTTP、FTP、TELNET等，能提供 URL 请求相关的各种细节信息。最爽的是，PHP 也支持 cURL 库。 本文将介绍 cURL 的一些高级特性，以及在 PHP 中如何运用它。 1
-
本文向大家介绍Jsoup 抓取页面的数据实例详解，包括了Jsoup 抓取页面的数据实例详解的使用技巧和注意事项，需要的朋友参考一下 Jsoup 抓取页面的数据 需要使用的是jsoup-1.7.3.jar包 如果需要看文档我下载请借一步到官网：http://jsoup.org/ 这里贴一下我用到的 Java工程的测试代码 下面来介绍android中使用Jsoup异步解析网页的数