使用file_get_contents()和curl()抓取网络资源的效率对比
使用file_get_contents()和curl()抓取网络资源的效率对比
在将小程序用户头像合成海报的时候,用到了抓取用户头像对应的网络资源,那么抓取方式有很多,比如 file_get_contents,curl等,如何抓取就成了问题,下面主要是对比这两种方式的效率快慢问题
echo '开始时间为:'.time().'<br>';
$img_file = file_get_contents($user['avatarurl']); //小程序传的头像是网络地址需要周转一下
$img_content_logo= base64_encode($img_file);
echo '结束时间为:'.time().'<br>';
结果为:
开始时间为:1555490134
结束时间为:1555490150
不知道是不是服务器的问题,中间花费时间竟然高达16秒,多试几次,也是在这14、5秒之间,肯定是不行的
再看一下使用curl的(最后有封装的curl_file_get_contents()函数)
echo '开始时间为:'.time().'<br>';
$img_file = curl_file_get_contents($user['avatarurl']); //小程序传的头像是网络地址需要周转一下
$img_content_logo= base64_encode($img_file);
echo '结束时间为:'.time().'<br>';
结果为:
开始时间为:1555490335
结束时间为:1555490335
效率一下子就提升了,花费时间最多1秒,而且这只是粗略的计算,如果采用更严谨的计算花费时间的话,可能会更低
function curl_file_get_contents($durl)
{
$ch = curl_init();
curl_setopt($ch, CURLOPT_URL, $durl);
curl_setopt($ch, CURLOPT_TIMEOUT, 5);
curl_setopt($ch, CURLOPT_RETURNTRANSFER, 1);
$r = curl_exec($ch);
curl_close($ch);
return $r;
}
使用file_get_contents()和curl()抓取网络资源的效率对比的更多相关文章
- PHP使用CURL抓取网页
		
CURL是一个非常强大的开源库,支持很多协议,包括HTTP.FTP.TELNET等,我们使用它来发送HTTP请求.它给我 们带来的好处是可以通过灵活的选项设置不同的HTTP协议参数,并且支持HTTPS ...
 - PHP cURL抓取网上图片
		
cURL的底层是由一个命令行工具实现的,用于获取远程文件或传输文件,更多的情况是用来模拟get/post表单提交.也可以用户文件上传,爬取文件,支持FTP/FTPS,HTTP/HTTPS等协议,通俗来 ...
 - php curl抓取远程页面内容的代码
		
使用php curl抓取远程页面内容的例子. 代码如下: <?php /** * php curl抓取远程网页内容 * edit by www.jbxue.com */ $curlPost = ...
 - Python 3.X 要使用urllib.request 来抓取网络资源。转
		
Python 3.X 要使用urllib.request 来抓取网络资源. 最简单的方式: #coding=utf-8 import urllib.request response = urllib. ...
 - PHP CURL 抓取失败 自己调试
		
蛋疼的一下午,物理机win7旗舰版+APACHE2 ,CURL抓取一直成功. 虚拟机ubuntu+apache2一直抓取失败. 晚上,问个仁兄才知道,CURL可以调试: 参考这位兄台: 地址 curl ...
 - shell用curl抓取页面乱码,参考一下2方面(转)
		
1.是用curl抓取的数据是用类似gzip压缩后的数据导致的乱码.乱码:curl www.1ting.com |more乱码:curl -H "Accept-Encoding: gzip&q ...
 - 好用的 curl 抓取 页面的封装函数
		
由于经常使用php curl 抓取页面的内容,在此mark 平时自己封装的 curl函数,(其实 现在也开始用 Python 来爬了~ ^-^) /** * 封装curl方法 * @author Fr ...
 - 通过CURL抓取页面中的图片路径并下载到本地
		
1.首页是图片处理页面downpic.php <?phpfunction getImage($url,$filename="") { if($url=="" ...
 - curl抓取页面时遇到重定向的解决方法
		
用php的curl抓取网页遇到了问题,为阐述方便,将代码简化如下: <?php function curlGet($url) { $ch = curl_init(); curl_setopt($ ...
 
随机推荐
- pop3密码嗅探
			
成品与代码可在 https://pan.baidu.com/s/1MPfU2T_6YN6mgxUL0wrZxw 下载 来说下pop协议, 英文版,https://tools.ietf.org/html ...
 - java中关于冒泡排序算法的学习。
			
在编程语言的学习中,排序算法在学习过程中是必须要掌握的,特别在新手的学习中,我们应该学会这些算法,本篇先介绍冒泡算法. 冒泡排序 设有一组待排序的数据: 3 2 4 5 7 1 我们需要使用冒泡排序来 ...
 - spring mvc改造成spring boot
			
一.新增依赖: <dependency> <groupId>org.springframework.boot</groupId> <artifactId> ...
 - FastDFS 搭建
			
#FastDFS安装方式 安装必要插件:libevent (此次搭建方案采用libevent 1.4.13) wget http://fastdfs.googlecode.com/files/F ...
 - js数组Array方法
			
1. indexOf indexOf()方法返回在该数组中第一个找到的元素位置,如果它不存在则返回-1. var fruits = ["Banana", "Orange& ...
 - 洛谷 P1195 口袋的天空(最小生成树)
			
嗯... 题目链接:https://www.luogu.org/problemnew/show/P1195 思路: 首先可以判断这道题是用最小生成树来做的,然后在将其合并时用ans记录一下它的总消耗, ...
 - 转:Oracle优化总结
			
本文主要从大型数据库ORACLE环境四个不同级别的调整分析入手,分析ORACLE的系统结构和工作机理,从九个不同方面较全面地总结了 ORACLE数据库的优化调整方案. 关键词 ORACLE数据库 环境 ...
 - tomcat8.5配置优化
			
1.应用程序安全&关闭自动部署 默认值: <Host name="localhost" appBase="webapps" unpackWARs= ...
 - OpenGL学习 Following the Pipeline
			
Passing Data to the Vertex Shader Vertex Attributes At the start of the OpenGL pipeline,we use the i ...
 - 小程序wx.request的POST方法的参数传输服务器接收不到
			
这是API里面的例子: 而实际这样,服务端拿到的是空值. 将header更改一下,application/x-www-form-urlencoded,则可以让服务器收到数据