php采集异步数据 php异步调用-成都快上网建站

php采集异步数据 php异步调用

PHP异步处理有哪些方法

使用Ajax 与 img 标记

在田东等地区,都构建了全面的区域性战略布局,加强发展的系统性、市场前瞻性、产品创新能力,以专注、极致的服务理念,为客户提供成都网站建设、网站制作 网站设计制作定制制作,公司网站建设,企业网站建设,品牌网站制作,成都全网营销推广,成都外贸网站建设公司,田东网站建设费用合理。

原理,服务器返回的html中插入Ajax 代码或 img 标记,img的src为需要执行的程序。

优点:实现简单,服务端无需执行任何调用

缺点:在执行期间,浏览器会一直处于loading状态,因此这种方法并不算真正的异步调用。

$.get("doRequest.php", { name: "fdipzone"} );

img src="doRequest.php?name=fdipzone"

使用popen

使用popen执行命令,语法:

优点:执行速度快

缺点:

1).只能在本机执行

2).不能传递大量参数

3).访问量高时会创建很多进程

// popen — 打开进程文件指针  

resource popen ( string $command , string $mode )

pclose(popen('php /home/fdipzone/doRequest.php ', 'r'));

使用curl

设置curl的超时时间 CURLOPT_TIMEOUT 为1 (最小为1),因此客户端需要等待1秒

?php 

$ch = curl_init(); 

$curl_opt = array( 

CURLOPT_URL, ''

CURLOPT_RETURNTRANSFER,1, 

CURLOPT_TIMEOUT,1 

); 

curl_setopt_array($ch, $curl_opt); 

curl_exec($ch); 

curl_close($ch); 

?

使用fsockopen

fsockopen是最好的,缺点是需要自己拼接header部分。

?php 

$url = ''; 

$param = array( 

'name'='fdipzone', 

'gender'='male', 

'age'=30 

); 

doRequest($url, $param); 

function doRequest($url, $param=array()){ 

$urlinfo = parse_url($url); 

$host = $urlinfo['host']; 

$path = $urlinfo['path']; 

$query = isset($param)? http_build_query($param) : ''; 

$port = 80; 

$errno = 0; 

$errstr = ''; 

$timeout = 10; 

$fp = fsockopen($host, $port, $errno, $errstr, $timeout); 

$out = "POST ".$path." HTTP/1.1\r\n"; 

$out .= "host:".$host."\r\n"; 

$out .= "content-length:".strlen($query)."\r\n"; 

$out .= "content-type:application/x-www-form-urlencoded\r\n"; 

$out .= "connection:close\r\n\r\n"; 

$out .= $query; 

fputs($fp, $out); 

fclose($fp); 

?

注意:当执行过程中,客户端连接断开或连接超时,都会有可能造成执行不完整,因此需要加上

ignore_user_abort(true); // 忽略客户端断开 

set_time_limit(0);    // 设置执行不超时

php采集大数据的方案

1、建议你读写数据和下载图片分开,各用不同的进程完成。

比如说,取数据用get-data.php,下载图片用get-image.php。

2、多进程的话,php可以简单的用pcntl_fork()。这样可以并发多个子进程。

但是我不建议你用fork,我建议你安装一个gearman worker。这样你要并发几个,就启几个worker,写代码简单,根本不用在代码里考虑thread啊,process等等。

3、综上,解决方案这样:

(1)安装gearman worker。

(2)写一个get-data.php,在crontab里设置它每5分钟执行一次,只负责读数据,然后把读回来的数据一条一条的扔到 gearman worker的队列里;

然后再写一个处理数据的脚本作为worker,例如叫process-data.php,这个脚本常驻内存。它作为worker从geraman 队列里读出一条一条的数据,然后跟你的数据库老数据比较,进行你的业务逻辑。如果你要10个并发,那就启动10个process-data.php好了。处理完后,如果图片地址有变动需要下载图片,就把图片地址扔到 gearman worker的另一个队列里。

(3)再写一个download-data.php,作为下载图片的worker,同样,你启动10个20个并发随便你。这个进程也常驻内存运行,从gearman worker的图片数据队列里取数据出来,下载图片

4、常驻进程的话,就是在代码里写个while(true)死循环,让它一直运行好了。如果怕内存泄露啥的,你可以每循环10万次退出一下。然后在crontab里设置,每分钟检查一下进程有没有启动,比如说这样启动3个process-data worker进程:

* * * * * flock -xn /tmp/process-data.1.lock -c '/usr/bin/php /process-data.php /dev/null 21'

* * * * * flock -xn /tmp/process-data.2.lock -c '/usr/bin/php /process-data.php /dev/null 21'

* * * * * flock -xn /tmp/process-data.3.lock -c '/usr/bin/php /process-data.php /dev/null 21'

不知道你明白了没有

解决php使用异步调用获取数据时出现(错误c00ce56e导致此项操作无法完成)

本篇文章是对php中使用异步调用获取数据时出现(由于出现错误c ce e而导致此项操作无法完成)的解决方法进行了详细的分析介绍 需要的朋友参考下  

【详细错误】 由于出现错误 c ce e 而导致此项操作无法完成

【造成原因】 未指定输出编码格式

lishixinzhi/Article/program/PHP/201311/21112

PHP 怎样异步处理

利用php的系统调用,开启新的进程来实现。

php

提供了fsockopen函数,此函数的功能为初始化一个套接字连接到指定主机,默认情况下将以阻塞模式开启套接字连接。当然你可以通过stream_set_blocking()将它转换到非阻塞模式。这是关键。所以,思路就是:开启一个非阻塞的套接字连接到本机,本机收到之后作一些耗时处理。

php 怎样实现异步处理接口

首先 php 7以下 不支持异步方式(有个类库 可以勉强算是支持了异步 名字忘了)

其次 php脚本 由于是逐行解析的,不常驻线程(当然可以设置为永久连接,不自动超时退出) 异步意义不大。

第三 我怀疑你是想问javascript的异步请求? 如何用php处理?

如果没问错的话 可以用其他方式来解决异步问题,就是同时发出多个web request请求 等多个请求成功之后将结果写入数据库(文件) 然后 有一个 一直在等待结果的php请求进程 一旦读取到了这个写入完毕的(数据库)文件结果 马上返回给浏览器

php 如何异步插入数据库

页面1.php里面写具体的执行语句

页面2.php直接使用curl调用页面1.php 并设置超时时间;根据你自己的需求写但是你不一定如果超时时间内 数据库没执行玩 那你可能就获取不到插入结果了

访问2.php应该就是你说的异步了


网页名称:php采集异步数据 php异步调用
网页链接:http://kswjz.com/article/docodih.html
扫二维码与项目经理沟通

我们在微信上24小时期待你的声音

解答本文疑问/技术咨询/运营咨询/技术建议/互联网交流