当前位置:编程学习 > php >>

linux下php实现多线程

今天遇到个问题,写了个程序从网上抓了150000个图片的地址,存到了txt文档中,每行存了一个图片的地址。现在想将图片下载下来,保存到本机,但是下载的速度不是很快,所以用到了php在linux下面实现多线程,首先将txt文件拆成了10个大小相等的文件,每个文件存储了15000条图片的地址,同时开启10个进行运行保存图片的程序,这样的时间可能就只是原来的1/10。下面将程序贴出来 ,大家指导一下有没有更好的方法。

 
 
01
71     function for_save_img($num)
02
 72     {
03
 73         for($i = 0; $i <= $num; $i++)
04
 74         {
05
 75             system("/usr/local/bin/php index.php crawl save_img {$i} & > /tmp/null");
06
 76         }
07
 77     }
08
 78
09
 79     function save_img($num)
10
 80     {
11
 81         static $i = 0;
12
 82         //把文件读成一个数组
13
 83         $img_urllists = ROOTDIRPATH . "/static/image_{$num}.txt";
14
 84         $arr_img_url = file($img_urllists);
15
 85         foreach($arr_img_url as $imageurl)
16
 86         {
17
 87             $imageurl = trim($imageurl);
18
 88             echo $imageurl;
19
 89             $this->benchmark->mark("code_start");
20
 90             //存图片
21
 91             $final_imageurl = "http://www.****.com/upload/UploadFile/" . $imageurl;
22
 92             $img_open = file_get_contents($final_imageurl);
23
 93             $ret = file_put_contents(ROOTDIRPATH . '/static/uploadimg/' . $imageurl, $img_open);
24
 94             if($ret)
25
 95             {
26
 96                 echo "Success......";
27
 97             }
28
 98             $this->benchmark->mark('code_end');
29
 99
30
100             echo $this->benchmark->elapsed_time('code_start', 'code_end');
31
101         }
32
102     }
33
 
34
 
35
该程序为ci框架下  在linux的shell下 网站的根目录运行   php index.php crawl for_save_img
36
大家有好的建议欢迎提出 虚心接受
作者:岳冠群

补充:Web开发 , php ,
CopyRight © 2022 站长资源库 编程知识问答 zzzyk.com All Rights Reserved
部分文章来自网络,