PHP swoole中使用task進程異步的處理耗時任務應用案例分析
本文實例講述了PHP swoole中使用task進程異步的處理耗時任務。分享給大家供大家參考,具體如下:
我們知道,swoole中有兩大進程,分別是 master 主進程和 manager 管理進程。
其中 master 主進程中會有一個主 reactor 線程和多個 reactor 線程,主要的作用就是用來維護TCP連接,處理網(wǎng)絡IO,收發(fā)數(shù)據(jù)。
而 manager 管理進程,作用則是 fork 和管理 worker 和 task 進程。
worker 進程的作用是接收 reactor 線程傳遞的數(shù)據(jù),并處理數(shù)據(jù),返回處理結果給 reactor 線程。
task 進程的作用是處理一些相對耗時的任務,task 與 worker 進程是獨立的,不會影響 worker 進程處理客戶端的請求。
一、task 進程的應用場景:
1、相對耗時的郵件群發(fā),比如某某活動,需要給100W用戶發(fā)送活動郵件。
2、推送某些大V的動態(tài),比如某大V發(fā)了條新消息,粉絲需要及時獲取到該動態(tài)。
二、worker 與 task 的相互關系:
1、worker 進程中能過調(diào)用 task() 來投遞任務,task 進程中 通過 onTask 事件來響應投遞來的任務。
2、task 進程中 通過 直接返回 或 調(diào)用 finish() 來告訴 worker 進程任務處理完畢,worker 進程中 通過 onFinish 事件響應任務完成。
三、使用 task 的前題:
1、在 Server 中 配置 task_worker_num 數(shù)量。
2、設置 Server 的 onTask 和 onFinish 事件回調(diào)函數(shù)。
四、簡單的使用task進行累加和的計算例子
<?php
$server = new swoole_server('0.0.0.0', 6666);
$server->set([
'worker_num' => 2,
'task_worker_num' => 16,
]);
$server->on('WorkerStart', function ($server, $worker_id) {
//注意這里,我們通過taskworker來判斷是task進程還是worker進程
//需要在worker進程中調(diào)用task(),不然會報出警告
//這里會執(zhí)行兩遍,因為我們設置了worker_num數(shù)為2
if (!$server->taskworker) {
echo '投遞任務開始...', PHP_EOL;
//投遞32個累加計算任務給16個task進程
for ($ix = 0; $ix < 32; $ix++) {
//注意這里的投遞是異步的
$server->task([mt_rand(1, 100), mt_rand(1000, 9999)]);
}
echo '投遞任務結束...', PHP_EOL;
}
});
//server服務必須要有onReceive回調(diào)
$server->on('Receive', function ($server, $fd, $reactor_id, $data) {
});
//注意,task進程完全是同步阻塞模式的
$server->on('Task', function ($server, $task_id, $src_worker_id, $data) {
echo "task {$task_id} 進程正在工作...", PHP_EOL;
$start = $data[0];
$end = $data[1];
$total = 0;
for (; $start <= $end; $start++) {
$total += $start;
}
echo "task {$task_id} 進程完成工作...", PHP_EOL;
return $total;
});
$server->on('Finish', function ($server, $task_id, $data) {
echo "task {$task_id} 進程處理完成, 結果為 {$data}", PHP_EOL;
});
$server->start();
注意,我們通過調(diào)用 task() 往任務池中投遞任務,swoole 底層會輪詢的投遞任務到各個 task 進程。
當你投遞任務的數(shù)量超過 onTask 的處理速度,這會導致任務池被塞滿,進而導致 worker 進程發(fā)生阻塞,所以需合理設置 task_worker_num 數(shù)量和處理速度之間的關系。
當然,我們也可以人為的把任務投遞到指定的 task 進程。task() 函數(shù)的第二個參數(shù)可以指定要投遞的 task 進程ID,ID范圍為 0 到 (task_worker_num - 1)。
五、對任務進行切分,人為控制投遞到 task 進程
<?php
$server = new swoole_server('0.0.0.0', 6666);
$server->set([
'worker_num' => 1,
'task_worker_num' => 10,
]);
$server->on('WorkerStart', function ($server, $worker_id) {
//為了方便演示,把worker_num設置為1,這里只會執(zhí)行一次
if (!$server->taskworker) {
//通過swoole_table共享內(nèi)存,在不同進程中共享數(shù)據(jù)
$server->result = new swoole_table(10240);
//用于保存task進程完成數(shù)量
$server->result->column('finish_nums', swoole_table::TYPE_INT);
//用于保存最終計算結果
$server->result->column('result', swoole_table::TYPE_INT);
$server->result->create();
//計算1000的累加和,并把計算任務分配到10個task進程上
$num = 1000;
$step = $num / $server->setting['task_worker_num'];
for ($ix = 0; $ix < $server->setting['task_worker_num']; $ix++) {
$start = $ix * $step;
$server->task([$start, $start + $step], $ix);
}
}
});
$server->on('Receive', function ($server, $fd, $reactor_id, $data) {
});
//注意,task進程完全是同步阻塞模式的
$server->on('Task', function ($server, $task_id, $src_worker_id, $data) {
echo "task {$task_id} 進程正在工作... 計算 {$data[0]} - {$data[1]} ", PHP_EOL;
$start = ++$data[0];
$end = $data[1];
$total = 0;
for (; $start <= $end; $start++) {
$total += $start;
}
echo "task {$task_id} 進程完成工作...", PHP_EOL;
return $total;
});
$server->on('Finish', function ($server, $task_id, $data) {
echo "task {$task_id} 進程處理完成, 結果為 {$data}", PHP_EOL;
$server->result->incr('finish_nums', 'finish_nums');
$server->result->set('result', ['result' => $data + $server->result->get('result', 'result')]);
if ($server->result->get('finish_nums', 'finish_nums') == $server->setting['task_worker_num']) {
echo "最終計算結果:{$server->result->get('result', 'result')}", PHP_EOL;
}
});
$server->start();
更多關于PHP相關內(nèi)容感興趣的讀者可查看本站專題:《PHP網(wǎng)絡編程技巧總結》、《php socket用法總結》、《php面向對象程序設計入門教程》、《PHP數(shù)據(jù)結構與算法教程》及《php程序設計算法總結》
希望本文所述對大家PHP程序設計有所幫助。
- PHP Swoole異步讀取、寫入文件操作示例
- PHP Swoole異步Redis客戶端實現(xiàn)方法示例
- PHP Swoole異步MySQL客戶端實現(xiàn)方法示例
- php基于 swoole 實現(xiàn)的異步處理任務功能示例
- PHP swoole和redis異步任務實現(xiàn)方法分析
- PHP擴展Swoole實現(xiàn)實時異步任務隊列示例
- Swoole實現(xiàn)異步投遞task任務案例詳解
- 詳解thinkphp5+swoole實現(xiàn)異步郵件群發(fā)(SMTP方式)
- php異步多線程swoole用法實例
- 如何用RabbitMQ和Swoole實現(xiàn)一個異步任務系統(tǒng)
相關文章
Laravel模板引擎Blade中section的一些標簽的區(qū)別介紹
這篇文章主要介紹了Laravel模板引擎Blade中section的一些標簽的區(qū)別介紹,本文講解了@yield 與 @section、@show 與 @stop、@append 和 @override的區(qū)別,需要的朋友可以參考下2015-02-02
php獲得網(wǎng)站訪問統(tǒng)計信息類Compete API用法實例
這篇文章主要介紹了php獲得網(wǎng)站訪問統(tǒng)計信息類Compete API用法,實例分析了php使用curl獲取Compete統(tǒng)計網(wǎng)站信息的技巧,具有一定參考借鑒價值,需要的朋友可以參考下2015-04-04
php+mysqli使用面向對象方式更新數(shù)據(jù)庫實例
這篇文章主要介紹了php+mysqli使用面向對象方式更新數(shù)據(jù)庫的方法,實例分析了mysqli對象的創(chuàng)建、連接、更新及返回更新結果的技巧,需要的朋友可以參考下2015-01-01

