]> git.mxchange.org Git - quix0rs-gnu-social.git/blob - lib/dbqueuemanager.php
Stop daemons using 100% CPU and hammering the DB server when the queue is empty ...
[quix0rs-gnu-social.git] / lib / dbqueuemanager.php
1 <?php
2 /**
3  * Laconica, the distributed open-source microblogging tool
4  *
5  * Simple-minded queue manager for storing items in the database
6  *
7  * PHP version 5
8  *
9  * LICENCE: This program is free software: you can redistribute it and/or modify
10  * it under the terms of the GNU Affero General Public License as published by
11  * the Free Software Foundation, either version 3 of the License, or
12  * (at your option) any later version.
13  *
14  * This program is distributed in the hope that it will be useful,
15  * but WITHOUT ANY WARRANTY; without even the implied warranty of
16  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
17  * GNU Affero General Public License for more details.
18  *
19  * You should have received a copy of the GNU Affero General Public License
20  * along with this program.  If not, see <http://www.gnu.org/licenses/>.
21  *
22  * @category  QueueManager
23  * @package   Laconica
24  * @author    Evan Prodromou <evan@controlyourself.ca>
25  * @author    Sarven Capadisli <csarven@controlyourself.ca>
26  * @copyright 2009 Control Yourself, Inc.
27  * @license   http://www.fsf.org/licensing/licenses/agpl-3.0.html GNU Affero General Public License version 3.0
28  * @link      http://laconi.ca/
29  */
30
31 class DBQueueManager extends QueueManager
32 {
33     var $qis = array();
34
35     function enqueue($object, $queue)
36     {
37         $notice = $object;
38
39         $qi = new Queue_item();
40
41         $qi->notice_id = $notice->id;
42         $qi->transport = $queue;
43         $qi->created   = $notice->created;
44         $result        = $qi->insert();
45
46         if (!$result) {
47             common_log_db_error($qi, 'INSERT', __FILE__);
48             throw new ServerException('DB error inserting queue item');
49         }
50
51         return true;
52     }
53
54     function service($queue, $handler)
55     {
56         while (true) {
57             $this->_log(LOG_DEBUG, 'Checking for notices...');
58             $timeout = $handler->timeout();
59             $notice = $this->_nextItem($queue, $timeout);
60             if (empty($notice)) {
61                 $this->_log(LOG_DEBUG, 'No notices waiting; idling.');
62                 // Nothing in the queue. Do you
63                 // have other tasks, like servicing your
64                 // XMPP connection, to do?
65                 $handler->idle(QUEUE_HANDLER_MISS_IDLE);
66             } else {
67                 $this->_log(LOG_INFO, 'Got notice '. $notice->id);
68                 // Yay! Got one!
69                 if ($handler->handle_notice($notice)) {
70                     $this->_log(LOG_INFO, 'Successfully handled notice '. $notice->id);
71                     $this->_done($notice, $queue);
72                 } else {
73                     $this->_log(LOG_INFO, 'Failed to handle notice '. $notice->id);
74                     $this->_fail($notice, $queue);
75                 }
76                 // Chance to e.g. service your XMPP connection
77                 $this->_log(LOG_DEBUG, 'Idling after success.');
78                 $handler->idle(QUEUE_HANDLER_HIT_IDLE);
79             }
80             // XXX: when do we give up?
81         }
82     }
83
84     function _nextItem($queue, $timeout=null)
85     {
86         $start = time();
87         $result = null;
88
89         do {
90             $qi = Queue_item::top($queue);
91             if (empty($qi)) {
92                 sleep(1);
93             } else {
94                 $notice = Notice::staticGet('id', $qi->notice_id);
95                 if (!empty($notice)) {
96                     $result = $notice;
97                 } else {
98                     $this->_log(LOG_INFO, 'dequeued non-existent notice ' . $notice->id);
99                     $qi->delete();
100                     $qi->free();
101                     $qi = null;
102                 }
103             }
104         } while (empty($result) && (is_null($timeout) || (time() - $start) < $timeout));
105
106         return $result;
107     }
108
109     function _done($object, $queue)
110     {
111         // XXX: right now, we only handle notices
112
113         $notice = $object;
114
115         $qi = Queue_item::pkeyGet(array('notice_id' => $notice->id,
116                                         'transport' => $queue));
117
118         if (empty($qi)) {
119             $this->_log(LOG_INFO, 'Cannot find queue item for notice '.$notice->id.', queue '.$queue);
120         } else {
121             if (empty($qi->claimed)) {
122                 $this->_log(LOG_WARNING, 'Reluctantly releasing unclaimed queue item '.
123                            'for '.$notice->id.', queue '.$queue);
124             }
125             $qi->delete();
126             $qi->free();
127             $qi = null;
128         }
129
130         $this->_log(LOG_INFO, 'done with notice ID = ' . $notice->id);
131
132         $notice->free();
133         $notice = null;
134     }
135
136     function _fail($object, $queue)
137     {
138         // XXX: right now, we only handle notices
139
140         $notice = $object;
141
142         $qi = Queue_item::pkeyGet(array('notice_id' => $notice->id,
143                                         'transport' => $queue));
144
145         if (empty($qi)) {
146             $this->_log(LOG_INFO, 'Cannot find queue item for notice '.$notice->id.', queue '.$queue);
147         } else {
148             if (empty($qi->claimed)) {
149                 $this->_log(LOG_WARNING, 'Ignoring failure for unclaimed queue item '.
150                            'for '.$notice->id.', queue '.$queue);
151             } else {
152                 $orig = clone($qi);
153                 $qi->claimed = null;
154                 $qi->update($orig);
155                 $qi = null;
156             }
157         }
158
159         $this->_log(LOG_INFO, 'done with notice ID = ' . $notice->id);
160
161         $notice->free();
162         $notice = null;
163     }
164
165     function _log($level, $msg)
166     {
167         common_log($level, 'DBQueueManager: '.$msg);
168     }
169 }