classes/Notice.php

   1 <?php
   2 /*
   3  * Laconica - a distributed open-source microblogging tool
   4  * Copyright (C) 2008, 2009, Control Yourself, Inc.
   5  *
   6  * This program is free software: you can redistribute it and/or modify
   7  * it under the terms of the GNU Affero General Public License as published by
   8  * the Free Software Foundation, either version 3 of the License, or
   9  * (at your option) any later version.
  10  *
  11  * This program is distributed in the hope that it will be useful,
  12  * but WITHOUT ANY WARRANTY; without even the implied warranty of
  13  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.     See the
  14  * GNU Affero General Public License for more details.
  15  *
  16  * You should have received a copy of the GNU Affero General Public License
  17  * along with this program.     If not, see <http://www.gnu.org/licenses/>.
  18  */
  19
  20 if (!defined('LACONICA')) { exit(1); }
  21
  22 /**
  23  * Table Definition for notice
  24  */
  25 require_once INSTALLDIR.'/classes/Memcached_DataObject.php';
  26
  27 /* We keep the first three 20-notice pages, plus one for pagination check,
  28  * in the memcached cache. */
  29
  30 define('NOTICE_CACHE_WINDOW', 61);
  31
  32 define('NOTICE_LOCAL_PUBLIC', 1);
  33 define('NOTICE_REMOTE_OMB', 0);
  34 define('NOTICE_LOCAL_NONPUBLIC', -1);
  35 define('NOTICE_GATEWAY', -2);
  36
  37 class Notice extends Memcached_DataObject
  38 {
  39     ###START_AUTOCODE
  40     /* the code below is auto generated do not remove the above tag */
  41
  42     public $__table = 'notice';                          // table name
  43     public $id;                              // int(4)  primary_key not_null
  44     public $profile_id;                      // int(4)   not_null
  45     public $uri;                             // varchar(255)  unique_key
  46     public $content;                         // varchar(140)
  47     public $rendered;                        // text()
  48     public $url;                             // varchar(255)
  49     public $created;                         // datetime()   not_null
  50     public $modified;                        // timestamp()   not_null default_CURRENT_TIMESTAMP
  51     public $reply_to;                        // int(4)
  52     public $is_local;                        // tinyint(1)
  53     public $source;                          // varchar(32)
  54     public $conversation;                    // int(4)
  55
  56     /* Static get */
  57     function staticGet($k,$v=NULL) {
  58         return Memcached_DataObject::staticGet('Notice',$k,$v);
  59     }
  60
  61     /* the code above is auto generated do not remove the tag below */
  62     ###END_AUTOCODE
  63
  64     function getProfile()
  65     {
  66         return Profile::staticGet('id', $this->profile_id);
  67     }
  68
  69     function delete()
  70     {
  71         $this->blowCaches(true);
  72         $this->blowFavesCache(true);
  73         $this->blowSubsCache(true);
  74
  75         $this->query('BEGIN');
  76         //Null any notices that are replies to this notice
  77         $this->query(sprintf("UPDATE notice set reply_to = null WHERE reply_to = %d", $this->id));
  78         $related = array('Reply',
  79                          'Fave',
  80                          'Notice_tag',
  81                          'Group_inbox',
  82                          'Queue_item');
  83         if (common_config('inboxes', 'enabled')) {
  84             $related[] = 'Notice_inbox';
  85         }
  86         foreach ($related as $cls) {
  87             $inst = new $cls();
  88             $inst->notice_id = $this->id;
  89             $inst->delete();
  90         }
  91         $result = parent::delete();
  92         $this->query('COMMIT');
  93     }
  94
  95     function saveTags()
  96     {
  97         /* extract all #hastags */
  98         $count = preg_match_all('/(?:^|\s)#([A-Za-z0-9_\-\.]{1,64})/', strtolower($this->content), $match);
  99         if (!$count) {
 100             return true;
 101         }
 102
 103         /* Add them to the database */
 104         foreach(array_unique($match[1]) as $hashtag) {
 105             /* elide characters we don't want in the tag */
 106             $this->saveTag($hashtag);
 107         }
 108         return true;
 109     }
 110
 111     function saveTag($hashtag)
 112     {
 113         $hashtag = common_canonical_tag($hashtag);
 114
 115         $tag = new Notice_tag();
 116         $tag->notice_id = $this->id;
 117         $tag->tag = $hashtag;
 118         $tag->created = $this->created;
 119         $id = $tag->insert();
 120
 121         if (!$id) {
 122             throw new ServerException(sprintf(_('DB error inserting hashtag: %s'),
 123                                               $last_error->message));
 124             return;
 125         }
 126     }
 127
 128     static function saveNew($profile_id, $content, $source=null,
 129                             $is_local=1, $reply_to=null, $uri=null, $created=null) {
 130
 131         $profile = Profile::staticGet($profile_id);
 132
 133         $final = common_shorten_links($content);
 134
 135         if (mb_strlen($final) > 140) {
 136             common_log(LOG_INFO, 'Rejecting notice that is too long.');
 137             return _('Problem saving notice. Too long.');
 138         }
 139
 140         if (!$profile) {
 141             common_log(LOG_ERR, 'Problem saving notice. Unknown user.');
 142             return _('Problem saving notice. Unknown user.');
 143         }
 144
 145         if (common_config('throttle', 'enabled') && !Notice::checkEditThrottle($profile_id)) {
 146             common_log(LOG_WARNING, 'Excessive posting by profile #' . $profile_id . '; throttled.');
 147             return _('Too many notices too fast; take a breather and post again in a few minutes.');
 148         }
 149
 150         if (common_config('site', 'dupelimit') > 0 && !Notice::checkDupes($profile_id, $final)) {
 151             common_log(LOG_WARNING, 'Dupe posting by profile #' . $profile_id . '; throttled.');
 152                         return _('Too many duplicate messages too quickly; take a breather and post again in a few minutes.');
 153         }
 154
 155                 $banned = common_config('profile', 'banned');
 156
 157         if ( in_array($profile_id, $banned) || in_array($profile->nickname, $banned)) {
 158             common_log(LOG_WARNING, "Attempted post from banned user: $profile->nickname (user id = $profile_id).");
 159             return _('You are banned from posting notices on this site.');
 160         }
 161
 162         $notice = new Notice();
 163         $notice->profile_id = $profile_id;
 164
 165         $blacklist = common_config('public', 'blacklist');
 166         $autosource = common_config('public', 'autosource');
 167
 168         # Blacklisted are non-false, but not 1, either
 169
 170         if (($blacklist && in_array($profile_id, $blacklist)) ||
 171             ($source && $autosource && in_array($source, $autosource))) {
 172             $notice->is_local = -1;
 173         } else {
 174             $notice->is_local = $is_local;
 175         }
 176
 177                 $notice->query('BEGIN');
 178
 179                 $notice->reply_to = $reply_to;
 180         if (!empty($created)) {
 181             $notice->created = $created;
 182         } else {
 183             $notice->created = common_sql_now();
 184         }
 185                 $notice->content = $final;
 186                 $notice->rendered = common_render_content($final, $notice);
 187                 $notice->source = $source;
 188                 $notice->uri = $uri;
 189
 190         if (!empty($reply_to)) {
 191             $reply_notice = Notice::staticGet('id', $reply_to);
 192             if (!empty($reply_notice)) {
 193                 $notice->reply_to = $reply_to;
 194                 $notice->conversation = $reply_notice->conversation;
 195             }
 196         }
 197
 198         if (Event::handle('StartNoticeSave', array(&$notice))) {
 199
 200             $id = $notice->insert();
 201
 202             if (!$id) {
 203                 common_log_db_error($notice, 'INSERT', __FILE__);
 204                 return _('Problem saving notice.');
 205             }
 206
 207             # Update the URI after the notice is in the database
 208             if (!$uri) {
 209                 $orig = clone($notice);
 210                 $notice->uri = common_notice_uri($notice);
 211
 212                 if (!$notice->update($orig)) {
 213                     common_log_db_error($notice, 'UPDATE', __FILE__);
 214                     return _('Problem saving notice.');
 215                 }
 216             }
 217
 218             # XXX: do we need to change this for remote users?
 219
 220             $notice->saveReplies();
 221             $notice->saveTags();
 222
 223             $notice->addToInboxes();
 224             $notice->saveGroups();
 225             $notice->saveUrls();
 226             $orig2 = clone($notice);
 227                 $notice->rendered = common_render_content($final, $notice);
 228             if (!$notice->update($orig2)) {
 229                 common_log_db_error($notice, 'UPDATE', __FILE__);
 230                 return _('Problem saving notice.');
 231             }
 232
 233             $notice->query('COMMIT');
 234
 235             Event::handle('EndNoticeSave', array($notice));
 236         }
 237
 238         # Clear the cache for subscribed users, so they'll update at next request
 239         # XXX: someone clever could prepend instead of clearing the cache
 240
 241         $notice->blowCaches();
 242
 243         return $notice;
 244     }
 245
 246     /** save all urls in the notice to the db
 247      *
 248      * follow redirects and save all available file information
 249      * (mimetype, date, size, oembed, etc.)
 250      *
 251      * @return void
 252      */
 253     function saveUrls() {
 254         common_replace_urls_callback($this->content, array($this, 'saveUrl'), $this->id);
 255     }
 256
 257     function saveUrl($data) {
 258         list($url, $notice_id) = $data;
 259         File::processNew($url, $notice_id);
 260     }
 261
 262     static function checkDupes($profile_id, $content) {
 263         $profile = Profile::staticGet($profile_id);
 264         if (!$profile) {
 265             return false;
 266         }
 267         $notice = $profile->getNotices(0, NOTICE_CACHE_WINDOW);
 268         if ($notice) {
 269             $last = 0;
 270             while ($notice->fetch()) {
 271                 if (time() - strtotime($notice->created) >= common_config('site', 'dupelimit')) {
 272                     return true;
 273                 } else if ($notice->content == $content) {
 274                     return false;
 275                 }
 276             }
 277         }
 278         # If we get here, oldest item in cache window is not
 279         # old enough for dupe limit; do direct check against DB
 280         $notice = new Notice();
 281         $notice->profile_id = $profile_id;
 282         $notice->content = $content;
 283         if (common_config('db','type') == 'pgsql')
 284             $notice->whereAdd('extract(epoch from now() - created) < ' . common_config('site', 'dupelimit'));
 285         else
 286             $notice->whereAdd('now() - created < ' . common_config('site', 'dupelimit'));
 287
 288         $cnt = $notice->count();
 289         return ($cnt == 0);
 290     }
 291
 292     static function checkEditThrottle($profile_id) {
 293         $profile = Profile::staticGet($profile_id);
 294         if (!$profile) {
 295             return false;
 296         }
 297         # Get the Nth notice
 298         $notice = $profile->getNotices(common_config('throttle', 'count') - 1, 1);
 299         if ($notice && $notice->fetch()) {
 300             # If the Nth notice was posted less than timespan seconds ago
 301             if (time() - strtotime($notice->created) <= common_config('throttle', 'timespan')) {
 302                 # Then we throttle
 303                 return false;
 304             }
 305         }
 306         # Either not N notices in the stream, OR the Nth was not posted within timespan seconds
 307         return true;
 308     }
 309
 310     function getUploadedAttachment() {
 311         $post = clone $this;
 312         $query = 'select file.url as up, file.id as i from file join file_to_post on file.id = file_id where post_id=' . $post->escape($post->id) . ' and url like "%/notice/%/file"';
 313         $post->query($query);
 314         $post->fetch();
 315         if (empty($post->up) || empty($post->i)) {
 316             $ret = false;
 317         } else {
 318             $ret = array($post->up, $post->i);
 319         }
 320         $post->free();
 321         return $ret;
 322     }
 323
 324     function hasAttachments() {
 325         $post = clone $this;
 326         $query = "select count(file_id) as n_attachments from file join file_to_post on (file_id = file.id) join notice on (post_id = notice.id) where post_id = " . $post->escape($post->id);
 327         $post->query($query);
 328         $post->fetch();
 329         $n_attachments = intval($post->n_attachments);
 330         $post->free();
 331         return $n_attachments;
 332     }
 333
 334     function blowCaches($blowLast=false)
 335     {
 336         $this->blowSubsCache($blowLast);
 337         $this->blowNoticeCache($blowLast);
 338         $this->blowRepliesCache($blowLast);
 339         $this->blowPublicCache($blowLast);
 340         $this->blowTagCache($blowLast);
 341         $this->blowGroupCache($blowLast);
 342         $this->blowConversationCache($blowLast);
 343     }
 344
 345     function blowConversationCache($blowLast=false)
 346     {
 347         $cache = common_memcache();
 348         if ($cache) {
 349             $ck = 'notice:conversation:'.$this->conversation;
 350             $cache->delete($ck);
 351             if ($blowLast) {
 352                 $cache->delete($ck.';last');
 353             }
 354         }
 355     }
 356
 357     function blowGroupCache($blowLast=false)
 358     {
 359         $cache = common_memcache();
 360         if ($cache) {
 361             $group_inbox = new Group_inbox();
 362             $group_inbox->notice_id = $this->id;
 363             if ($group_inbox->find()) {
 364                 while ($group_inbox->fetch()) {
 365                     $cache->delete(common_cache_key('user_group:notice_ids:' . $group_inbox->group_id));
 366                     if ($blowLast) {
 367                         $cache->delete(common_cache_key('user_group:notice_ids:' . $group_inbox->group_id.';last'));
 368                     }
 369                     $member = new Group_member();
 370                     $member->group_id = $group_inbox->group_id;
 371                     if ($member->find()) {
 372                         while ($member->fetch()) {
 373                             $cache->delete(common_cache_key('notice_inbox:by_user:' . $member->profile_id));
 374                             if ($blowLast) {
 375                                 $cache->delete(common_cache_key('notice_inbox:by_user:' . $member->profile_id . ';last'));
 376                             }
 377                         }
 378                     }
 379                 }
 380             }
 381             $group_inbox->free();
 382             unset($group_inbox);
 383         }
 384     }
 385
 386     function blowTagCache($blowLast=false)
 387     {
 388         $cache = common_memcache();
 389         if ($cache) {
 390             $tag = new Notice_tag();
 391             $tag->notice_id = $this->id;
 392             if ($tag->find()) {
 393                 while ($tag->fetch()) {
 394                     $tag->blowCache($blowLast);
 395                     $ck = 'profile:notice_ids_tagged:' . $this->profile_id . ':' . $tag->tag;
 396
 397                     $cache->delete($ck);
 398                     if ($blowLast) {
 399                         $cache->delete($ck . ';last');
 400                     }
 401                 }
 402             }
 403             $tag->free();
 404             unset($tag);
 405         }
 406     }
 407
 408     function blowSubsCache($blowLast=false)
 409     {
 410         $cache = common_memcache();
 411         if ($cache) {
 412             $user = new User();
 413
 414             $UT = common_config('db','type')=='pgsql'?'"user"':'user';
 415             $user->query('SELECT id ' .
 416
 417                          "FROM $UT JOIN subscription ON $UT.id = subscription.subscriber " .
 418                          'WHERE subscription.subscribed = ' . $this->profile_id);
 419
 420             while ($user->fetch()) {
 421                 $cache->delete(common_cache_key('notice_inbox:by_user:'.$user->id));
 422                 $cache->delete(common_cache_key('notice_inbox:by_user_own:'.$user->id));
 423                 if ($blowLast) {
 424                     $cache->delete(common_cache_key('notice_inbox:by_user:'.$user->id.';last'));
 425                     $cache->delete(common_cache_key('notice_inbox:by_user_own:'.$user->id.';last'));
 426                 }
 427             }
 428             $user->free();
 429             unset($user);
 430         }
 431     }
 432
 433     function blowNoticeCache($blowLast=false)
 434     {
 435         if ($this->is_local) {
 436             $cache = common_memcache();
 437             if (!empty($cache)) {
 438                 $cache->delete(common_cache_key('profile:notice_ids:'.$this->profile_id));
 439                 if ($blowLast) {
 440                     $cache->delete(common_cache_key('profile:notice_ids:'.$this->profile_id.';last'));
 441                 }
 442             }
 443         }
 444     }
 445
 446     function blowRepliesCache($blowLast=false)
 447     {
 448         $cache = common_memcache();
 449         if ($cache) {
 450             $reply = new Reply();
 451             $reply->notice_id = $this->id;
 452             if ($reply->find()) {
 453                 while ($reply->fetch()) {
 454                     $cache->delete(common_cache_key('reply:stream:'.$reply->profile_id));
 455                     if ($blowLast) {
 456                         $cache->delete(common_cache_key('reply:stream:'.$reply->profile_id.';last'));
 457                     }
 458                 }
 459             }
 460             $reply->free();
 461             unset($reply);
 462         }
 463     }
 464
 465     function blowPublicCache($blowLast=false)
 466     {
 467         if ($this->is_local == 1) {
 468             $cache = common_memcache();
 469             if ($cache) {
 470                 $cache->delete(common_cache_key('public'));
 471                 if ($blowLast) {
 472                     $cache->delete(common_cache_key('public').';last');
 473                 }
 474             }
 475         }
 476     }
 477
 478     function blowFavesCache($blowLast=false)
 479     {
 480         $cache = common_memcache();
 481         if ($cache) {
 482             $fave = new Fave();
 483             $fave->notice_id = $this->id;
 484             if ($fave->find()) {
 485                 while ($fave->fetch()) {
 486                     $cache->delete(common_cache_key('fave:ids_by_user:'.$fave->user_id));
 487                     $cache->delete(common_cache_key('fave:by_user_own:'.$fave->user_id));
 488                     if ($blowLast) {
 489                         $cache->delete(common_cache_key('fave:ids_by_user:'.$fave->user_id.';last'));
 490                         $cache->delete(common_cache_key('fave:by_user_own:'.$fave->user_id.';last'));
 491                     }
 492                 }
 493             }
 494             $fave->free();
 495             unset($fave);
 496         }
 497     }
 498
 499     # XXX: too many args; we need to move to named params or even a separate
 500     # class for notice streams
 501
 502     static function getStream($qry, $cachekey, $offset=0, $limit=20, $since_id=0, $max_id=0, $order=null, $since=null) {
 503
 504         if (common_config('memcached', 'enabled')) {
 505
 506             # Skip the cache if this is a since, since_id or max_id qry
 507             if ($since_id > 0 || $max_id > 0 || $since) {
 508                 return Notice::getStreamDirect($qry, $offset, $limit, $since_id, $max_id, $order, $since);
 509             } else {
 510                 return Notice::getCachedStream($qry, $cachekey, $offset, $limit, $order);
 511             }
 512         }
 513
 514         return Notice::getStreamDirect($qry, $offset, $limit, $since_id, $max_id, $order, $since);
 515     }
 516
 517     static function getStreamDirect($qry, $offset, $limit, $since_id, $max_id, $order, $since) {
 518
 519         $needAnd = false;
 520         $needWhere = true;
 521
 522         if (preg_match('/\bWHERE\b/i', $qry)) {
 523             $needWhere = false;
 524             $needAnd = true;
 525         }
 526
 527         if ($since_id > 0) {
 528
 529             if ($needWhere) {
 530                 $qry .= ' WHERE ';
 531                 $needWhere = false;
 532             } else {
 533                 $qry .= ' AND ';
 534             }
 535
 536             $qry .= ' notice.id > ' . $since_id;
 537         }
 538
 539         if ($max_id > 0) {
 540
 541             if ($needWhere) {
 542                 $qry .= ' WHERE ';
 543                 $needWhere = false;
 544             } else {
 545                 $qry .= ' AND ';
 546             }
 547
 548             $qry .= ' notice.id <= ' . $max_id;
 549         }
 550
 551         if ($since) {
 552
 553             if ($needWhere) {
 554                 $qry .= ' WHERE ';
 555                 $needWhere = false;
 556             } else {
 557                 $qry .= ' AND ';
 558             }
 559
 560             $qry .= ' notice.created > \'' . date('Y-m-d H:i:s', $since) . '\'';
 561         }
 562
 563         # Allow ORDER override
 564
 565         if ($order) {
 566             $qry .= $order;
 567         } else {
 568             $qry .= ' ORDER BY notice.created DESC, notice.id DESC ';
 569         }
 570
 571         if (common_config('db','type') == 'pgsql') {
 572             $qry .= ' LIMIT ' . $limit . ' OFFSET ' . $offset;
 573         } else {
 574             $qry .= ' LIMIT ' . $offset . ', ' . $limit;
 575         }
 576
 577         $notice = new Notice();
 578
 579         $notice->query($qry);
 580
 581         return $notice;
 582     }
 583
 584     # XXX: this is pretty long and should probably be broken up into
 585     # some helper functions
 586
 587     static function getCachedStream($qry, $cachekey, $offset, $limit, $order) {
 588
 589         # If outside our cache window, just go to the DB
 590
 591         if ($offset + $limit > NOTICE_CACHE_WINDOW) {
 592             return Notice::getStreamDirect($qry, $offset, $limit, null, null, $order, null);
 593         }
 594
 595         # Get the cache; if we can't, just go to the DB
 596
 597         $cache = common_memcache();
 598
 599         if (!$cache) {
 600             return Notice::getStreamDirect($qry, $offset, $limit, null, null, $order, null);
 601         }
 602
 603         # Get the notices out of the cache
 604
 605         $notices = $cache->get(common_cache_key($cachekey));
 606
 607         # On a cache hit, return a DB-object-like wrapper
 608
 609         if ($notices !== false) {
 610             $wrapper = new ArrayWrapper(array_slice($notices, $offset, $limit));
 611             return $wrapper;
 612         }
 613
 614         # If the cache was invalidated because of new data being
 615         # added, we can try and just get the new stuff. We keep an additional
 616         # copy of the data at the key + ';last'
 617
 618         # No cache hit. Try to get the *last* cached version
 619
 620         $last_notices = $cache->get(common_cache_key($cachekey) . ';last');
 621
 622         if ($last_notices) {
 623
 624             # Reverse-chron order, so last ID is last.
 625
 626             $last_id = $last_notices[0]->id;
 627
 628             # XXX: this assumes monotonically increasing IDs; a fair
 629             # bet with our DB.
 630
 631             $new_notice = Notice::getStreamDirect($qry, 0, NOTICE_CACHE_WINDOW,
 632                                                   $last_id, null, $order, null);
 633
 634             if ($new_notice) {
 635                 $new_notices = array();
 636                 while ($new_notice->fetch()) {
 637                     $new_notices[] = clone($new_notice);
 638                 }
 639                 $new_notice->free();
 640                 $notices = array_slice(array_merge($new_notices, $last_notices),
 641                                        0, NOTICE_CACHE_WINDOW);
 642
 643                 # Store the array in the cache for next time
 644
 645                 $result = $cache->set(common_cache_key($cachekey), $notices);
 646                 $result = $cache->set(common_cache_key($cachekey) . ';last', $notices);
 647
 648                 # return a wrapper of the array for use now
 649
 650                 return new ArrayWrapper(array_slice($notices, $offset, $limit));
 651             }
 652         }
 653
 654         # Otherwise, get the full cache window out of the DB
 655
 656         $notice = Notice::getStreamDirect($qry, 0, NOTICE_CACHE_WINDOW, null, null, $order, null);
 657
 658         # If there are no hits, just return the value
 659
 660         if (!$notice) {
 661             return $notice;
 662         }
 663
 664         # Pack results into an array
 665
 666         $notices = array();
 667
 668         while ($notice->fetch()) {
 669             $notices[] = clone($notice);
 670         }
 671
 672         $notice->free();
 673
 674         # Store the array in the cache for next time
 675
 676         $result = $cache->set(common_cache_key($cachekey), $notices);
 677         $result = $cache->set(common_cache_key($cachekey) . ';last', $notices);
 678
 679         # return a wrapper of the array for use now
 680
 681         $wrapper = new ArrayWrapper(array_slice($notices, $offset, $limit));
 682
 683         return $wrapper;
 684     }
 685
 686     function getStreamByIds($ids)
 687     {
 688         $cache = common_memcache();
 689
 690         if (!empty($cache)) {
 691             $notices = array();
 692             foreach ($ids as $id) {
 693                 $n = Notice::staticGet('id', $id);
 694                 if (!empty($n)) {
 695                     $notices[] = $n;
 696                 }
 697             }
 698             return new ArrayWrapper($notices);
 699         } else {
 700             $notice = new Notice();
 701             $notice->whereAdd('id in (' . implode(', ', $ids) . ')');
 702             $notice->orderBy('id DESC');
 703
 704             $notice->find();
 705             return $notice;
 706         }
 707     }
 708
 709     function publicStream($offset=0, $limit=20, $since_id=0, $max_id=0, $since=null)
 710     {
 711         $ids = Notice::stream(array('Notice', '_publicStreamDirect'),
 712                               array(),
 713                               'public',
 714                               $offset, $limit, $since_id, $max_id, $since);
 715
 716         return Notice::getStreamByIds($ids);
 717     }
 718
 719     function _publicStreamDirect($offset=0, $limit=20, $since_id=0, $max_id=0, $since=null)
 720     {
 721         $notice = new Notice();
 722
 723         $notice->selectAdd(); // clears it
 724         $notice->selectAdd('id');
 725
 726         $notice->orderBy('id DESC');
 727
 728         if (!is_null($offset)) {
 729             $notice->limit($offset, $limit);
 730         }
 731
 732         if (common_config('public', 'localonly')) {
 733             $notice->whereAdd('is_local = 1');
 734         } else {
 735             # -1 == blacklisted
 736             $notice->whereAdd('is_local != -1');
 737         }
 738
 739         if ($since_id != 0) {
 740             $notice->whereAdd('id > ' . $since_id);
 741         }
 742
 743         if ($max_id != 0) {
 744             $notice->whereAdd('id <= ' . $max_id);
 745         }
 746
 747         if (!is_null($since)) {
 748             $notice->whereAdd('created > \'' . date('Y-m-d H:i:s', $since) . '\'');
 749         }
 750
 751         $ids = array();
 752
 753         if ($notice->find()) {
 754             while ($notice->fetch()) {
 755                 $ids[] = $notice->id;
 756             }
 757         }
 758
 759         $notice->free();
 760         $notice = NULL;
 761
 762         return $ids;
 763     }
 764
 765     function addToInboxes()
 766     {
 767         $enabled = common_config('inboxes', 'enabled');
 768
 769         if ($enabled === true || $enabled === 'transitional') {
 770             $inbox = new Notice_inbox();
 771             $UT = common_config('db','type')=='pgsql'?'"user"':'user';
 772             $qry = 'INSERT INTO notice_inbox (user_id, notice_id, created) ' .
 773               "SELECT $UT.id, " . $this->id . ", '" . $this->created . "' " .
 774               "FROM $UT JOIN subscription ON $UT.id = subscription.subscriber " .
 775               'WHERE subscription.subscribed = ' . $this->profile_id . ' ' .
 776               'AND NOT EXISTS (SELECT user_id, notice_id ' .
 777               'FROM notice_inbox ' .
 778               "WHERE user_id = $UT.id " .
 779               'AND notice_id = ' . $this->id . ' )';
 780             if ($enabled === 'transitional') {
 781                 $qry .= " AND $UT.inboxed = 1";
 782             }
 783             $inbox->query($qry);
 784         }
 785         return;
 786     }
 787
 788     function saveGroups()
 789     {
 790         $enabled = common_config('inboxes', 'enabled');
 791         if ($enabled !== true && $enabled !== 'transitional') {
 792             return;
 793         }
 794
 795         /* extract all !group */
 796         $count = preg_match_all('/(?:^|\s)!([A-Za-z0-9]{1,64})/',
 797                                 strtolower($this->content),
 798                                 $match);
 799         if (!$count) {
 800             return true;
 801         }
 802
 803         $profile = $this->getProfile();
 804
 805         /* Add them to the database */
 806
 807         foreach (array_unique($match[1]) as $nickname) {
 808             /* XXX: remote groups. */
 809             $group = User_group::getForNickname($nickname);
 810
 811             if (empty($group)) {
 812                 continue;
 813             }
 814
 815             // we automatically add a tag for every group name, too
 816
 817             $tag = Notice_tag::pkeyGet(array('tag' => common_canonical_tag($nickname),
 818                                              'notice_id' => $this->id));
 819
 820             if (is_null($tag)) {
 821                 $this->saveTag($nickname);
 822             }
 823
 824             if ($profile->isMember($group)) {
 825
 826                 $gi = new Group_inbox();
 827
 828                 $gi->group_id  = $group->id;
 829                 $gi->notice_id = $this->id;
 830                 $gi->created   = common_sql_now();
 831
 832                 $result = $gi->insert();
 833
 834                 if (!$result) {
 835                     common_log_db_error($gi, 'INSERT', __FILE__);
 836                 }
 837
 838                 // FIXME: do this in an offline daemon
 839
 840                 $this->addToGroupInboxes($group);
 841             }
 842         }
 843     }
 844
 845     function addToGroupInboxes($group)
 846     {
 847         $inbox = new Notice_inbox();
 848         $UT = common_config('db','type')=='pgsql'?'"user"':'user';
 849         $qry = 'INSERT INTO notice_inbox (user_id, notice_id, created, source) ' .
 850           "SELECT $UT.id, " . $this->id . ", '" . $this->created . "', " . NOTICE_INBOX_SOURCE_GROUP . " " .
 851           "FROM $UT JOIN group_member ON $UT.id = group_member.profile_id " .
 852           'WHERE group_member.group_id = ' . $group->id . ' ' .
 853           'AND NOT EXISTS (SELECT user_id, notice_id ' .
 854           'FROM notice_inbox ' .
 855           "WHERE user_id = $UT.id " .
 856           'AND notice_id = ' . $this->id . ' )';
 857         if ($enabled === 'transitional') {
 858             $qry .= " AND $UT.inboxed = 1";
 859         }
 860         $result = $inbox->query($qry);
 861     }
 862
 863     function saveReplies()
 864     {
 865         // Alternative reply format
 866         $tname = false;
 867         if (preg_match('/^T ([A-Z0-9]{1,64}) /', $this->content, $match)) {
 868             $tname = $match[1];
 869         }
 870         // extract all @messages
 871         $cnt = preg_match_all('/(?:^|\s)@([a-z0-9]{1,64})/', $this->content, $match);
 872
 873         $names = array();
 874
 875         if ($cnt || $tname) {
 876             // XXX: is there another way to make an array copy?
 877             $names = ($tname) ? array_unique(array_merge(array(strtolower($tname)), $match[1])) : array_unique($match[1]);
 878         }
 879
 880         $sender = Profile::staticGet($this->profile_id);
 881
 882         $replied = array();
 883
 884         // store replied only for first @ (what user/notice what the reply directed,
 885         // we assume first @ is it)
 886
 887         for ($i=0; $i<count($names); $i++) {
 888             $nickname = $names[$i];
 889             $recipient = common_relative_profile($sender, $nickname, $this->created);
 890             if (!$recipient) {
 891                 continue;
 892             }
 893             if ($i == 0 && ($recipient->id != $sender->id) && !$this->reply_to) { // Don't save reply to self
 894                 $reply_for = $recipient;
 895                 $recipient_notice = $reply_for->getCurrentNotice();
 896                 if ($recipient_notice) {
 897                     $orig = clone($this);
 898                     $this->reply_to = $recipient_notice->id;
 899                     $this->conversation = $recipient_notice->conversation;
 900                     $this->update($orig);
 901                 }
 902             }
 903             // Don't save replies from blocked profile to local user
 904             $recipient_user = User::staticGet('id', $recipient->id);
 905             if ($recipient_user && $recipient_user->hasBlocked($sender)) {
 906                 continue;
 907             }
 908             $reply = new Reply();
 909             $reply->notice_id = $this->id;
 910             $reply->profile_id = $recipient->id;
 911             $id = $reply->insert();
 912             if (!$id) {
 913                 $last_error = &PEAR::getStaticProperty('DB_DataObject','lastError');
 914                 common_log(LOG_ERR, 'DB error inserting reply: ' . $last_error->message);
 915                 common_server_error(sprintf(_('DB error inserting reply: %s'), $last_error->message));
 916                 return;
 917             } else {
 918                 $replied[$recipient->id] = 1;
 919             }
 920         }
 921
 922         // Hash format replies, too
 923         $cnt = preg_match_all('/(?:^|\s)@#([a-z0-9]{1,64})/', $this->content, $match);
 924         if ($cnt) {
 925             foreach ($match[1] as $tag) {
 926                 $tagged = Profile_tag::getTagged($sender->id, $tag);
 927                 foreach ($tagged as $t) {
 928                     if (!$replied[$t->id]) {
 929                         // Don't save replies from blocked profile to local user
 930                         $t_user = User::staticGet('id', $t->id);
 931                         if ($t_user && $t_user->hasBlocked($sender)) {
 932                             continue;
 933                         }
 934                         $reply = new Reply();
 935                         $reply->notice_id = $this->id;
 936                         $reply->profile_id = $t->id;
 937                         $id = $reply->insert();
 938                         if (!$id) {
 939                             common_log_db_error($reply, 'INSERT', __FILE__);
 940                             return;
 941                         } else {
 942                             $replied[$recipient->id] = 1;
 943                         }
 944                     }
 945                 }
 946             }
 947         }
 948
 949         // If it's not a reply, make it the root of a new conversation
 950
 951         if (empty($this->conversation)) {
 952             $orig = clone($this);
 953             $this->conversation = $this->id;
 954             $this->update($orig);
 955         }
 956
 957         foreach (array_keys($replied) as $recipient) {
 958             $user = User::staticGet('id', $recipient);
 959             if ($user) {
 960                 mail_notify_attn($user, $this);
 961             }
 962         }
 963     }
 964
 965     function asAtomEntry($namespace=false, $source=false)
 966     {
 967         $profile = $this->getProfile();
 968
 969         $xs = new XMLStringer(true);
 970
 971         if ($namespace) {
 972             $attrs = array('xmlns' => 'http://www.w3.org/2005/Atom',
 973                            'xmlns:thr' => 'http://purl.org/syndication/thread/1.0');
 974         } else {
 975             $attrs = array();
 976         }
 977
 978         $xs->elementStart('entry', $attrs);
 979
 980         if ($source) {
 981             $xs->elementStart('source');
 982             $xs->element('title', null, $profile->nickname . " - " . common_config('site', 'name'));
 983             $xs->element('link', array('href' => $profile->profileurl));
 984             $user = User::staticGet('id', $profile->id);
 985             if (!empty($user)) {
 986                 $atom_feed = common_local_url('api',
 987                                               array('apiaction' => 'statuses',
 988                                                     'method' => 'user_timeline',
 989                                                     'argument' => $profile->nickname.'.atom'));
 990                 $xs->element('link', array('rel' => 'self',
 991                                            'type' => 'application/atom+xml',
 992                                            'href' => $profile->profileurl));
 993                 $xs->element('link', array('rel' => 'license',
 994                                            'href' => common_config('license', 'url')));
 995             }
 996
 997             $xs->element('icon', null, $profile->avatarUrl(AVATAR_PROFILE_SIZE));
 998         }
 999
1000         $xs->elementStart('author');
1001         $xs->element('name', null, $profile->nickname);
1002         $xs->element('uri', null, $profile->profileurl);
1003         $xs->elementEnd('author');
1004
1005         if ($source) {
1006             $xs->elementEnd('source');
1007         }
1008
1009         $xs->element('title', null, $this->content);
1010         $xs->element('summary', null, $this->content);
1011
1012         $xs->element('link', array('rel' => 'alternate',
1013                                    'href' => $this->bestUrl()));
1014
1015         $xs->element('id', null, $this->uri);
1016
1017         $xs->element('published', null, common_date_w3dtf($this->created));
1018         $xs->element('updated', null, common_date_w3dtf($this->modified));
1019
1020         if ($this->reply_to) {
1021             $reply_notice = Notice::staticGet('id', $this->reply_to);
1022             if (!empty($reply_notice)) {
1023                 $xs->element('link', array('rel' => 'related',
1024                                            'href' => $reply_notice->bestUrl()));
1025                 $xs->element('thr:in-reply-to',
1026                              array('ref' => $reply_notice->uri,
1027                                    'href' => $reply_notice->bestUrl()));
1028             }
1029         }
1030
1031         $xs->element('content', array('type' => 'html'), $this->rendered);
1032
1033         $tag = new Notice_tag();
1034         $tag->notice_id = $this->id;
1035         if ($tag->find()) {
1036             while ($tag->fetch()) {
1037                 $xs->element('category', array('term' => $tag->tag));
1038             }
1039         }
1040         $tag->free();
1041
1042         $xs->elementEnd('entry');
1043
1044         return $xs->getString();
1045     }
1046
1047     function bestUrl()
1048     {
1049         if (!empty($this->url)) {
1050             return $this->url;
1051         } else if (!empty($this->uri) && preg_match('/^https?:/', $this->uri)) {
1052             return $this->uri;
1053         } else {
1054             return common_local_url('shownotice',
1055                                     array('notice' => $this->id));
1056         }
1057     }
1058
1059     function stream($fn, $args, $cachekey, $offset=0, $limit=20, $since_id=0, $max_id=0, $since=null)
1060     {
1061         $cache = common_memcache();
1062
1063         if (empty($cache) ||
1064             $since_id != 0 || $max_id != 0 || (!is_null($since) && $since > 0) ||
1065             ($offset + $limit) > NOTICE_CACHE_WINDOW) {
1066             return call_user_func_array($fn, array_merge($args, array($offset, $limit, $since_id,
1067                                                                       $max_id, $since)));
1068         }
1069
1070         $idkey = common_cache_key($cachekey);
1071
1072         $idstr = $cache->get($idkey);
1073
1074         if (!empty($idstr)) {
1075             // Cache hit! Woohoo!
1076             $window = explode(',', $idstr);
1077             $ids = array_slice($window, $offset, $limit);
1078             return $ids;
1079         }
1080
1081         $laststr = $cache->get($idkey.';last');
1082
1083         if (!empty($laststr)) {
1084             $window = explode(',', $laststr);
1085             $last_id = $window[0];
1086             $new_ids = call_user_func_array($fn, array_merge($args, array(0, NOTICE_CACHE_WINDOW,
1087                                                                           $last_id, 0, null, $tag)));
1088
1089             $new_window = array_merge($new_ids, $window);
1090
1091             $new_windowstr = implode(',', $new_window);
1092
1093             $result = $cache->set($idkey, $new_windowstr);
1094             $result = $cache->set($idkey . ';last', $new_windowstr);
1095
1096             $ids = array_slice($new_window, $offset, $limit);
1097
1098             return $ids;
1099         }
1100
1101         $window = call_user_func_array($fn, array_merge($args, array(0, NOTICE_CACHE_WINDOW,
1102                                                                      0, 0, null, $tag)));
1103
1104         $windowstr = implode(',', $window);
1105
1106         $result = $cache->set($idkey, $windowstr);
1107         $result = $cache->set($idkey . ';last', $windowstr);
1108
1109         $ids = array_slice($window, $offset, $limit);
1110
1111         return $ids;
1112     }
1113 }