Scalability work on user backup stream generation.

UserActivityStream -- used to create a full activity stream including subscriptions, favorites, notices, etc -- normally buffers everything into memory at once. This is infeasible for accounts with long histories of serious usage; it can take tens of seconds just to pull all records from the database, and working with them all in memory is very likely to hit resource limits.
This commit adds an alternate mode for this class which avoids pulling notices until during the actual output. Instead of pre-sorting and buffering all the notices, empty spaces between the other activities are filled in with notices as we're making output. This means more smaller queries spread out during operations, and less stuff kept in memory.

Callers (backupaccount action, and backupuser.php) which can stream their output pass an $outputMode param of UserActivityStream::OUTPUT_RAW, and during getString() it'll send straight to output as well as slurping the notices in this extra funky fashion.
Other callers will let it default to the OUTPUT_STRING mode, which keeps the previous behavior.

There should be a better way to do this, swapping out the stringer output for raw output more consitently.

Revert "FacebookBridge - Add lots of debug output (revert me)"

This reverts commit c44a622449757fe13dc30ce120af07aa03ac5dc4.

FacebookBridge - Don't hinder autoloading if the Facebook ID and secret aren't set

FacebookBridge - dequeue messages that aren't bound for Facebook

FacebookBridge - Add lots of debug output (revert me)

FacebookBridge - make a huge fuss if we can't create a valid Facebookclient

Fix ticket #3057: apply HTML escaping on special characters in Twitter import

Changes the replacement of Twitter "entities" from in-place reverse ordering ('to preserve indices') to a forward-facing append-in-chunks that pulls in both the text and link portions, and escapes them all.
This unfortunately means first *de*-escaping the < and > that Twitter helpfully adds for us.... and any literal &blah;s that get written. This seems to match Twitter's web UI, however horrid it is.

Partial implementation for ticket #2442: MobileProfile plugin should allow manual switching between regular and mobile rendering modes

http://status.net/open-source/issues/2442

Notes:
* Mapstraction causes JavaScript errors in XHTML mode, breaking our code if we're run later so the link doesn't work to get back to Desktop.
* not 100% sure how safe feature detection is here?
* Currently will be useless but visible links if no JS available; need to fall back to server-side for limited browsers

Ticket #3011: Add attachments/uploads and attachments/file_quota to api/statusnet/config.(xml|json)

file_quota is adjusted from the defined value to take into account the maximum upload size limits in PHP, or cropped to 0 if uploads are disabled.
This can be used by client apps to determine maximum size for an attachment.

Fix ticket #3001: Twitter bridge was replacing original form of @-mentions with canonical form unexpectedly

Now using the original text form of @-mentions and #-tags, as in Twitter's own HTMLification.
Canonical forms are still used in generating links, where it's polite to match the canonical form.

Fix issue #3035: search highlighting broke URLs in some imported messages (Twitter)

Search highlighting was being done with a regex on raw HTML text, followed by a second regex undoing replacements within double-quoted attribute values.
This broke on imported Twitter messages, as the way we generate the markup uses single quotes on the attributes, which didn't get matched by the second regex.
I've replaced this do-then-undo cycle by dividing up the import HTML into freetext spans and tags; the freetext gets replaced, while the tags are left untouched.

Fixes for ticket #3052: some commands started triggering when extra text is supposed to suppress them

Regressions caused by bad refactoring in commit 21feac3bea72b0ecd88a3.
Test cases in tests/CommandInterpreterTest.php were made against the pre-refactoring code, and now check out with the fixed code.
Failures were caused by not changing logic structure when moving from multiple exit points (each if point would return directly with a null or an object) to setting a result variable and then falling through to a common exit point. Without the if statements being restructured, the result variable would just get overridden by the next case.

CommandInterpreter test cases to guard against regressions

Issue #3049 - resync doc/im with the help command text (various additions since doc was last edited)

Blow user:site_owner cache when granting/revoking 'owner' role

use fallback URIs for groups when filling in attention in Notice::asActivity()

add path separators for Plugin::path()

Merge remote branch 'origin/master'

backup action is read-only

Atom - output nickname for atom:name in atom:author

Update translator comment for the url shortener "free service" marker: free as in open

Fix for failure/exception on subscription/subscriber lists when deleted profiles are stuck in cached list.

Workaround for deleted profiles still appearing in cached subscriptions/subscribers lists: if we couldn't fetch them, don't include them in the ArrayWrapper.
ArrayWrapper doesn't deal well with null entries, which aren't meant to happen in how it works. This code has recently changed from dying directly with a PHP fatal error in that case to throwing an exception, which allows tracking down the caller.

It looks like there might be some cases where profiles and their matching subscriptions get deleted, but the subscription entries don't get properly cleared from cache... that still bears further investigation. The regular code path looks ok; calls Subscription::cancel() from code called in Profile::delete(); but if they're batch-deleted instead of one row at a time, that could fail to trigger.

Merge branch 'master' of gitorious.org:statusnet/mainline

add plugins/sslpath setting, default to site path/plugins

add --all and --suspicious options for update-profile-data.php

refactor for multi....

woops

Work in progress: update-profile-data.php to update ostatus profile info from the current feed

Merge branch 'master' of gitorious.org:statusnet/mainline

Merge remote branch 'dev/master'

get the subject first if you go to the feed

check legacy <actor> and <subject> first from feed

Merge branch 'master' into 0.9.x

Fix for ticket #3039: TwitterBridge was incorrectly sending repeats of Twitter-bound messages if the repeater has sending of things to Twitter disabled.

A repeat/retweet is roughly equivalent to an active direct post, so should follow the posting rules, rather than always sending over as we do for fave notifications.

Merge branch 'master' of gitorious.org:statusnet/mainline

* 'master' of gitorious.org:statusnet/mainline:
  Show aside primary on settings pages for all themes.
  correct error in README on default for deletion

FacebookBridge - remove unnecessary warning and noisy debugging statement

Show aside primary on settings pages for all themes.

correct error in README on default for deletion

Try not to wipe out good data with empty values in Ostatus_profile::updateProfile()

Output from 0.9.6 PuSH feeds seems to have a rump <author> but no
<activity:actor>. It was overwriting valid and useful data set up at
subscribe time.

This fix tries to avoid overwriting data. However, it may prevent
updates that delete data.

Bug: 3028

Atom output - Reinstate activity:actor and activity:subject
w/deprecation warnings. Also add statusnet:profile_info back into
author/actor.

Merge branch 'master' of gitorious.org:statusnet/mainline

Partial revert of 073f3e99: restores the original non-hashbang URLs for twitter users as the remote profile.
Should fix issue #3027: twitter user avatars not getting imported.

Due to the change in URI, all twitter users that had been previously seen were getting new profile entries, which tried to save the same avatar. This would fail as Avatar.url has a unique index.
Note: now anything new seen in the last couple days in production will still potentially conflict.

Remove executable bits from Auth_SASL files

include Auth_SASL from PEAR in extlib

Merge branch 'ssltweak'

Further tweak for ssl paths in plugin check (sslserver may be set but empty)

Merge branch 'master' of gitorious.org:statusnet/mainline

ensure*() functions throw exceptions for errors

Tweak to use site/server fallback when no plugins/sslserver or site/sslserver and generating plugin CSS

LOG_WARN -> LOG_WARNING

0.9.7beta2 (for js update)

Revert jQuery Form to r2.17 -- the latest fails with our Meteor stuff the way it tweaks document.domain (which also causes other AJAX-related problems and needs to be destroyed one of these days...)

FacebookBridge plugin - allow Facebook app ID and secret to be
initialized via config.php

Merge branch 'testing'

Merge remote branch 'origin/pluginstatic' into testing

Merge branch 'testing'

change alpha1 to beta1

Merge branch 'testing'

Conflicts:
plugins/Facebook/facebookaction.php
plugins/Facebook/facebookhome.php
plugins/Facebook/facebookutil.php

Make ShowmessageAction not be a subclass of MailboxAction

The ShowmessageAction was using the MailboxAction to do its display of
a single direct message. Since we redid the nickname management, this
was breaking (MailboxAction requires a nickname argument,
ShowmessageAction does not, and nickname validation that used to
quietly fail now throws an exception).

I've moved the message list processing to its own widget class, so the
need to subclass MailboxAction has disappeared. I've rewritten this
action to use the MessageListItem widget, and it works fine now.

correctly show the source of messages in a message list

Create and use MessageList widget

Our mailbox actions (inbox and outbox) were doing their own display of
messages. This was causing issues with especially showmessage, which
since the more rigourous nickname checks were added, no longer works as
a mailbox subclass.

I've taken the time to rip out the message listing code from MailboxAction
and moved it to a MessageList widget. The different mailboxes now have their
own subclasses that show the correct profile in the list.

Issue #3025: string -> boolean for profile_background_tile entry in JSON user results from Twitter-compat API

This entry was using the strings 'true' and 'false' instead of literal booleans, which could confuse clients expecting literal booleans as in other places and on Twitter in this place.

Add a brief explanation of what group inbox is at the top of the page (instructions section), plus a message to show when there are no private messages in the inbox.

Merge branch 'testing' of gitorious.org:statusnet/mainline into testing

Fix group regexes that got missed in Nickname::DISPLAY_FMT update: fixes bug where group linking happened, but not actual delivery, when using _underscores_ in the !group_name

hide feeds from group page if it's private-only

Show a little indicator for private-only groups

add hooks for Group profile information

Force notices to DMs when privacy = always

Change category and copyright year

Merge branch 'testing' into privategroup

pagination for group inbox

Rename PrivateGroup to GroupPrivateMessage to be clearer

Add group info to new group message email

button on the group page to post a new message

Form for posting a group message on group inbox

Add a hook for group action list

Show group local nav on group inbox

Show private messages to groups in a list

Shows the messages to a private group in a list. New classes for
showing a group private message and list of group private messages.

New actions for showing a stream of group private messages and a
single group private message.

move MESSAGES_PER_PAGE to common.php

Send a private group message with a d command

commands are always lowercased in interpreter

hooks for commands

save group privacy settings

hook for new group through a form, same as editing

autoload private group classes

redo the group dm schema, again

only blow public timeline cache if notice is in it

Merge branch 'testing' into privategroup

Conflicts:
lib/groupeditform.php

FacebookBridge use Plugin::path()

Realtime needs to load from own directory, not subclass's

Bookmark uses Plugin::path()

YammerImport uses Plugin::path()

ShareNotice uses Plugin::path()

MobileProfile uses Plugin::path()

Merge branch 'testing' into pluginstatic

fix variable name in NewMenu

NewMenu uses Plugin::path()

FIXME for Plugin::path() in TinyMCE

TabFocus uses Plugin::path()