Merge commit 'origin/master' into testing

Conflicts:
classes/Notice.php

Merge branch 'blacklisttable' into testing

Merge branch 'testing' of git@gitorious.org:statusnet/mainline into testing

Store blacklist patterns in their own tables

We were bumping into limits on the config format in the Blacklist
plugin. So, added new tables for nickname and homepage blacklists, and
changed the plugin to use those instead of config file (actually,
still uses config file in addition, for compatibility).

Fix for API group methods, caused failure or output corruption when pulling up local groups by name in api/statusnet/groups/is_member.json/xml

Fix for API group methods, caused failure or output corruption when pulling up local groups by name in api/statusnet/groups/is_member.json/xml

Make sure we're requiring the library

Updated Math_Biginteger from upstream - removing safe* workarounds

Check for 0.9.0 bad keys from old Crypt_RSA library

A bit safer checking in the keypair parsing

Look for the first object in the Activity

Improve legibility of OStatus remote tests output

add a general PuSHed post and an @-reply back to a subscribee by name to OStatus remote test cases

fixup_deletions.php script to look for notices posted by now-deleted profiles and remove them.

fixup_deletions.php script to look for notices posted by now-deleted profiles and remove them.

Add basic subscribe/unsubscribe test to OStatus test cases

Don't spew XML parse warnings to output when checking a remote XRD page

FOAF was missing OStatus remote subscriptions, now fixed.

Merge branch 'master' of git@gitorious.org:statusnet/mainline into testing

Consistently send Profiles into Fave::addNew()

prevent password login actions in OpenID-only mode

Don't add PHPSESSID parameter onto notice and conversation URIs if we save a notice during a session override.
This was being triggered by welcomebot messages created at account creation time, then propagated through replies.

change router to allow hooking path connections

start making OpenID-only mode work

reformat OpenIDPlugin for PHPCS

Fix reference. Look at the first ActivityObject in the list.

Some initial media parsing
- Activity now returns a list of activity objects
- Processing of photo objects

Merge branch 'testing' of gitorious.org:statusnet/mainline into testing

* 'testing' of gitorious.org:statusnet/mainline:
  OStatus remote sending test cases. Doesn't actually run within PHPUnit right now, must be run from command line -- specify base URLs to two StatusNet sites that will be able to communicate with each other.
  Math_BigInteger doesn't correctly handle serialization/deserialization for a value of 0, which can end up spewing notices to output and otherwise intefering with Salmon signature setup and verification when using memcached.
  Log backtraces for non-ClientException exceptions caught at the top-level handler.
  Confirm there's actually user and domain portions of acct string before assigning things from output of explode(); avoids notice message when invalid input passed to main/xrd
  Fixing HTTP Header LRDD parsing (sites in subdirectories need this)
  Replace the "give up and dump object" attachment view fallback with a client-side redirect to the target URL, which will at least be useful.
  ignore unrecognized object types
  Pull <atom:author> info as well as <activity:actor> when we have an old-style ActivityStreams feed. This fixes subscription setup for Cliqset feeds, which currently have a bogus activity:actor/atom:id but a good atom:author/atom:uri
  Accept 'tag' and other non-http id URIs in Ostatus_profile::getActivityObjectProfileURI().

OStatus remote sending test cases. Doesn't actually run within PHPUnit right now, must be run from command line -- specify base URLs to two StatusNet sites that will be able to communicate with each other.

Current test run includes:
* register accounts (via web form)
* local post
* @-mention using path (@domain/path/to/user)

Subscriptions, webfinger mentions, various paths to subscription and unsubscription, etc to come.

Math_BigInteger doesn't correctly handle serialization/deserialization for a value of 0, which can end up spewing notices to output and otherwise intefering with Salmon signature setup and verification when using memcached.
Worked around this with a subclass that fixes the wakeup, used for the stored 0 value in the subclassed Crypt_RSA.

Log backtraces for non-ClientException exceptions caught at the top-level handler.

Confirm there's actually user and domain portions of acct string before assigning things from output of explode(); avoids notice message when invalid input passed to main/xrd

Replace the "give up and dump object" attachment view fallback with a client-side redirect to the target URL, which will at least be useful.

Fixing HTTP Header LRDD parsing (sites in subdirectories need this)

Replace the "give up and dump object" attachment view fallback with a client-side redirect to the target URL, which will at least be useful.

ignore unrecognized object types

Fix broken assertion

Pull <atom:author> info as well as <activity:actor> when we have an old-style ActivityStreams feed. This fixes subscription setup for Cliqset feeds, which currently have a bogus activity:actor/atom:id but a good atom:author/atom:uri

Accept 'tag' and other non-http id URIs in Ostatus_profile::getActivityObjectProfileURI().

(If there's not a valid ID we fall back to the link, which we do still validate as http/s.)

OStatus profile setup cleanup
* drop OStatusPlugin::localProfileFromUrl(), we can just look up on user.uri
* clean up a few edge cases that returned null through Ostatus_profile::ensure* code paths, now throws clear exception when we can't find a feed from the given profile url
* add some doc comments on the ensure* methods

only use Posterous author data if it matches the profile URL

use Posterous element if available for RssChannel discovery

correct creation of avatar links for RSS and Posterous elements

move atom category to its own file, too

test posterous author use

special-case Posterous author element for activity actor

Move activity classes to their own files

Moved the various classes used by the Activity class to their own
files. There were >10 classes in the same file, with around 1500 lines
in the file. Just too big.

This change makes autoloading work for these classes, so also removed
the hard require in lib/common.php.

use feedEl for discovery

fall back to summary or title if content not available

allow html content in summary and clean it out of title

Allow PuSH posts without author information

Superfeedr (sp.?) posts entries without author information. We can
assume that this is intended to be by the original author.
Re-structured the checks for entries that come in by PuSH so they can
either have no author or an empty author, but not a different author.

handle RSS as well as Atom in Ostatus push hits

rename $rss to $channel to prevent misunderstanding

RSS feeds have the format
<rss><channel><item/><item/><item/></channel></rss>. The element named
$rss was actually the <channel> element, so I renamed the variable so
I wouldn't hurt my head.

Merge branch 'testing' of git@gitorious.org:statusnet/mainline into testing

try to make a nickname from the user profile url before using the URI

Avoid notices for accessing undefined array indices in hcard processing

OStatus: be a little laxer about attempts to start/stop PuSH subscriptions that were left in an inconsistent state.
Instead of aborting, we'll try to reconfirm the sub/unsub, which once confirmed will replace whatever the previous state was on the server side.

Merge branch 'master' of git@gitorious.org:statusnet/mainline into testing

ensure from an RSS channel

make deriving a subject from an RSS channel work

move ActivityObject constructors from Activity to ActivityObject

only search elements for links

return empty hints if no hcard in the html

define a 'root' attribute for the channel or feed

Fix typo in public tag cloud query setup which caused the cutoff to get skipped.

Drop result ID from data objects on clone(). This keeps the original object working if it was in the middle of a query loop, even if the cloned object falls out of scope and triggers its destructor.
This bug was hitting a number of places where we had the pattern:

$db->find();
while($dbo->fetch()) {
  $x = clone($dbo);
  // do anything with $x other than storing it in an array
}

The cloned object's destructor would trigger on the second run through the loop, freeing the database result set -- not really what we wanted.
(Loops that stored the clones into an array were fine, since the clones stay in scope in the array longer than the original does.)

Detaching the database result from the clone lets us work with its data without interfering with the rest of the query.
In the unlikely even that somebody is making clones in the middle of a query, then trying to continue the query with the clone instead of the original object, well they're gonna be broken now.

clarify output on fixup-shadow.php

Merge branch 'testing' of gitorious.org:statusnet/mainline into testing

* 'testing' of gitorious.org:statusnet/mainline:
  Validate OStatus avatar URL before fetching.

Allow admins to set a min site textlimit of 0 (unlimited)

Validate OStatus avatar URL before fetching.

Validate OStatus avatar URL before fetching.

Merge branch 'testing' of gitorious.org:statusnet/mainline into testing

* 'testing' of gitorious.org:statusnet/mainline:
  Parse RSS items as activities
  Remove hkit and do our own hcard parsing
  Work around weird bug with HTML normalization via PHP DOM module; if source had xmlns and xml:lang I ended up with double output, breaking the subsequent parsing. Will have to track this down later and report upstream if not already resolved.

Parse RSS items as activities

First steps to parsing RSS items as activities. RSS feeds don't seem
to have enough data to make good remote profiles, but this may work
with some "hints".

Merge branch 'testing' of git@gitorious.org:statusnet/mainline into testing

Conflicts:
plugins/OStatus/extlib/hkit/hkit.class.php
plugins/OStatus/lib/discoveryhints.php

Remove hkit and do our own hcard parsing

Parsing hcards for the data we need wasn't hard enough to justify using
hkit. It was dependent on a number of external systems (something to
run tidy), and only could handle XHTML.

We now parse HTML with the PHP dom libraries used elsewhere, and
scrape out our own hcards. Seems to work nicer and faster and most of
all works with Google Buzz profile URLs.

Work around weird bug with HTML normalization via PHP DOM module; if source had xmlns and xml:lang I ended up with double output, breaking the subsequent parsing. Will have to track this down later and report upstream if not already resolved.

Merge branch 'testing' of gitorious.org:statusnet/mainline into testing

* 'testing' of gitorious.org:statusnet/mainline:
  Handle "forgot to upload an avatar on avatarsettings" a little more gracefully.

Handle "forgot to upload an avatar on avatarsettings" a little more gracefully.

Merge branch 'testing' of gitorious.org:statusnet/mainline into testing

* 'testing' of gitorious.org:statusnet/mainline:
  OStatus discover fixes:
  Remove xpm support (no one really uses it, and IMAGETYPE_XPM is undefined, causing warnings)
  Fix notice warning about unused var -- was renamed during refactoring.

OStatus discover fixes:
* Subscription::start was sometimes passing users instead of profiles to hooks, which broke OStatus subscription notifications; now normalizing to profiles for processing.
* H-card parsing would trigger a lot of PHP warnings and notices in hKit. Now suppressing warnings and notices for the duration of the call to keep them out of output when display_errors is on.
* H-card parsing would trigger a PHP fatal error if the source page was not well-formed XML and Tidy was not present on the system. Switched normalization to use the PHP DOM module which is always present, as we have no need for Tidy's extra features here.
* Trying to fetch avatars from Google profiles failed and triggered a PHP warning due to the relative URL not being resolved during h-card parsing. Now passing profile page URL into hKit by sneaking a <base> tag in while we normalize the HTML source.
* Profile pages without a "Link" header could trigger PHP notices due to a bad NULL -> array(NULL) conversion in LinkHeader::getLink(). Now checking that there was a return value before converting single return value into array.

Minor syntax err in TwitterBridge README example

Remove xpm support (no one really uses it, and IMAGETYPE_XPM is undefined, causing warnings)
Remove erroneous call to unlink in the constructor

Merge branch 'testing' of git@gitorious.org:statusnet/mainline into testing

Merge branch 'testing' of gitorious.org:statusnet/mainline into testing

* 'testing' of gitorious.org:statusnet/mainline:
  Fix for xmpp/sms notification options appearing to be disabled on new subscriptions.

API - handle any exceptions thrown during notice save.  The API was
occasionally spitting out HTML, which is hard for clients to deal
with.

Fix notice warning about unused var -- was renamed during refactoring.

Merge branch 'testing' of git@gitorious.org:statusnet/mainline into testing

Fix for xmpp/sms notification options appearing to be disabled on new subscriptions.
Base problem is that our caching-on-insert interferes with relying on column default values; the cached object is missing those fields, so they appear to be empty (null) when the object is retrieved from cache.
Now explicitly setting them when inserting subscriptions, and cleaned up some code that had alternate code paths.

May also have made auto-subscription work for remote OStatus subscribers, but can't test until magic sigs are working again.

Remove deprecated call-by-reference. Was causing a warning on Dreamhost.

Merge branch 'testing' of git@gitorious.org:statusnet/mainline into testing

change profile URL ensure method for OStatus

Fix some remote subscription regressions from f21f78364a9cbde2ca535a3983b384707ad097ae
Ostatus_profile::ensureProfile() has been renamed to Ostatus_profile::ensureProfileURL()

Add readme notes about PHP <5.2.6 bug on 64-bit and PHP 5.3 issues.

Runtime check for known bad PHP versions with 64-bit stream_select() bug in xmppdaemon.php.

Merge branch 'master' of git@gitorious.org:statusnet/mainline into testing

Ensure that DB connection is active at start of User::updateKeys() and Foreign_user::updateKeys(); calls to $this->_quote() require a live connection object and don't lazy-initialize themselves.
May fix WSOD when changing incoming email address.

add exception on inconsistent db to User::getProfile()

new exception class for when a user has no profile

reverse order from delete, insert to insert, delete on ostatus conversion

catch exceptions in OStatus updates, log, and continue