]> git.mxchange.org Git - friendica.git/blobdiff - src/Protocol/OStatus.php
Merge pull request #8631 from MrPetovan/task/remove-item-tag-field
[friendica.git] / src / Protocol / OStatus.php
index 2e47f18d1655776c5f0a5f6886871797b28f9f66..c7882d03557051dd3d37decbfe112e6b8c6d15b2 100644 (file)
@@ -1,19 +1,32 @@
 <?php
 /**
- * @file src/Protocol/OStatus.php
+ * @copyright Copyright (C) 2020, Friendica
+ *
+ * @license GNU AGPL version 3 or any later version
+ *
+ * This program is free software: you can redistribute it and/or modify
+ * it under the terms of the GNU Affero General Public License as
+ * published by the Free Software Foundation, either version 3 of the
+ * License, or (at your option) any later version.
+ *
+ * This program is distributed in the hope that it will be useful,
+ * but WITHOUT ANY WARRANTY; without even the implied warranty of
+ * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
+ * GNU Affero General Public License for more details.
+ *
+ * You should have received a copy of the GNU Affero General Public License
+ * along with this program.  If not, see <https://www.gnu.org/licenses/>.
+ *
  */
+
 namespace Friendica\Protocol;
 
 use DOMDocument;
 use DOMXPath;
 use Friendica\Content\Text\BBCode;
 use Friendica\Content\Text\HTML;
-use Friendica\Core\Cache;
-use Friendica\Core\Config;
-use Friendica\Core\L10n;
-use Friendica\Core\Lock;
+use Friendica\Core\Cache\Duration;
 use Friendica\Core\Logger;
-use Friendica\Core\PConfig;
 use Friendica\Core\Protocol;
 use Friendica\Database\DBA;
 use Friendica\DI;
@@ -22,6 +35,8 @@ use Friendica\Model\Contact;
 use Friendica\Model\Conversation;
 use Friendica\Model\GContact;
 use Friendica\Model\Item;
+use Friendica\Model\ItemURI;
+use Friendica\Model\Tag;
 use Friendica\Model\User;
 use Friendica\Network\Probe;
 use Friendica\Util\DateTimeFormat;
@@ -35,7 +50,7 @@ require_once 'mod/share.php';
 require_once 'include/api.php';
 
 /**
- * @brief This class contain functions for the OStatus protocol
+ * This class contain functions for the OStatus protocol
  */
 class OStatus
 {
@@ -43,7 +58,7 @@ class OStatus
        private static $conv_list = [];
 
        /**
-        * @brief Fetches author data
+        * Fetches author data
         *
         * @param DOMXPath $xpath     The xpath object
         * @param object   $context   The xml context of the author details
@@ -234,7 +249,7 @@ class OStatus
                        $gcid = GContact::update($contact);
 
                        GContact::link($gcid, $contact["uid"], $contact["id"]);
-               } elseif ($contact["network"] != Protocol::DFRN) {
+               } elseif (empty($contact["network"]) || ($contact["network"] != Protocol::DFRN)) {
                        $contact = [];
                }
 
@@ -242,7 +257,7 @@ class OStatus
        }
 
        /**
-        * @brief Fetches author data from a given XML string
+        * Fetches author data from a given XML string
         *
         * @param string $xml      The XML
         * @param array  $importer user record of the importing user
@@ -279,7 +294,7 @@ class OStatus
        }
 
        /**
-        * @brief Read attributes from element
+        * Read attributes from element
         *
         * @param object $element Element object
         *
@@ -297,7 +312,7 @@ class OStatus
        }
 
        /**
-        * @brief Imports an XML string containing OStatus elements
+        * Imports an XML string containing OStatus elements
         *
         * @param string $xml      The XML
         * @param array  $importer user record of the importing user
@@ -313,7 +328,7 @@ class OStatus
        }
 
        /**
-        * @brief Internal feed processing
+        * Internal feed processing
         *
         * @param string  $xml        The XML
         * @param array   $importer   user record of the importing user
@@ -424,6 +439,7 @@ class OStatus
                        $item = array_merge($header, $author);
 
                        $item["uri"] = XML::getFirstNodeValue($xpath, 'atom:id/text()', $entry);
+                       $item['uri-id'] = ItemURI::insert(['uri' => $item['uri']]);
 
                        $item["verb"] = XML::getFirstNodeValue($xpath, 'activity:verb/text()', $entry);
 
@@ -494,7 +510,7 @@ class OStatus
 
                                        if (!$valid) {
                                                // If not, then it depends on this setting
-                                               $valid = ((self::$itemlist[0]['uid'] == 0) || !PConfig::get(self::$itemlist[0]['uid'], 'system', 'accept_only_sharer', false));
+                                               $valid = ((self::$itemlist[0]['uid'] == 0) || !DI::pConfig()->get(self::$itemlist[0]['uid'], 'system', 'accept_only_sharer', false));
                                                if ($valid) {
                                                        Logger::log("Item with uri ".self::$itemlist[0]['uri']." will be imported due to the system settings.", Logger::DEBUG);
                                                }
@@ -572,13 +588,13 @@ class OStatus
                        return;
                }
 
-               Item::delete($condition);
+               Item::markForDeletion($condition);
 
                Logger::log('Deleted item with uri '.$item['uri'].' for user '.$item['uid']);
        }
 
        /**
-        * @brief Processes the XML for a post
+        * Processes the XML for a post
         *
         * @param DOMXPath $xpath    The xpath object
         * @param object   $entry    The xml entry that is processed
@@ -639,14 +655,8 @@ class OStatus
                        foreach ($categories as $category) {
                                foreach ($category->attributes as $attributes) {
                                        if ($attributes->name == 'term') {
-                                               $term = $attributes->textContent;
-                                               if (!empty($item['tag'])) {
-                                                       $item['tag'] .= ',';
-                                               } else {
-                                                       $item['tag'] = '';
-                                               }
-
-                                               $item['tag'] .= '#[url=' . DI::baseUrl() . '/search?tag=' . $term . ']' . $term . '[/url]';
+                                               // Store the hashtag
+                                               Tag::store($item['uri-id'], Tag::HASHTAG, $attributes->textContent);
                                        }
                                }
                        }
@@ -690,6 +700,8 @@ class OStatus
                        $item["body"] = add_page_info_to_body($item["body"]);
                }
 
+               Tag::storeFromBody($item['uri-id'], $item['body']);
+
                // Mastodon Content Warning
                if (($item["verb"] == Activity::POST) && $xpath->evaluate('boolean(atom:summary)', $entry)) {
                        $clear_text = XML::getFirstNodeValue($xpath, 'atom:summary/text()', $entry);
@@ -727,7 +739,7 @@ class OStatus
        }
 
        /**
-        * @brief Fetch the conversation for posts
+        * Fetch the conversation for posts
         *
         * @param string $conversation     The link to the conversation
         * @param string $conversation_uri The conversation in "uri" format
@@ -789,7 +801,7 @@ class OStatus
        }
 
        /**
-        * @brief Store a feed in several conversation entries
+        * Store a feed in several conversation entries
         *
         * @param string $xml              The feed
         * @param string $conversation     conversation
@@ -870,7 +882,7 @@ class OStatus
        }
 
        /**
-        * @brief Fetch the own post so that it can be stored later
+        * Fetch the own post so that it can be stored later
         *
         * We want to store the original data for later processing.
         * This function is meant for cases where we process a feed with multiple entries.
@@ -909,7 +921,7 @@ class OStatus
        }
 
        /**
-        * @brief Fetch related posts and processes them
+        * Fetch related posts and processes them
         *
         * @param string $related     The link to the related item
         * @param string $related_uri The related item in "uri" format
@@ -989,7 +1001,7 @@ class OStatus
 
                // Even more worse workaround for GNU Social ;-)
                if ($xml == '') {
-                       $related_guess = OStatus::convertHref($related_uri);
+                       $related_guess = self::convertHref($related_uri);
                        $curlResult = Network::curl(str_replace('/notice/', '/api/statuses/show/', $related_guess).'.atom');
 
                        if ($curlResult->isSuccess()) {
@@ -1018,7 +1030,7 @@ class OStatus
        }
 
        /**
-        * @brief Processes the XML for a repeated post
+        * Processes the XML for a repeated post
         *
         * @param DOMXPath $xpath    The xpath object
         * @param object   $entry    The xml entry that is processed
@@ -1087,7 +1099,7 @@ class OStatus
        }
 
        /**
-        * @brief Processes links in the XML
+        * Processes links in the XML
         *
         * @param object $links The xml data that contain links
         * @param array  $item  The item array
@@ -1157,13 +1169,13 @@ class OStatus
        }
 
        /**
-        * @brief Create an url out of an uri
+        * Create an url out of an uri
         *
         * @param string $href URI in the format "parameter1:parameter1:..."
         *
         * @return string URL in the format http(s)://....
         */
-       public static function convertHref($href)
+       private static function convertHref($href)
        {
                $elements = explode(":", $href);
 
@@ -1189,7 +1201,7 @@ class OStatus
        }
 
        /**
-        * @brief Checks if the current post is a reshare
+        * Checks if the current post is a reshare
         *
         * @param array $item The item array of thw post
         *
@@ -1206,7 +1218,7 @@ class OStatus
        }
 
        /**
-        * @brief Cleans the body of a post if it contains picture links
+        * Cleans the body of a post if it contains picture links
         *
         * @param string $body The body
         *
@@ -1244,7 +1256,7 @@ class OStatus
        }
 
        /**
-        * @brief Adds the header elements to the XML document
+        * Adds the header elements to the XML document
         *
         * @param DOMDocument $doc       XML document
         * @param array       $owner     Contact data of the poster
@@ -1272,14 +1284,14 @@ class OStatus
                $selfUri = '/feed/' . $owner["nick"] . '/';
                switch ($filter) {
                        case 'activity':
-                               $title = L10n::t('%s\'s timeline', $owner['name']);
+                               $title = DI::l10n()->t('%s\'s timeline', $owner['name']);
                                $selfUri .= $filter;
                                break;
                        case 'posts':
-                               $title = L10n::t('%s\'s posts', $owner['name']);
+                               $title = DI::l10n()->t('%s\'s posts', $owner['name']);
                                break;
                        case 'comments':
-                               $title = L10n::t('%s\'s comments', $owner['name']);
+                               $title = DI::l10n()->t('%s\'s comments', $owner['name']);
                                $selfUri .= $filter;
                                break;
                }
@@ -1292,7 +1304,7 @@ class OStatus
                XML::addElement($doc, $root, "generator", FRIENDICA_PLATFORM, $attributes);
                XML::addElement($doc, $root, "id", DI::baseUrl() . "/profile/" . $owner["nick"]);
                XML::addElement($doc, $root, "title", $title);
-               XML::addElement($doc, $root, "subtitle", sprintf("Updates from %s on %s", $owner["name"], Config::get('config', 'sitename')));
+               XML::addElement($doc, $root, "subtitle", sprintf("Updates from %s on %s", $owner["name"], DI::config()->get('config', 'sitename')));
                XML::addElement($doc, $root, "logo", $owner["photo"]);
                XML::addElement($doc, $root, "updated", DateTimeFormat::utcNow(DateTimeFormat::ATOM));
 
@@ -1333,7 +1345,7 @@ class OStatus
        }
 
        /**
-        * @brief Add the link to the push hubs to the XML document
+        * Add the link to the push hubs to the XML document
         *
         * @param DOMDocument $doc  XML document
         * @param object      $root XML root element where the hub links are added
@@ -1348,7 +1360,7 @@ class OStatus
        }
 
        /**
-        * @brief Adds attachment data to the XML document
+        * Adds attachment data to the XML document
         *
         * @param DOMDocument $doc  XML document
         * @param object      $root XML root element where the hub links are added
@@ -1386,7 +1398,7 @@ class OStatus
                                break;
                }
 
-               if (!Config::get('system', 'ostatus_not_attach_preview') && ($siteinfo["type"] != "photo") && isset($siteinfo["image"])) {
+               if (!DI::config()->get('system', 'ostatus_not_attach_preview') && ($siteinfo["type"] != "photo") && isset($siteinfo["image"])) {
                        $imgdata = Images::getInfoFromURLCached($siteinfo["image"]);
                        if ($imgdata) {
                                $attributes = ["rel" => "enclosure",
@@ -1421,7 +1433,7 @@ class OStatus
        }
 
        /**
-        * @brief Adds the author element to the XML document
+        * Adds the author element to the XML document
         *
         * @param DOMDocument $doc          XML document
         * @param array       $owner        Contact data of the poster
@@ -1432,7 +1444,7 @@ class OStatus
         */
        private static function addAuthor(DOMDocument $doc, array $owner, $show_profile = true)
        {
-               $profile = DBA::selectFirst('profile', ['homepage', 'publish'], ['uid' => $owner['uid'], 'is-default' => true]);
+               $profile = DBA::selectFirst('profile', ['homepage', 'publish'], ['uid' => $owner['uid']]);
                $author = $doc->createElement("author");
                XML::addElement($doc, $author, "id", $owner["url"]);
                if ($owner['account-type'] == User::ACCOUNT_TYPE_COMMUNITY) {
@@ -1507,7 +1519,7 @@ class OStatus
         */
 
        /**
-        * @brief Returns the given activity if present - otherwise returns the "post" activity
+        * Returns the given activity if present - otherwise returns the "post" activity
         *
         * @param array $item Data of the item that is to be posted
         *
@@ -1523,7 +1535,7 @@ class OStatus
        }
 
        /**
-        * @brief Returns the given object type if present - otherwise returns the "note" object type
+        * Returns the given object type if present - otherwise returns the "note" object type
         *
         * @param array $item Data of the item that is to be posted
         *
@@ -1539,7 +1551,7 @@ class OStatus
        }
 
        /**
-        * @brief Adds an entry element to the XML document
+        * Adds an entry element to the XML document
         *
         * @param DOMDocument $doc       XML document
         * @param array       $item      Data of the item that is to be posted
@@ -1574,7 +1586,7 @@ class OStatus
        }
 
        /**
-        * @brief Adds a source entry to the XML document
+        * Adds a source entry to the XML document
         *
         * @param DOMDocument $doc     XML document
         * @param array       $contact Array of the contact that is added
@@ -1596,7 +1608,7 @@ class OStatus
        }
 
        /**
-        * @brief Fetches contact data from the contact or the gcontact table
+        * Fetches contact data from the contact or the gcontact table
         *
         * @param string $url   URL of the contact
         * @param array  $owner Contact data of the poster
@@ -1649,7 +1661,7 @@ class OStatus
        }
 
        /**
-        * @brief Adds an entry element with reshared content
+        * Adds an entry element with reshared content
         *
         * @param DOMDocument $doc           XML document
         * @param array       $item          Data of the item that is to be posted
@@ -1669,7 +1681,7 @@ class OStatus
 
                $entry = self::entryHeader($doc, $owner, $item, $toplevel);
 
-               $condition = ['uid' => $owner["uid"], 'guid' => $repeated_guid, 'private' => false,
+               $condition = ['uid' => $owner["uid"], 'guid' => $repeated_guid, 'private' => [Item::PUBLIC, Item::UNLISTED],
                        'network' => [Protocol::DFRN, Protocol::DIASPORA, Protocol::OSTATUS]];
                $repeated_item = Item::selectFirst([], $condition);
                if (!DBA::isResult($repeated_item)) {
@@ -1715,7 +1727,7 @@ class OStatus
        }
 
        /**
-        * @brief Adds an entry element with a "like"
+        * Adds an entry element with a "like"
         *
         * @param DOMDocument $doc      XML document
         * @param array       $item     Data of the item that is to be posted
@@ -1754,7 +1766,7 @@ class OStatus
        }
 
        /**
-        * @brief Adds the person object element to the XML document
+        * Adds the person object element to the XML document
         *
         * @param DOMDocument $doc     XML document
         * @param array       $owner   Contact data of the poster
@@ -1799,7 +1811,7 @@ class OStatus
        }
 
        /**
-        * @brief Adds a follow/unfollow entry element
+        * Adds a follow/unfollow entry element
         *
         * @param DOMDocument $doc      XML document
         * @param array       $item     Data of the follow/unfollow message
@@ -1814,7 +1826,7 @@ class OStatus
        {
                $item["id"] = $item["parent"] = 0;
                $item["created"] = $item["edited"] = date("c");
-               $item["private"] = true;
+               $item["private"] = Item::PRIVATE;
 
                $contact = Probe::uri($item['follow']);
 
@@ -1834,12 +1846,12 @@ class OStatus
                }
 
                if ($item['verb'] == Activity::FOLLOW) {
-                       $message = L10n::t('%s is now following %s.');
-                       $title = L10n::t('following');
+                       $message = DI::l10n()->t('%s is now following %s.');
+                       $title = DI::l10n()->t('following');
                        $action = "subscription";
                } else {
-                       $message = L10n::t('%s stopped following %s.');
-                       $title = L10n::t('stopped following');
+                       $message = DI::l10n()->t('%s stopped following %s.');
+                       $title = DI::l10n()->t('stopped following');
                        $action = "unfollow";
                }
 
@@ -1863,7 +1875,7 @@ class OStatus
        }
 
        /**
-        * @brief Adds a regular entry element
+        * Adds a regular entry element
         *
         * @param DOMDocument $doc       XML document
         * @param array       $item      Data of the item that is to be posted
@@ -1903,7 +1915,7 @@ class OStatus
        }
 
        /**
-        * @brief Adds a header element to the XML document
+        * Adds a header element to the XML document
         *
         * @param DOMDocument $doc      XML document
         * @param array       $owner    Contact data of the poster
@@ -1944,7 +1956,7 @@ class OStatus
        }
 
        /**
-        * @brief Adds elements to the XML document
+        * Adds elements to the XML document
         *
         * @param DOMDocument $doc       XML document
         * @param \DOMElement $entry     Entry element where the content is added
@@ -1993,7 +2005,7 @@ class OStatus
        }
 
        /**
-        * @brief Adds the elements at the foot of an entry to the XML document
+        * Adds the elements at the foot of an entry to the XML document
         *
         * @param DOMDocument $doc       XML document
         * @param object      $entry     The entry element where the elements are added
@@ -2060,14 +2072,10 @@ class OStatus
                        XML::addElement($doc, $entry, "ostatus:conversation", $conversation_uri, $attributes);
                }
 
-               $tags = item::getFeedTags($item);
-
-               if (count($tags)) {
-                       foreach ($tags as $t) {
-                               if ($t[0] == "@") {
-                                       $mentioned[$t[1]] = $t[1];
-                               }
-                       }
+               // uri-id isn't present for follow entry pseudo-items
+               $tags = Tag::getByURIId($item['uri-id'] ?? 0);
+               foreach ($tags as $tag) {
+                       $mentioned[$tag['url']] = $tag['url'];
                }
 
                // Make sure that mentions are accepted (GNU Social has problems with mixing HTTP and HTTPS)
@@ -2107,7 +2115,7 @@ class OStatus
                        ]);
                }
 
-               if (!$item["private"] && !$feed_mode) {
+               if (($item['private'] != Item::PRIVATE) && !$feed_mode) {
                        XML::addElement($doc, $entry, "link", "", ["rel" => "ostatus:attention",
                                                                        "href" => "http://activityschema.org/collection/public"]);
                        XML::addElement($doc, $entry, "link", "", ["rel" => "mentioned",
@@ -2116,11 +2124,9 @@ class OStatus
                        XML::addElement($doc, $entry, "mastodon:scope", "public");
                }
 
-               if (count($tags)) {
-                       foreach ($tags as $t) {
-                               if ($t[0] != "@") {
-                                       XML::addElement($doc, $entry, "category", "", ["term" => $t[2]]);
-                               }
+               foreach ($tags as $tag) {
+                       if ($tag['type'] == Tag::HASHTAG) {
+                               XML::addElement($doc, $entry, "category", "", ["term" => $tag['name']]);
                        }
                }
 
@@ -2157,8 +2163,6 @@ class OStatus
         * Updates the provided last_update parameter if the result comes from the
         * cache or it is empty
         *
-        * @brief Creates the XML feed for a given nickname
-        *
         * @param string  $owner_nick  Nickname of the feed owner
         * @param string  $last_update Date of the last update
         * @param integer $max_items   Number of maximum items to fetch
@@ -2185,7 +2189,7 @@ class OStatus
 
                // Don't cache when the last item was posted less then 15 minutes ago (Cache duration)
                if ((time() - strtotime($owner['last-item'])) < 15*60) {
-                       $result = Cache::get($cachekey);
+                       $result = DI::cache()->get($cachekey);
                        if (!$nocache && !is_null($result)) {
                                Logger::log('Feed duration: ' . number_format(microtime(true) - $stamp, 3) . ' - ' . $owner_nick . ' - ' . $filter . ' - ' . $previous_created . ' (cached)', Logger::DEBUG);
                                $last_update = $result['last_update'];
@@ -2201,8 +2205,8 @@ class OStatus
                $authorid = Contact::getIdForURL($owner["url"], 0, true);
 
                $condition = ["`uid` = ? AND `received` > ? AND NOT `deleted`
-                       AND NOT `private` AND `visible` AND `wall` AND `parent-network` IN (?, ?)",
-                       $owner["uid"], $check_date, Protocol::OSTATUS, Protocol::DFRN];
+                       AND `private` != ? AND `visible` AND `wall` AND `parent-network` IN (?, ?)",
+                       $owner["uid"], $check_date, Item::PRIVATE, Protocol::OSTATUS, Protocol::DFRN];
 
                if ($filter === 'comments') {
                        $condition[0] .= " AND `object-type` = ? ";
@@ -2231,7 +2235,7 @@ class OStatus
                $root = self::addHeader($doc, $owner, $filter, $feed_mode);
 
                foreach ($items as $item) {
-                       if (Config::get('system', 'ostatus_debug')) {
+                       if (DI::config()->get('system', 'ostatus_debug')) {
                                $item['body'] .= '🍼';
                        }
 
@@ -2246,7 +2250,7 @@ class OStatus
                $feeddata = trim($doc->saveXML());
 
                $msg = ['feed' => $feeddata, 'last_update' => $last_update];
-               Cache::set($cachekey, $msg, Cache::QUARTER_HOUR);
+               DI::cache()->set($cachekey, $msg, Duration::QUARTER_HOUR);
 
                Logger::log('Feed duration: ' . number_format(microtime(true) - $stamp, 3) . ' - ' . $owner_nick . ' - ' . $filter . ' - ' . $previous_created, Logger::DEBUG);
 
@@ -2254,7 +2258,7 @@ class OStatus
        }
 
        /**
-        * @brief Creates the XML for a salmon message
+        * Creates the XML for a salmon message
         *
         * @param array $item  Data of the item that is to be posted
         * @param array $owner Contact data of the poster
@@ -2268,7 +2272,7 @@ class OStatus
                $doc = new DOMDocument('1.0', 'utf-8');
                $doc->formatOutput = true;
 
-               if (Config::get('system', 'ostatus_debug')) {
+               if (DI::config()->get('system', 'ostatus_debug')) {
                        $item['body'] .= '🐟';
                }