]> git.mxchange.org Git - friendica.git/blobdiff - src/Database/PostUpdate.php
We now have a pre update script (#5425)
[friendica.git] / src / Database / PostUpdate.php
index dba2b321286a8de9db7b84c840509ad96af244c3..0a75a0f195d8c57a80e59467afc17c06dc894dad 100644 (file)
-<?php\r
-/**\r
- * @file src/Database/PostUpdate.php\r
- */\r
-namespace Friendica\Database;\r
-\r
-use Friendica\Core\Config;\r
-use Friendica\Database\DBM;\r
-use Friendica\Model\Contact;\r
-use Friendica\Model\GContact;\r
-use dba;\r
-\r
-require_once 'include/dba.php';\r
-\r
-/**\r
- * Post update functions\r
- */\r
-class PostUpdate\r
-{\r
-    /**\r
-     * @brief Calls the post update functions\r
-     */\r
-    public static function update()\r
-    {\r
-        if (!self::update1192()) {\r
-            return;\r
-        }\r
-        if (!self::update1194()) {\r
-            return;\r
-        }\r
-        if (!self::update1198()) {\r
-            return;\r
-        }\r
-        if (!self::update1206()) {\r
-            return;\r
-        }\r
-    }\r
-\r
-    /**\r
-     * @brief set the gcontact-id in all item entries\r
-     *\r
-     * This job has to be started multiple times until all entries are set.\r
-     * It isn't started in the update function since it would consume too much time and can be done in the background.\r
-     *\r
-     * @return bool "true" when the job is done\r
-     */\r
-    private static function update1192()\r
-    {\r
-        // Was the script completed?\r
-        if (Config::get("system", "post_update_version") >= 1192) {\r
-            return true;\r
-        }\r
-\r
-        // Check if the first step is done (Setting "gcontact-id" in the item table)\r
-        $r = dba::select('item', ['author-link', 'author-name', 'author-avatar', 'uid', 'network'], ['gcontact-id' => 0], ['limit' => 1000]);\r
-        if (!$r) {\r
-            // Are there unfinished entries in the thread table?\r
-            $r = q("SELECT COUNT(*) AS `total` FROM `thread`\r
-                INNER JOIN `item` ON `item`.`id` =`thread`.`iid`\r
-                WHERE `thread`.`gcontact-id` = 0 AND\r
-                    (`thread`.`uid` IN (SELECT `uid` from `user`) OR `thread`.`uid` = 0)");\r
-\r
-            if ($r && ($r[0]["total"] == 0)) {\r
-                Config::set("system", "post_update_version", 1192);\r
-                return true;\r
-            }\r
-\r
-            // Update the thread table from the item table\r
-            q("UPDATE `thread` INNER JOIN `item` ON `item`.`id`=`thread`.`iid`\r
-                    SET `thread`.`gcontact-id` = `item`.`gcontact-id`\r
-                WHERE `thread`.`gcontact-id` = 0 AND\r
-                    (`thread`.`uid` IN (SELECT `uid` from `user`) OR `thread`.`uid` = 0)");\r
-\r
-            return false;\r
-        }\r
-\r
-        $item_arr = [];\r
-        foreach ($r as $item) {\r
-            $index = $item["author-link"]."-".$item["uid"];\r
-            $item_arr[$index] = ["author-link" => $item["author-link"],\r
-                            "uid" => $item["uid"],\r
-                            "network" => $item["network"]];\r
-        }\r
-\r
-        // Set the "gcontact-id" in the item table and add a new gcontact entry if needed\r
-        foreach ($item_arr as $item) {\r
-            $gcontact_id = GContact::getId(["url" => $item['author-link'], "network" => $item['network'],\r
-                            "photo" => $item['author-avatar'], "name" => $item['author-name']]);\r
-            dba::update('item', ['gcontact-id' => $gcontact_id], ['uid' => $item['uid'], 'author-link' => $item['author-link'], 'gcontact-id' => 0]);\r
-        }\r
-        return false;\r
-    }\r
-\r
-    /**\r
-     * @brief Updates the "global" field in the item table\r
-     *\r
-     * @return bool "true" when the job is done\r
-     */\r
-    private static function update1194()\r
-    {\r
-        // Was the script completed?\r
-        if (Config::get("system", "post_update_version") >= 1194) {\r
-            return true;\r
-        }\r
-\r
-        logger("Start", LOGGER_DEBUG);\r
-\r
-        $end_id = Config::get("system", "post_update_1194_end");\r
-        if (!$end_id) {\r
-            $r = q("SELECT `id` FROM `item` WHERE `uid` != 0 ORDER BY `id` DESC LIMIT 1");\r
-            if ($r) {\r
-                Config::set("system", "post_update_1194_end", $r[0]["id"]);\r
-                $end_id = Config::get("system", "post_update_1194_end");\r
-            }\r
-        }\r
-\r
-        logger("End ID: ".$end_id, LOGGER_DEBUG);\r
-\r
-        $start_id = Config::get("system", "post_update_1194_start");\r
-\r
-        $query1 = "SELECT `item`.`id` FROM `item` ";\r
-\r
-        $query2 = "INNER JOIN `item` AS `shadow` ON `item`.`uri` = `shadow`.`uri` AND `shadow`.`uid` = 0 ";\r
-\r
-        $query3 = "WHERE `item`.`uid` != 0 AND `item`.`id` >= %d AND `item`.`id` <= %d\r
-                AND `item`.`visible` AND NOT `item`.`private`\r
-                AND NOT `item`.`deleted` AND NOT `item`.`moderated`\r
-                AND `item`.`network` IN ('%s', '%s', '%s', '')\r
-                AND `item`.`allow_cid` = '' AND `item`.`allow_gid` = ''\r
-                AND `item`.`deny_cid` = '' AND `item`.`deny_gid` = ''\r
-                AND NOT `item`.`global`";\r
-\r
-        $r = q($query1.$query2.$query3."  ORDER BY `item`.`id` LIMIT 1",\r
-            intval($start_id), intval($end_id),\r
-            dbesc(NETWORK_DFRN), dbesc(NETWORK_DIASPORA), dbesc(NETWORK_OSTATUS));\r
-        if (!$r) {\r
-            Config::set("system", "post_update_version", 1194);\r
-            logger("Update is done", LOGGER_DEBUG);\r
-            return true;\r
-        } else {\r
-            Config::set("system", "post_update_1194_start", $r[0]["id"]);\r
-            $start_id = Config::get("system", "post_update_1194_start");\r
-        }\r
-\r
-        logger("Start ID: ".$start_id, LOGGER_DEBUG);\r
-\r
-        $r = q($query1.$query2.$query3."  ORDER BY `item`.`id` LIMIT 1000,1",\r
-            intval($start_id), intval($end_id),\r
-            dbesc(NETWORK_DFRN), dbesc(NETWORK_DIASPORA), dbesc(NETWORK_OSTATUS));\r
-        if ($r)\r
-            $pos_id = $r[0]["id"];\r
-        else\r
-            $pos_id = $end_id;\r
-\r
-        logger("Progress: Start: ".$start_id." position: ".$pos_id." end: ".$end_id, LOGGER_DEBUG);\r
-\r
-        q("UPDATE `item` ".$query2." SET `item`.`global` = 1 ".$query3,\r
-            intval($start_id), intval($pos_id),\r
-            dbesc(NETWORK_DFRN), dbesc(NETWORK_DIASPORA), dbesc(NETWORK_OSTATUS));\r
-\r
-        logger("Done", LOGGER_DEBUG);\r
-    }\r
-\r
-    /**\r
-     * @brief set the author-id and owner-id in all item entries\r
-     *\r
-     * This job has to be started multiple times until all entries are set.\r
-     * It isn't started in the update function since it would consume too much time and can be done in the background.\r
-     *\r
-     * @return bool "true" when the job is done\r
-     */\r
-    private static function update1198()\r
-    {\r
-        // Was the script completed?\r
-        if (Config::get("system", "post_update_version") >= 1198) {\r
-            return true;\r
-        }\r
-\r
-        logger("Start", LOGGER_DEBUG);\r
-\r
-        // Check if the first step is done (Setting "author-id" and "owner-id" in the item table)\r
-        $r = dba::select('item', ['author-link', 'owner-link', 'uid'], ['author-id' => 0, 'owner-id' => 0], ['limit' => 1000]);\r
-        if (!$r) {\r
-            // Are there unfinished entries in the thread table?\r
-            $r = q("SELECT COUNT(*) AS `total` FROM `thread`\r
-                INNER JOIN `item` ON `item`.`id` =`thread`.`iid`\r
-                WHERE `thread`.`author-id` = 0 AND `thread`.`owner-id` = 0 AND\r
-                    (`thread`.`uid` IN (SELECT `uid` from `user`) OR `thread`.`uid` = 0)");\r
-\r
-            if ($r && ($r[0]["total"] == 0)) {\r
-                Config::set("system", "post_update_version", 1198);\r
-                logger("Done", LOGGER_DEBUG);\r
-                return true;\r
-            }\r
-\r
-            // Update the thread table from the item table\r
-            $r = q("UPDATE `thread` INNER JOIN `item` ON `item`.`id`=`thread`.`iid`\r
-                    SET `thread`.`author-id` = `item`.`author-id`,\r
-                    `thread`.`owner-id` = `item`.`owner-id`\r
-                WHERE `thread`.`author-id` = 0 AND `thread`.`owner-id` = 0 AND\r
-                    (`thread`.`uid` IN (SELECT `uid` from `user`) OR `thread`.`uid` = 0)");\r
-\r
-            logger("Updated threads", LOGGER_DEBUG);\r
-            if (DBM::is_result($r)) {\r
-                Config::set("system", "post_update_version", 1198);\r
-                logger("Done", LOGGER_DEBUG);\r
-                return true;\r
-            }\r
-            return false;\r
-        }\r
-\r
-        logger("Query done", LOGGER_DEBUG);\r
-\r
-        $item_arr = [];\r
-        foreach ($r as $item) {\r
-            $index = $item["author-link"]."-".$item["owner-link"]."-".$item["uid"];\r
-            $item_arr[$index] = ["author-link" => $item["author-link"],\r
-                            "owner-link" => $item["owner-link"],\r
-                            "uid" => $item["uid"]];\r
-        }\r
-\r
-        // Set the "gcontact-id" in the item table and add a new gcontact entry if needed\r
-        foreach ($item_arr as $item) {\r
-            $author_id = Contact::getIdForURL($item["author-link"], 0);\r
-            $owner_id = Contact::getIdForURL($item["owner-link"], 0);\r
-\r
-            if ($author_id == 0)\r
-                $author_id = -1;\r
-\r
-            if ($owner_id == 0)\r
-                $owner_id = -1;\r
-\r
-            dba::update('item', ['author-id' => $author_id, 'owner-id' => $owner_id], ['uid' => $item['uid'], 'author-link' => $item['author-link'], 'owner-link' => $item['owner-link'], 'author-id' => 0, 'owner-id' => 0]);\r
-        }\r
-\r
-        logger("Updated items", LOGGER_DEBUG);\r
-        return false;\r
-    }\r
-\r
-    /**\r
-     * @brief update the "last-item" field in the "self" contact\r
-     *\r
-     * This field avoids cost intensive calls in the admin panel and in "nodeinfo"\r
-     *\r
-     * @return bool "true" when the job is done\r
-     */\r
-    private static function update1206()\r
-    {\r
-        // Was the script completed?\r
-        if (Config::get("system", "post_update_version") >= 1206) {\r
-            return true;\r
-        }\r
-\r
-        logger("Start", LOGGER_DEBUG);\r
-        $r = q("SELECT `contact`.`id`, `contact`.`last-item`,\r
-            (SELECT MAX(`changed`) FROM `item` USE INDEX (`uid_wall_changed`) WHERE `wall` AND `uid` = `user`.`uid`) AS `lastitem_date`\r
-            FROM `user`\r
-            INNER JOIN `contact` ON `contact`.`uid` = `user`.`uid` AND `contact`.`self`");\r
-\r
-        if (!DBM::is_result($r)) {\r
-            return false;\r
-        }\r
-        foreach ($r as $user) {\r
-            if (!empty($user["lastitem_date"]) && ($user["lastitem_date"] > $user["last-item"])) {\r
-                dba::update('contact', ['last-item' => $user['lastitem_date']], ['id' => $user['id']]);\r
-            }\r
-        }\r
-\r
-        Config::set("system", "post_update_version", 1206);\r
-        logger("Done", LOGGER_DEBUG);\r
-        return true;\r
-    }\r
-}\r
+<?php
+/**
+ * @file src/Database/PostUpdate.php
+ */
+namespace Friendica\Database;
+
+use Friendica\Core\Config;
+use Friendica\Model\Contact;
+use Friendica\Model\Item;
+use Friendica\Model\PermissionSet;
+
+require_once 'include/dba.php';
+
+/**
+ * Post update functions
+ */
+class PostUpdate
+{
+       /**
+        * @brief Calls the post update functions
+        */
+       public static function update()
+       {
+               if (!self::update1194()) {
+                       return;
+               }
+               if (!self::update1198()) {
+                       return;
+               }
+               if (!self::update1206()) {
+                       return;
+               }
+               if (!self::update1279()) {
+                       return;
+               }
+       }
+
+       /**
+        * @brief Updates the "global" field in the item table
+        *
+        * @return bool "true" when the job is done
+        */
+       private static function update1194()
+       {
+               // Was the script completed?
+               if (Config::get("system", "post_update_version") >= 1194) {
+                       return true;
+               }
+
+               logger("Start", LOGGER_DEBUG);
+
+               $end_id = Config::get("system", "post_update_1194_end");
+               if (!$end_id) {
+                       $r = q("SELECT `id` FROM `item` WHERE `uid` != 0 ORDER BY `id` DESC LIMIT 1");
+                       if ($r) {
+                               Config::set("system", "post_update_1194_end", $r[0]["id"]);
+                               $end_id = Config::get("system", "post_update_1194_end");
+                       }
+               }
+
+               logger("End ID: ".$end_id, LOGGER_DEBUG);
+
+               $start_id = Config::get("system", "post_update_1194_start");
+
+               $query1 = "SELECT `item`.`id` FROM `item` ";
+
+               $query2 = "INNER JOIN `item` AS `shadow` ON `item`.`uri` = `shadow`.`uri` AND `shadow`.`uid` = 0 ";
+
+               $query3 = "WHERE `item`.`uid` != 0 AND `item`.`id` >= %d AND `item`.`id` <= %d
+                               AND `item`.`visible` AND NOT `item`.`private`
+                               AND NOT `item`.`deleted` AND NOT `item`.`moderated`
+                               AND `item`.`network` IN ('%s', '%s', '%s', '')
+                               AND `item`.`allow_cid` = '' AND `item`.`allow_gid` = ''
+                               AND `item`.`deny_cid` = '' AND `item`.`deny_gid` = ''
+                               AND NOT `item`.`global`";
+
+               $r = q($query1.$query2.$query3."  ORDER BY `item`.`id` LIMIT 1",
+                       intval($start_id), intval($end_id),
+                       dbesc(NETWORK_DFRN), dbesc(NETWORK_DIASPORA), dbesc(NETWORK_OSTATUS));
+               if (!$r) {
+                       Config::set("system", "post_update_version", 1194);
+                       logger("Update is done", LOGGER_DEBUG);
+                       return true;
+               } else {
+                       Config::set("system", "post_update_1194_start", $r[0]["id"]);
+                       $start_id = Config::get("system", "post_update_1194_start");
+               }
+
+               logger("Start ID: ".$start_id, LOGGER_DEBUG);
+
+               $r = q($query1.$query2.$query3."  ORDER BY `item`.`id` LIMIT 1000,1",
+                       intval($start_id), intval($end_id),
+                       dbesc(NETWORK_DFRN), dbesc(NETWORK_DIASPORA), dbesc(NETWORK_OSTATUS));
+               if ($r) {
+                       $pos_id = $r[0]["id"];
+               } else {
+                       $pos_id = $end_id;
+               }
+               logger("Progress: Start: ".$start_id." position: ".$pos_id." end: ".$end_id, LOGGER_DEBUG);
+
+               q("UPDATE `item` ".$query2." SET `item`.`global` = 1 ".$query3,
+                       intval($start_id), intval($pos_id),
+                       dbesc(NETWORK_DFRN), dbesc(NETWORK_DIASPORA), dbesc(NETWORK_OSTATUS));
+
+               logger("Done", LOGGER_DEBUG);
+       }
+
+       /**
+        * @brief set the author-id and owner-id in all item entries
+        *
+        * This job has to be started multiple times until all entries are set.
+        * It isn't started in the update function since it would consume too much time and can be done in the background.
+        *
+        * @return bool "true" when the job is done
+        */
+       private static function update1198()
+       {
+               // Was the script completed?
+               if (Config::get("system", "post_update_version") >= 1198) {
+                       return true;
+               }
+
+               logger("Start", LOGGER_DEBUG);
+
+               // Check if the first step is done (Setting "author-id" and "owner-id" in the item table)
+               $fields = ['author-link', 'author-name', 'author-avatar', 'owner-link', 'owner-name', 'owner-avatar', 'network', 'uid'];
+               $r = DBA::select('item', $fields, ['author-id' => 0, 'owner-id' => 0], ['limit' => 1000]);
+               if (!$r) {
+                       // Are there unfinished entries in the thread table?
+                       $r = q("SELECT COUNT(*) AS `total` FROM `thread`
+                               INNER JOIN `item` ON `item`.`id` =`thread`.`iid`
+                               WHERE `thread`.`author-id` = 0 AND `thread`.`owner-id` = 0 AND
+                                       (`thread`.`uid` IN (SELECT `uid` from `user`) OR `thread`.`uid` = 0)");
+
+                       if ($r && ($r[0]["total"] == 0)) {
+                               Config::set("system", "post_update_version", 1198);
+                               logger("Done", LOGGER_DEBUG);
+                               return true;
+                       }
+
+                       // Update the thread table from the item table
+                       $r = q("UPDATE `thread` INNER JOIN `item` ON `item`.`id`=`thread`.`iid`
+                                       SET `thread`.`author-id` = `item`.`author-id`,
+                                       `thread`.`owner-id` = `item`.`owner-id`
+                               WHERE `thread`.`author-id` = 0 AND `thread`.`owner-id` = 0 AND
+                                       (`thread`.`uid` IN (SELECT `uid` from `user`) OR `thread`.`uid` = 0)");
+
+                       logger("Updated threads", LOGGER_DEBUG);
+                       if (DBM::is_result($r)) {
+                               Config::set("system", "post_update_version", 1198);
+                               logger("Done", LOGGER_DEBUG);
+                               return true;
+                       }
+                       return false;
+               }
+
+               logger("Query done", LOGGER_DEBUG);
+
+               $item_arr = [];
+               foreach ($r as $item) {
+                       $index = $item["author-link"]."-".$item["owner-link"]."-".$item["uid"];
+                       $item_arr[$index] = ["author-link" => $item["author-link"],
+                                                       "owner-link" => $item["owner-link"],
+                                                       "uid" => $item["uid"]];
+               }
+
+               // Set the "author-id" and "owner-id" in the item table and add a new public contact entry if needed
+               foreach ($item_arr as $item) {
+                       $default = ['url' => $item['author-link'], 'name' => $item['author-name'],
+                               'photo' => $item['author-avatar'], 'network' => $item['network']];
+                       $author_id = Contact::getIdForURL($item["author-link"], 0, false, $default);
+
+                       $default = ['url' => $item['owner-link'], 'name' => $item['owner-name'],
+                               'photo' => $item['owner-avatar'], 'network' => $item['network']];
+                       $owner_id = Contact::getIdForURL($item["owner-link"], 0, false, $default);
+
+                       if ($author_id == 0) {
+                               $author_id = -1;
+                       }
+                       if ($owner_id == 0) {
+                               $owner_id = -1;
+                       }
+                       DBA::update('item', ['author-id' => $author_id, 'owner-id' => $owner_id], ['uid' => $item['uid'], 'author-link' => $item['author-link'], 'owner-link' => $item['owner-link'], 'author-id' => 0, 'owner-id' => 0]);
+               }
+
+               logger("Updated items", LOGGER_DEBUG);
+               return false;
+       }
+
+       /**
+        * @brief update the "last-item" field in the "self" contact
+        *
+        * This field avoids cost intensive calls in the admin panel and in "nodeinfo"
+        *
+        * @return bool "true" when the job is done
+        */
+       private static function update1206()
+       {
+               // Was the script completed?
+               if (Config::get("system", "post_update_version") >= 1206) {
+                       return true;
+               }
+
+               logger("Start", LOGGER_DEBUG);
+               $r = q("SELECT `contact`.`id`, `contact`.`last-item`,
+                       (SELECT MAX(`changed`) FROM `item` USE INDEX (`uid_wall_changed`) WHERE `wall` AND `uid` = `user`.`uid`) AS `lastitem_date`
+                       FROM `user`
+                       INNER JOIN `contact` ON `contact`.`uid` = `user`.`uid` AND `contact`.`self`");
+
+               if (!DBM::is_result($r)) {
+                       return false;
+               }
+               foreach ($r as $user) {
+                       if (!empty($user["lastitem_date"]) && ($user["lastitem_date"] > $user["last-item"])) {
+                               DBA::update('contact', ['last-item' => $user['lastitem_date']], ['id' => $user['id']]);
+                       }
+               }
+
+               Config::set("system", "post_update_version", 1206);
+               logger("Done", LOGGER_DEBUG);
+               return true;
+       }
+
+       /**
+        * @brief update the item related tables
+        *
+        * @return bool "true" when the job is done
+        */
+       private static function update1279()
+       {
+               // Was the script completed?
+               if (Config::get("system", "post_update_version") >= 1279) {
+                       return true;
+               }
+
+               $id = Config::get("system", "post_update_version_1279_id", 0);
+
+               logger("Start from item " . $id, LOGGER_DEBUG);
+
+               $fields = array_merge(Item::MIXED_CONTENT_FIELDLIST, ['network', 'author-id', 'owner-id', 'tag', 'file',
+                       'author-name', 'author-avatar', 'author-link', 'owner-name', 'owner-avatar', 'owner-link', 'id',
+                       'uid', 'allow_cid', 'allow_gid', 'deny_cid', 'deny_gid', 'psid', 'post-type', 'bookmark', 'type',
+                       'inform']);
+
+               $start_id = $id;
+               $rows = 0;
+               $condition = ["`id` > ?", $id];
+               $params = ['order' => ['id'], 'limit' => 10000];
+               $items = Item::select($fields, $condition, $params);
+               while ($item = Item::fetch($items)) {
+                       $id = $item['id'];
+
+                       if (empty($item['author-id'])) {
+                               $default = ['url' => $item['author-link'], 'name' => $item['author-name'],
+                                       'photo' => $item['author-avatar'], 'network' => $item['network']];
+
+                               $item['author-id'] = Contact::getIdForURL($item["author-link"], 0, false, $default);
+                       }
+
+                       if (empty($item['owner-id'])) {
+                               $default = ['url' => $item['owner-link'], 'name' => $item['owner-name'],
+                                       'photo' => $item['owner-avatar'], 'network' => $item['network']];
+
+                               $item['owner-id'] = Contact::getIdForURL($item["owner-link"], 0, false, $default);
+                       }
+
+                       if (empty($item['psid'])) {
+                               $item['psid'] = PermissionSet::fetchIDForPost($item);
+                       }
+
+                       if ($item['post-type'] == 0) {
+                               if (!empty($item['type']) && ($item['type'] == 'note')) {
+                                       $item['post-type'] = Item::PT_PERSONAL_NOTE;
+                               } elseif (!empty($item['type']) && ($item['type'] == 'photo')) {
+                                       $item['post-type'] = Item::PT_IMAGE;
+                               } elseif (!empty($item['bookmark']) && $item['bookmark']) {
+                                       $item['post-type'] = Item::PT_PAGE;
+                               }
+                       }
+
+                       Item::update($item, ['id' => $id]);
+
+                       ++$rows;
+               }
+               DBA::close($items);
+
+               Config::set("system", "post_update_version_1279_id", $id);
+
+               logger("Processed rows: " . $rows . " - last processed item:  " . $id, LOGGER_DEBUG);
+
+               if ($start_id == $id) {
+                       Config::set("system", "post_update_version", 1279);
+                       logger("Done", LOGGER_DEBUG);
+                       return true;
+               }
+
+               return false;
+       }
+}