]> git.mxchange.org Git - friendica.git/commitdiff
New field in item table ("shadow") that indicates if there is a shadow entry
authorMichael Vogel <icarus@dabo.de>
Sun, 3 Apr 2016 11:48:31 +0000 (13:48 +0200)
committerMichael Vogel <icarus@dabo.de>
Sun, 3 Apr 2016 11:48:31 +0000 (13:48 +0200)
boot.php
include/Contact.php
include/cron.php
include/dbstructure.php
include/post_update.php [new file with mode: 0644]
include/threads.php
update.php

index a70c7bf616397e707f337095be8257b3534c88c8..13cc2aaf5bdf7a612e47a0d6ee11bcbadc879a63 100644 (file)
--- a/boot.php
+++ b/boot.php
@@ -6,11 +6,11 @@
 
 /**
  * Friendica
- * 
+ *
  * Friendica is a communications platform for integrated social communications
  * utilising decentralised communications and linkage to several indie social
  * projects - as well as popular mainstream providers.
- * 
+ *
  * Our mission is to free our friends and families from the clutches of
  * data-harvesting corporations, and pave the way to a future where social
  * communications are free and open and flow between alternate providers as
@@ -18,7 +18,7 @@
  */
 
 require_once('include/autoloader.php');
+
 require_once('include/config.php');
 require_once('include/network.php');
 require_once('include/plugin.php');
@@ -38,7 +38,7 @@ define ( 'FRIENDICA_PLATFORM',     'Friendica');
 define ( 'FRIENDICA_CODENAME',     'Asparagus');
 define ( 'FRIENDICA_VERSION',      '3.5-dev' );
 define ( 'DFRN_PROTOCOL_VERSION',  '2.23'    );
-define ( 'DB_UPDATE_VERSION',      1194      );
+define ( 'DB_UPDATE_VERSION',      1195      );
 
 /**
  * @brief Constant with a HTML line break.
index d76c8f826cd68846f59f30a6ffd9c2bfdfb51c70..79a14ab581c84dd3de3ab61d9e3efe8174bf27c1 100644 (file)
@@ -555,60 +555,6 @@ function posts_from_gcontact($a, $gcontact_id) {
        return $o;
 }
 
-/**
- * @brief set the gcontact-id in all item entries
- *
- * This job has to be started multiple times until all entries are set.
- * It isn't started in the update function since it would consume too much time and can be done in the background.
- */
-function item_set_gcontact() {
-       define ('POST_UPDATE_VERSION', 1192);
-
-       // Was the script completed?
-       if (get_config("system", "post_update_version") >= POST_UPDATE_VERSION)
-               return;
-
-       // Check if the first step is done (Setting "gcontact-id" in the item table)
-       $r = q("SELECT `author-link`, `author-name`, `author-avatar`, `uid`, `network` FROM `item` WHERE `gcontact-id` = 0 LIMIT 1000");
-       if (!$r) {
-               // Are there unfinished entries in the thread table?
-               $r = q("SELECT COUNT(*) AS `total` FROM `thread`
-                       INNER JOIN `item` ON `item`.`id` =`thread`.`iid`
-                       WHERE `thread`.`gcontact-id` = 0 AND
-                               (`thread`.`uid` IN (SELECT `uid` from `user`) OR `thread`.`uid` = 0)");
-
-               if ($r AND ($r[0]["total"] == 0)) {
-                       set_config("system", "post_update_version", POST_UPDATE_VERSION);
-                       return false;
-               }
-
-               // Update the thread table from the item table
-               q("UPDATE `thread` INNER JOIN `item` ON `item`.`id`=`thread`.`iid`
-                               SET `thread`.`gcontact-id` = `item`.`gcontact-id`
-                       WHERE `thread`.`gcontact-id` = 0 AND
-                               (`thread`.`uid` IN (SELECT `uid` from `user`) OR `thread`.`uid` = 0)");
-
-               return false;
-       }
-
-       $item_arr = array();
-       foreach ($r AS $item) {
-               $index = $item["author-link"]."-".$item["uid"];
-               $item_arr[$index] = array("author-link" => $item["author-link"],
-                                               "uid" => $item["uid"],
-                                               "network" => $item["network"]);
-       }
-
-       // Set the "gcontact-id" in the item table and add a new gcontact entry if needed
-       foreach($item_arr AS $item) {
-               $gcontact_id = get_gcontact_id(array("url" => $item['author-link'], "network" => $item['network'],
-                                               "photo" => $item['author-avatar'], "name" => $item['author-name']));
-               q("UPDATE `item` SET `gcontact-id` = %d WHERE `uid` = %d AND `author-link` = '%s' AND `gcontact-id` = 0",
-                       intval($gcontact_id), intval($item["uid"]), dbesc($item["author-link"]));
-       }
-       return true;
-}
-
 /**
  * @brief Returns posts from a given contact
  *
index e2f41028044d970b3463e46502db47975c43552a..4eb76f1ce2769e49b8bf084c30f7622e55f7027f 100644 (file)
@@ -35,6 +35,7 @@ function cron_run(&$argv, &$argc){
        require_once('include/email.php');
        require_once('include/socgraph.php');
        require_once('mod/nodeinfo.php');
+       require_once('include/post_update.php');
 
        load_config('config');
        load_config('system');
@@ -106,8 +107,8 @@ function cron_run(&$argv, &$argc){
        // Check every conversation
        ostatus::check_conversations(false);
 
-       // Set the gcontact-id in the item table if missing
-       item_set_gcontact();
+       // Do post update functions
+       post_update();
 
        // update nodeinfo data
        nodeinfo_cron();
index e34e409023dc5918905eb3373951a5ebddd71402..33e0c7dc8c10538a00daa3ce29004e9b39da48ef 100644 (file)
@@ -783,6 +783,7 @@ function db_definition() {
                                        "parent-uri" => array("type" => "varchar(255)", "not null" => "1", "default" => ""),
                                        "extid" => array("type" => "varchar(255)", "not null" => "1", "default" => ""),
                                        "thr-parent" => array("type" => "varchar(255)", "not null" => "1", "default" => ""),
+                                       "shadow" => array("type" => "int(10) unsigned", "not null" => "1", "default" => "0"),
                                        "created" => array("type" => "datetime", "not null" => "1", "default" => "0000-00-00 00:00:00"),
                                        "edited" => array("type" => "datetime", "not null" => "1", "default" => "0000-00-00 00:00:00"),
                                        "commented" => array("type" => "datetime", "not null" => "1", "default" => "0000-00-00 00:00:00"),
diff --git a/include/post_update.php b/include/post_update.php
new file mode 100644 (file)
index 0000000..2143ac3
--- /dev/null
@@ -0,0 +1,129 @@
+<?php
+/**
+ * @brief Calls the post update functions
+ */
+function post_update() {
+
+       if (!post_update_1192())
+               return;
+
+       if (!post_update_1195())
+               return;
+}
+
+/**
+ * @brief set the gcontact-id in all item entries
+ *
+ * This job has to be started multiple times until all entries are set.
+ * It isn't started in the update function since it would consume too much time and can be done in the background.
+ *
+ * @return bool "true" when the job is done
+ */
+function post_update_1192() {
+
+       // Was the script completed?
+       if (get_config("system", "post_update_version") >= 1192)
+               return true;
+
+       // Check if the first step is done (Setting "gcontact-id" in the item table)
+       $r = q("SELECT `author-link`, `author-name`, `author-avatar`, `uid`, `network` FROM `item` WHERE `gcontact-id` = 0 LIMIT 1000");
+       if (!$r) {
+               // Are there unfinished entries in the thread table?
+               $r = q("SELECT COUNT(*) AS `total` FROM `thread`
+                       INNER JOIN `item` ON `item`.`id` =`thread`.`iid`
+                       WHERE `thread`.`gcontact-id` = 0 AND
+                               (`thread`.`uid` IN (SELECT `uid` from `user`) OR `thread`.`uid` = 0)");
+
+               if ($r AND ($r[0]["total"] == 0)) {
+                       set_config("system", "post_update_version", 1192);
+                       return true;
+               }
+
+               // Update the thread table from the item table
+               q("UPDATE `thread` INNER JOIN `item` ON `item`.`id`=`thread`.`iid`
+                               SET `thread`.`gcontact-id` = `item`.`gcontact-id`
+                       WHERE `thread`.`gcontact-id` = 0 AND
+                               (`thread`.`uid` IN (SELECT `uid` from `user`) OR `thread`.`uid` = 0)");
+
+               return false;
+       }
+
+       $item_arr = array();
+       foreach ($r AS $item) {
+               $index = $item["author-link"]."-".$item["uid"];
+               $item_arr[$index] = array("author-link" => $item["author-link"],
+                                               "uid" => $item["uid"],
+                                               "network" => $item["network"]);
+       }
+
+       // Set the "gcontact-id" in the item table and add a new gcontact entry if needed
+       foreach($item_arr AS $item) {
+               $gcontact_id = get_gcontact_id(array("url" => $item['author-link'], "network" => $item['network'],
+                                               "photo" => $item['author-avatar'], "name" => $item['author-name']));
+               q("UPDATE `item` SET `gcontact-id` = %d WHERE `uid` = %d AND `author-link` = '%s' AND `gcontact-id` = 0",
+                       intval($gcontact_id), intval($item["uid"]), dbesc($item["author-link"]));
+       }
+       return false;
+}
+
+/**
+ * @brief Updates the "shadow" field in the item table
+ *
+ * @return bool "true" when the job is done
+ */
+function post_update_1195() {
+
+       // Was the script completed?
+       if (get_config("system", "post_update_version") >= 1195)
+               return true;
+
+       $end_id = get_config("system", "post_update_1195_end");
+       if (!$end_id) {
+               $r = q("SELECT `id` FROM `item` WHERE `uid` != 0 ORDER BY `id` DESC LIMIT 1");
+               if ($r) {
+                       set_config("system", "post_update_1195_end", $r[0]["id"]);
+                       $end_id = get_config("system", "post_update_1195_end");
+               }
+       }
+
+       $start_id = get_config("system", "post_update_1195_start");
+
+       $query1 = "SELECT `item`.`id` FROM `item` ";
+
+       $query2 = "INNER JOIN `item` AS `shadow` ON `item`.`uri` = `shadow`.`uri` AND `shadow`.`uid` = 0 ";
+
+       $query3 = "WHERE `item`.`uid` != 0 AND `item`.`id` >= %d AND `item`.`id` <= %d
+                       AND `item`.`visible` AND NOT `item`.`private`
+                       AND NOT `item`.`deleted` AND NOT `item`.`moderated`
+                       AND `item`.`network` IN ('%s', '%s', '%s', '')
+                       AND `item`.`allow_cid` = '' AND `item`.`allow_gid` = ''
+                       AND `item`.`deny_cid` = '' AND `item`.`deny_gid` = ''
+                       AND `item`.`shadow` = 0";
+
+       $r = q($query1.$query2.$query3."  ORDER BY `item`.`id` LIMIT 1",
+               intval($start_id), intval($end_id),
+               dbesc(NETWORK_DFRN), dbesc(NETWORK_DIASPORA), dbesc(NETWORK_OSTATUS));
+       if (!$r) {
+               set_config("system", "post_update_version", 1195);
+               return true;
+       } else {
+               set_config("system", "post_update_1195_start", $r[0]["id"]);
+               $start_id = get_config("system", "post_update_1195_start");
+       }
+
+
+       $r = q($query1.$query2.$query3."  ORDER BY `item`.`id` LIMIT 10000,1",
+               intval($start_id), intval($end_id),
+               dbesc(NETWORK_DFRN), dbesc(NETWORK_DIASPORA), dbesc(NETWORK_OSTATUS));
+       if ($r)
+               $pos_id = $r[0]["id"];
+       else
+               $pos_id = $end_id;
+
+       logger("Progress: Start: ".$start_id." position: ".$pos_id." end: ".$end_id, LOGGER_DEBUG);
+
+       $r = q("UPDATE `item` ".$query2." SET `item`.`shadow` = `shadow`.`id` ".$query3,
+               intval($start_id), intval($pos_id),
+               dbesc(NETWORK_DFRN), dbesc(NETWORK_DIASPORA), dbesc(NETWORK_OSTATUS));
+}
+?>
index 0320eaa018e98b28a04179f79aae2b020bbd68da..21fdb0df34000f4e0a60c49fd8ed74f7c1637371 100644 (file)
@@ -65,13 +65,19 @@ function add_thread($itemid, $onlyshadow = false) {
                        require_once("include/Contact.php");
 
                        unset($item[0]['id']);
+                       unset($item[0]['shadow']);
                        $item[0]['uid'] = 0;
                        $item[0]['origin'] = 0;
                        $item[0]['contact-id'] = get_contact($item[0]['author-link'], 0);
                        $public_shadow = item_store($item[0], false, false, true);
 
                        logger("add_thread: Stored public shadow for post ".$itemid." under id ".$public_shadow, LOGGER_DEBUG);
-               }
+               } else
+                       $public_shadow = $r[0]["id"];
+
+               if ($public_shadow > 0)
+                       q("UPDATE `item` SET `shadow` = %d WHERE `id` = %d", intval($public_shadow), intval($itemid));
+
        }
 }
 
index 0689aa19b33f726cf970200c61ac2690ca7f5add..dad94f271bf321808e917b8cb1637acf68503a74 100644 (file)
@@ -1,6 +1,6 @@
 <?php
 
-define( 'UPDATE_VERSION' , 1194 );
+define( 'UPDATE_VERSION' , 1195 );
 
 /**
  *