src/Model/Contact.php

   1 <?php
   2 /**
   3  * @copyright Copyright (C) 2020, Friendica
   4  *
   5  * @license GNU AGPL version 3 or any later version
   6  *
   7  * This program is free software: you can redistribute it and/or modify
   8  * it under the terms of the GNU Affero General Public License as
   9  * published by the Free Software Foundation, either version 3 of the
  10  * License, or (at your option) any later version.
  11  *
  12  * This program is distributed in the hope that it will be useful,
  13  * but WITHOUT ANY WARRANTY; without even the implied warranty of
  14  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
  15  * GNU Affero General Public License for more details.
  16  *
  17  * You should have received a copy of the GNU Affero General Public License
  18  * along with this program.  If not, see <https://www.gnu.org/licenses/>.
  19  *
  20  */
  21
  22 namespace Friendica\Model;
  23
  24 use Friendica\App\BaseURL;
  25 use Friendica\Content\Pager;
  26 use Friendica\Core\Hook;
  27 use Friendica\Core\Logger;
  28 use Friendica\Core\Protocol;
  29 use Friendica\Core\Session;
  30 use Friendica\Core\System;
  31 use Friendica\Core\Worker;
  32 use Friendica\Database\DBA;
  33 use Friendica\DI;
  34 use Friendica\Model\Notify\Type;
  35 use Friendica\Network\Probe;
  36 use Friendica\Protocol\Activity;
  37 use Friendica\Protocol\ActivityPub;
  38 use Friendica\Protocol\DFRN;
  39 use Friendica\Protocol\Diaspora;
  40 use Friendica\Protocol\OStatus;
  41 use Friendica\Protocol\Salmon;
  42 use Friendica\Util\DateTimeFormat;
  43 use Friendica\Util\Images;
  44 use Friendica\Util\Network;
  45 use Friendica\Util\Strings;
  46
  47 /**
  48  * functions for interacting with a contact
  49  */
  50 class Contact
  51 {
  52         /**
  53          * @deprecated since version 2019.03
  54          * @see User::PAGE_FLAGS_NORMAL
  55          */
  56         const PAGE_NORMAL    = User::PAGE_FLAGS_NORMAL;
  57         /**
  58          * @deprecated since version 2019.03
  59          * @see User::PAGE_FLAGS_SOAPBOX
  60          */
  61         const PAGE_SOAPBOX   = User::PAGE_FLAGS_SOAPBOX;
  62         /**
  63          * @deprecated since version 2019.03
  64          * @see User::PAGE_FLAGS_COMMUNITY
  65          */
  66         const PAGE_COMMUNITY = User::PAGE_FLAGS_COMMUNITY;
  67         /**
  68          * @deprecated since version 2019.03
  69          * @see User::PAGE_FLAGS_FREELOVE
  70          */
  71         const PAGE_FREELOVE  = User::PAGE_FLAGS_FREELOVE;
  72         /**
  73          * @deprecated since version 2019.03
  74          * @see User::PAGE_FLAGS_BLOG
  75          */
  76         const PAGE_BLOG      = User::PAGE_FLAGS_BLOG;
  77         /**
  78          * @deprecated since version 2019.03
  79          * @see User::PAGE_FLAGS_PRVGROUP
  80          */
  81         const PAGE_PRVGROUP  = User::PAGE_FLAGS_PRVGROUP;
  82         /**
  83          * @}
  84          */
  85
  86         /**
  87          * Account types
  88          *
  89          * TYPE_UNKNOWN - the account has been imported from gcontact where this is the default type value
  90          *
  91          * TYPE_PERSON - the account belongs to a person
  92          *      Associated page types: PAGE_NORMAL, PAGE_SOAPBOX, PAGE_FREELOVE
  93          *
  94          * TYPE_ORGANISATION - the account belongs to an organisation
  95          *      Associated page type: PAGE_SOAPBOX
  96          *
  97          * TYPE_NEWS - the account is a news reflector
  98          *      Associated page type: PAGE_SOAPBOX
  99          *
 100          * TYPE_COMMUNITY - the account is community forum
 101          *      Associated page types: PAGE_COMMUNITY, PAGE_PRVGROUP
 102          *
 103          * TYPE_RELAY - the account is a relay
 104          *      This will only be assigned to contacts, not to user accounts
 105          * @{
 106          */
 107         const TYPE_UNKNOWN =     -1;
 108         const TYPE_PERSON =       User::ACCOUNT_TYPE_PERSON;
 109         const TYPE_ORGANISATION = User::ACCOUNT_TYPE_ORGANISATION;
 110         const TYPE_NEWS =         User::ACCOUNT_TYPE_NEWS;
 111         const TYPE_COMMUNITY =    User::ACCOUNT_TYPE_COMMUNITY;
 112         const TYPE_RELAY =        User::ACCOUNT_TYPE_RELAY;
 113         /**
 114          * @}
 115          */
 116
 117         /**
 118          * Contact_is
 119          *
 120          * Relationship types
 121          * @{
 122          */
 123         const FOLLOWER = 1;
 124         const SHARING  = 2;
 125         const FRIEND   = 3;
 126         /**
 127          * @}
 128          */
 129
 130         /**
 131          * @param array $fields    Array of selected fields, empty for all
 132          * @param array $condition Array of fields for condition
 133          * @param array $params    Array of several parameters
 134          * @return array
 135          * @throws \Exception
 136          */
 137         public static function selectToArray(array $fields = [], array $condition = [], array $params = [])
 138         {
 139                 return DBA::selectToArray('contact', $fields, $condition, $params);
 140         }
 141
 142         /**
 143          * @param array $fields    Array of selected fields, empty for all
 144          * @param array $condition Array of fields for condition
 145          * @param array $params    Array of several parameters
 146          * @return array
 147          * @throws \Exception
 148          */
 149         public static function selectFirst(array $fields = [], array $condition = [], array $params = [])
 150         {
 151                 $contact = DBA::selectFirst('contact', $fields, $condition, $params);
 152
 153                 return $contact;
 154         }
 155
 156         /**
 157          * Insert a row into the contact table
 158          * Important: You can't use DBA::lastInsertId() after this call since it will be set to 0.
 159          *
 160          * @param array        $fields              field array
 161          * @param bool         $on_duplicate_update Do an update on a duplicate entry
 162          *
 163          * @return boolean was the insert successful?
 164          * @throws \Exception
 165          */
 166         public static function insert(array $fields, bool $on_duplicate_update = false)
 167         {
 168                 $ret = DBA::insert('contact', $fields, $on_duplicate_update);
 169                 $contact = DBA::selectFirst('contact', ['nurl', 'uid'], ['id' => DBA::lastInsertId()]);
 170                 if (!DBA::isResult($contact)) {
 171                         // Shouldn't happen
 172                         return $ret;
 173                 }
 174
 175                 // Search for duplicated contacts and get rid of them
 176                 self::removeDuplicates($contact['nurl'], $contact['uid']);
 177
 178                 return $ret;
 179         }
 180
 181         /**
 182          * @param integer $id     Contact ID
 183          * @param array   $fields Array of selected fields, empty for all
 184          * @return array|boolean Contact record if it exists, false otherwise
 185          * @throws \Exception
 186          */
 187         public static function getById($id, $fields = [])
 188         {
 189                 return DBA::selectFirst('contact', $fields, ['id' => $id]);
 190         }
 191
 192         /**
 193          * Tests if the given contact is a follower
 194          *
 195          * @param int $cid Either public contact id or user's contact id
 196          * @param int $uid User ID
 197          *
 198          * @return boolean is the contact id a follower?
 199          * @throws \Friendica\Network\HTTPException\InternalServerErrorException
 200          * @throws \ImagickException
 201          */
 202         public static function isFollower($cid, $uid)
 203         {
 204                 if (self::isBlockedByUser($cid, $uid)) {
 205                         return false;
 206                 }
 207
 208                 $cdata = self::getPublicAndUserContacID($cid, $uid);
 209                 if (empty($cdata['user'])) {
 210                         return false;
 211                 }
 212
 213                 $condition = ['id' => $cdata['user'], 'rel' => [self::FOLLOWER, self::FRIEND]];
 214                 return DBA::exists('contact', $condition);
 215         }
 216
 217         /**
 218          * Tests if the given contact url is a follower
 219          *
 220          * @param string $url Contact URL
 221          * @param int    $uid User ID
 222          *
 223          * @return boolean is the contact id a follower?
 224          * @throws \Friendica\Network\HTTPException\InternalServerErrorException
 225          * @throws \ImagickException
 226          */
 227         public static function isFollowerByURL($url, $uid)
 228         {
 229                 $cid = self::getIdForURL($url, $uid, true);
 230
 231                 if (empty($cid)) {
 232                         return false;
 233                 }
 234
 235                 return self::isFollower($cid, $uid);
 236         }
 237
 238         /**
 239          * Tests if the given user follow the given contact
 240          *
 241          * @param int $cid Either public contact id or user's contact id
 242          * @param int $uid User ID
 243          *
 244          * @return boolean is the contact url being followed?
 245          * @throws \Friendica\Network\HTTPException\InternalServerErrorException
 246          * @throws \ImagickException
 247          */
 248         public static function isSharing($cid, $uid)
 249         {
 250                 if (self::isBlockedByUser($cid, $uid)) {
 251                         return false;
 252                 }
 253
 254                 $cdata = self::getPublicAndUserContacID($cid, $uid);
 255                 if (empty($cdata['user'])) {
 256                         return false;
 257                 }
 258
 259                 $condition = ['id' => $cdata['user'], 'rel' => [self::SHARING, self::FRIEND]];
 260                 return DBA::exists('contact', $condition);
 261         }
 262
 263         /**
 264          * Tests if the given user follow the given contact url
 265          *
 266          * @param string $url Contact URL
 267          * @param int    $uid User ID
 268          *
 269          * @return boolean is the contact url being followed?
 270          * @throws \Friendica\Network\HTTPException\InternalServerErrorException
 271          * @throws \ImagickException
 272          */
 273         public static function isSharingByURL($url, $uid)
 274         {
 275                 $cid = self::getIdForURL($url, $uid, true);
 276
 277                 if (empty($cid)) {
 278                         return false;
 279                 }
 280
 281                 return self::isSharing($cid, $uid);
 282         }
 283
 284         /**
 285          * Get the basepath for a given contact link
 286          *
 287          * @param string $url The contact link
 288          * @param boolean $dont_update Don't update the contact
 289          *
 290          * @return string basepath
 291          * @throws \Friendica\Network\HTTPException\InternalServerErrorException
 292          * @throws \ImagickException
 293          */
 294         public static function getBasepath($url, $dont_update = false)
 295         {
 296                 $contact = DBA::selectFirst('contact', ['id', 'baseurl'], ['uid' => 0, 'nurl' => Strings::normaliseLink($url)]);
 297                 if (!DBA::isResult($contact)) {
 298                         return '';
 299                 }
 300
 301                 if (!empty($contact['baseurl'])) {
 302                         return $contact['baseurl'];
 303                 } elseif ($dont_update) {
 304                         return '';
 305                 }
 306
 307                 // Update the existing contact
 308                 self::updateFromProbe($contact['id'], '', true);
 309
 310                 // And fetch the result
 311                 $contact = DBA::selectFirst('contact', ['baseurl'], ['id' => $contact['id']]);
 312                 if (empty($contact['baseurl'])) {
 313                         Logger::info('No baseurl for contact', ['url' => $url]);
 314                         return '';
 315                 }
 316
 317                 Logger::info('Found baseurl for contact', ['url' => $url, 'baseurl' => $contact['baseurl']]);
 318                 return $contact['baseurl'];
 319         }
 320
 321         /**
 322          * Check if the given contact url is on the same server
 323          *
 324          * @param string $url The contact link
 325          *
 326          * @return boolean Is it the same server?
 327          */
 328         public static function isLocal($url)
 329         {
 330                 return Strings::compareLink(self::getBasepath($url, true), DI::baseUrl());
 331         }
 332
 333         /**
 334          * Check if the given contact ID is on the same server
 335          *
 336          * @param string $url The contact link
 337          *
 338          * @return boolean Is it the same server?
 339          */
 340         public static function isLocalById(int $cid)
 341         {
 342                 $contact = DBA::selectFirst('contact', ['url', 'baseurl'], ['id' => $cid]);
 343                 if (!DBA::isResult($contact)) {
 344                         return false;
 345                 }
 346
 347                 if (empty($contact['baseurl'])) {
 348                         $baseurl = self::getBasepath($contact['url'], true);
 349                 } else {
 350                         $baseurl = $contact['baseurl'];
 351                 }
 352
 353                 return Strings::compareLink($baseurl, DI::baseUrl());
 354         }
 355
 356         /**
 357          * Returns the public contact id of the given user id
 358          *
 359          * @param  integer $uid User ID
 360          *
 361          * @return integer|boolean Public contact id for given user id
 362          * @throws \Exception
 363          */
 364         public static function getPublicIdByUserId($uid)
 365         {
 366                 $self = DBA::selectFirst('contact', ['url'], ['self' => true, 'uid' => $uid]);
 367                 if (!DBA::isResult($self)) {
 368                         return false;
 369                 }
 370                 return self::getIdForURL($self['url'], 0, true);
 371         }
 372
 373         /**
 374          * Returns the contact id for the user and the public contact id for a given contact id
 375          *
 376          * @param int $cid Either public contact id or user's contact id
 377          * @param int $uid User ID
 378          *
 379          * @return array with public and user's contact id
 380          * @throws \Friendica\Network\HTTPException\InternalServerErrorException
 381          * @throws \ImagickException
 382          */
 383         public static function getPublicAndUserContacID($cid, $uid)
 384         {
 385                 if (empty($uid) || empty($cid)) {
 386                         return [];
 387                 }
 388
 389                 $contact = DBA::selectFirst('contact', ['id', 'uid', 'url'], ['id' => $cid]);
 390                 if (!DBA::isResult($contact)) {
 391                         return [];
 392                 }
 393
 394                 // We quit when the user id don't match the user id of the provided contact
 395                 if (($contact['uid'] != $uid) && ($contact['uid'] != 0)) {
 396                         return [];
 397                 }
 398
 399                 if ($contact['uid'] != 0) {
 400                         $pcid = Contact::getIdForURL($contact['url'], 0, true, ['url' => $contact['url']]);
 401                         if (empty($pcid)) {
 402                                 return [];
 403                         }
 404                         $ucid = $contact['id'];
 405                 } else {
 406                         $pcid = $contact['id'];
 407                         $ucid = Contact::getIdForURL($contact['url'], $uid, true);
 408                 }
 409
 410                 return ['public' => $pcid, 'user' => $ucid];
 411         }
 412
 413         /**
 414          * Returns contact details for a given contact id in combination with a user id
 415          *
 416          * @param int $cid A contact ID
 417          * @param int $uid The User ID
 418          * @param array $fields The selected fields for the contact
 419          *
 420          * @return array The contact details
 421          *
 422          * @throws \Exception
 423          */
 424         public static function getContactForUser($cid, $uid, array $fields = [])
 425         {
 426                 $contact = DBA::selectFirst('contact', $fields, ['id' => $cid, 'uid' => $uid]);
 427
 428                 if (!DBA::isResult($contact)) {
 429                         return [];
 430                 } else {
 431                         return $contact;
 432                 }
 433         }
 434
 435         /**
 436          * Block contact id for user id
 437          *
 438          * @param int     $cid     Either public contact id or user's contact id
 439          * @param int     $uid     User ID
 440          * @param boolean $blocked Is the contact blocked or unblocked?
 441          * @throws \Exception
 442          */
 443         public static function setBlockedForUser($cid, $uid, $blocked)
 444         {
 445                 $cdata = self::getPublicAndUserContacID($cid, $uid);
 446                 if (empty($cdata)) {
 447                         return;
 448                 }
 449
 450                 if ($cdata['user'] != 0) {
 451                         DBA::update('contact', ['blocked' => $blocked], ['id' => $cdata['user'], 'pending' => false]);
 452                 }
 453
 454                 DBA::update('user-contact', ['blocked' => $blocked], ['cid' => $cdata['public'], 'uid' => $uid], true);
 455         }
 456
 457         /**
 458          * Returns "block" state for contact id and user id
 459          *
 460          * @param int $cid Either public contact id or user's contact id
 461          * @param int $uid User ID
 462          *
 463          * @return boolean is the contact id blocked for the given user?
 464          * @throws \Exception
 465          */
 466         public static function isBlockedByUser($cid, $uid)
 467         {
 468                 $cdata = self::getPublicAndUserContacID($cid, $uid);
 469                 if (empty($cdata)) {
 470                         return;
 471                 }
 472
 473                 $public_blocked = false;
 474
 475                 if (!empty($cdata['public'])) {
 476                         $public_contact = DBA::selectFirst('user-contact', ['blocked'], ['cid' => $cdata['public'], 'uid' => $uid]);
 477                         if (DBA::isResult($public_contact)) {
 478                                 $public_blocked = $public_contact['blocked'];
 479                         }
 480                 }
 481
 482                 $user_blocked = $public_blocked;
 483
 484                 if (!empty($cdata['user'])) {
 485                         $user_contact = DBA::selectFirst('contact', ['blocked'], ['id' => $cdata['user'], 'pending' => false]);
 486                         if (DBA::isResult($user_contact)) {
 487                                 $user_blocked = $user_contact['blocked'];
 488                         }
 489                 }
 490
 491                 if ($user_blocked != $public_blocked) {
 492                         DBA::update('user-contact', ['blocked' => $user_blocked], ['cid' => $cdata['public'], 'uid' => $uid], true);
 493                 }
 494
 495                 return $user_blocked;
 496         }
 497
 498         /**
 499          * Ignore contact id for user id
 500          *
 501          * @param int     $cid     Either public contact id or user's contact id
 502          * @param int     $uid     User ID
 503          * @param boolean $ignored Is the contact ignored or unignored?
 504          * @throws \Exception
 505          */
 506         public static function setIgnoredForUser($cid, $uid, $ignored)
 507         {
 508                 $cdata = self::getPublicAndUserContacID($cid, $uid);
 509                 if (empty($cdata)) {
 510                         return;
 511                 }
 512
 513                 if ($cdata['user'] != 0) {
 514                         DBA::update('contact', ['readonly' => $ignored], ['id' => $cdata['user'], 'pending' => false]);
 515                 }
 516
 517                 DBA::update('user-contact', ['ignored' => $ignored], ['cid' => $cdata['public'], 'uid' => $uid], true);
 518         }
 519
 520         /**
 521          * Returns "ignore" state for contact id and user id
 522          *
 523          * @param int $cid Either public contact id or user's contact id
 524          * @param int $uid User ID
 525          *
 526          * @return boolean is the contact id ignored for the given user?
 527          * @throws \Exception
 528          */
 529         public static function isIgnoredByUser($cid, $uid)
 530         {
 531                 $cdata = self::getPublicAndUserContacID($cid, $uid);
 532                 if (empty($cdata)) {
 533                         return;
 534                 }
 535
 536                 $public_ignored = false;
 537
 538                 if (!empty($cdata['public'])) {
 539                         $public_contact = DBA::selectFirst('user-contact', ['ignored'], ['cid' => $cdata['public'], 'uid' => $uid]);
 540                         if (DBA::isResult($public_contact)) {
 541                                 $public_ignored = $public_contact['ignored'];
 542                         }
 543                 }
 544
 545                 $user_ignored = $public_ignored;
 546
 547                 if (!empty($cdata['user'])) {
 548                         $user_contact = DBA::selectFirst('contact', ['readonly'], ['id' => $cdata['user'], 'pending' => false]);
 549                         if (DBA::isResult($user_contact)) {
 550                                 $user_ignored = $user_contact['readonly'];
 551                         }
 552                 }
 553
 554                 if ($user_ignored != $public_ignored) {
 555                         DBA::update('user-contact', ['ignored' => $user_ignored], ['cid' => $cdata['public'], 'uid' => $uid], true);
 556                 }
 557
 558                 return $user_ignored;
 559         }
 560
 561         /**
 562          * Set "collapsed" for contact id and user id
 563          *
 564          * @param int     $cid       Either public contact id or user's contact id
 565          * @param int     $uid       User ID
 566          * @param boolean $collapsed are the contact's posts collapsed or uncollapsed?
 567          * @throws \Exception
 568          */
 569         public static function setCollapsedForUser($cid, $uid, $collapsed)
 570         {
 571                 $cdata = self::getPublicAndUserContacID($cid, $uid);
 572                 if (empty($cdata)) {
 573                         return;
 574                 }
 575
 576                 DBA::update('user-contact', ['collapsed' => $collapsed], ['cid' => $cdata['public'], 'uid' => $uid], true);
 577         }
 578
 579         /**
 580          * Returns "collapsed" state for contact id and user id
 581          *
 582          * @param int $cid Either public contact id or user's contact id
 583          * @param int $uid User ID
 584          *
 585          * @return boolean is the contact id blocked for the given user?
 586          * @throws \Friendica\Network\HTTPException\InternalServerErrorException
 587          * @throws \ImagickException
 588          */
 589         public static function isCollapsedByUser($cid, $uid)
 590         {
 591                 $cdata = self::getPublicAndUserContacID($cid, $uid);
 592                 if (empty($cdata)) {
 593                         return;
 594                 }
 595
 596                 $collapsed = false;
 597
 598                 if (!empty($cdata['public'])) {
 599                         $public_contact = DBA::selectFirst('user-contact', ['collapsed'], ['cid' => $cdata['public'], 'uid' => $uid]);
 600                         if (DBA::isResult($public_contact)) {
 601                                 $collapsed = $public_contact['collapsed'];
 602                         }
 603                 }
 604
 605                 return $collapsed;
 606         }
 607
 608         /**
 609          * Returns a list of contacts belonging in a group
 610          *
 611          * @param int $gid
 612          * @return array
 613          * @throws \Exception
 614          */
 615         public static function getByGroupId($gid)
 616         {
 617                 $return = [];
 618
 619                 if (intval($gid)) {
 620                         $stmt = DBA::p('SELECT `group_member`.`contact-id`, `contact`.*
 621                                 FROM `contact`
 622                                 INNER JOIN `group_member`
 623                                         ON `contact`.`id` = `group_member`.`contact-id`
 624                                 WHERE `gid` = ?
 625                                 AND `contact`.`uid` = ?
 626                                 AND NOT `contact`.`self`
 627                                 AND NOT `contact`.`deleted`
 628                                 AND NOT `contact`.`blocked`
 629                                 AND NOT `contact`.`pending`
 630                                 ORDER BY `contact`.`name` ASC',
 631                                 $gid,
 632                                 local_user()
 633                         );
 634
 635                         if (DBA::isResult($stmt)) {
 636                                 $return = DBA::toArray($stmt);
 637                         }
 638                 }
 639
 640                 return $return;
 641         }
 642
 643         /**
 644          * Creates the self-contact for the provided user id
 645          *
 646          * @param int $uid
 647          * @return bool Operation success
 648          * @throws \Friendica\Network\HTTPException\InternalServerErrorException
 649          */
 650         public static function createSelfFromUserId($uid)
 651         {
 652                 // Only create the entry if it doesn't exist yet
 653                 if (DBA::exists('contact', ['uid' => $uid, 'self' => true])) {
 654                         return true;
 655                 }
 656
 657                 $user = DBA::selectFirst('user', ['uid', 'username', 'nickname'], ['uid' => $uid]);
 658                 if (!DBA::isResult($user)) {
 659                         return false;
 660                 }
 661
 662                 $return = DBA::insert('contact', [
 663                         'uid'         => $user['uid'],
 664                         'created'     => DateTimeFormat::utcNow(),
 665                         'self'        => 1,
 666                         'name'        => $user['username'],
 667                         'nick'        => $user['nickname'],
 668                         'photo'       => DI::baseUrl() . '/photo/profile/' . $user['uid'] . '.jpg',
 669                         'thumb'       => DI::baseUrl() . '/photo/avatar/'  . $user['uid'] . '.jpg',
 670                         'micro'       => DI::baseUrl() . '/photo/micro/'   . $user['uid'] . '.jpg',
 671                         'blocked'     => 0,
 672                         'pending'     => 0,
 673                         'url'         => DI::baseUrl() . '/profile/' . $user['nickname'],
 674                         'nurl'        => Strings::normaliseLink(DI::baseUrl() . '/profile/' . $user['nickname']),
 675                         'addr'        => $user['nickname'] . '@' . substr(DI::baseUrl(), strpos(DI::baseUrl(), '://') + 3),
 676                         'request'     => DI::baseUrl() . '/dfrn_request/' . $user['nickname'],
 677                         'notify'      => DI::baseUrl() . '/dfrn_notify/'  . $user['nickname'],
 678                         'poll'        => DI::baseUrl() . '/dfrn_poll/'    . $user['nickname'],
 679                         'confirm'     => DI::baseUrl() . '/dfrn_confirm/' . $user['nickname'],
 680                         'poco'        => DI::baseUrl() . '/poco/'         . $user['nickname'],
 681                         'name-date'   => DateTimeFormat::utcNow(),
 682                         'uri-date'    => DateTimeFormat::utcNow(),
 683                         'avatar-date' => DateTimeFormat::utcNow(),
 684                         'closeness'   => 0
 685                 ]);
 686
 687                 return $return;
 688         }
 689
 690         /**
 691          * Updates the self-contact for the provided user id
 692          *
 693          * @param int     $uid
 694          * @param boolean $update_avatar Force the avatar update
 695          * @throws \Friendica\Network\HTTPException\InternalServerErrorException
 696          */
 697         public static function updateSelfFromUserID($uid, $update_avatar = false)
 698         {
 699                 $fields = ['id', 'name', 'nick', 'location', 'about', 'keywords', 'avatar',
 700                         'xmpp', 'contact-type', 'forum', 'prv', 'avatar-date', 'url', 'nurl', 'unsearchable',
 701                         'photo', 'thumb', 'micro', 'addr', 'request', 'notify', 'poll', 'confirm', 'poco'];
 702                 $self = DBA::selectFirst('contact', $fields, ['uid' => $uid, 'self' => true]);
 703                 if (!DBA::isResult($self)) {
 704                         return;
 705                 }
 706
 707                 $fields = ['nickname', 'page-flags', 'account-type'];
 708                 $user = DBA::selectFirst('user', $fields, ['uid' => $uid]);
 709                 if (!DBA::isResult($user)) {
 710                         return;
 711                 }
 712
 713                 $fields = ['name', 'photo', 'thumb', 'about', 'address', 'locality', 'region',
 714                         'country-name', 'pub_keywords', 'xmpp', 'net-publish'];
 715                 $profile = DBA::selectFirst('profile', $fields, ['uid' => $uid]);
 716                 if (!DBA::isResult($profile)) {
 717                         return;
 718                 }
 719
 720                 $file_suffix = 'jpg';
 721
 722                 $fields = ['name' => $profile['name'], 'nick' => $user['nickname'],
 723                         'avatar-date' => $self['avatar-date'], 'location' => Profile::formatLocation($profile),
 724                         'about' => $profile['about'], 'keywords' => $profile['pub_keywords'],
 725                         'contact-type' => $user['account-type'],
 726                         'xmpp' => $profile['xmpp']];
 727
 728                 $avatar = Photo::selectFirst(['resource-id', 'type'], ['uid' => $uid, 'profile' => true]);
 729                 if (DBA::isResult($avatar)) {
 730                         if ($update_avatar) {
 731                                 $fields['avatar-date'] = DateTimeFormat::utcNow();
 732                         }
 733
 734                         // Creating the path to the avatar, beginning with the file suffix
 735                         $types = Images::supportedTypes();
 736                         if (isset($types[$avatar['type']])) {
 737                                 $file_suffix = $types[$avatar['type']];
 738                         }
 739
 740                         // We are adding a timestamp value so that other systems won't use cached content
 741                         $timestamp = strtotime($fields['avatar-date']);
 742
 743                         $prefix = DI::baseUrl() . '/photo/' .$avatar['resource-id'] . '-';
 744                         $suffix = '.' . $file_suffix . '?ts=' . $timestamp;
 745
 746                         $fields['photo'] = $prefix . '4' . $suffix;
 747                         $fields['thumb'] = $prefix . '5' . $suffix;
 748                         $fields['micro'] = $prefix . '6' . $suffix;
 749                 } else {
 750                         // We hadn't found a photo entry, so we use the default avatar
 751                         $fields['photo'] = DI::baseUrl() . '/images/person-300.jpg';
 752                         $fields['thumb'] = DI::baseUrl() . '/images/person-80.jpg';
 753                         $fields['micro'] = DI::baseUrl() . '/images/person-48.jpg';
 754                 }
 755
 756                 $fields['avatar'] = DI::baseUrl() . '/photo/profile/' .$uid . '.' . $file_suffix;
 757                 $fields['forum'] = $user['page-flags'] == User::PAGE_FLAGS_COMMUNITY;
 758                 $fields['prv'] = $user['page-flags'] == User::PAGE_FLAGS_PRVGROUP;
 759                 $fields['unsearchable'] = !$profile['net-publish'];
 760
 761                 // it seems as if ported accounts can have wrong values, so we make sure that now everything is fine.
 762                 $fields['url'] = DI::baseUrl() . '/profile/' . $user['nickname'];
 763                 $fields['nurl'] = Strings::normaliseLink($fields['url']);
 764                 $fields['addr'] = $user['nickname'] . '@' . substr(DI::baseUrl(), strpos(DI::baseUrl(), '://') + 3);
 765                 $fields['request'] = DI::baseUrl() . '/dfrn_request/' . $user['nickname'];
 766                 $fields['notify'] = DI::baseUrl() . '/dfrn_notify/' . $user['nickname'];
 767                 $fields['poll'] = DI::baseUrl() . '/dfrn_poll/'. $user['nickname'];
 768                 $fields['confirm'] = DI::baseUrl() . '/dfrn_confirm/' . $user['nickname'];
 769                 $fields['poco'] = DI::baseUrl() . '/poco/' . $user['nickname'];
 770
 771                 $update = false;
 772
 773                 foreach ($fields as $field => $content) {
 774                         if ($self[$field] != $content) {
 775                                 $update = true;
 776                         }
 777                 }
 778
 779                 if ($update) {
 780                         if ($fields['name'] != $self['name']) {
 781                                 $fields['name-date'] = DateTimeFormat::utcNow();
 782                         }
 783                         $fields['updated'] = DateTimeFormat::utcNow();
 784                         DBA::update('contact', $fields, ['id' => $self['id']]);
 785
 786                         // Update the public contact as well
 787                         DBA::update('contact', $fields, ['uid' => 0, 'nurl' => $self['nurl']]);
 788
 789                         // Update the profile
 790                         $fields = ['photo' => DI::baseUrl() . '/photo/profile/' .$uid . '.' . $file_suffix,
 791                                 'thumb' => DI::baseUrl() . '/photo/avatar/' . $uid .'.' . $file_suffix];
 792                         DBA::update('profile', $fields, ['uid' => $uid]);
 793                 }
 794         }
 795
 796         /**
 797          * Marks a contact for removal
 798          *
 799          * @param int $id contact id
 800          * @return null
 801          * @throws \Friendica\Network\HTTPException\InternalServerErrorException
 802          */
 803         public static function remove($id)
 804         {
 805                 // We want just to make sure that we don't delete our "self" contact
 806                 $contact = DBA::selectFirst('contact', ['uid'], ['id' => $id, 'self' => false]);
 807                 if (!DBA::isResult($contact) || !intval($contact['uid'])) {
 808                         return;
 809                 }
 810
 811                 // Archive the contact
 812                 DBA::update('contact', ['archive' => true, 'network' => Protocol::PHANTOM, 'deleted' => true], ['id' => $id]);
 813
 814                 // Delete it in the background
 815                 Worker::add(PRIORITY_MEDIUM, 'RemoveContact', $id);
 816         }
 817
 818         /**
 819          * Sends an unfriend message. Does not remove the contact
 820          *
 821          * @param array   $user     User unfriending
 822          * @param array   $contact  Contact unfriended
 823          * @param boolean $dissolve Remove the contact on the remote side
 824          * @return void
 825          * @throws \Friendica\Network\HTTPException\InternalServerErrorException
 826          * @throws \ImagickException
 827          */
 828         public static function terminateFriendship(array $user, array $contact, $dissolve = false)
 829         {
 830                 if (empty($contact['network'])) {
 831                         return;
 832                 }
 833
 834                 $protocol = $contact['network'];
 835                 if (($protocol == Protocol::DFRN) && !self::isLegacyDFRNContact($contact)) {
 836                         $protocol = Protocol::ACTIVITYPUB;
 837                 }
 838
 839                 if (($protocol == Protocol::DFRN) && $dissolve) {
 840                         DFRN::deliver($user, $contact, 'placeholder', true);
 841                 } elseif (in_array($protocol, [Protocol::OSTATUS, Protocol::DFRN])) {
 842                         // create an unfollow slap
 843                         $item = [];
 844                         $item['verb'] = Activity::O_UNFOLLOW;
 845                         $item['follow'] = $contact["url"];
 846                         $item['body'] = '';
 847                         $item['title'] = '';
 848                         $item['guid'] = '';
 849                         $item['tag'] = '';
 850                         $item['attach'] = '';
 851                         $slap = OStatus::salmon($item, $user);
 852
 853                         if (!empty($contact['notify'])) {
 854                                 Salmon::slapper($user, $contact['notify'], $slap);
 855                         }
 856                 } elseif ($protocol == Protocol::DIASPORA) {
 857                         Diaspora::sendUnshare($user, $contact);
 858                 } elseif ($protocol == Protocol::ACTIVITYPUB) {
 859                         ActivityPub\Transmitter::sendContactUndo($contact['url'], $contact['id'], $user['uid']);
 860
 861                         if ($dissolve) {
 862                                 ActivityPub\Transmitter::sendContactReject($contact['url'], $contact['hub-verify'], $user['uid']);
 863                         }
 864                 }
 865         }
 866
 867         /**
 868          * Marks a contact for archival after a communication issue delay
 869          *
 870          * Contact has refused to recognise us as a friend. We will start a countdown.
 871          * If they still don't recognise us in 32 days, the relationship is over,
 872          * and we won't waste any more time trying to communicate with them.
 873          * This provides for the possibility that their database is temporarily messed
 874          * up or some other transient event and that there's a possibility we could recover from it.
 875          *
 876          * @param array $contact contact to mark for archival
 877          * @return null
 878          * @throws \Friendica\Network\HTTPException\InternalServerErrorException
 879          */
 880         public static function markForArchival(array $contact)
 881         {
 882                 if (!isset($contact['url']) && !empty($contact['id'])) {
 883                         $fields = ['id', 'url', 'archive', 'self', 'term-date'];
 884                         $contact = DBA::selectFirst('contact', $fields, ['id' => $contact['id']]);
 885                         if (!DBA::isResult($contact)) {
 886                                 return;
 887                         }
 888                 } elseif (!isset($contact['url'])) {
 889                         Logger::log('Empty contact: ' . json_encode($contact) . ' - ' . System::callstack(20), Logger::DEBUG);
 890                 }
 891
 892                 Logger::log('Contact '.$contact['id'].' is marked for archival', Logger::DEBUG);
 893
 894                 // Contact already archived or "self" contact? => nothing to do
 895                 if ($contact['archive'] || $contact['self']) {
 896                         return;
 897                 }
 898
 899                 if ($contact['term-date'] <= DBA::NULL_DATETIME) {
 900                         DBA::update('contact', ['term-date' => DateTimeFormat::utcNow()], ['id' => $contact['id']]);
 901                         DBA::update('contact', ['term-date' => DateTimeFormat::utcNow()], ['`nurl` = ? AND `term-date` <= ? AND NOT `self`', Strings::normaliseLink($contact['url']), DBA::NULL_DATETIME]);
 902                 } else {
 903                         /* @todo
 904                          * We really should send a notification to the owner after 2-3 weeks
 905                          * so they won't be surprised when the contact vanishes and can take
 906                          * remedial action if this was a serious mistake or glitch
 907                          */
 908
 909                         /// @todo Check for contact vitality via probing
 910                         $archival_days = DI::config()->get('system', 'archival_days', 32);
 911
 912                         $expiry = $contact['term-date'] . ' + ' . $archival_days . ' days ';
 913                         if (DateTimeFormat::utcNow() > DateTimeFormat::utc($expiry)) {
 914                                 /* Relationship is really truly dead. archive them rather than
 915                                  * delete, though if the owner tries to unarchive them we'll start
 916                                  * the whole process over again.
 917                                  */
 918                                 DBA::update('contact', ['archive' => true], ['id' => $contact['id']]);
 919                                 DBA::update('contact', ['archive' => true], ['nurl' => Strings::normaliseLink($contact['url']), 'self' => false]);
 920                                 GContact::updateFromPublicContactURL($contact['url']);
 921                         }
 922                 }
 923         }
 924
 925         /**
 926          * Cancels the archival countdown
 927          *
 928          * @see   Contact::markForArchival()
 929          *
 930          * @param array $contact contact to be unmarked for archival
 931          * @return null
 932          * @throws \Exception
 933          */
 934         public static function unmarkForArchival(array $contact)
 935         {
 936                 // Always unarchive the relay contact entry
 937                 if (!empty($contact['batch']) && !empty($contact['term-date']) && ($contact['term-date'] > DBA::NULL_DATETIME)) {
 938                         $fields = ['term-date' => DBA::NULL_DATETIME, 'archive' => false];
 939                         $condition = ['uid' => 0, 'network' => Protocol::FEDERATED, 'batch' => $contact['batch'], 'contact-type' => self::TYPE_RELAY];
 940                         DBA::update('contact', $fields, $condition);
 941                 }
 942
 943                 $condition = ['`id` = ? AND (`term-date` > ? OR `archive`)', $contact['id'], DBA::NULL_DATETIME];
 944                 $exists = DBA::exists('contact', $condition);
 945
 946                 // We don't need to update, we never marked this contact for archival
 947                 if (!$exists) {
 948                         return;
 949                 }
 950
 951                 Logger::log('Contact '.$contact['id'].' is marked as vital again', Logger::DEBUG);
 952
 953                 if (!isset($contact['url']) && !empty($contact['id'])) {
 954                         $fields = ['id', 'url', 'batch'];
 955                         $contact = DBA::selectFirst('contact', $fields, ['id' => $contact['id']]);
 956                         if (!DBA::isResult($contact)) {
 957                                 return;
 958                         }
 959                 }
 960
 961                 // It's a miracle. Our dead contact has inexplicably come back to life.
 962                 $fields = ['term-date' => DBA::NULL_DATETIME, 'archive' => false];
 963                 DBA::update('contact', $fields, ['id' => $contact['id']]);
 964                 DBA::update('contact', $fields, ['nurl' => Strings::normaliseLink($contact['url']), 'self' => false]);
 965                 GContact::updateFromPublicContactURL($contact['url']);
 966         }
 967
 968         /**
 969          * Get contact data for a given profile link
 970          *
 971          * The function looks at several places (contact table and gcontact table) for the contact
 972          * It caches its result for the same script execution to prevent duplicate calls
 973          *
 974          * @param string $url     The profile link
 975          * @param int    $uid     User id
 976          * @param array  $default If not data was found take this data as default value
 977          *
 978          * @return array Contact data
 979          * @throws \Friendica\Network\HTTPException\InternalServerErrorException
 980          */
 981         public static function getDetailsByURL($url, $uid = -1, array $default = [])
 982         {
 983                 static $cache = [];
 984
 985                 if ($url == '') {
 986                         return $default;
 987                 }
 988
 989                 if ($uid == -1) {
 990                         $uid = local_user();
 991                 }
 992
 993                 if (isset($cache[$url][$uid])) {
 994                         return $cache[$url][$uid];
 995                 }
 996
 997                 $ssl_url = str_replace('http://', 'https://', $url);
 998
 999                 $nurl = Strings::normaliseLink($url);
1000
1001                 // Fetch contact data from the contact table for the given user
1002                 $s = DBA::p("SELECT `id`, `id` AS `cid`, 0 AS `gid`, 0 AS `zid`, `uid`, `url`, `nurl`, `alias`, `network`, `name`, `nick`, `addr`, `location`, `about`, `xmpp`,
1003                         `keywords`, `photo`, `thumb`, `micro`, `forum`, `prv`, (`forum` | `prv`) AS `community`, `contact-type`, `bd` AS `birthday`, `self`, `rel`, `pending`
1004                 FROM `contact` WHERE `nurl` = ? AND `uid` = ?", $nurl, $uid);
1005                 $r = DBA::toArray($s);
1006
1007                 // Fetch contact data from the contact table for the given user, checking with the alias
1008                 if (!DBA::isResult($r)) {
1009                         $s = DBA::p("SELECT `id`, `id` AS `cid`, 0 AS `gid`, 0 AS `zid`, `uid`, `url`, `nurl`, `alias`, `network`, `name`, `nick`, `addr`, `location`, `about`, `xmpp`,
1010                                 `keywords`, `photo`, `thumb`, `micro`, `forum`, `prv`, (`forum` | `prv`) AS `community`, `contact-type`, `bd` AS `birthday`, `self`, `rel`, `pending`
1011                         FROM `contact` WHERE `alias` IN (?, ?, ?) AND `uid` = ?", $nurl, $url, $ssl_url, $uid);
1012                         $r = DBA::toArray($s);
1013                 }
1014
1015                 // Fetch the data from the contact table with "uid=0" (which is filled automatically)
1016                 if (!DBA::isResult($r)) {
1017                         $s = DBA::p("SELECT `id`, 0 AS `cid`, `id` AS `zid`, 0 AS `gid`, `uid`, `url`, `nurl`, `alias`, `network`, `name`, `nick`, `addr`, `location`, `about`, `xmpp`,
1018                         `keywords`, `photo`, `thumb`, `micro`, `forum`, `prv`, (`forum` | `prv`) AS `community`, `contact-type`, `bd` AS `birthday`, 0 AS `self`, `rel`, `pending`
1019                         FROM `contact` WHERE `nurl` = ? AND `uid` = 0", $nurl);
1020                         $r = DBA::toArray($s);
1021                 }
1022
1023                 // Fetch the data from the contact table with "uid=0" (which is filled automatically) - checked with the alias
1024                 if (!DBA::isResult($r)) {
1025                         $s = DBA::p("SELECT `id`, 0 AS `cid`, `id` AS `zid`, 0 AS `gid`, `uid`, `url`, `nurl`, `alias`, `network`, `name`, `nick`, `addr`, `location`, `about`, `xmpp`,
1026                         `keywords`, `photo`, `thumb`, `micro`, `forum`, `prv`, (`forum` | `prv`) AS `community`, `contact-type`, `bd` AS `birthday`, 0 AS `self`, `rel`, `pending`
1027                         FROM `contact` WHERE `alias` IN (?, ?, ?) AND `uid` = 0", $nurl, $url, $ssl_url);
1028                         $r = DBA::toArray($s);
1029                 }
1030
1031                 // Fetch the data from the gcontact table
1032                 if (!DBA::isResult($r)) {
1033                         $s = DBA::p("SELECT 0 AS `id`, 0 AS `cid`, `id` AS `gid`, 0 AS `zid`, 0 AS `uid`, `url`, `nurl`, `alias`, `network`, `name`, `nick`, `addr`, `location`, `about`, '' AS `xmpp`,
1034                         `keywords`, `photo`, `photo` AS `thumb`, `photo` AS `micro`, 0 AS `forum`, 0 AS `prv`, `community`, `contact-type`, `birthday`, 0 AS `self`, 2 AS `rel`, 0 AS `pending`
1035                         FROM `gcontact` WHERE `nurl` = ?", $nurl);
1036                         $r = DBA::toArray($s);
1037                 }
1038
1039                 if (DBA::isResult($r)) {
1040                         // If there is more than one entry we filter out the connector networks
1041                         if (count($r) > 1) {
1042                                 foreach ($r as $id => $result) {
1043                                         if (!in_array($result["network"], Protocol::NATIVE_SUPPORT)) {
1044                                                 unset($r[$id]);
1045                                         }
1046                                 }
1047                         }
1048
1049                         $profile = array_shift($r);
1050
1051                         // "bd" always contains the upcoming birthday of a contact.
1052                         // "birthday" might contain the birthday including the year of birth.
1053                         if ($profile["birthday"] > DBA::NULL_DATE) {
1054                                 $bd_timestamp = strtotime($profile["birthday"]);
1055                                 $month = date("m", $bd_timestamp);
1056                                 $day = date("d", $bd_timestamp);
1057
1058                                 $current_timestamp = time();
1059                                 $current_year = date("Y", $current_timestamp);
1060                                 $current_month = date("m", $current_timestamp);
1061                                 $current_day = date("d", $current_timestamp);
1062
1063                                 $profile["bd"] = $current_year . "-" . $month . "-" . $day;
1064                                 $current = $current_year . "-" . $current_month . "-" . $current_day;
1065
1066                                 if ($profile["bd"] < $current) {
1067                                         $profile["bd"] = ( ++$current_year) . "-" . $month . "-" . $day;
1068                                 }
1069                         } else {
1070                                 $profile["bd"] = DBA::NULL_DATE;
1071                         }
1072                 } else {
1073                         $profile = $default;
1074                 }
1075
1076                 if (empty($profile["photo"]) && isset($default["photo"])) {
1077                         $profile["photo"] = $default["photo"];
1078                 }
1079
1080                 if (empty($profile["name"]) && isset($default["name"])) {
1081                         $profile["name"] = $default["name"];
1082                 }
1083
1084                 if (empty($profile["network"]) && isset($default["network"])) {
1085                         $profile["network"] = $default["network"];
1086                 }
1087
1088                 if (empty($profile["thumb"]) && isset($profile["photo"])) {
1089                         $profile["thumb"] = $profile["photo"];
1090                 }
1091
1092                 if (empty($profile["micro"]) && isset($profile["thumb"])) {
1093                         $profile["micro"] = $profile["thumb"];
1094                 }
1095
1096                 if ((empty($profile["addr"]) || empty($profile["name"])) && !empty($profile["gid"])
1097                         && in_array($profile["network"], Protocol::FEDERATED)
1098                 ) {
1099                         Worker::add(PRIORITY_LOW, "UpdateGContact", $url);
1100                 }
1101
1102                 // Show contact details of Diaspora contacts only if connected
1103                 if (empty($profile["cid"]) && ($profile["network"] ?? "") == Protocol::DIASPORA) {
1104                         $profile["location"] = "";
1105                         $profile["about"] = "";
1106                         $profile["birthday"] = DBA::NULL_DATE;
1107                 }
1108
1109                 $cache[$url][$uid] = $profile;
1110
1111                 return $profile;
1112         }
1113
1114         /**
1115          * Get contact data for a given address
1116          *
1117          * The function looks at several places (contact table and gcontact table) for the contact
1118          *
1119          * @param string $addr The profile link
1120          * @param int    $uid  User id
1121          *
1122          * @return array Contact data
1123          * @throws \Friendica\Network\HTTPException\InternalServerErrorException
1124          * @throws \ImagickException
1125          */
1126         public static function getDetailsByAddr($addr, $uid = -1)
1127         {
1128                 if ($addr == '') {
1129                         return [];
1130                 }
1131
1132                 if ($uid == -1) {
1133                         $uid = local_user();
1134                 }
1135
1136                 // Fetch contact data from the contact table for the given user
1137                 $r = q("SELECT `id`, `id` AS `cid`, 0 AS `gid`, 0 AS `zid`, `uid`, `url`, `nurl`, `alias`, `network`, `name`, `nick`, `addr`, `location`, `about`, `xmpp`,
1138                         `keywords`, `photo`, `thumb`, `micro`, `forum`, `prv`, (`forum` | `prv`) AS `community`, `contact-type`, `bd` AS `birthday`, `self`, `rel`, `pending`
1139                         FROM `contact` WHERE `addr` = '%s' AND `uid` = %d AND NOT `deleted`",
1140                         DBA::escape($addr),
1141                         intval($uid)
1142                 );
1143                 // Fetch the data from the contact table with "uid=0" (which is filled automatically)
1144                 if (!DBA::isResult($r)) {
1145                         $r = q("SELECT `id`, 0 AS `cid`, `id` AS `zid`, 0 AS `gid`, `uid`, `url`, `nurl`, `alias`, `network`, `name`, `nick`, `addr`, `location`, `about`, `xmpp`,
1146                                 `keywords`, `photo`, `thumb`, `micro`, `forum`, `prv`, (`forum` | `prv`) AS `community`, `contact-type`, `bd` AS `birthday`, 0 AS `self`, `rel`, `pending`
1147                                 FROM `contact` WHERE `addr` = '%s' AND `uid` = 0 AND NOT `deleted`",
1148                                 DBA::escape($addr)
1149                         );
1150                 }
1151
1152                 // Fetch the data from the gcontact table
1153                 if (!DBA::isResult($r)) {
1154                         $r = q("SELECT 0 AS `id`, 0 AS `cid`, `id` AS `gid`, 0 AS `zid`, 0 AS `uid`, `url`, `nurl`, `alias`, `network`, `name`, `nick`, `addr`, `location`, `about`, '' AS `xmpp`,
1155                                 `keywords`, `photo`, `photo` AS `thumb`, `photo` AS `micro`, `community` AS `forum`, 0 AS `prv`, `community`, `contact-type`, `birthday`, 0 AS `self`, 2 AS `rel`, 0 AS `pending`
1156                                 FROM `gcontact` WHERE `addr` = '%s'",
1157                                 DBA::escape($addr)
1158                         );
1159                 }
1160
1161                 if (!DBA::isResult($r)) {
1162                         $data = Probe::uri($addr);
1163
1164                         $profile = self::getDetailsByURL($data['url'], $uid);
1165                 } else {
1166                         $profile = $r[0];
1167                 }
1168
1169                 return $profile;
1170         }
1171
1172         /**
1173          * Returns the data array for the photo menu of a given contact
1174          *
1175          * @param array $contact contact
1176          * @param int   $uid     optional, default 0
1177          * @return array
1178          * @throws \Friendica\Network\HTTPException\InternalServerErrorException
1179          * @throws \ImagickException
1180          */
1181         public static function photoMenu(array $contact, $uid = 0)
1182         {
1183                 $pm_url = '';
1184                 $status_link = '';
1185                 $photos_link = '';
1186                 $contact_drop_link = '';
1187                 $poke_link = '';
1188
1189                 if ($uid == 0) {
1190                         $uid = local_user();
1191                 }
1192
1193                 if (empty($contact['uid']) || ($contact['uid'] != $uid)) {
1194                         if ($uid == 0) {
1195                                 $profile_link = self::magicLink($contact['url']);
1196                                 $menu = ['profile' => [DI::l10n()->t('View Profile'), $profile_link, true]];
1197
1198                                 return $menu;
1199                         }
1200
1201                         // Look for our own contact if the uid doesn't match and isn't public
1202                         $contact_own = DBA::selectFirst('contact', [], ['nurl' => $contact['nurl'], 'network' => $contact['network'], 'uid' => $uid]);
1203                         if (DBA::isResult($contact_own)) {
1204                                 return self::photoMenu($contact_own, $uid);
1205                         }
1206                 }
1207
1208                 $sparkle = false;
1209                 if (($contact['network'] === Protocol::DFRN) && !$contact['self'] && empty($contact['pending'])) {
1210                         $sparkle = true;
1211                         $profile_link = DI::baseUrl() . '/redir/' . $contact['id'];
1212                 } else {
1213                         $profile_link = $contact['url'];
1214                 }
1215
1216                 if ($profile_link === 'mailbox') {
1217                         $profile_link = '';
1218                 }
1219
1220                 if ($sparkle) {
1221                         $status_link = $profile_link . '/status';
1222                         $photos_link = str_replace('/profile/', '/photos/', $profile_link);
1223                         $profile_link = $profile_link . '/profile';
1224                 }
1225
1226                 if (self::canReceivePrivateMessages($contact) && empty($contact['pending'])) {
1227                         $pm_url = DI::baseUrl() . '/message/new/' . $contact['id'];
1228                 }
1229
1230                 if (($contact['network'] == Protocol::DFRN) && !$contact['self'] && empty($contact['pending'])) {
1231                         $poke_link = DI::baseUrl() . '/poke/?c=' . $contact['id'];
1232                 }
1233
1234                 $contact_url = DI::baseUrl() . '/contact/' . $contact['id'];
1235
1236                 $posts_link = DI::baseUrl() . '/contact/' . $contact['id'] . '/conversations';
1237
1238                 if (!$contact['self']) {
1239                         $contact_drop_link = DI::baseUrl() . '/contact/' . $contact['id'] . '/drop?confirm=1';
1240                 }
1241
1242                 $follow_link = '';
1243                 $unfollow_link = '';
1244                 if (!$contact['self'] && in_array($contact['network'], Protocol::NATIVE_SUPPORT)) {
1245                         if ($contact['uid'] && in_array($contact['rel'], [self::SHARING, self::FRIEND])) {
1246                                 $unfollow_link = 'unfollow?url=' . urlencode($contact['url']);
1247                         } elseif(!$contact['pending']) {
1248                                 $follow_link = 'follow?url=' . urlencode($contact['url']);
1249                         }
1250                 }
1251
1252                 if (!empty($follow_link) || !empty($unfollow_link)) {
1253                         $contact_drop_link = '';
1254                 }
1255
1256                 /**
1257                  * Menu array:
1258                  * "name" => [ "Label", "link", (bool)Should the link opened in a new tab? ]
1259                  */
1260                 if (empty($contact['uid'])) {
1261                         $menu = [
1262                                 'profile' => [DI::l10n()->t('View Profile')  , $profile_link , true],
1263                                 'network' => [DI::l10n()->t('Network Posts') , $posts_link   , false],
1264                                 'edit'    => [DI::l10n()->t('View Contact')  , $contact_url  , false],
1265                                 'follow'  => [DI::l10n()->t('Connect/Follow'), $follow_link  , true],
1266                                 'unfollow'=> [DI::l10n()->t('UnFollow')      , $unfollow_link, true],
1267                         ];
1268                 } else {
1269                         $menu = [
1270                                 'status'  => [DI::l10n()->t('View Status')   , $status_link      , true],
1271                                 'profile' => [DI::l10n()->t('View Profile')  , $profile_link     , true],
1272                                 'photos'  => [DI::l10n()->t('View Photos')   , $photos_link      , true],
1273                                 'network' => [DI::l10n()->t('Network Posts') , $posts_link       , false],
1274                                 'edit'    => [DI::l10n()->t('View Contact')  , $contact_url      , false],
1275                                 'drop'    => [DI::l10n()->t('Drop Contact')  , $contact_drop_link, false],
1276                                 'pm'      => [DI::l10n()->t('Send PM')       , $pm_url           , false],
1277                                 'poke'    => [DI::l10n()->t('Poke')          , $poke_link        , false],
1278                                 'follow'  => [DI::l10n()->t('Connect/Follow'), $follow_link      , true],
1279                                 'unfollow'=> [DI::l10n()->t('UnFollow')      , $unfollow_link    , true],
1280                         ];
1281
1282                         if (!empty($contact['pending'])) {
1283                                 $intro = DBA::selectFirst('intro', ['id'], ['contact-id' => $contact['id']]);
1284                                 if (DBA::isResult($intro)) {
1285                                         $menu['follow'] = [DI::l10n()->t('Approve'), 'notifications/intros/' . $intro['id'], true];
1286                                 }
1287                         }
1288                 }
1289
1290                 $args = ['contact' => $contact, 'menu' => &$menu];
1291
1292                 Hook::callAll('contact_photo_menu', $args);
1293
1294                 $menucondensed = [];
1295
1296                 foreach ($menu as $menuname => $menuitem) {
1297                         if ($menuitem[1] != '') {
1298                                 $menucondensed[$menuname] = $menuitem;
1299                         }
1300                 }
1301
1302                 return $menucondensed;
1303         }
1304
1305         /**
1306          * Returns ungrouped contact count or list for user
1307          *
1308          * Returns either the total number of ungrouped contacts for the given user
1309          * id or a paginated list of ungrouped contacts.
1310          *
1311          * @param int $uid uid
1312          * @return array
1313          * @throws \Exception
1314          */
1315         public static function getUngroupedList($uid)
1316         {
1317                 return q("SELECT *
1318                            FROM `contact`
1319                            WHERE `uid` = %d
1320                            AND NOT `self`
1321                            AND NOT `deleted`
1322                            AND NOT `blocked`
1323                            AND NOT `pending`
1324                            AND `id` NOT IN (
1325                                 SELECT DISTINCT(`contact-id`)
1326                                 FROM `group_member`
1327                                 INNER JOIN `group` ON `group`.`id` = `group_member`.`gid`
1328                                 WHERE `group`.`uid` = %d
1329                            )", intval($uid), intval($uid));
1330         }
1331
1332         /**
1333          * Have a look at all contact tables for a given profile url.
1334          * This function works as a replacement for probing the contact.
1335          *
1336          * @param string  $url Contact URL
1337          * @param integer $cid Contact ID
1338          *
1339          * @return array Contact array in the "probe" structure
1340         */
1341         private static function getProbeDataFromDatabase($url, $cid = null)
1342         {
1343                 // The link could be provided as http although we stored it as https
1344                 $ssl_url = str_replace('http://', 'https://', $url);
1345
1346                 $fields = ['id', 'uid', 'url', 'addr', 'alias', 'notify', 'poll', 'name', 'nick',
1347                         'photo', 'keywords', 'location', 'about', 'network',
1348                         'priority', 'batch', 'request', 'confirm', 'poco'];
1349
1350                 if (!empty($cid)) {
1351                         $data = DBA::selectFirst('contact', $fields, ['id' => $cid]);
1352                         if (DBA::isResult($data)) {
1353                                 return $data;
1354                         }
1355                 }
1356
1357                 $data = DBA::selectFirst('contact', $fields, ['nurl' => Strings::normaliseLink($url)]);
1358
1359                 if (!DBA::isResult($data)) {
1360                         $condition = ['alias' => [$url, Strings::normaliseLink($url), $ssl_url]];
1361                         $data = DBA::selectFirst('contact', $fields, $condition);
1362                 }
1363
1364                 if (DBA::isResult($data)) {
1365                         // For security reasons we don't fetch key data from our users
1366                         $data["pubkey"] = '';
1367                         return $data;
1368                 }
1369
1370                 $fields = ['url', 'addr', 'alias', 'notify', 'name', 'nick',
1371                         'photo', 'keywords', 'location', 'about', 'network'];
1372                 $data = DBA::selectFirst('gcontact', $fields, ['nurl' => Strings::normaliseLink($url)]);
1373
1374                 if (!DBA::isResult($data)) {
1375                         $condition = ['alias' => [$url, Strings::normaliseLink($url), $ssl_url]];
1376                         $data = DBA::selectFirst('contact', $fields, $condition);
1377                 }
1378
1379                 if (DBA::isResult($data)) {
1380                         $data["pubkey"] = '';
1381                         $data["poll"] = '';
1382                         $data["priority"] = 0;
1383                         $data["batch"] = '';
1384                         $data["request"] = '';
1385                         $data["confirm"] = '';
1386                         $data["poco"] = '';
1387                         return $data;
1388                 }
1389
1390                 $data = ActivityPub::probeProfile($url, false);
1391                 if (!empty($data)) {
1392                         return $data;
1393                 }
1394
1395                 $fields = ['url', 'addr', 'alias', 'notify', 'poll', 'name', 'nick',
1396                         'photo', 'network', 'priority', 'batch', 'request', 'confirm'];
1397                 $data = DBA::selectFirst('fcontact', $fields, ['url' => $url]);
1398
1399                 if (!DBA::isResult($data)) {
1400                         $condition = ['alias' => [$url, Strings::normaliseLink($url), $ssl_url]];
1401                         $data = DBA::selectFirst('contact', $fields, $condition);
1402                 }
1403
1404                 if (DBA::isResult($data)) {
1405                         $data["pubkey"] = '';
1406                         $data["keywords"] = '';
1407                         $data["location"] = '';
1408                         $data["about"] = '';
1409                         $data["poco"] = '';
1410                         return $data;
1411                 }
1412
1413                 return [];
1414         }
1415
1416         /**
1417          * Fetch the contact id for a given URL and user
1418          *
1419          * First lookup in the contact table to find a record matching either `url`, `nurl`,
1420          * `addr` or `alias`.
1421          *
1422          * If there's no record and we aren't looking for a public contact, we quit.
1423          * If there's one, we check that it isn't time to update the picture else we
1424          * directly return the found contact id.
1425          *
1426          * Second, we probe the provided $url whether it's http://server.tld/profile or
1427          * nick@server.tld. We quit if we can't get any info back.
1428          *
1429          * Third, we create the contact record if it doesn't exist
1430          *
1431          * Fourth, we update the existing record with the new data (avatar, alias, nick)
1432          * if there's any updates
1433          *
1434          * @param string  $url       Contact URL
1435          * @param integer $uid       The user id for the contact (0 = public contact)
1436          * @param boolean $no_update Don't update the contact
1437          * @param array   $default   Default value for creating the contact when every else fails
1438          * @param boolean $in_loop   Internally used variable to prevent an endless loop
1439          *
1440          * @return integer Contact ID
1441          * @throws \Friendica\Network\HTTPException\InternalServerErrorException
1442          * @throws \ImagickException
1443          */
1444         public static function getIdForURL($url, $uid = 0, $no_update = false, $default = [], $in_loop = false)
1445         {
1446                 Logger::log("Get contact data for url " . $url . " and user " . $uid . " - " . System::callstack(), Logger::DEBUG);
1447
1448                 $contact_id = 0;
1449
1450                 if ($url == '') {
1451                         return 0;
1452                 }
1453
1454                 /// @todo Verify if we can't use Contact::getDetailsByUrl instead of the following
1455                 // We first try the nurl (http://server.tld/nick), most common case
1456                 $fields = ['id', 'avatar', 'updated', 'network'];
1457                 $options = ['order' => ['id']];
1458                 $contact = DBA::selectFirst('contact', $fields, ['nurl' => Strings::normaliseLink($url), 'uid' => $uid, 'deleted' => false], $options);
1459
1460                 // Then the addr (nick@server.tld)
1461                 if (!DBA::isResult($contact)) {
1462                         $contact = DBA::selectFirst('contact', $fields, ['addr' => str_replace('acct:', '', $url), 'uid' => $uid, 'deleted' => false], $options);
1463                 }
1464
1465                 // Then the alias (which could be anything)
1466                 if (!DBA::isResult($contact)) {
1467                         // The link could be provided as http although we stored it as https
1468                         $ssl_url = str_replace('http://', 'https://', $url);
1469                         $condition = ['`alias` IN (?, ?, ?) AND `uid` = ? AND NOT `deleted`', $url, Strings::normaliseLink($url), $ssl_url, $uid];
1470                         $contact = DBA::selectFirst('contact', $fields, $condition, $options);
1471                 }
1472
1473                 if (DBA::isResult($contact)) {
1474                         $contact_id = $contact["id"];
1475                         $update_contact = false;
1476
1477                         // Update the contact every 7 days (Don't update mail or feed contacts)
1478                         if (in_array($contact['network'], Protocol::FEDERATED)) {
1479                                 $update_contact = ($contact['updated'] < DateTimeFormat::utc('now -7 days'));
1480
1481                                 // We force the update if the avatar is empty
1482                                 if (empty($contact['avatar'])) {
1483                                         $update_contact = true;
1484                                 }
1485                         } elseif (empty($default) && in_array($contact['network'], [Protocol::MAIL, Protocol::PHANTOM]) && ($uid == 0)) {
1486                                 // Update public mail accounts via their user's accounts
1487                                 $fields = ['network', 'addr', 'name', 'nick', 'avatar', 'photo', 'thumb', 'micro'];
1488                                 $mailcontact = DBA::selectFirst('contact', $fields, ["`addr` = ? AND `network` = ? AND `uid` != 0", $url, Protocol::MAIL]);
1489                                 if (!DBA::isResult($mailcontact)) {
1490                                         $mailcontact = DBA::selectFirst('contact', $fields, ["`nurl` = ? AND `network` = ? AND `uid` != 0", $url, Protocol::MAIL]);
1491                                 }
1492
1493                                 if (DBA::isResult($mailcontact)) {
1494                                         DBA::update('contact', $mailcontact, ['id' => $contact_id]);
1495                                 }
1496                         }
1497
1498                         // Update the contact in the background if needed but it is called by the frontend
1499                         if ($update_contact && $no_update && in_array($contact['network'], Protocol::NATIVE_SUPPORT)) {
1500                                 Worker::add(PRIORITY_LOW, "UpdateContact", $contact_id, ($uid == 0 ? 'force' : ''));
1501                         }
1502
1503                         if (!$update_contact || $no_update) {
1504                                 return $contact_id;
1505                         }
1506                 } elseif ($uid != 0) {
1507                         // Non-existing user-specific contact, exiting
1508                         return 0;
1509                 }
1510
1511                 if ($no_update && empty($default)) {
1512                         // When we don't want to update, we look if we know this contact in any way
1513                         $data = self::getProbeDataFromDatabase($url, $contact_id);
1514                         $background_update = true;
1515                 } elseif ($no_update && !empty($default['network'])) {
1516                         // If there are default values, take these
1517                         $data = $default;
1518                         $background_update = false;
1519                 } else {
1520                         $data = [];
1521                         $background_update = false;
1522                 }
1523
1524                 if (empty($data)) {
1525                         $data = Probe::uri($url, "", $uid);
1526                         // Ensure that there is a gserver entry
1527                         if (!empty($data['baseurl']) && ($data['network'] != Protocol::PHANTOM)) {
1528                                 GServer::check($data['baseurl']);
1529                         }
1530                 }
1531
1532                 // Take the default values when probing failed
1533                 if (!empty($default) && !in_array($data["network"], array_merge(Protocol::NATIVE_SUPPORT, [Protocol::PUMPIO]))) {
1534                         $data = array_merge($data, $default);
1535                 }
1536
1537                 if (empty($data) || ($data['network'] == Protocol::PHANTOM)) {
1538                         Logger::info('No valid network found', ['url' => $url, 'data' => $data, 'callstack' => System::callstack(20)]);
1539                         return 0;
1540                 }
1541
1542                 if (!$contact_id && !empty($data['alias']) && ($data['alias'] != $url) && !$in_loop) {
1543                         $contact_id = self::getIdForURL($data["alias"], $uid, true, $default, true);
1544                 }
1545
1546                 if (!$contact_id) {
1547                         $fields = [
1548                                 'uid'       => $uid,
1549                                 'created'   => DateTimeFormat::utcNow(),
1550                                 'url'       => $data['url'],
1551                                 'nurl'      => Strings::normaliseLink($data['url']),
1552                                 'addr'      => $data['addr'] ?? '',
1553                                 'alias'     => $data['alias'] ?? '',
1554                                 'notify'    => $data['notify'] ?? '',
1555                                 'poll'      => $data['poll'] ?? '',
1556                                 'name'      => $data['name'] ?? '',
1557                                 'nick'      => $data['nick'] ?? '',
1558                                 'photo'     => $data['photo'] ?? '',
1559                                 'keywords'  => $data['keywords'] ?? '',
1560                                 'location'  => $data['location'] ?? '',
1561                                 'about'     => $data['about'] ?? '',
1562                                 'network'   => $data['network'],
1563                                 'pubkey'    => $data['pubkey'] ?? '',
1564                                 'rel'       => self::SHARING,
1565                                 'priority'  => $data['priority'] ?? 0,
1566                                 'batch'     => $data['batch'] ?? '',
1567                                 'request'   => $data['request'] ?? '',
1568                                 'confirm'   => $data['confirm'] ?? '',
1569                                 'poco'      => $data['poco'] ?? '',
1570                                 'baseurl'   => $data['baseurl'] ?? '',
1571                                 'name-date' => DateTimeFormat::utcNow(),
1572                                 'uri-date'  => DateTimeFormat::utcNow(),
1573                                 'avatar-date' => DateTimeFormat::utcNow(),
1574                                 'writable'  => 1,
1575                                 'blocked'   => 0,
1576                                 'readonly'  => 0,
1577                                 'pending'   => 0];
1578
1579                         $condition = ['nurl' => Strings::normaliseLink($data["url"]), 'uid' => $uid, 'deleted' => false];
1580
1581                         // Before inserting we do check if the entry does exist now.
1582                         $contact = DBA::selectFirst('contact', ['id'], $condition, ['order' => ['id']]);
1583                         if (!DBA::isResult($contact)) {
1584                                 Logger::info('Create new contact', $fields);
1585
1586                                 self::insert($fields);
1587
1588                                 // We intentionally aren't using lastInsertId here. There is a chance for duplicates.
1589                                 $contact = DBA::selectFirst('contact', ['id'], $condition, ['order' => ['id']]);
1590                                 if (!DBA::isResult($contact)) {
1591                                         Logger::info('Contact creation failed', $fields);
1592                                         // Shouldn't happen
1593                                         return 0;
1594                                 }
1595                         } else {
1596                                 Logger::info('Contact had been created before', ['id' => $contact["id"], 'url' => $url, 'contact' => $fields]);
1597                         }
1598
1599                         $contact_id = $contact["id"];
1600                 }
1601
1602                 if (!empty($data['photo']) && ($data['network'] != Protocol::FEED)) {
1603                         self::updateAvatar($data['photo'], $uid, $contact_id);
1604                 }
1605
1606                 if (in_array($data["network"], array_merge(Protocol::NATIVE_SUPPORT, [Protocol::PUMPIO]))) {
1607                         if ($background_update) {
1608                                 // Update in the background when we fetched the data solely from the database
1609                                 Worker::add(PRIORITY_MEDIUM, "UpdateContact", $contact_id, ($uid == 0 ? 'force' : ''));
1610                         } else {
1611                                 // Else do a direct update
1612                                 self::updateFromProbe($contact_id, '', false);
1613
1614                                 // Update the gcontact entry
1615                                 if ($uid == 0) {
1616                                         GContact::updateFromPublicContactID($contact_id);
1617                                 }
1618                         }
1619                 } else {
1620                         $fields = ['url', 'nurl', 'addr', 'alias', 'name', 'nick', 'keywords', 'location', 'about', 'avatar-date', 'baseurl'];
1621                         $contact = DBA::selectFirst('contact', $fields, ['id' => $contact_id]);
1622
1623                         // This condition should always be true
1624                         if (!DBA::isResult($contact)) {
1625                                 return $contact_id;
1626                         }
1627
1628                         $updated = [
1629                                 'url' => $data['url'],
1630                                 'nurl' => Strings::normaliseLink($data['url']),
1631                                 'updated' => DateTimeFormat::utcNow()
1632                         ];
1633
1634                         $fields = ['addr', 'alias', 'name', 'nick', 'keywords', 'location', 'about', 'baseurl'];
1635
1636                         foreach ($fields as $field) {
1637                                 $updated[$field] = ($data[$field] ?? '') ?: $contact[$field];
1638                         }
1639
1640                         if (($updated['addr'] != $contact['addr']) || (!empty($data['alias']) && ($data['alias'] != $contact['alias']))) {
1641                                 $updated['uri-date'] = DateTimeFormat::utcNow();
1642                         }
1643
1644                         if (($data['name'] != $contact['name']) || ($data['nick'] != $contact['nick'])) {
1645                                 $updated['name-date'] = DateTimeFormat::utcNow();
1646                         }
1647
1648                         DBA::update('contact', $updated, ['id' => $contact_id], $contact);
1649                 }
1650
1651                 return $contact_id;
1652         }
1653
1654         /**
1655          * Checks if the contact is archived
1656          *
1657          * @param int $cid contact id
1658          *
1659          * @return boolean Is the contact archived?
1660          * @throws \Friendica\Network\HTTPException\InternalServerErrorException
1661          */
1662         public static function isArchived(int $cid)
1663         {
1664                 if ($cid == 0) {
1665                         return false;
1666                 }
1667
1668                 $contact = DBA::selectFirst('contact', ['archive', 'url', 'batch'], ['id' => $cid]);
1669                 if (!DBA::isResult($contact)) {
1670                         return false;
1671                 }
1672
1673                 if ($contact['archive']) {
1674                         return true;
1675                 }
1676
1677                 // Check status of ActivityPub endpoints
1678                 $apcontact = APContact::getByURL($contact['url'], false);
1679                 if (!empty($apcontact)) {
1680                         if (!empty($apcontact['inbox']) && DBA::exists('inbox-status', ['archive' => true, 'url' => $apcontact['inbox']])) {
1681                                 return true;
1682                         }
1683
1684                         if (!empty($apcontact['sharedinbox']) && DBA::exists('inbox-status', ['archive' => true, 'url' => $apcontact['sharedinbox']])) {
1685                                 return true;
1686                         }
1687                 }
1688
1689                 // Check status of Diaspora endpoints
1690                 if (!empty($contact['batch'])) {
1691                         $condition = ['archive' => true, 'uid' => 0, 'network' => Protocol::FEDERATED, 'batch' => $contact['batch'], 'contact-type' => self::TYPE_RELAY];
1692                         return DBA::exists('contact', $condition);
1693                 }
1694
1695                 return false;
1696         }
1697
1698         /**
1699          * Checks if the contact is blocked
1700          *
1701          * @param int $cid contact id
1702          *
1703          * @return boolean Is the contact blocked?
1704          * @throws \Friendica\Network\HTTPException\InternalServerErrorException
1705          */
1706         public static function isBlocked($cid)
1707         {
1708                 if ($cid == 0) {
1709                         return false;
1710                 }
1711
1712                 $blocked = DBA::selectFirst('contact', ['blocked', 'url'], ['id' => $cid]);
1713                 if (!DBA::isResult($blocked)) {
1714                         return false;
1715                 }
1716
1717                 if (Network::isUrlBlocked($blocked['url'])) {
1718                         return true;
1719                 }
1720
1721                 return (bool) $blocked['blocked'];
1722         }
1723
1724         /**
1725          * Checks if the contact is hidden
1726          *
1727          * @param int $cid contact id
1728          *
1729          * @return boolean Is the contact hidden?
1730          * @throws \Exception
1731          */
1732         public static function isHidden($cid)
1733         {
1734                 if ($cid == 0) {
1735                         return false;
1736                 }
1737
1738                 $hidden = DBA::selectFirst('contact', ['hidden'], ['id' => $cid]);
1739                 if (!DBA::isResult($hidden)) {
1740                         return false;
1741                 }
1742                 return (bool) $hidden['hidden'];
1743         }
1744
1745         /**
1746          * Returns posts from a given contact url
1747          *
1748          * @param string $contact_url Contact URL
1749          *
1750          * @param bool   $thread_mode
1751          * @param int    $update
1752          * @return string posts in HTML
1753          * @throws \Exception
1754          */
1755         public static function getPostsFromUrl($contact_url, $thread_mode = false, $update = 0)
1756         {
1757                 $a = DI::app();
1758
1759                 $cid = self::getIdForURL($contact_url);
1760
1761                 $contact = DBA::selectFirst('contact', ['contact-type', 'network'], ['id' => $cid]);
1762                 if (!DBA::isResult($contact)) {
1763                         return '';
1764                 }
1765
1766                 if (empty($contact["network"]) || in_array($contact["network"], Protocol::FEDERATED)) {
1767                         $sql = "(`item`.`uid` = 0 OR (`item`.`uid` = ? AND NOT `item`.`global`))";
1768                 } else {
1769                         $sql = "`item`.`uid` = ?";
1770                 }
1771
1772                 $contact_field = ((($contact["contact-type"] == self::TYPE_COMMUNITY) || ($contact['network'] == Protocol::MAIL)) ? 'owner-id' : 'author-id');
1773
1774                 if ($thread_mode) {
1775                         $condition = ["`$contact_field` = ? AND `gravity` = ? AND " . $sql,
1776                                 $cid, GRAVITY_PARENT, local_user()];
1777                 } else {
1778                         $condition = ["`$contact_field` = ? AND `gravity` IN (?, ?) AND " . $sql,
1779                                 $cid, GRAVITY_PARENT, GRAVITY_COMMENT, local_user()];
1780                 }
1781
1782                 if (DI::mode()->isMobile()) {
1783                         $itemsPerPage = DI::pConfig()->get(local_user(), 'system', 'itemspage_mobile_network',
1784                                 DI::config()->get('system', 'itemspage_network_mobile'));
1785                 } else {
1786                         $itemsPerPage = DI::pConfig()->get(local_user(), 'system', 'itemspage_network',
1787                                 DI::config()->get('system', 'itemspage_network'));
1788                 }
1789
1790                 $pager = new Pager(DI::l10n(), DI::args()->getQueryString(), $itemsPerPage);
1791
1792                 $params = ['order' => ['received' => true],
1793                         'limit' => [$pager->getStart(), $pager->getItemsPerPage()]];
1794
1795                 if ($thread_mode) {
1796                         $r = Item::selectThreadForUser(local_user(), ['uri'], $condition, $params);
1797
1798                         $items = Item::inArray($r);
1799
1800                         $o = conversation($a, $items, 'contacts', $update, false, 'commented', local_user());
1801                 } else {
1802                         $r = Item::selectForUser(local_user(), [], $condition, $params);
1803
1804                         $items = Item::inArray($r);
1805
1806                         $o = conversation($a, $items, 'contact-posts', false);
1807                 }
1808
1809                 if (!$update) {
1810                         $o .= $pager->renderMinimal(count($items));
1811                 }
1812
1813                 return $o;
1814         }
1815
1816         /**
1817          * Returns the account type name
1818          *
1819          * The function can be called with either the user or the contact array
1820          *
1821          * @param array $contact contact or user array
1822          * @return string
1823          */
1824         public static function getAccountType(array $contact)
1825         {
1826                 // There are several fields that indicate that the contact or user is a forum
1827                 // "page-flags" is a field in the user table,
1828                 // "forum" and "prv" are used in the contact table. They stand for User::PAGE_FLAGS_COMMUNITY and User::PAGE_FLAGS_PRVGROUP.
1829                 // "community" is used in the gcontact table and is true if the contact is User::PAGE_FLAGS_COMMUNITY or User::PAGE_FLAGS_PRVGROUP.
1830                 if ((isset($contact['page-flags']) && (intval($contact['page-flags']) == User::PAGE_FLAGS_COMMUNITY))
1831                         || (isset($contact['page-flags']) && (intval($contact['page-flags']) == User::PAGE_FLAGS_PRVGROUP))
1832                         || (isset($contact['forum']) && intval($contact['forum']))
1833                         || (isset($contact['prv']) && intval($contact['prv']))
1834                         || (isset($contact['community']) && intval($contact['community']))
1835                 ) {
1836                         $type = self::TYPE_COMMUNITY;
1837                 } else {
1838                         $type = self::TYPE_PERSON;
1839                 }
1840
1841                 // The "contact-type" (contact table) and "account-type" (user table) are more general then the chaos from above.
1842                 if (isset($contact["contact-type"])) {
1843                         $type = $contact["contact-type"];
1844                 }
1845
1846                 if (isset($contact["account-type"])) {
1847                         $type = $contact["account-type"];
1848                 }
1849
1850                 switch ($type) {
1851                         case self::TYPE_ORGANISATION:
1852                                 $account_type = DI::l10n()->t("Organisation");
1853                                 break;
1854
1855                         case self::TYPE_NEWS:
1856                                 $account_type = DI::l10n()->t('News');
1857                                 break;
1858
1859                         case self::TYPE_COMMUNITY:
1860                                 $account_type = DI::l10n()->t("Forum");
1861                                 break;
1862
1863                         default:
1864                                 $account_type = "";
1865                                 break;
1866                 }
1867
1868                 return $account_type;
1869         }
1870
1871         /**
1872          * Blocks a contact
1873          *
1874          * @param int $cid
1875          * @return bool
1876          * @throws \Exception
1877          */
1878         public static function block($cid, $reason = null)
1879         {
1880                 $return = DBA::update('contact', ['blocked' => true, 'block_reason' => $reason], ['id' => $cid]);
1881
1882                 return $return;
1883         }
1884
1885         /**
1886          * Unblocks a contact
1887          *
1888          * @param int $cid
1889          * @return bool
1890          * @throws \Exception
1891          */
1892         public static function unblock($cid)
1893         {
1894                 $return = DBA::update('contact', ['blocked' => false, 'block_reason' => null], ['id' => $cid]);
1895
1896                 return $return;
1897         }
1898
1899         /**
1900          * Updates the avatar links in a contact only if needed
1901          *
1902          * @param string $avatar Link to avatar picture
1903          * @param int    $uid    User id of contact owner
1904          * @param int    $cid    Contact id
1905          * @param bool   $force  force picture update
1906          *
1907          * @return array Returns array of the different avatar sizes
1908          * @throws \Friendica\Network\HTTPException\InternalServerErrorException
1909          * @throws \ImagickException
1910          */
1911         public static function updateAvatar($avatar, $uid, $cid, $force = false)
1912         {
1913                 $contact = DBA::selectFirst('contact', ['avatar', 'photo', 'thumb', 'micro', 'nurl'], ['id' => $cid, 'self' => false]);
1914                 if (!DBA::isResult($contact)) {
1915                         return false;
1916                 } else {
1917                         $data = [$contact["photo"], $contact["thumb"], $contact["micro"]];
1918                 }
1919
1920                 foreach ($data as $image_uri) {
1921                         $image_rid = Photo::ridFromURI($image_uri);
1922                         if ($image_rid && !Photo::exists(['resource-id' => $image_rid, 'uid' => $uid])) {
1923                                 Logger::info('Regenerating avatar', ['contact uid' => $uid, 'cid' => $cid, 'missing photo' => $image_rid, 'avatar' => $contact['avatar']]);
1924                                 $force = true;
1925                         }
1926                 }
1927
1928                 if (($contact["avatar"] != $avatar) || $force) {
1929                         $photos = Photo::importProfilePhoto($avatar, $uid, $cid, true);
1930
1931                         if ($photos) {
1932                                 $fields = ['avatar' => $avatar, 'photo' => $photos[0], 'thumb' => $photos[1], 'micro' => $photos[2], 'avatar-date' => DateTimeFormat::utcNow()];
1933                                 DBA::update('contact', $fields, ['id' => $cid]);
1934
1935                                 // Update the public contact (contact id = 0)
1936                                 if ($uid != 0) {
1937                                         $pcontact = DBA::selectFirst('contact', ['id'], ['nurl' => $contact['nurl'], 'uid' => 0]);
1938                                         if (DBA::isResult($pcontact)) {
1939                                                 DBA::update('contact', $fields, ['id' => $pcontact['id']]);
1940                                         }
1941                                 }
1942
1943                                 return $photos;
1944                         }
1945                 }
1946
1947                 return $data;
1948         }
1949
1950         /**
1951          * Helper function for "updateFromProbe". Updates personal and public contact
1952          *
1953          * @param integer $id      contact id
1954          * @param integer $uid     user id
1955          * @param string  $url     The profile URL of the contact
1956          * @param array   $fields  The fields that are updated
1957          *
1958          * @throws \Exception
1959          */
1960         private static function updateContact($id, $uid, $url, array $fields)
1961         {
1962                 if (!DBA::update('contact', $fields, ['id' => $id])) {
1963                         Logger::info('Couldn\'t update contact.', ['id' => $id, 'fields' => $fields]);
1964                         return;
1965                 }
1966
1967                 // Search for duplicated contacts and get rid of them
1968                 if (self::removeDuplicates(Strings::normaliseLink($url), $uid) || ($uid != 0)) {
1969                         return;
1970                 }
1971
1972                 // Update the corresponding gcontact entry
1973                 GContact::updateFromPublicContactID($id);
1974
1975                 // Archive or unarchive the contact. We only need to do this for the public contact.
1976                 // The archive/unarchive function will update the personal contacts by themselves.
1977                 $contact = DBA::selectFirst('contact', [], ['id' => $id]);
1978                 if (!DBA::isResult($contact)) {
1979                         Logger::info('Couldn\'t select contact for archival.', ['id' => $id]);
1980                         return;
1981                 }
1982
1983                 if (!empty($fields['success_update'])) {
1984                         self::unmarkForArchival($contact);
1985                 } elseif (!empty($fields['failure_update'])) {
1986                         self::markForArchival($contact);
1987                 }
1988
1989                 $condition = ['self' => false, 'nurl' => Strings::normaliseLink($url), 'network' => Protocol::FEDERATED];
1990
1991                 // These contacts are sharing with us, we don't poll them.
1992                 // This means that we don't set the update fields in "OnePoll.php".
1993                 $condition['rel'] = self::SHARING;
1994                 DBA::update('contact', $fields, $condition);
1995
1996                 unset($fields['last-update']);
1997                 unset($fields['success_update']);
1998                 unset($fields['failure_update']);
1999
2000                 if (empty($fields)) {
2001                         return;
2002                 }
2003
2004                 // We are polling these contacts, so we mustn't set the update fields here.
2005                 $condition['rel'] = [self::FOLLOWER, self::FRIEND];
2006                 DBA::update('contact', $fields, $condition);
2007         }
2008
2009         /**
2010          * Remove duplicated contacts
2011          *
2012          * @param string  $nurl  Normalised contact url
2013          * @param integer $uid   User id
2014          * @return boolean
2015          * @throws \Exception
2016          */
2017         public static function removeDuplicates(string $nurl, int $uid)
2018         {
2019                 $condition = ['nurl' => $nurl, 'uid' => $uid, 'deleted' => false, 'network' => Protocol::FEDERATED];
2020                 $count = DBA::count('contact', $condition);
2021                 if ($count <= 1) {
2022                         return false;
2023                 }
2024
2025                 $first_contact = DBA::selectFirst('contact', ['id', 'network'], $condition, ['order' => ['id']]);
2026                 if (!DBA::isResult($first_contact)) {
2027                         // Shouldn't happen - so we handle it
2028                         return false;
2029                 }
2030
2031                 $first = $first_contact['id'];
2032                 Logger::info('Found duplicates', ['count' => $count, 'first' => $first, 'uid' => $uid, 'nurl' => $nurl]);
2033                 if (($uid != 0 && ($first_contact['network'] == Protocol::DFRN))) {
2034                         // Don't handle non public DFRN duplicates by now (legacy DFRN is very special because of the key handling)
2035                         Logger::info('Not handling non public DFRN duplicate', ['uid' => $uid, 'nurl' => $nurl]);
2036                         return false;
2037                 }
2038
2039                 // Find all duplicates
2040                 $condition = ["`nurl` = ? AND `uid` = ? AND `id` != ? AND NOT `self` AND NOT `deleted`", $nurl, $uid, $first];
2041                 $duplicates = DBA::select('contact', ['id', 'network'], $condition);
2042                 while ($duplicate = DBA::fetch($duplicates)) {
2043                         if (!in_array($duplicate['network'], Protocol::FEDERATED)) {
2044                                 continue;
2045                         }
2046
2047                         Worker::add(PRIORITY_HIGH, 'MergeContact', $first, $duplicate['id'], $uid);
2048                 }
2049                 Logger::info('Duplicates handled', ['uid' => $uid, 'nurl' => $nurl]);
2050                 return true;
2051         }
2052
2053         /**
2054          * @param integer $id      contact id
2055          * @param string  $network Optional network we are probing for
2056          * @param boolean $force   Optional forcing of network probing (otherwise we use the cached data)
2057          * @return boolean
2058          * @throws \Friendica\Network\HTTPException\InternalServerErrorException
2059          * @throws \ImagickException
2060          */
2061         public static function updateFromProbe($id, $network = '', $force = false)
2062         {
2063                 /*
2064                   Warning: Never ever fetch the public key via Probe::uri and write it into the contacts.
2065                   This will reliably kill your communication with old Friendica contacts.
2066                  */
2067
2068                 // These fields aren't updated by this routine:
2069                 // 'xmpp', 'sensitive'
2070
2071                 $fields = ['uid', 'avatar', 'name', 'nick', 'location', 'keywords', 'about',
2072                         'unsearchable', 'url', 'addr', 'batch', 'notify', 'poll', 'request', 'confirm', 'poco',
2073                         'network', 'alias', 'baseurl', 'forum', 'prv', 'contact-type', 'pubkey'];
2074                 $contact = DBA::selectFirst('contact', $fields, ['id' => $id]);
2075                 if (!DBA::isResult($contact)) {
2076                         return false;
2077                 }
2078
2079                 $uid = $contact['uid'];
2080                 unset($contact['uid']);
2081
2082                 $pubkey = $contact['pubkey'];
2083                 unset($contact['pubkey']);
2084
2085                 $contact['photo'] = $contact['avatar'];
2086                 unset($contact['avatar']);
2087
2088                 $ret = Probe::uri($contact['url'], $network, $uid, !$force);
2089
2090                 $updated = DateTimeFormat::utcNow();
2091
2092                 // We must not try to update relay contacts via probe. They are no real contacts.
2093                 // We check after the probing to be able to correct falsely detected contact types.
2094                 if (($contact['contact-type'] == self::TYPE_RELAY) &&
2095                         (!Strings::compareLink($ret['url'], $contact['url']) || in_array($ret['network'], [Protocol::FEED, Protocol::PHANTOM]))) {
2096                         self::updateContact($id, $uid, $contact['url'], ['last-update' => $updated, 'success_update' => $updated]);
2097                         Logger::info('Not updating relais', ['id' => $id, 'url' => $contact['url']]);
2098                         return true;
2099                 }
2100
2101                 // If Probe::uri fails the network code will be different ("feed" or "unkn")
2102                 if (in_array($ret['network'], [Protocol::FEED, Protocol::PHANTOM]) && ($ret['network'] != $contact['network'])) {
2103                         if ($force && ($uid == 0)) {
2104                                 self::updateContact($id, $uid, $ret['url'], ['last-update' => $updated, 'failure_update' => $updated]);
2105                         }
2106                         return false;
2107                 }
2108
2109                 if (isset($ret['hide']) && is_bool($ret['hide'])) {
2110                         $ret['unsearchable'] = $ret['hide'];
2111                 }
2112
2113                 if (isset($ret['account-type']) && is_int($ret['account-type'])) {
2114                         $ret['forum'] = false;
2115                         $ret['prv'] = false;
2116                         $ret['contact-type'] = $ret['account-type'];
2117                         if ($ret['contact-type'] == User::ACCOUNT_TYPE_COMMUNITY) {
2118                                 $apcontact = APContact::getByURL($ret['url'], false);
2119                                 if (isset($apcontact['manually-approve'])) {
2120                                         $ret['forum'] = (bool)!$apcontact['manually-approve'];
2121                                         $ret['prv'] = (bool)!$ret['forum'];
2122                                 }
2123                         }
2124                 }
2125
2126                 $new_pubkey = $ret['pubkey'];
2127
2128                 $update = false;
2129
2130                 // make sure to not overwrite existing values with blank entries except some technical fields
2131                 $keep = ['batch', 'notify', 'poll', 'request', 'confirm', 'poco', 'baseurl'];
2132                 foreach ($ret as $key => $val) {
2133                         if (!array_key_exists($key, $contact)) {
2134                                 unset($ret[$key]);
2135                         } elseif (($contact[$key] != '') && ($val === '') && !is_bool($ret[$key]) && !in_array($key, $keep)) {
2136                                 $ret[$key] = $contact[$key];
2137                         } elseif ($ret[$key] != $contact[$key]) {
2138                                 $update = true;
2139                         }
2140                 }
2141
2142                 if (!empty($ret['photo']) && ($ret['network'] != Protocol::FEED)) {
2143                         self::updateAvatar($ret['photo'], $uid, $id, $update || $force);
2144                 }
2145
2146                 if (!$update) {
2147                         if ($force) {
2148                                 self::updateContact($id, $uid, $ret['url'], ['last-update' => $updated, 'success_update' => $updated]);
2149                         }
2150
2151                         // Update the public contact
2152                         if ($uid != 0) {
2153                                 self::updateFromProbeByURL($ret['url']);
2154                         }
2155
2156                         return true;
2157                 }
2158
2159                 $ret['nurl'] = Strings::normaliseLink($ret['url']);
2160                 $ret['updated'] = $updated;
2161
2162                 // Only fill the pubkey if it had been empty before. We have to prevent identity theft.
2163                 if (empty($pubkey) && !empty($new_pubkey)) {
2164                         $ret['pubkey'] = $new_pubkey;
2165                 }
2166
2167                 if (($ret['addr'] != $contact['addr']) || (!empty($ret['alias']) && ($ret['alias'] != $contact['alias']))) {
2168                         $ret['uri-date'] = DateTimeFormat::utcNow();
2169                 }
2170
2171                 if (($ret['name'] != $contact['name']) || ($ret['nick'] != $contact['nick'])) {
2172                         $ret['name-date'] = $updated;
2173                 }
2174
2175                 if ($force && ($uid == 0)) {
2176                         $ret['last-update'] = $updated;
2177                         $ret['success_update'] = $updated;
2178                 }
2179
2180                 unset($ret['photo']);
2181
2182                 self::updateContact($id, $uid, $ret['url'], $ret);
2183
2184                 return true;
2185         }
2186
2187         public static function updateFromProbeByURL($url, $force = false)
2188         {
2189                 $id = self::getIdForURL($url);
2190
2191                 if (empty($id)) {
2192                         return $id;
2193                 }
2194
2195                 self::updateFromProbe($id, '', $force);
2196
2197                 return $id;
2198         }
2199
2200         /**
2201          * Detects if a given contact array belongs to a legacy DFRN connection
2202          *
2203          * @param array $contact
2204          * @return boolean
2205          */
2206         public static function isLegacyDFRNContact($contact)
2207         {
2208                 // Newer Friendica contacts are connected via AP, then these fields aren't set
2209                 return !empty($contact['dfrn-id']) || !empty($contact['issued-id']);
2210         }
2211
2212         /**
2213          * Detects the communication protocol for a given contact url.
2214          * This is used to detect Friendica contacts that we can communicate via AP.
2215          *
2216          * @param string $url contact url
2217          * @param string $network Network of that contact
2218          * @return string with protocol
2219          */
2220         public static function getProtocol($url, $network)
2221         {
2222                 if ($network != Protocol::DFRN) {
2223                         return $network;
2224                 }
2225
2226                 $apcontact = APContact::getByURL($url);
2227                 if (!empty($apcontact) && !empty($apcontact['generator'])) {
2228                         return Protocol::ACTIVITYPUB;
2229                 } else {
2230                         return $network;
2231                 }
2232         }
2233
2234         /**
2235          * Takes a $uid and a url/handle and adds a new contact
2236          *
2237          * Currently if the contact is DFRN, interactive needs to be true, to redirect to the
2238          * dfrn_request page.
2239          *
2240          * Otherwise this can be used to bulk add StatusNet contacts, Twitter contacts, etc.
2241          *
2242          * Returns an array
2243          * $return['success'] boolean true if successful
2244          * $return['message'] error text if success is false.
2245          *
2246          * Takes a $uid and a url/handle and adds a new contact
2247          * @param int    $uid
2248          * @param string $url
2249          * @param bool   $interactive
2250          * @param string $network
2251          * @return array
2252          * @throws \Friendica\Network\HTTPException\InternalServerErrorException
2253          * @throws \ImagickException
2254          */
2255         public static function createFromProbe($uid, $url, $interactive = false, $network = '')
2256         {
2257                 $result = ['cid' => -1, 'success' => false, 'message' => ''];
2258
2259                 $a = DI::app();
2260
2261                 // remove ajax junk, e.g. Twitter
2262                 $url = str_replace('/#!/', '/', $url);
2263
2264                 if (!Network::isUrlAllowed($url)) {
2265                         $result['message'] = DI::l10n()->t('Disallowed profile URL.');
2266                         return $result;
2267                 }
2268
2269                 if (Network::isUrlBlocked($url)) {
2270                         $result['message'] = DI::l10n()->t('Blocked domain');
2271                         return $result;
2272                 }
2273
2274                 if (!$url) {
2275                         $result['message'] = DI::l10n()->t('Connect URL missing.');
2276                         return $result;
2277                 }
2278
2279                 $arr = ['url' => $url, 'contact' => []];
2280
2281                 Hook::callAll('follow', $arr);
2282
2283                 if (empty($arr)) {
2284                         $result['message'] = DI::l10n()->t('The contact could not be added. Please check the relevant network credentials in your Settings -> Social Networks page.');
2285                         return $result;
2286                 }
2287
2288                 if (!empty($arr['contact']['name'])) {
2289                         $ret = $arr['contact'];
2290                 } else {
2291                         $ret = Probe::uri($url, $network, $uid, false);
2292                 }
2293
2294                 if (($network != '') && ($ret['network'] != $network)) {
2295                         Logger::log('Expected network ' . $network . ' does not match actual network ' . $ret['network']);
2296                         return $result;
2297                 }
2298
2299                 // check if we already have a contact
2300                 // the poll url is more reliable than the profile url, as we may have
2301                 // indirect links or webfinger links
2302
2303                 $condition = ['uid' => $uid, 'poll' => [$ret['poll'], Strings::normaliseLink($ret['poll'])], 'network' => $ret['network'], 'pending' => false];
2304                 $contact = DBA::selectFirst('contact', ['id', 'rel'], $condition);
2305                 if (!DBA::isResult($contact)) {
2306                         $condition = ['uid' => $uid, 'nurl' => Strings::normaliseLink($url), 'network' => $ret['network'], 'pending' => false];
2307                         $contact = DBA::selectFirst('contact', ['id', 'rel'], $condition);
2308                 }
2309
2310                 $protocol = self::getProtocol($url, $ret['network']);
2311
2312                 if (($protocol === Protocol::DFRN) && !DBA::isResult($contact)) {
2313                         if ($interactive) {
2314                                 if (strlen(DI::baseUrl()->getUrlPath())) {
2315                                         $myaddr = bin2hex(DI::baseUrl() . '/profile/' . $a->user['nickname']);
2316                                 } else {
2317                                         $myaddr = bin2hex($a->user['nickname'] . '@' . DI::baseUrl()->getHostname());
2318                                 }
2319
2320                                 DI::baseUrl()->redirect($ret['request'] . "&addr=$myaddr");
2321
2322                                 // NOTREACHED
2323                         }
2324                 } elseif (DI::config()->get('system', 'dfrn_only') && ($ret['network'] != Protocol::DFRN)) {
2325                         $result['message'] = DI::l10n()->t('This site is not configured to allow communications with other networks.') . EOL;
2326                         $result['message'] .= DI::l10n()->t('No compatible communication protocols or feeds were discovered.') . EOL;
2327                         return $result;
2328                 }
2329
2330                 // This extra param just confuses things, remove it
2331                 if ($protocol === Protocol::DIASPORA) {
2332                         $ret['url'] = str_replace('?absolute=true', '', $ret['url']);
2333                 }
2334
2335                 // do we have enough information?
2336                 if (empty($ret['name']) || empty($ret['poll']) || (empty($ret['url']) && empty($ret['addr']))) {
2337                         $result['message'] .= DI::l10n()->t('The profile address specified does not provide adequate information.') . EOL;
2338                         if (empty($ret['poll'])) {
2339                                 $result['message'] .= DI::l10n()->t('No compatible communication protocols or feeds were discovered.') . EOL;
2340                         }
2341                         if (empty($ret['name'])) {
2342                                 $result['message'] .= DI::l10n()->t('An author or name was not found.') . EOL;
2343                         }
2344                         if (empty($ret['url'])) {
2345                                 $result['message'] .= DI::l10n()->t('No browser URL could be matched to this address.') . EOL;
2346                         }
2347                         if (strpos($url, '@') !== false) {
2348                                 $result['message'] .= DI::l10n()->t('Unable to match @-style Identity Address with a known protocol or email contact.') . EOL;
2349                                 $result['message'] .= DI::l10n()->t('Use mailto: in front of address to force email check.') . EOL;
2350                         }
2351                         return $result;
2352                 }
2353
2354                 if ($protocol === Protocol::OSTATUS && DI::config()->get('system', 'ostatus_disabled')) {
2355                         $result['message'] .= DI::l10n()->t('The profile address specified belongs to a network which has been disabled on this site.') . EOL;
2356                         $ret['notify'] = '';
2357                 }
2358
2359                 if (!$ret['notify']) {
2360                         $result['message'] .= DI::l10n()->t('Limited profile. This person will be unable to receive direct/personal notifications from you.') . EOL;
2361                 }
2362
2363                 $writeable = ((($protocol === Protocol::OSTATUS) && ($ret['notify'])) ? 1 : 0);
2364
2365                 $subhub = (($protocol === Protocol::OSTATUS) ? true : false);
2366
2367                 $hidden = (($protocol === Protocol::MAIL) ? 1 : 0);
2368
2369                 $pending = false;
2370                 if ($protocol == Protocol::ACTIVITYPUB) {
2371                         $apcontact = APContact::getByURL($url, false);
2372                         if (isset($apcontact['manually-approve'])) {
2373                                 $pending = (bool)$apcontact['manually-approve'];
2374                         }
2375                 }
2376
2377                 if (in_array($protocol, [Protocol::MAIL, Protocol::DIASPORA, Protocol::ACTIVITYPUB])) {
2378                         $writeable = 1;
2379                 }
2380
2381                 if (DBA::isResult($contact)) {
2382                         // update contact
2383                         $new_relation = (($contact['rel'] == self::FOLLOWER) ? self::FRIEND : self::SHARING);
2384
2385                         $fields = ['rel' => $new_relation, 'subhub' => $subhub, 'readonly' => false];
2386                         DBA::update('contact', $fields, ['id' => $contact['id']]);
2387                 } else {
2388                         $new_relation = (in_array($protocol, [Protocol::MAIL]) ? self::FRIEND : self::SHARING);
2389
2390                         // create contact record
2391                         self::insert([
2392                                 'uid'     => $uid,
2393                                 'created' => DateTimeFormat::utcNow(),
2394                                 'url'     => $ret['url'],
2395                                 'nurl'    => Strings::normaliseLink($ret['url']),
2396                                 'addr'    => $ret['addr'],
2397                                 'alias'   => $ret['alias'],
2398                                 'batch'   => $ret['batch'],
2399                                 'notify'  => $ret['notify'],
2400                                 'poll'    => $ret['poll'],
2401                                 'poco'    => $ret['poco'],
2402                                 'name'    => $ret['name'],
2403                                 'nick'    => $ret['nick'],
2404                                 'network' => $ret['network'],
2405                                 'baseurl' => $ret['baseurl'],
2406                                 'protocol' => $protocol,
2407                                 'pubkey'  => $ret['pubkey'],
2408                                 'rel'     => $new_relation,
2409                                 'priority'=> $ret['priority'],
2410                                 'writable'=> $writeable,
2411                                 'hidden'  => $hidden,
2412                                 'blocked' => 0,
2413                                 'readonly'=> 0,
2414                                 'pending' => $pending,
2415                                 'subhub'  => $subhub
2416                         ]);
2417                 }
2418
2419                 $contact = DBA::selectFirst('contact', [], ['url' => $ret['url'], 'network' => $ret['network'], 'uid' => $uid]);
2420                 if (!DBA::isResult($contact)) {
2421                         $result['message'] .= DI::l10n()->t('Unable to retrieve contact information.') . EOL;
2422                         return $result;
2423                 }
2424
2425                 $contact_id = $contact['id'];
2426                 $result['cid'] = $contact_id;
2427
2428                 Group::addMember(User::getDefaultGroup($uid, $contact["network"]), $contact_id);
2429
2430                 // Update the avatar
2431                 self::updateAvatar($ret['photo'], $uid, $contact_id);
2432
2433                 // pull feed and consume it, which should subscribe to the hub.
2434
2435                 Worker::add(PRIORITY_HIGH, "OnePoll", $contact_id, "force");
2436
2437                 $owner = User::getOwnerDataById($uid);
2438
2439                 if (DBA::isResult($owner)) {
2440                         if (in_array($protocol, [Protocol::OSTATUS, Protocol::DFRN])) {
2441                                 // create a follow slap
2442                                 $item = [];
2443                                 $item['verb'] = Activity::FOLLOW;
2444                                 $item['follow'] = $contact["url"];
2445                                 $item['body'] = '';
2446                                 $item['title'] = '';
2447                                 $item['guid'] = '';
2448                                 $item['tag'] = '';
2449                                 $item['attach'] = '';
2450
2451                                 $slap = OStatus::salmon($item, $owner);
2452
2453                                 if (!empty($contact['notify'])) {
2454                                         Salmon::slapper($owner, $contact['notify'], $slap);
2455                                 }
2456                         } elseif ($protocol == Protocol::DIASPORA) {
2457                                 $ret = Diaspora::sendShare($a->user, $contact);
2458                                 Logger::log('share returns: ' . $ret);
2459                         } elseif ($protocol == Protocol::ACTIVITYPUB) {
2460                                 $activity_id = ActivityPub\Transmitter::activityIDFromContact($contact_id);
2461                                 if (empty($activity_id)) {
2462                                         // This really should never happen
2463                                         return false;
2464                                 }
2465
2466                                 $ret = ActivityPub\Transmitter::sendActivity('Follow', $contact['url'], $uid, $activity_id);
2467                                 Logger::log('Follow returns: ' . $ret);
2468                         }
2469                 }
2470
2471                 $result['success'] = true;
2472                 return $result;
2473         }
2474
2475         /**
2476          * Updated contact's SSL policy
2477          *
2478          * @param array  $contact    Contact array
2479          * @param string $new_policy New policy, valid: self,full
2480          *
2481          * @return array Contact array with updated values
2482          * @throws \Exception
2483          */
2484         public static function updateSslPolicy(array $contact, $new_policy)
2485         {
2486                 $ssl_changed = false;
2487                 if ((intval($new_policy) == BaseURL::SSL_POLICY_SELFSIGN || $new_policy === 'self') && strstr($contact['url'], 'https:')) {
2488                         $ssl_changed = true;
2489                         $contact['url']     =   str_replace('https:', 'http:', $contact['url']);
2490                         $contact['request'] =   str_replace('https:', 'http:', $contact['request']);
2491                         $contact['notify']  =   str_replace('https:', 'http:', $contact['notify']);
2492                         $contact['poll']    =   str_replace('https:', 'http:', $contact['poll']);
2493                         $contact['confirm'] =   str_replace('https:', 'http:', $contact['confirm']);
2494                         $contact['poco']    =   str_replace('https:', 'http:', $contact['poco']);
2495                 }
2496
2497                 if ((intval($new_policy) == BaseURL::SSL_POLICY_FULL || $new_policy === 'full') && strstr($contact['url'], 'http:')) {
2498                         $ssl_changed = true;
2499                         $contact['url']     =   str_replace('http:', 'https:', $contact['url']);
2500                         $contact['request'] =   str_replace('http:', 'https:', $contact['request']);
2501                         $contact['notify']  =   str_replace('http:', 'https:', $contact['notify']);
2502                         $contact['poll']    =   str_replace('http:', 'https:', $contact['poll']);
2503                         $contact['confirm'] =   str_replace('http:', 'https:', $contact['confirm']);
2504                         $contact['poco']    =   str_replace('http:', 'https:', $contact['poco']);
2505                 }
2506
2507                 if ($ssl_changed) {
2508                         $fields = ['url' => $contact['url'], 'request' => $contact['request'],
2509                                         'notify' => $contact['notify'], 'poll' => $contact['poll'],
2510                                         'confirm' => $contact['confirm'], 'poco' => $contact['poco']];
2511                         DBA::update('contact', $fields, ['id' => $contact['id']]);
2512                 }
2513
2514                 return $contact;
2515         }
2516
2517         /**
2518          * @param array  $importer Owner (local user) data
2519          * @param array  $contact  Existing owner-specific contact data we want to expand the relationship with. Optional.
2520          * @param array  $datarray An item-like array with at least the 'author-id' and 'author-url' keys for the contact. Mandatory.
2521          * @param bool   $sharing  True: Contact is now sharing with Owner; False: Contact is now following Owner (default)
2522          * @param string $note     Introduction additional message
2523          * @return bool|null True: follow request is accepted; False: relationship is rejected; Null: relationship is pending
2524          * @throws \Friendica\Network\HTTPException\InternalServerErrorException
2525          * @throws \ImagickException
2526          */
2527         public static function addRelationship(array $importer, array $contact, array $datarray, $sharing = false, $note = '')
2528         {
2529                 // Should always be set
2530                 if (empty($datarray['author-id'])) {
2531                         return false;
2532                 }
2533
2534                 $fields = ['url', 'name', 'nick', 'avatar', 'photo', 'network', 'blocked'];
2535                 $pub_contact = DBA::selectFirst('contact', $fields, ['id' => $datarray['author-id']]);
2536                 if (!DBA::isResult($pub_contact)) {
2537                         // Should never happen
2538                         return false;
2539                 }
2540
2541                 // Contact is blocked at node-level
2542                 if (self::isBlocked($datarray['author-id'])) {
2543                         return false;
2544                 }
2545
2546                 $url = ($datarray['author-link'] ?? '') ?: $pub_contact['url'];
2547                 $name = $pub_contact['name'];
2548                 $photo = ($pub_contact['avatar'] ?? '') ?: $pub_contact["photo"];
2549                 $nick = $pub_contact['nick'];
2550                 $network = $pub_contact['network'];
2551
2552                 // Ensure that we don't create a new contact when there already is one
2553                 $cid = self::getIdForURL($url, $importer['uid']);
2554                 if (!empty($cid)) {
2555                         $contact = DBA::selectFirst('contact', [], ['id' => $cid]);
2556                 }
2557
2558                 if (!empty($contact)) {
2559                         if (!empty($contact['pending'])) {
2560                                 Logger::info('Pending contact request already exists.', ['url' => $url, 'uid' => $importer['uid']]);
2561                                 return null;
2562                         }
2563
2564                         // Contact is blocked at user-level
2565                         if (!empty($contact['id']) && !empty($importer['id']) &&
2566                                 self::isBlockedByUser($contact['id'], $importer['id'])) {
2567                                 return false;
2568                         }
2569
2570                         // Make sure that the existing contact isn't archived
2571                         self::unmarkForArchival($contact);
2572
2573                         if (($contact['rel'] == self::SHARING)
2574                                 || ($sharing && $contact['rel'] == self::FOLLOWER)) {
2575                                 DBA::update('contact', ['rel' => self::FRIEND, 'writable' => true, 'pending' => false],
2576                                                 ['id' => $contact['id'], 'uid' => $importer['uid']]);
2577                         }
2578
2579                         // Ensure to always have the correct network type, independent from the connection request method
2580                         self::updateFromProbe($contact['id'], '', true);
2581
2582                         return true;
2583                 } else {
2584                         // send email notification to owner?
2585                         if (DBA::exists('contact', ['nurl' => Strings::normaliseLink($url), 'uid' => $importer['uid'], 'pending' => true])) {
2586                                 Logger::log('ignoring duplicated connection request from pending contact ' . $url);
2587                                 return null;
2588                         }
2589
2590                         // create contact record
2591                         DBA::insert('contact', [
2592                                 'uid'      => $importer['uid'],
2593                                 'created'  => DateTimeFormat::utcNow(),
2594                                 'url'      => $url,
2595                                 'nurl'     => Strings::normaliseLink($url),
2596                                 'name'     => $name,
2597                                 'nick'     => $nick,
2598                                 'photo'    => $photo,
2599                                 'network'  => $network,
2600                                 'rel'      => self::FOLLOWER,
2601                                 'blocked'  => 0,
2602                                 'readonly' => 0,
2603                                 'pending'  => 1,
2604                                 'writable' => 1,
2605                         ]);
2606
2607                         $contact_id = DBA::lastInsertId();
2608
2609                         // Ensure to always have the correct network type, independent from the connection request method
2610                         self::updateFromProbe($contact_id, '', true);
2611
2612                         Contact::updateAvatar($photo, $importer["uid"], $contact_id, true);
2613
2614                         $contact_record = DBA::selectFirst('contact', ['id', 'network', 'name', 'url', 'photo'], ['id' => $contact_id]);
2615
2616                         /// @TODO Encapsulate this into a function/method
2617                         $fields = ['uid', 'username', 'email', 'page-flags', 'notify-flags', 'language'];
2618                         $user = DBA::selectFirst('user', $fields, ['uid' => $importer['uid']]);
2619                         if (DBA::isResult($user) && !in_array($user['page-flags'], [User::PAGE_FLAGS_SOAPBOX, User::PAGE_FLAGS_FREELOVE, User::PAGE_FLAGS_COMMUNITY])) {
2620                                 // create notification
2621                                 $hash = Strings::getRandomHex();
2622
2623                                 if (is_array($contact_record)) {
2624                                         DBA::insert('intro', ['uid' => $importer['uid'], 'contact-id' => $contact_record['id'],
2625                                                                 'blocked' => false, 'knowyou' => false, 'note' => $note,
2626                                                                 'hash' => $hash, 'datetime' => DateTimeFormat::utcNow()]);
2627                                 }
2628
2629                                 Group::addMember(User::getDefaultGroup($importer['uid'], $contact_record["network"]), $contact_record['id']);
2630
2631                                 if (($user['notify-flags'] & Type::INTRO) &&
2632                                         in_array($user['page-flags'], [User::PAGE_FLAGS_NORMAL])) {
2633
2634                                         notification([
2635                                                 'type'         => Type::INTRO,
2636                                                 'notify_flags' => $user['notify-flags'],
2637                                                 'language'     => $user['language'],
2638                                                 'to_name'      => $user['username'],
2639                                                 'to_email'     => $user['email'],
2640                                                 'uid'          => $user['uid'],
2641                                                 'link'         => DI::baseUrl() . '/notifications/intros',
2642                                                 'source_name'  => ((strlen(stripslashes($contact_record['name']))) ? stripslashes($contact_record['name']) : DI::l10n()->t('[Name Withheld]')),
2643                                                 'source_link'  => $contact_record['url'],
2644                                                 'source_photo' => $contact_record['photo'],
2645                                                 'verb'         => ($sharing ? Activity::FRIEND : Activity::FOLLOW),
2646                                                 'otype'        => 'intro'
2647                                         ]);
2648                                 }
2649                         } elseif (DBA::isResult($user) && in_array($user['page-flags'], [User::PAGE_FLAGS_SOAPBOX, User::PAGE_FLAGS_FREELOVE, User::PAGE_FLAGS_COMMUNITY])) {
2650                                 $condition = ['uid' => $importer['uid'], 'url' => $url, 'pending' => true];
2651                                 DBA::update('contact', ['pending' => false], $condition);
2652
2653                                 return true;
2654                         }
2655                 }
2656
2657                 return null;
2658         }
2659
2660         public static function removeFollower($importer, $contact, array $datarray = [], $item = "")
2661         {
2662                 if (($contact['rel'] == self::FRIEND) || ($contact['rel'] == self::SHARING)) {
2663                         DBA::update('contact', ['rel' => self::SHARING], ['id' => $contact['id']]);
2664                 } else {
2665                         Contact::remove($contact['id']);
2666                 }
2667         }
2668
2669         public static function removeSharer($importer, $contact, array $datarray = [], $item = "")
2670         {
2671                 if (($contact['rel'] == self::FRIEND) || ($contact['rel'] == self::FOLLOWER)) {
2672                         DBA::update('contact', ['rel' => self::FOLLOWER], ['id' => $contact['id']]);
2673                 } else {
2674                         Contact::remove($contact['id']);
2675                 }
2676         }
2677
2678         /**
2679          * Create a birthday event.
2680          *
2681          * Update the year and the birthday.
2682          */
2683         public static function updateBirthdays()
2684         {
2685                 $condition = [
2686                         '`bd` != ""
2687                         AND `bd` > "0001-01-01"
2688                         AND SUBSTRING(`bd`, 1, 4) != `bdyear`
2689                         AND (`contact`.`rel` = ? OR `contact`.`rel` = ?)
2690                         AND NOT `contact`.`pending`
2691                         AND NOT `contact`.`hidden`
2692                         AND NOT `contact`.`blocked`
2693                         AND NOT `contact`.`archive`
2694                         AND NOT `contact`.`deleted`',
2695                         Contact::SHARING,
2696                         Contact::FRIEND
2697                 ];
2698
2699                 $contacts = DBA::select('contact', ['id', 'uid', 'name', 'url', 'bd'], $condition);
2700
2701                 while ($contact = DBA::fetch($contacts)) {
2702                         Logger::log('update_contact_birthday: ' . $contact['bd']);
2703
2704                         $nextbd = DateTimeFormat::utcNow('Y') . substr($contact['bd'], 4);
2705
2706                         if (Event::createBirthday($contact, $nextbd)) {
2707                                 // update bdyear
2708                                 DBA::update(
2709                                         'contact',
2710                                         ['bdyear' => substr($nextbd, 0, 4), 'bd' => $nextbd],
2711                                         ['id' => $contact['id']]
2712                                 );
2713                         }
2714                 }
2715         }
2716
2717         /**
2718          * Remove the unavailable contact ids from the provided list
2719          *
2720          * @param array $contact_ids Contact id list
2721          * @return array
2722          * @throws \Exception
2723          */
2724         public static function pruneUnavailable(array $contact_ids)
2725         {
2726                 if (empty($contact_ids)) {
2727                         return [];
2728                 }
2729
2730                 $contacts = Contact::selectToArray(['id'], [
2731                         'id'      => $contact_ids,
2732                         'blocked' => false,
2733                         'pending' => false,
2734                         'archive' => false,
2735                 ]);
2736
2737                 return array_column($contacts, 'id');
2738         }
2739
2740         /**
2741          * Returns a magic link to authenticate remote visitors
2742          *
2743          * @todo  check if the return is either a fully qualified URL or a relative path to Friendica basedir
2744          *
2745          * @param string $contact_url The address of the target contact profile
2746          * @param string $url         An url that we will be redirected to after the authentication
2747          *
2748          * @return string with "redir" link
2749          * @throws \Friendica\Network\HTTPException\InternalServerErrorException
2750          * @throws \ImagickException
2751          */
2752         public static function magicLink($contact_url, $url = '')
2753         {
2754                 if (!Session::isAuthenticated()) {
2755                         return $url ?: $contact_url; // Equivalent to: ($url != '') ? $url : $contact_url;
2756                 }
2757
2758                 $data = self::getProbeDataFromDatabase($contact_url);
2759                 if (empty($data)) {
2760                         return $url ?: $contact_url; // Equivalent to: ($url != '') ? $url : $contact_url;
2761                 }
2762
2763                 // Prevents endless loop in case only a non-public contact exists for the contact URL
2764                 unset($data['uid']);
2765
2766                 return self::magicLinkByContact($data, $url ?: $contact_url);
2767         }
2768
2769         /**
2770          * Returns a magic link to authenticate remote visitors
2771          *
2772          * @param integer $cid The contact id of the target contact profile
2773          * @param string  $url An url that we will be redirected to after the authentication
2774          *
2775          * @return string with "redir" link
2776          * @throws \Friendica\Network\HTTPException\InternalServerErrorException
2777          * @throws \ImagickException
2778          */
2779         public static function magicLinkbyId($cid, $url = '')
2780         {
2781                 $contact = DBA::selectFirst('contact', ['id', 'network', 'url', 'uid'], ['id' => $cid]);
2782
2783                 return self::magicLinkByContact($contact, $url);
2784         }
2785
2786         /**
2787          * Returns a magic link to authenticate remote visitors
2788          *
2789          * @param array  $contact The contact array with "uid", "network" and "url"
2790          * @param string $url     An url that we will be redirected to after the authentication
2791          *
2792          * @return string with "redir" link
2793          * @throws \Friendica\Network\HTTPException\InternalServerErrorException
2794          * @throws \ImagickException
2795          */
2796         public static function magicLinkByContact($contact, $url = '')
2797         {
2798                 $destination = $url ?: $contact['url']; // Equivalent to ($url != '') ? $url : $contact['url'];
2799
2800                 if (!Session::isAuthenticated() || ($contact['network'] != Protocol::DFRN)) {
2801                         return $destination;
2802                 }
2803
2804                 // Only redirections to the same host do make sense
2805                 if (($url != '') && (parse_url($url, PHP_URL_HOST) != parse_url($contact['url'], PHP_URL_HOST))) {
2806                         return $url;
2807                 }
2808
2809                 if (!empty($contact['uid'])) {
2810                         return self::magicLink($contact['url'], $url);
2811                 }
2812
2813                 if (empty($contact['id'])) {
2814                         return $destination;
2815                 }
2816
2817                 $redirect = 'redir/' . $contact['id'];
2818
2819                 if (($url != '') && !Strings::compareLink($contact['url'], $url)) {
2820                         $redirect .= '?url=' . $url;
2821                 }
2822
2823                 return $redirect;
2824         }
2825
2826         /**
2827          * Remove a contact from all groups
2828          *
2829          * @param integer $contact_id
2830          *
2831          * @return boolean Success
2832          */
2833         public static function removeFromGroups($contact_id)
2834         {
2835                 return DBA::delete('group_member', ['contact-id' => $contact_id]);
2836         }
2837
2838         /**
2839          * Is the contact a forum?
2840          *
2841          * @param integer $contactid ID of the contact
2842          *
2843          * @return boolean "true" if it is a forum
2844          */
2845         public static function isForum($contactid)
2846         {
2847                 $fields = ['forum', 'prv'];
2848                 $condition = ['id' => $contactid];
2849                 $contact = DBA::selectFirst('contact', $fields, $condition);
2850                 if (!DBA::isResult($contact)) {
2851                         return false;
2852                 }
2853
2854                 // Is it a forum?
2855                 return ($contact['forum'] || $contact['prv']);
2856         }
2857
2858         /**
2859          * Can the remote contact receive private messages?
2860          *
2861          * @param array $contact
2862          * @return bool
2863          */
2864         public static function canReceivePrivateMessages(array $contact)
2865         {
2866                 $protocol = $contact['network'] ?? $contact['protocol'] ?? Protocol::PHANTOM;
2867                 $self = $contact['self'] ?? false;
2868
2869                 return in_array($protocol, [Protocol::DFRN, Protocol::DIASPORA, Protocol::ACTIVITYPUB]) && !$self;
2870         }
2871 }