include/bb2diaspora.php

   1 <?php
   2
   3 require_once("include/oembed.php");
   4 require_once("include/event.php");
   5 require_once("library/markdown.php");
   6 require_once("include/html2bbcode.php");
   7 require_once("include/bbcode.php");
   8 require_once("include/markdownify/markdownify.php");
   9
  10
  11 // we don't want to support a bbcode specific markdown interpreter
  12 // and the markdown library we have is pretty good, but provides HTML output.
  13 // So we'll use that to convert to HTML, then convert the HTML back to bbcode,
  14 // and then clean up a few Diaspora specific constructs.
  15
  16 function diaspora2bb($s) {
  17
  18         // for testing purposes: Collect raw markdown articles
  19         // $file = tempnam("/tmp/friendica/", "markdown");
  20         // file_put_contents($file, $s);
  21
  22         $s = html_entity_decode($s,ENT_COMPAT,'UTF-8');
  23
  24         // Too many new lines. So deactivated the following line
  25         // $s = str_replace("\r","\n",$s);
  26         // Simply remove cr.
  27         $s = str_replace("\r","",$s);
  28
  29         // <br/> is invalid. Replace it with the valid expression
  30         $s = str_replace("<br/>","<br />",$s);
  31
  32         $s = preg_replace('/\@\{(.+?)\; (.+?)\@(.+?)\}/','@[url=https://$3/u/$2]$1[/url]',$s);
  33
  34         // Escaping the hash tags - doesn't always seem to work
  35         // $s = preg_replace('/\#([^\s\#])/','\\#$1',$s);
  36         // This seems to work
  37         $s = preg_replace('/\#([^\s\#])/','&#35;$1',$s);
  38
  39         $s = Markdown($s);
  40
  41         $s = str_replace('&#35;','#',$s);
  42 // we seem to have double linebreaks
  43 //      $s = str_replace("\n",'<br />',$s);
  44
  45         $s = html2bbcode($s);
  46 //      $s = str_replace('&#42;','*',$s);
  47
  48         // protect the recycle symbol from turning into a tag, but without unescaping angles and naked ampersands
  49         $s = str_replace('&#x2672;',html_entity_decode('&#x2672;',ENT_QUOTES,'UTF-8'),$s);
  50
  51         // Convert everything that looks like a link to a link
  52         $s = preg_replace("/([^\]\=]|^)(https?\:\/\/)([a-zA-Z0-9\:\/\-\?\&\;\.\=\_\~\#\%\$\!\+\,]+)/ism", '$1[url=$2$3]$2$3[/url]',$s);
  53
  54         //$s = preg_replace("/([^\]\=]|^)(https?\:\/\/)(vimeo|youtu|www\.youtube|soundcloud)([a-zA-Z0-9\:\/\-\?\&\;\.\=\_\~\#\%\$\!\+\,]+)/ism", '$1[url=$2$3$4]$2$3$4[/url]',$s);
  55         $s = bb_tag_preg_replace("/\[url\=?(.*?)\]https?:\/\/www.youtube.com\/watch\?v\=(.*?)\[\/url\]/ism",'[youtube]$2[/youtube]','url',$s);
  56         $s = bb_tag_preg_replace("/\[url\=https?:\/\/www.youtube.com\/watch\?v\=(.*?)\].*?\[\/url\]/ism",'[youtube]$1[/youtube]','url',$s);
  57         $s = bb_tag_preg_replace("/\[url\=?(.*?)\]https?:\/\/vimeo.com\/([0-9]+)(.*?)\[\/url\]/ism",'[vimeo]$2[/vimeo]','url',$s);
  58         $s = bb_tag_preg_replace("/\[url\=https?:\/\/vimeo.com\/([0-9]+)\](.*?)\[\/url\]/ism",'[vimeo]$1[/vimeo]','url',$s);
  59         // remove duplicate adjacent code tags
  60         $s = preg_replace("/(\[code\])+(.*?)(\[\/code\])+/ism","[code]$2[/code]", $s);
  61
  62         // Don't show link to full picture (until it is fixed)
  63         $s = scale_external_images($s, false);
  64
  65         return $s;
  66 }
  67
  68
  69 function stripdcode_br_cb($s) {
  70         return '[code]' . str_replace('<br />', "\n\t", $s[1]) . '[/code]';
  71 }
  72
  73
  74 //////////////////////
  75 // The following "diaspora_ul" and "diaspora_ol" are only appropriate for the
  76 // pre-Markdownify conversion. If Markdownify isn't used, use the non-Markdownify
  77 // versions below
  78 //////////////////////
  79 /*
  80 function diaspora_ul($s) {
  81         // Replace "[*]" followed by any number (including zero) of
  82         // spaces by "* " to match Diaspora's list format
  83         if( strpos($s[0], "[list]") === 0 )
  84                 return '<ul class="listbullet" style="list-style-type: circle;">' . preg_replace("/\[\*\]( *)/", "* ", $s[1]) . '</ul>';
  85         elseif( strpos($s[0], "[ul]") === 0 )
  86                 return '<ul class="listbullet" style="list-style-type: circle;">' . preg_replace("/\[\*\]( *)/", "* ", $s[1]) . '</ul>';
  87         else
  88                 return $s[0];
  89 }
  90
  91
  92 function diaspora_ol($s) {
  93         // A hack: Diaspora will create a properly-numbered ordered list even
  94         // if you use '1.' for each element of the list, like:
  95         //              1. First element
  96         //              1. Second element
  97         //              1. Third element
  98         if( strpos($s[0], "[list=1]") === 0 )
  99                 return '<ul class="listdecimal" style="list-style-type: decimal;">' . preg_replace("/\[\*\]( *)/", "1. ", $s[1]) . '</ul>';
 100         elseif( strpos($s[0], "[list=i]") === 0 )
 101                 return '<ul class="listlowerroman" style="list-style-type: lower-roman;">' . preg_replace("/\[\*\]( *)/", "1. ", $s[1]) . '</ul>';
 102         elseif( strpos($s[0], "[list=I]") === 0 )
 103                 return '<ul class="listupperroman" style="list-style-type: upper-roman;">' . preg_replace("/\[\*\]( *)/", "1. ", $s[1]) . '</ul>';
 104         elseif( strpos($s[0], "[list=a]") === 0 )
 105                 return '<ul class="listloweralpha" style="list-style-type: lower-alpha;">' . preg_replace("/\[\*\]( *)/", "1. ", $s[1]) . '</ul>';
 106         elseif( strpos($s[0], "[list=A]") === 0 )
 107                 return '<ul class="listupperalpha" style="list-style-type: upper-alpha;">' . preg_replace("/\[\*\]( *)/", "1. ", $s[1]) . '</ul>';
 108         elseif( strpos($s[0], "[ol]") === 0 )
 109                 return '<ul class="listdecimal" style="list-style-type: decimal;">' . preg_replace("/\[\*\]( *)/", "1. ", $s[1]) . '</ul>';
 110         else
 111                 return $s[0];
 112 }
 113 */
 114
 115 //////////////////////
 116 // Non-Markdownify versions of "diaspora_ol" and "diaspora_ul"
 117 //////////////////////
 118 function diaspora_ul($s) {
 119         // Replace "[\\*]" followed by any number (including zero) of
 120         // spaces by "* " to match Diaspora's list format
 121         return preg_replace("/\[\\\\\*\]( *)/", "* ", $s[1]);
 122 }
 123
 124 function diaspora_ol($s) {
 125         // A hack: Diaspora will create a properly-numbered ordered list even
 126         // if you use '1.' for each element of the list, like:
 127         // 1. First element
 128         // 1. Second element
 129         // 1. Third element
 130         return preg_replace("/\[\\\\\*\]( *)/", "1. ", $s[1]);
 131 }
 132
 133
 134 function bb2diaspora($Text,$preserve_nl = false, $fordiaspora = true) {
 135
 136         // Since Diaspora is creating a summary for links, this function removes them before posting
 137         if ($fordiaspora)
 138                 $Text = bb_remove_share_information($Text);
 139
 140         // Re-enabling the converter again.
 141         // The bbcode parser now handles youtube-links (and the other stuff) correctly.
 142         // Additionally the html code is now fixed so that lists are now working.
 143
 144         /**
 145          * Transform #tags, strip off the [url] and replace spaces with underscore
 146          */
 147         $Text = preg_replace_callback('/#\[url\=(\w+.*?)\](\w+.*?)\[\/url\]/i', create_function('$match',
 148                 'return \'#\'. str_replace(\' \', \'_\', $match[2]);'
 149         ), $Text);
 150
 151
 152         // Converting images with size parameters to simple images. Markdown doesn't know it.
 153         $Text = preg_replace("/\[img\=([0-9]*)x([0-9]*)\](.*?)\[\/img\]/ism", '[img]$3[/img]', $Text);
 154
 155         // the following was added on 10-January-2012 due to an inability of Diaspora's
 156         // new javascript markdown processor to handle links with images as the link "text"
 157         // It is not optimal and may be removed if this ability is restored in the future
 158         //if ($fordiaspora)
 159         //      $Text = preg_replace("/\[url\=([^\[\]]*)\]\s*\[img\](.*?)\[\/img\]\s*\[\/url\]/ism",
 160         //                              "[url]$1[/url]\n[img]$2[/img]", $Text);
 161
 162         // Remove the avatar picture since that isn't looking good on the other side
 163         //$Text = preg_replace("/\[share(.*?)avatar\s?=\s?'.*?'\s?(.*?)\]\s?(.*?)\s?\[\/share\]\s?/ism","\n[share$1$2]$3[/share]",$Text);
 164
 165         // Convert it to HTML - don't try oembed
 166         if ($fordiaspora)
 167                 $Text = bbcode($Text, $preserve_nl, false, 3);
 168         else
 169                 $Text = bbcode($Text, $preserve_nl, false, 4);
 170
 171         // Now convert HTML to Markdown
 172         $md = new Markdownify(false, false, false);
 173         $Text = $md->parseString($Text);
 174
 175         // The Markdownify converter converts underscores '_' in URLs to '\_', which
 176         // messes up the URL. Manually fix these
 177         $count = 1;
 178         $pos = bb_find_open_close($Text, '[', ']', $count);
 179         while($pos !== false) {
 180                 $start = substr($Text, 0, $pos['start']);
 181                 $subject = substr($Text, $pos['start'], $pos['end'] - $pos['start'] + 1);
 182                 $end = substr($Text, $pos['end'] + 1);
 183
 184                 $subject = str_replace('\_', '_', $subject);
 185                 $Text = $start . $subject . $end;
 186
 187                 $count++;
 188                 $pos = bb_find_open_close($Text, '[', ']', $count);
 189         }
 190
 191         // If the text going into bbcode() has a plain URL in it, i.e.
 192         // with no [url] tags around it, it will come out of parseString()
 193         // looking like: <http://url.com>, which gets removed by strip_tags().
 194         // So take off the angle brackets of any such URL
 195         $Text = preg_replace("/<http(.*?)>/is", "http$1", $Text);
 196
 197         // Remove all unconverted tags
 198         $Text = strip_tags($Text);
 199
 200
 201 /* Old routine
 202
 203         $ev = bbtoevent($Text);
 204
 205         // Replace any html brackets with HTML Entities to prevent executing HTML or script
 206         // Don't use strip_tags here because it breaks [url] search by replacing & with amp
 207
 208         $Text = str_replace("<", "&lt;", $Text);
 209         $Text = str_replace(">", "&gt;", $Text);
 210
 211         // If we find any event code, turn it into an event.
 212         // After we're finished processing the bbcode we'll
 213         // replace all of the event code with a reformatted version.
 214
 215         if($preserve_nl)
 216                 $Text = str_replace(array("\n","\r"), array('',''),$Text);
 217         else
 218                 // Remove the "return" character, as Diaspora uses only the "newline"
 219                 // character, so having the "return" character can cause signature
 220                 // failures
 221                 $Text = str_replace("\r", "", $Text);
 222
 223
 224         // Set up the parameters for a URL search string
 225         $URLSearchString = "^\[\]";
 226         // Set up the parameters for a MAIL search string
 227         $MAILSearchString = $URLSearchString;
 228
 229         // Perform URL Search
 230
 231         // [img]pathtoimage[/img]
 232
 233         // the following was added on 10-January-2012 due to an inability of Diaspora's
 234         // new javascript markdown processor to handle links with images as the link "text"
 235         // It is not optimal and may be removed if this ability is restored in the future
 236
 237         $Text = preg_replace("/\[url\=([$URLSearchString]*)\]\[img\](.*?)\[\/img\]\[\/url\]/ism",
 238                 '![' . t('image/photo') . '](' . '$2' . ')' . "\n" . '[' . t('link') . '](' . '$1' . ')', $Text);
 239
 240         $Text = preg_replace("/\[bookmark\]([$URLSearchString]*)\[\/bookmark\]/ism", '[$1]($1)', $Text);
 241         $Text = preg_replace("/\[bookmark\=([$URLSearchString]*)\](.*?)\[\/bookmark\]/ism", '[$2]($1)', $Text);
 242
 243         $Text = preg_replace("/\[url\]([$URLSearchString]*)\[\/url\]/ism", '[$1]($1)', $Text);
 244         $Text = preg_replace("/\#\[url\=([$URLSearchString]*)\](.*?)\[\/url\]/ism", '[#$2]($1)', $Text);
 245         $Text = preg_replace("/\[url\=([$URLSearchString]*)\](.*?)\[\/url\]/ism", '[$2]($1)', $Text);
 246
 247
 248         $Text = preg_replace("/\[img\](.*?)\[\/img\]/", '![' . t('image/photo') . '](' . '$1' . ')', $Text);
 249         $Text = preg_replace("/\[img\=(.*?)\](.*?)\[\/img\]/", '![' . t('image/photo') . '](' . '$2' . ')', $Text);
 250
 251         // Perform MAIL Search
 252         $Text = preg_replace("(\[mail\]([$MAILSearchString]*)\[/mail\])", '[$1](mailto:$1)', $Text);
 253         $Text = preg_replace("/\[mail\=([$MAILSearchString]*)\](.*?)\[\/mail\]/", '[$2](mailto:$1)', $Text);
 254
 255         $Text = str_replace('*', '\\*', $Text);
 256         $Text = str_replace('_', '\\_', $Text);
 257
 258         $Text = str_replace('`','\\`', $Text);
 259
 260         // Check for bold text
 261         $Text = preg_replace("(\[b\](.*?)\[\/b\])is",'**$1**',$Text);
 262
 263         // Check for italics text
 264         $Text = preg_replace("(\[i\](.*?)\[\/i\])is",'_$1_',$Text);
 265
 266         // Check for underline text
 267         // Replace with italics since Diaspora doesn't have underline
 268         $Text = preg_replace("(\[u\](.*?)\[\/u\])is",'_$1_',$Text);
 269
 270         // Check for strike-through text
 271         $Text = preg_replace("(\[s\](.*?)\[\/s\])is",'**[strike]**$1**[/strike]**',$Text);
 272
 273         // Check for over-line text
 274 //      $Text = preg_replace("(\[o\](.*?)\[\/o\])is",'<span class="overline">$1</span>',$Text);
 275
 276         // Check for colored text
 277         // Remove color since Diaspora doesn't support it
 278         $Text = preg_replace("(\[color=(.*?)\](.*?)\[\/color\])is","$2",$Text);
 279
 280         // Check for sized text
 281         // Remove it since Diaspora doesn't support sizes very well
 282         $Text = preg_replace("(\[size=(.*?)\](.*?)\[\/size\])is","$2",$Text);
 283
 284         // Check for list text
 285         $endlessloop = 0;
 286         while ((((strpos($Text, "[/list]") !== false) && (strpos($Text, "[list") !== false)) ||
 287                ((strpos($Text, "[/ol]") !== false) && (strpos($Text, "[ol]") !== false)) ||
 288                ((strpos($Text, "[/ul]") !== false) && (strpos($Text, "[ul]") !== false)) ||
 289                ((strpos($Text, "[/li]") !== false) && (strpos($Text, "[li]") !== false))) && (++$endlessloop < 20)) {
 290                 $Text = preg_replace_callback("/\[list\](.*?)\[\/list\]/is", 'diaspora_ul', $Text);
 291                 $Text = preg_replace_callback("/\[list=1\](.*?)\[\/list\]/is", 'diaspora_ol', $Text);
 292                 $Text = preg_replace_callback("/\[list=i\](.*?)\[\/list\]/s",'diaspora_ol', $Text);
 293                 $Text = preg_replace_callback("/\[list=I\](.*?)\[\/list\]/s", 'diaspora_ol', $Text);
 294                 $Text = preg_replace_callback("/\[list=a\](.*?)\[\/list\]/s", 'diaspora_ol', $Text);
 295                 $Text = preg_replace_callback("/\[list=A\](.*?)\[\/list\]/s", 'diaspora_ol', $Text);
 296                 $Text = preg_replace_callback("/\[ul\](.*?)\[\/ul\]/is", 'diaspora_ul', $Text);
 297                 $Text = preg_replace_callback("/\[ol\](.*?)\[\/ol\]/is", 'diaspora_ol', $Text);
 298                 $Text = preg_replace("/\[li\]( *)(.*?)\[\/li\]/s", '* $2' ,$Text);
 299         }
 300
 301         // Just get rid of table tags since Diaspora doesn't support tables
 302         $Text = preg_replace("/\[th\](.*?)\[\/th\]/s", '$1' ,$Text);
 303         $Text = preg_replace("/\[td\](.*?)\[\/td\]/s", '$1' ,$Text);
 304         $Text = preg_replace("/\[tr\](.*?)\[\/tr\]/s", '$1' ,$Text);
 305         $Text = preg_replace("/\[table\](.*?)\[\/table\]/s", '$1' ,$Text);
 306
 307         $Text = preg_replace("/\[table border=(.*?)\](.*?)\[\/table\]/s", '$2' ,$Text);
 308 //      $Text = preg_replace("/\[table border=0\](.*?)\[\/table\]/s", '<table border="0" >$1</table>' ,$Text);
 309
 310
 311 //      $Text = str_replace("[*]", "<li>", $Text);
 312
 313         // Check for font change text
 314 //      $Text = preg_replace("(\[font=(.*?)\](.*?)\[\/font\])","<span style=\"font-family: $1;\">$2</span>",$Text);
 315
 316
 317         $Text = preg_replace_callback("/\[code\](.*?)\[\/code\]/is",'stripdcode_br_cb',$Text);
 318
 319         // Check for [code] text
 320         $Text = preg_replace("/(\[code\])+(.*?)(\[\/code\])+/is","\t$2\n", $Text);
 321
 322
 323
 324
 325         // Declare the format for [quote] layout
 326         //      $QuoteLayout = '<blockquote>$1</blockquote>';
 327         // Check for [quote] text
 328         $Text = preg_replace("/\[quote\](.*?)\[\/quote\]/is",">$1\n\n", $Text);
 329         $Text = preg_replace("/\[quote=(.*?)\](.*?)\[\/quote\]/is",">$2\n\n", $Text);
 330
 331         // Images
 332
 333         // html5 video and audio
 334
 335         $Text = preg_replace("/\[video\](.*?)\[\/video\]/", '$1', $Text);
 336
 337         $Text = preg_replace("/\[audio\](.*?)\[\/audio\]/", '$1', $Text);
 338
 339 //      $Text = preg_replace("/\[iframe\](.*?)\[\/iframe\]/", '<iframe src="$1" width="425" height="350"><a href="$1">$1</a></iframe>', $Text);
 340
 341         // [img=widthxheight]image source[/img]
 342 //      $Text = preg_replace("/\[img\=([0-9]*)x([0-9]*)\](.*?)\[\/img\]/", '<img src="$3" style="height:{$2}px; width:{$1}px;" >', $Text);
 343
 344         $Text = preg_replace("/\[youtube\]https?:\/\/www.youtube.com\/watch\?v\=(.*?)\[\/youtube\]/ism",'http://www.youtube.com/watch?v=$1',$Text);
 345         $Text = preg_replace("/\[youtube\]https?:\/\/www.youtube.com\/embed\/(.*?)\[\/youtube\]/ism",'http://www.youtube.com/watch?v=$1',$Text);
 346         $Text = preg_replace("/\[youtube\]https?:\/\/youtu.be\/(.*?)\[\/youtube\]/ism",'http://www.youtube.com/watch?v=$1',$Text);
 347         $Text = preg_replace("/\[youtube\]([A-Za-z0-9\-_=]+)(.*?)\[\/youtube\]/ism", 'http://www.youtube.com/watch?v=$1', $Text);
 348
 349         $Text = preg_replace("/\[vimeo\]https?:\/\/player.vimeo.com\/video\/([0-9]+)(.*?)\[\/vimeo\]/ism",'http://vimeo.com/$1',$Text);
 350         $Text = preg_replace("/\[vimeo\]https?:\/\/vimeo.com\/([0-9]+)(.*?)\[\/vimeo\]/ism",'http://vimeo.com/$1',$Text);
 351         $Text = preg_replace("/\[vimeo\]([0-9]+)(.*?)\[\/vimeo\]/ism", 'http://vimeo.com/$1',$Text);
 352
 353
 354         $Text = str_replace('[nosmile]','',$Text);
 355
 356         // oembed tag
 357         //      $Text = oembed_bbcode2html($Text);
 358
 359         // If we found an event earlier, strip out all the event code and replace with a reformatted version.
 360
 361         if(x($ev,'start')) {
 362
 363                 $sub = format_event_diaspora($ev);
 364
 365                 $Text = preg_replace("/\[event\-summary\](.*?)\[\/event\-summary\]/is",'',$Text);
 366                 $Text = preg_replace("/\[event\-description\](.*?)\[\/event\-description\]/is",'',$Text);
 367                 $Text = preg_replace("/\[event\-start\](.*?)\[\/event\-start\]/is",$sub,$Text);
 368                 $Text = preg_replace("/\[event\-finish\](.*?)\[\/event\-finish\]/is",'',$Text);
 369                 $Text = preg_replace("/\[event\-location\](.*?)\[\/event\-location\]/is",'',$Text);
 370                 $Text = preg_replace("/\[event\-adjust\](.*?)\[\/event\-adjust\]/is",'',$Text);
 371         }
 372
 373         $Text = preg_replace("/\<(.*?)(src|href)=(.*?)\&amp\;(.*?)\>/ism",'<$1$2=$3&$4>',$Text);
 374
 375         $Text = preg_replace_callback('/\[(.*?)\]\((.*?)\)/ism','unescape_underscores_in_links',$Text);
 376
 377 */
 378
 379         // Remove any leading or trailing whitespace, as this will mess up
 380         // the Diaspora signature verification and cause the item to disappear
 381         $Text = trim($Text);
 382
 383         call_hooks('bb2diaspora',$Text);
 384
 385         return $Text;
 386 }
 387
 388 function unescape_underscores_in_links($m) {
 389         $y = str_replace('\\_','_', $m[2]);
 390         return('[' . $m[1] . '](' . $y . ')');
 391 }
 392
 393 function format_event_diaspora($ev) {
 394
 395         $a = get_app();
 396
 397         if(! ((is_array($ev)) && count($ev)))
 398                 return '';
 399
 400         $bd_format = t('l F d, Y \@ g:i A') ; // Friday January 18, 2011 @ 8 AM
 401
 402         $o = 'Friendica event notification:' . "\n";
 403
 404         $o .= '**' . (($ev['summary']) ? bb2diaspora($ev['summary']) : bb2diaspora($ev['desc'])) .  '**' . "\n";
 405
 406         $o .= t('Starts:') . ' ' . '['
 407                 . (($ev['adjust']) ? day_translate(datetime_convert('UTC', 'UTC',
 408                         $ev['start'] , $bd_format ))
 409                         :  day_translate(datetime_convert('UTC', 'UTC',
 410                         $ev['start'] , $bd_format)))
 411                 .  '](' . $a->get_baseurl() . '/localtime/?f=&time=' . urlencode(datetime_convert('UTC','UTC',$ev['start'])) . ")\n";
 412
 413         if(! $ev['nofinish'])
 414                 $o .= t('Finishes:') . ' ' . '['
 415                         . (($ev['adjust']) ? day_translate(datetime_convert('UTC', 'UTC',
 416                                 $ev['finish'] , $bd_format ))
 417                                 :  day_translate(datetime_convert('UTC', 'UTC',
 418                                 $ev['finish'] , $bd_format )))
 419                         . '](' . $a->get_baseurl() . '/localtime/?f=&time=' . urlencode(datetime_convert('UTC','UTC',$ev['finish'])) . ")\n";
 420
 421         if(strlen($ev['location']))
 422                 $o .= t('Location:') . bb2diaspora($ev['location'])
 423                         . "\n";
 424
 425         $o .= "\n";
 426         return $o;
 427 }