include/bb2diaspora.php

   1 <?php
   2
   3 require_once("include/oembed.php");
   4 require_once("include/event.php");
   5 require_once("library/markdown.php");
   6 require_once("include/html2bbcode.php");
   7 require_once("include/bbcode.php");
   8 require_once("include/markdownify/markdownify.php");
   9
  10 // we don't want to support a bbcode specific markdown interpreter
  11 // and the markdown library we have is pretty good, but provides HTML output.
  12 // So we'll use that to convert to HTML, then convert the HTML back to bbcode,
  13 // and then clean up a few Diaspora specific constructs.
  14
  15 function diaspora2bb($s) {
  16
  17         // for testing purposes: Collect raw markdown articles
  18         // $file = tempnam("/tmp/friendica/", "markdown");
  19         // file_put_contents($file, $s);
  20
  21         $s = html_entity_decode($s,ENT_COMPAT,'UTF-8');
  22
  23         // Too many new lines. So deactivated the following line
  24         // $s = str_replace("\r","\n",$s);
  25         // Simply remove cr.
  26         $s = str_replace("\r","",$s);
  27
  28         // <br/> is invalid. Replace it with the valid expression
  29         $s = str_replace("<br/>","<br />",$s);
  30
  31         $s = preg_replace('/\@\{(.+?)\; (.+?)\@(.+?)\}/','@[url=https://$3/u/$2]$1[/url]',$s);
  32
  33         // Escaping the hash tags - doesn't always seem to work
  34         // $s = preg_replace('/\#([^\s\#])/','\\#$1',$s);
  35         // This seems to work
  36         $s = preg_replace('/\#([^\s\#])/','&#35;$1',$s);
  37
  38         $s = Markdown($s);
  39
  40         $s = str_replace('&#35;','#',$s);
  41
  42         $s = str_replace("\n",'<br />',$s);
  43
  44         $s = html2bbcode($s);
  45 //      $s = str_replace('&#42;','*',$s);
  46
  47         // Convert everything that looks like a link to a link
  48         $s = preg_replace("/([^\]\=]|^)(https?\:\/\/)([a-zA-Z0-9\:\/\-\?\&\;\.\=\_\~\#\%\$\!\+\,]+)/ism", '$1[url=$2$3]$2$3[/url]',$s);
  49
  50         //$s = preg_replace("/([^\]\=]|^)(https?\:\/\/)(vimeo|youtu|www\.youtube|soundcloud)([a-zA-Z0-9\:\/\-\?\&\;\.\=\_\~\#\%\$\!\+\,]+)/ism", '$1[url=$2$3$4]$2$3$4[/url]',$s);
  51         $s = preg_replace("/\[url\=?(.*?)\]https?:\/\/www.youtube.com\/watch\?v\=(.*?)\[\/url\]/ism",'[youtube]$2[/youtube]',$s);
  52         $s = preg_replace("/\[url\=https?:\/\/www.youtube.com\/watch\?v\=(.*?)\].*?\[\/url\]/ism",'[youtube]$1[/youtube]',$s);
  53         $s = preg_replace("/\[url\=?(.*?)\]https?:\/\/vimeo.com\/([0-9]+)(.*?)\[\/url\]/ism",'[vimeo]$2[/vimeo]',$s);
  54         $s = preg_replace("/\[url\=https?:\/\/vimeo.com\/([0-9]+)\](.*?)\[\/url\]/ism",'[vimeo]$1[/vimeo]',$s);
  55         // remove duplicate adjacent code tags
  56         $s = preg_replace("/(\[code\])+(.*?)(\[\/code\])+/ism","[code]$2[/code]", $s);
  57
  58         // Don't show link to full picture (until it is fixed)
  59         $s = scale_external_images($s, false);
  60
  61         return $s;
  62 }
  63
  64
  65 function stripdcode_br_cb($s) {
  66         return '[code]' . str_replace('<br />', "\n\t", $s[1]) . '[/code]';
  67 }
  68
  69
  70 function diaspora_ul($s) {
  71         // Replace "[*]" followed by any number (including zero) of
  72         // spaces by "* " to match Diaspora's list format
  73         if( strpos($s[0], "[list]") === 0 )
  74                 return '<ul class="listbullet" style="list-style-type: circle;">' . preg_replace("/\[\*\]( *)/", "* ", $s[1]) . '</ul>';
  75         elseif( strpos($s[0], "[ul]") === 0 )
  76                 return '<ul class="listbullet" style="list-style-type: circle;">' . preg_replace("/\[\*\]( *)/", "* ", $s[1]) . '</ul>';
  77         else
  78                 return $s[0];
  79 }
  80
  81
  82 function diaspora_ol($s) {
  83         // A hack: Diaspora will create a properly-numbered ordered list even
  84         // if you use '1.' for each element of the list, like:
  85         //              1. First element
  86         //              1. Second element
  87         //              1. Third element
  88         if( strpos($s[0], "[list=1]") === 0 )
  89                 return '<ul class="listdecimal" style="list-style-type: decimal;">' . preg_replace("/\[\*\]( *)/", "1. ", $s[1]) . '</ul>';
  90         elseif( strpos($s[0], "[list=i]") === 0 )
  91                 return '<ul class="listlowerroman" style="list-style-type: lower-roman;">' . preg_replace("/\[\*\]( *)/", "1. ", $s[1]) . '</ul>';
  92         elseif( strpos($s[0], "[list=I]") === 0 )
  93                 return '<ul class="listupperroman" style="list-style-type: upper-roman;">' . preg_replace("/\[\*\]( *)/", "1. ", $s[1]) . '</ul>';
  94         elseif( strpos($s[0], "[list=a]") === 0 )
  95                 return '<ul class="listloweralpha" style="list-style-type: lower-alpha;">' . preg_replace("/\[\*\]( *)/", "1. ", $s[1]) . '</ul>';
  96         elseif( strpos($s[0], "[list=A]") === 0 )
  97                 return '<ul class="listupperalpha" style="list-style-type: upper-alpha;">' . preg_replace("/\[\*\]( *)/", "1. ", $s[1]) . '</ul>';
  98         elseif( strpos($s[0], "[ol]") === 0 )
  99                 return '<ul class="listdecimal" style="list-style-type: decimal;">' . preg_replace("/\[\*\]( *)/", "1. ", $s[1]) . '</ul>';
 100         else
 101                 return $s[0];
 102 }
 103
 104
 105 function bb2diaspora($Text,$preserve_nl = false) {
 106
 107         // bbcode() will convert "[*]" into "<li>" with no closing "</li>"
 108         // Markdownify() is unable to handle these, as it makes each new
 109         // "<li>" into a deeper nested element until it crashes. So pre-format
 110         // the lists as Diaspora lists before sending the $Text to bbcode()
 111         //
 112         // Note that to get nested lists to work for Diaspora, we would need
 113         // to define the closing tag for the list elements. So nested lists
 114         // are going to be flattened out in Diaspora for now
 115         $endlessloop = 0;
 116         while ((strpos($Text, "[/list]") !== false) && (strpos($Text, "[list") !== false) &&
 117                (strpos($Text, "[/ol]") !== false) && (strpos($Text, "[ol]") !== false) &&
 118                (strpos($Text, "[/ul]") !== false) && (strpos($Text, "[ul]") !== false) && (++$endlessloop < 20)) {
 119                 $Text = preg_replace_callback("/\[list\](.*?)\[\/list\]/is", 'diaspora_ul', $Text);
 120                 $Text = preg_replace_callback("/\[list=1\](.*?)\[\/list\]/is", 'diaspora_ol', $Text);
 121                 $Text = preg_replace_callback("/\[list=i\](.*?)\[\/list\]/s",'diaspora_ol', $Text);
 122                 $Text = preg_replace_callback("/\[list=I\](.*?)\[\/list\]/s", 'diaspora_ol', $Text);
 123                 $Text = preg_replace_callback("/\[list=a\](.*?)\[\/list\]/s", 'diaspora_ol', $Text);
 124                 $Text = preg_replace_callback("/\[list=A\](.*?)\[\/list\]/s", 'diaspora_ol', $Text);
 125                 $Text = preg_replace_callback("/\[ul\](.*?)\[\/ul\]/is", 'diaspora_ul', $Text);
 126                 $Text = preg_replace_callback("/\[ol\](.*?)\[\/ol\]/is", 'diaspora_ol', $Text);
 127         }
 128
 129         // Convert it to HTML - don't try oembed
 130         $Text = bbcode($Text, $preserve_nl, false);
 131
 132         // Now convert HTML to Markdown
 133         $md = new Markdownify(false, false, false);
 134         $Text = $md->parseString($Text);
 135
 136         // If the text going into bbcode() has a plain URL in it, i.e.
 137         // with no [url] tags around it, it will come out of parseString()
 138         // looking like: <http://url.com>, which gets removed by strip_tags().
 139         // So take off the angle brackets of any such URL
 140         $Text = preg_replace("/<http(.*?)>/is", "http$1", $Text);
 141
 142         // Remove all unconverted tags
 143         $Text = strip_tags($Text);
 144
 145 /*
 146         $ev = bbtoevent($Text);
 147
 148         // Replace any html brackets with HTML Entities to prevent executing HTML or script
 149         // Don't use strip_tags here because it breaks [url] search by replacing & with amp
 150
 151         $Text = str_replace("<", "&lt;", $Text);
 152         $Text = str_replace(">", "&gt;", $Text);
 153
 154         // If we find any event code, turn it into an event.
 155         // After we're finished processing the bbcode we'll
 156         // replace all of the event code with a reformatted version.
 157
 158         if($preserve_nl)
 159                 $Text = str_replace(array("\n","\r"), array('',''),$Text);
 160         else
 161                 // Remove the "return" character, as Diaspora uses only the "newline"
 162                 // character, so having the "return" character can cause signature
 163                 // failures
 164                 $Text = str_replace("\r", "", $Text);
 165
 166
 167         // Set up the parameters for a URL search string
 168         $URLSearchString = "^\[\]";
 169         // Set up the parameters for a MAIL search string
 170         $MAILSearchString = $URLSearchString;
 171
 172         // Perform URL Search
 173
 174         // [img]pathtoimage[/img]
 175
 176         // the following was added on 10-January-2012 due to an inability of Diaspora's
 177         // new javascript markdown processor to handle links with images as the link "text"
 178         // It is not optimal and may be removed if this ability is restored in the future
 179
 180         $Text = preg_replace("/\[url\=([$URLSearchString]*)\]\[img\](.*?)\[\/img\]\[\/url\]/ism",
 181                 '![' . t('image/photo') . '](' . '$2' . ')' . "\n" . '[' . t('link') . '](' . '$1' . ')', $Text);
 182
 183         $Text = preg_replace("/\[bookmark\]([$URLSearchString]*)\[\/bookmark\]/ism", '[$1]($1)', $Text);
 184         $Text = preg_replace("/\[bookmark\=([$URLSearchString]*)\](.*?)\[\/bookmark\]/ism", '[$2]($1)', $Text);
 185
 186         $Text = preg_replace("/\[url\]([$URLSearchString]*)\[\/url\]/ism", '[$1]($1)', $Text);
 187         $Text = preg_replace("/\#\[url\=([$URLSearchString]*)\](.*?)\[\/url\]/ism", '[#$2]($1)', $Text);
 188         $Text = preg_replace("/\[url\=([$URLSearchString]*)\](.*?)\[\/url\]/ism", '[$2]($1)', $Text);
 189
 190
 191         $Text = preg_replace("/\[img\](.*?)\[\/img\]/", '![' . t('image/photo') . '](' . '$1' . ')', $Text);
 192         $Text = preg_replace("/\[img\=(.*?)\](.*?)\[\/img\]/", '![' . t('image/photo') . '](' . '$2' . ')', $Text);
 193
 194         // Perform MAIL Search
 195         $Text = preg_replace("(\[mail\]([$MAILSearchString]*)\[/mail\])", '[$1](mailto:$1)', $Text);
 196         $Text = preg_replace("/\[mail\=([$MAILSearchString]*)\](.*?)\[\/mail\]/", '[$2](mailto:$1)', $Text);
 197
 198         $Text = str_replace('*', '\\*', $Text);
 199         $Text = str_replace('_', '\\_', $Text);
 200
 201         $Text = str_replace('`','\\`', $Text);
 202
 203         // Check for bold text
 204         $Text = preg_replace("(\[b\](.*?)\[\/b\])is",'**$1**',$Text);
 205
 206         // Check for italics text
 207         $Text = preg_replace("(\[i\](.*?)\[\/i\])is",'_$1_',$Text);
 208
 209         // Check for underline text
 210         // Replace with italics since Diaspora doesn't have underline
 211         $Text = preg_replace("(\[u\](.*?)\[\/u\])is",'_$1_',$Text);
 212
 213         // Check for strike-through text
 214         $Text = preg_replace("(\[s\](.*?)\[\/s\])is",'**[strike]**$1**[/strike]**',$Text);
 215
 216         // Check for over-line text
 217 //      $Text = preg_replace("(\[o\](.*?)\[\/o\])is",'<span class="overline">$1</span>',$Text);
 218
 219         // Check for colored text
 220         // Remove color since Diaspora doesn't support it
 221         $Text = preg_replace("(\[color=(.*?)\](.*?)\[\/color\])is","$2",$Text);
 222
 223         // Check for sized text
 224         // Remove it since Diaspora doesn't support sizes very well
 225         $Text = preg_replace("(\[size=(.*?)\](.*?)\[\/size\])is","$2",$Text);
 226
 227         // Check for list text
 228         $Text = preg_replace_callback("/\[list\](.*?)\[\/list\]/is", 'diaspora_ul', $Text);
 229         $Text = preg_replace_callback("/\[ul\](.*?)\[\/ul\]/is", 'diaspora_ul', $Text);
 230         $Text = preg_replace_callback("/\[list=1\](.*?)\[\/list\]/is", 'diaspora_ol', $Text);
 231         $Text = preg_replace_callback("/\[list=i\](.*?)\[\/list\]/s",'diaspora_ol', $Text);
 232         $Text = preg_replace_callback("/\[list=I\](.*?)\[\/list\]/s", 'diaspora_ol', $Text);
 233         $Text = preg_replace_callback("/\[list=a\](.*?)\[\/list\]/s", 'diaspora_ol', $Text);
 234         $Text = preg_replace_callback("/\[list=A\](.*?)\[\/list\]/s", 'diaspora_ol', $Text);
 235         $Text = preg_replace_callback("/\[ol\](.*?)\[\/ol\]/is", 'diaspora_ol', $Text);
 236 //      $Text = preg_replace("/\[li\](.*?)\[\/li\]/s", '<li>$1</li>' ,$Text);
 237
 238         // Just get rid of table tags since Diaspora doesn't support tables
 239         $Text = preg_replace("/\[th\](.*?)\[\/th\]/s", '$1' ,$Text);
 240         $Text = preg_replace("/\[td\](.*?)\[\/td\]/s", '$1' ,$Text);
 241         $Text = preg_replace("/\[tr\](.*?)\[\/tr\]/s", '$1' ,$Text);
 242         $Text = preg_replace("/\[table\](.*?)\[\/table\]/s", '$1' ,$Text);
 243
 244         $Text = preg_replace("/\[table border=(.*?)\](.*?)\[\/table\]/s", '$2' ,$Text);
 245 //      $Text = preg_replace("/\[table border=0\](.*?)\[\/table\]/s", '<table border="0" >$1</table>' ,$Text);
 246
 247
 248 //      $Text = str_replace("[*]", "<li>", $Text);
 249
 250         // Check for font change text
 251 //      $Text = preg_replace("(\[font=(.*?)\](.*?)\[\/font\])","<span style=\"font-family: $1;\">$2</span>",$Text);
 252
 253
 254         $Text = preg_replace_callback("/\[code\](.*?)\[\/code\]/is",'stripdcode_br_cb',$Text);
 255
 256         // Check for [code] text
 257         $Text = preg_replace("/(\[code\])+(.*?)(\[\/code\])+/is","\t$2\n", $Text);
 258
 259
 260
 261
 262         // Declare the format for [quote] layout
 263         //      $QuoteLayout = '<blockquote>$1</blockquote>';
 264         // Check for [quote] text
 265         $Text = preg_replace("/\[quote\](.*?)\[\/quote\]/is",">$1\n\n", $Text);
 266         $Text = preg_replace("/\[quote=(.*?)\](.*?)\[\/quote\]/is",">$2\n\n", $Text);
 267
 268         // Images
 269
 270         // html5 video and audio
 271
 272         $Text = preg_replace("/\[video\](.*?)\[\/video\]/", '$1', $Text);
 273
 274         $Text = preg_replace("/\[audio\](.*?)\[\/audio\]/", '$1', $Text);
 275
 276 //      $Text = preg_replace("/\[iframe\](.*?)\[\/iframe\]/", '<iframe src="$1" width="425" height="350"><a href="$1">$1</a></iframe>', $Text);
 277
 278         // [img=widthxheight]image source[/img]
 279 //      $Text = preg_replace("/\[img\=([0-9]*)x([0-9]*)\](.*?)\[\/img\]/", '<img src="$3" style="height:{$2}px; width:{$1}px;" >', $Text);
 280
 281         $Text = preg_replace("/\[youtube\]https?:\/\/www.youtube.com\/watch\?v\=(.*?)\[\/youtube\]/ism",'http://www.youtube.com/watch?v=$1',$Text);
 282         $Text = preg_replace("/\[youtube\]https?:\/\/www.youtube.com\/embed\/(.*?)\[\/youtube\]/ism",'http://www.youtube.com/watch?v=$1',$Text);
 283         $Text = preg_replace("/\[youtube\]https?:\/\/youtu.be\/(.*?)\[\/youtube\]/ism",'http://www.youtube.com/watch?v=$1',$Text);
 284         $Text = preg_replace("/\[youtube\]([A-Za-z0-9\-_=]+)(.*?)\[\/youtube\]/ism", 'http://www.youtube.com/watch?v=$1', $Text);
 285
 286         $Text = preg_replace("/\[vimeo\]https?:\/\/player.vimeo.com\/video\/([0-9]+)(.*?)\[\/vimeo\]/ism",'http://vimeo.com/$1',$Text);
 287         $Text = preg_replace("/\[vimeo\]https?:\/\/vimeo.com\/([0-9]+)(.*?)\[\/vimeo\]/ism",'http://vimeo.com/$1',$Text);
 288         $Text = preg_replace("/\[vimeo\]([0-9]+)(.*?)\[\/vimeo\]/ism", 'http://vimeo.com/$1',$Text);
 289
 290
 291         $Text = str_replace('[nosmile]','',$Text);
 292
 293         // oembed tag
 294         //      $Text = oembed_bbcode2html($Text);
 295
 296         // If we found an event earlier, strip out all the event code and replace with a reformatted version.
 297
 298         if(x($ev,'desc') && x($ev,'start')) {
 299
 300                 $sub = format_event_diaspora($ev);
 301
 302                 $Text = preg_replace("/\[event\-description\](.*?)\[\/event\-description\]/is",$sub,$Text);
 303                 $Text = preg_replace("/\[event\-start\](.*?)\[\/event\-start\]/is",'',$Text);
 304                 $Text = preg_replace("/\[event\-finish\](.*?)\[\/event\-finish\]/is",'',$Text);
 305                 $Text = preg_replace("/\[event\-location\](.*?)\[\/event\-location\]/is",'',$Text);
 306                 $Text = preg_replace("/\[event\-adjust\](.*?)\[\/event\-adjust\]/is",'',$Text);
 307         }
 308
 309         $Text = preg_replace("/\<(.*?)(src|href)=(.*?)\&amp\;(.*?)\>/ism",'<$1$2=$3&$4>',$Text);
 310
 311         $Text = preg_replace_callback('/\[(.*?)\]\((.*?)\)/ism','unescape_underscores_in_links',$Text);
 312 */
 313
 314         // Remove any leading or trailing whitespace, as this will mess up
 315         // the Diaspora signature verification and cause the item to disappear
 316         $Text = trim($Text);
 317
 318         call_hooks('bb2diaspora',$Text);
 319
 320         return $Text;
 321 }
 322
 323 function unescape_underscores_in_links($m) {
 324         $y = str_replace('\\_','_', $m[2]);
 325         return('[' . $m[1] . '](' . $y . ')');
 326 }
 327
 328 function format_event_diaspora($ev) {
 329
 330         $a = get_app();
 331
 332         if(! ((is_array($ev)) && count($ev)))
 333                 return '';
 334
 335         $bd_format = t('l F d, Y \@ g:i A') ; // Friday January 18, 2011 @ 8 AM
 336
 337         $o = 'Friendica event notification:' . "\n";
 338
 339         $o .= '**' . bb2diaspora($ev['desc']) .  '**' . "\n";
 340
 341         $o .= t('Starts:') . ' ' . '['
 342                 . (($ev['adjust']) ? day_translate(datetime_convert('UTC', 'UTC',
 343                         $ev['start'] , $bd_format ))
 344                         :  day_translate(datetime_convert('UTC', 'UTC',
 345                         $ev['start'] , $bd_format)))
 346                 .  '](' . $a->get_baseurl() . '/localtime/?f=&time=' . urlencode(datetime_convert('UTC','UTC',$ev['start'])) . ")\n";
 347
 348         if(! $ev['nofinish'])
 349                 $o .= t('Finishes:') . ' ' . '['
 350                         . (($ev['adjust']) ? day_translate(datetime_convert('UTC', 'UTC',
 351                                 $ev['finish'] , $bd_format ))
 352                                 :  day_translate(datetime_convert('UTC', 'UTC',
 353                                 $ev['finish'] , $bd_format )))
 354                         . '](' . $a->get_baseurl() . '/localtime/?f=&time=' . urlencode(datetime_convert('UTC','UTC',$ev['finish'])) . ")\n";
 355
 356         if(strlen($ev['location']))
 357                 $o .= t('Location:') . bb2diaspora($ev['location'])
 358                         . "\n";
 359
 360         $o .= "\n";
 361         return $o;
 362 }