]> git.mxchange.org Git - friendica-addons.git/blobdiff - langfilter/langfilter.php
Merge pull request #1187 from tobiasd/20211010-regenlng
[friendica-addons.git] / langfilter / langfilter.php
index 5df153eb978a1ce26bf99f8eeb90670231e44969..aeb53eebde126892f39a99deca64d2ea7905bade 100644 (file)
@@ -8,9 +8,10 @@
  */
 
 use Friendica\App;
-use Friendica\Core\Addon;
-use Friendica\Core\L10n;
-use Friendica\Core\PConfig;
+use Friendica\Content\Text\BBCode;
+use Friendica\Core\Hook;
+use Friendica\Core\Renderer;
+use Friendica\DI;
 
 /* Define the hooks we want to use
  * that is, we have settings, we need to save the settings and we want
@@ -19,16 +20,9 @@ use Friendica\Core\PConfig;
 
 function langfilter_install()
 {
-       Addon::registerHook('prepare_body', 'addon/langfilter/langfilter.php', 'langfilter_prepare_body', 10);
-       Addon::registerHook('addon_settings', 'addon/langfilter/langfilter.php', 'langfilter_addon_settings');
-       Addon::registerHook('addon_settings_post', 'addon/langfilter/langfilter.php', 'langfilter_addon_settings_post');
-}
-
-function langfilter_uninstall()
-{
-       Addon::unregisterHook('prepare_body', 'addon/langfilter/langfilter.php', 'langfilter_prepare_body');
-       Addon::unregisterHook('addon_settings', 'addon/langfilter/langfilter.php', 'langfilter_addon_settings');
-       Addon::unregisterHook('addon_settings_post', 'addon/langfilter/langfilter.php', 'langfilter_addon_settings_post');
+       Hook::register('prepare_body_content_filter', 'addon/langfilter/langfilter.php', 'langfilter_prepare_body_content_filter', 10);
+       Hook::register('addon_settings', 'addon/langfilter/langfilter.php', 'langfilter_addon_settings');
+       Hook::register('addon_settings_post', 'addon/langfilter/langfilter.php', 'langfilter_addon_settings_post');
 }
 
 /* The settings
@@ -36,65 +30,63 @@ function langfilter_uninstall()
  * 2nd get the current settings
  * 3rd parse a SMARTY3 template, replacing some translateable strings for the form
  */
-function langfilter_addon_settings(&$a,&$s) {
-       if(! local_user())
+
+function langfilter_addon_settings(App $a, &$s)
+{
+       if (!local_user()) {
                return;
+       }
 
-       $enable_checked = (intval(get_pconfig(local_user(),'langfilter','disable')) ? '' : ' checked="checked" ');
-       $languages = get_pconfig(local_user(),'langfilter','languages');
-       $minconfidence = get_pconfig(local_user(),'langfilter','minconfidence')*100;
-       $minlength = get_pconfig(local_user(),'langfilter','minlength');
-       if(! $languages)
-               $languages = 'en,de,fr,it,es';
-
-       $t = get_markup_template("settings.tpl", "addon/langfilter/");
-       $s .= replace_macros($t, [
-               '$title'         => L10n::t("Language Filter"),
-               '$intro'         => L10n::t('This addon tries to identify the language of a postings. If it does not match any language spoken by you (see below) the posting will be collapsed. Remember detecting the language is not perfect, especially with short postings.'),
-               '$enabled'       => ['langfilter_enable', L10n::t('Use the language filter'), $enable_checked, ''],
-               '$languages'     => ['langfilter_languages', L10n::t('I speak'), $languages, L10n::t('List of abbreviations (iso2 codes) for languages you speak, comma separated. For example "de,it".')],
-               '$minconfidence' => ['langfilter_minconfidence', L10n::t('Minimum confidence in language detection'), $minconfidence, L10n::t('Minimum confidence in language detection being correct, from 0 to 100. Posts will not be filtered when the confidence of language detection is below this percent value.')],
-               '$minlength'     => ['langfilter_minlength', L10n::t('Minimum length of message body'), $minlength, L10n::t('Minimum length of message body for language filter to be used. Posts shorter than this number of characters will not be filtered.')],
-               '$submit'        => L10n::t('Save Settings'),
+       $enabled = DI::pConfig()->get(local_user(), 'langfilter', 'enable',
+               !DI::pConfig()->get(local_user(), 'langfilter', 'disable'));
+
+       $enable_checked = $enabled ? ' checked="checked"' : '';
+       $languages      = DI::pConfig()->get(local_user(), 'langfilter', 'languages');
+       $minconfidence  = DI::pConfig()->get(local_user(), 'langfilter', 'minconfidence', 0) * 100;
+       $minlength      = DI::pConfig()->get(local_user(), 'langfilter', 'minlength'    , 32);
+
+       $t = Renderer::getMarkupTemplate("settings.tpl", "addon/langfilter/");
+       $s .= Renderer::replaceMacros($t, [
+               '$title'         => DI::l10n()->t("Language Filter"),
+               '$intro'         => DI::l10n()->t('This addon tries to identify the language posts are written in. If it does not match any language specified below, posts will be hidden by collapsing them.'),
+               '$enabled'       => ['langfilter_enable', DI::l10n()->t('Use the language filter'), $enable_checked, ''],
+               '$languages'     => ['langfilter_languages', DI::l10n()->t('Able to read'), $languages, DI::l10n()->t('List of abbreviations (ISO 639-1 codes) for languages you speak, comma separated. For example "de,it".')],
+               '$minconfidence' => ['langfilter_minconfidence', DI::l10n()->t('Minimum confidence in language detection'), $minconfidence, DI::l10n()->t('Minimum confidence in language detection being correct, from 0 to 100. Posts will not be filtered when the confidence of language detection is below this percent value.')],
+               '$minlength'     => ['langfilter_minlength', DI::l10n()->t('Minimum length of message body'), $minlength, DI::l10n()->t('Minimum number of characters in message body for filter to be used. Posts shorter than this will not be filtered. Note: Language detection is unreliable for short content (<200 characters).')],
+               '$submit'        => DI::l10n()->t('Save Settings'),
        ]);
 
        return;
 }
+
 /* Save the settings
  * 1st check it's a logged in user calling
  * 2nd check the langfilter form is to be saved
  * 3rd save the settings to the DB for later usage
  */
-function langfilter_addon_settings_post(&$a,&$b) {
-       if(! local_user())
-               return;
 
-       if ($_POST['langfilter-settings-submit']) {
-               PConfig::set(local_user(), 'langfilter', 'languages', trim($_POST['langfilter_languages']));
-               $enable = ((x($_POST, 'langfilter_enable')) ? intval($_POST['langfilter_enable']) : 0);
-               $disable = 1 - $enable;
-               PConfig::set(local_user(), 'langfilter', 'disable', $disable);
-               $minconfidence = 0 + $_POST['langfilter_minconfidence'];
-               if (!$minconfidence) {
-                       $minconfidence = 0;
-               } elseif ($minconfidence < 0) {
-                       $minconfidence = 0;
-               } elseif ($minconfidence > 100) {
-                       $minconfidence = 100;
-               }
-               PConfig::set(local_user(), 'langfilter', 'minconfidence', $minconfidence / 100.0);
+function langfilter_addon_settings_post(App $a, &$b)
+{
+       if (!local_user()) {
+               return;
+       }
 
-               $minlength = 0 + $_POST['langfilter_minlength'];
-               if (!$minlength) {
-                       $minlength = 32;
-               } elseif ($minlengt8h < 0) {
+       if (!empty($_POST['langfilter-settings-submit'])) {
+               $enable        = intval($_POST['langfilter_enable'] ?? 0);
+               $languages     = trim($_POST['langfilter_languages'] ?? '');
+               $minconfidence = max(0, min(100, intval($_POST['langfilter_minconfidence'] ?? 0))) / 100;
+               $minlength     = intval($_POST['langfilter_minlength'] ?? 32);
+               if ($minlength <= 0) {
                        $minlength = 32;
                }
-               PConfig::set(local_user(), 'langfilter', 'minlength', $minlength);
 
-               info(L10n::t('Language Filter Settings saved.') . EOL);
+               DI::pConfig()->set(local_user(), 'langfilter', 'enable'       , $enable);
+               DI::pConfig()->set(local_user(), 'langfilter', 'languages'    , $languages);
+               DI::pConfig()->set(local_user(), 'langfilter', 'minconfidence', $minconfidence);
+               DI::pConfig()->set(local_user(), 'langfilter', 'minlength'    , $minlength);
        }
 }
+
 /* Actually filter postings by their language
  * 1st check if the user wants to filter postings
  * 2nd get the user settings which languages shall be not filtered out
@@ -103,51 +95,99 @@ function langfilter_addon_settings_post(&$a,&$b) {
  *     of the user, then collapse the posting, but provide a link to
  *     expand it again.
  */
-function langfilter_prepare_body(&$a,&$b) {
 
-    $logged_user = local_user();
-    if ( ! $logged_user ) return;
+function langfilter_prepare_body_content_filter(App $a, &$hook_data)
+{
+       $logged_user = local_user();
+       if (!$logged_user) {
+               return;
+       }
+
+       // Never filter own messages
+       // TODO: find a better way to extract this
+       $logged_user_profile = DI::baseUrl()->get() . '/profile/' . $a->getLoggedInUserNickname();
+       if ($logged_user_profile == $hook_data['item']['author-link']) {
+               return;
+       }
+
+       // Don't filter if language filter is disabled
+       if (!DI::pConfig()->get($logged_user, 'langfilter', 'enable',
+               !DI::pConfig()->get($logged_user, 'langfilter', 'disable'))
+       ) {
+               return;
+       }
+
+       if (!empty($hook_data['item']['rendered-html'])) {
+               $naked_body = strip_tags($hook_data['item']['rendered-html']);
+       } else {
+               $naked_body = BBCode::toPlaintext($hook_data['item']['body'], false);
+       }
+
+       // Don't filter if body lenght is below minimum
+       $minlen = DI::pConfig()->get(local_user(), 'langfilter', 'minlength', 32);
+       if (!$minlen) {
+               $minlen = 32;
+       }
+
+       if (strlen($naked_body) < $minlen) {
+               return;
+       }
+
+       $read_languages_string = DI::pConfig()->get(local_user(), 'langfilter', 'languages');
+       $minconfidence = DI::pConfig()->get(local_user(), 'langfilter', 'minconfidence');
+
+       // Don't filter if no spoken languages are configured
+       if (!$read_languages_string) {
+               return;
+       }
+       $read_languages_array = explode(',', $read_languages_string);
 
-    # Never filter own messages
-    # TODO: find a better way to extract this
-    $logged_user_profile = $a->config['system']['url'] . '/profile/' . $a->user['nickname'];
-    if ( $logged_user_profile == $b['item']['author-link'] ) return;
+       $iso639 = new Matriphe\ISO639\ISO639;
 
-    # Don't filter if language filter is disabled
-    if( get_pconfig($logged_user,'langfilter','disable') ) return;
+       // Extract the language of the post
+       if (!empty($hook_data['item']['language'])) {
+               $languages = json_decode($hook_data['item']['language'], true);
+               if (!is_array($languages)) {
+                       return;
+               }
 
-    # Don't filter if body lenght is below minimum
-    $minlen = get_pconfig(local_user(),'langfilter','minlength');
-    if ( ! $minlen ) $minlen = 32;
-    if ( strlen($b['item']['body']) < $minlen ) return;
+               foreach ($languages as $iso2 => $confidence) {
+                       break;
+               }
 
-    $spoken_config = get_pconfig(local_user(),'langfilter','languages');
-    $minconfidence = get_pconfig(local_user(),'langfilter','minconfidence');
+               if (empty($iso2)) {
+                       return;
+               }
 
-    # Don't filter if no spoken languages are configured 
-    if ( ! $spoken_config ) return;
-    $spoken_languages = explode(',', $spoken_config);
+               $lang = $iso639->languageByCode1($iso2);
+       } else {
+               $opts = $hook_data['item']['postopts'];
+               if (!$opts) {
+                       // no options associated to post
+                       return;
+               }
 
-    # Extract the language of the post
-    $opts = $b['item']['postopts'];
-    if ( ! $opts ) return; # no options associated to post
-    if ( ! preg_match('/\blang=([^;]*);([^:]*)/', $opts, $matches ) )
-            return; # no lang options associated to post
+               if (!preg_match('/\blang=([^;]*);([^:]*)/', $opts, $matches)) {
+                       // no lang options associated to post
+                       return;
+               }
 
-    $lang = $matches[1];
-    $confidence = $matches[2];
+               $lang = $matches[1];
+               $confidence = $matches[2];
 
-    # Do not filter if language detection confidence is too low
-    if ( $minconfidence && $confidence < $minconfidence ) return;
+               $iso2 = $iso639->code1ByLanguage($lang);
+       }
 
-    $iso2 = Text_LanguageDetect_ISO639::nameToCode2($lang);
+       // Do not filter if language detection confidence is too low
+       if ($minconfidence && $confidence < $minconfidence) {
+               return;
+       }
 
-    if ( ! $iso2 ) return;
-    $spoken = in_array($iso2, $spoken_languages);
+       if (!$iso2) {
+               return;
+       }
 
-       if (!$spoken) {
-               $rnd = random_string(8);
-               $b['html'] = '<div id="langfilter-wrap-' . $rnd . '" class="fakelink" onclick=openClose(\'langfilter-' . $rnd . '\'); >' . L10n::t('unspoken language %s - Click to open/close', $lang) . '</div><div id="langfilter-' . $rnd . '" style="display: none; " >' . $b['html'] . '</div>';
+       if (!in_array($iso2, $read_languages_array)) {
+               $hook_data['filter_reasons'][] = DI::l10n()->t('Filtered language: %s', ucfirst($lang));
        }
 }
-?>