fba/helpers/blacklist.py

   1 # Fedi API Block - An aggregator for fetching blocking data from fediverse nodes
   2 # Copyright (C) 2023 Free Software Foundation
   3 #
   4 # This program is free software: you can redistribute it and/or modify
   5 # it under the terms of the GNU Affero General Public License as published
   6 # by the Free Software Foundation, either version 3 of the License, or
   7 # (at your option) any later version.
   8 #
   9 # This program is distributed in the hope that it will be useful,
  10 # but WITHOUT ANY WARRANTY; without even the implied warranty of
  11 # MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
  12 # GNU Affero General Public License for more details.
  13 #
  14 # You should have received a copy of the GNU Affero General Public License
  15 # along with this program.  If not, see <https://www.gnu.org/licenses/>.
  16
  17 import logging
  18
  19 from fba.helpers import domain as domain_helper
  20
  21 logging.basicConfig(level=logging.INFO)
  22 logger = logging.getLogger(__name__)
  23 #logger.setLevel(logging.DEBUG)
  24
  25 # Don't check these, known trolls/flooders/testing/developing
  26 _blacklist = {
  27     "activitypub-troll.cf": "Floods federation with fake nodes as \"research\" project",
  28     "activitypub-proxy.cf": "Floods federation with fake nodes as \"research\" project",
  29     "misskey-forkbomb.cf" : "Floods federation tables with fake nodes",
  30     "gab.best"            : "Floods federation tables with fake nodes",
  31     "4chan.icu"           : "Floods federation tables with fake nodes",
  32     "social.shrimpcam.pw" : "Floods federation tables with fake nodes",
  33     "mastotroll.netz.org" : "Floods federation tables with fake nodes",
  34     "lhr.life"            : "Floods federation tables with fake nodes",
  35     "localhost.run"       : "Floods federation tables with fake nodes",
  36     "loca.lt"             : "Floods federation tables with fake nodes",
  37     "grid.tf"             : "Floods federation tables with fake nodes",
  38     "gitpod.io"           : "Floods federation tables with fake nodes",
  39     "everyoneattack.com"  : "Floods federation tables with fake nodes",
  40     "vercel.app"          : "Floods federation tables with fake nodes",
  41     "run.app"             : "Floods federation tables with fake nodes",
  42     "sutty.nl"            : "Floods federation tables with fake nodes",
  43     "mdrqnxtagon.pw"      : "Floods federation tables with fake nodes",
  44     "denden.world"        : "Looks like a valid Mastodon instance, but return exactly (!) 5k instances with trash domains",
  45     "fnaf.stream"         : "Trolls with over-long sub-domain name(s)",
  46     "ngrok.io"            : "Testing/developing instances shouldn't be part of public instances",
  47     "ngrok.app"           : "Testing/developing instances shouldn't be part of public instances",
  48     "ngrok-free.app"      : "Testing/developing instances shouldn't be part of public instances",
  49     "misskeytest.chn.moe" : "Testing/developing instances shouldn't be part of public instances",
  50     "netlify.app"         : "Testing/developing instances shouldn't be part of public instances",
  51     "ignorelist.com"      : "Testing/developing instances shouldn't be part of public instances",
  52     "app.github.dev"      : "Testing/developing instances shouldn't be part of public instances",
  53     "tunnel.silicon.moe"  : "Testing/developing instances shouldn't be part of public instances",
  54     "hexbear.net"         : "Is a Lemmy instance with malicious JavaScript code (shell commands)",
  55     "mastodon.n41.lat"    : "Somehow this instance repeatedly causes an OOM here",
  56     "fb.me"               : "Facebook websites are never Fediverse instances",
  57     "osl.academy"         : "Parked domain, no fediverse instance",
  58     "icolectiva.org"      : "Parked domain, no fediverse instance",
  59     "blombus.com"         : "Parked domain, no fediverse instance",
  60     "eliotberriot.com"    : "Parked domain, no fediverse instance",
  61     "fsam.one"            : "Parked domain, no fediverse instance",
  62     "doot.tv"             : "Parked domain, no fediverse instance",
  63     "snet.blog"           : "Parked domain, no fediverse instance",
  64     "horserock.xyz"       : "Parked domain, no fediverse instance",
  65     "free-pic.org"        : "Parked domain, no fediverse instance",
  66     "co-mastdn.ga"        : "Parked domain, no fediverse instance",
  67     "chocoflan.net"       : "Parked domain, no fediverse instance",
  68     "singleuser.club"     : "Parked domain, no fediverse instance",
  69     "qwest.net"           : "Dynamic IP address hosts should not be used for fediverse instances",
  70 }
  71
  72 def is_blacklisted(domain: str) -> bool:
  73     logger.debug("domain='%s' - CALLED!", domain)
  74     domain_helper.raise_on(domain)
  75
  76     blacklisted = False
  77     logger.debug("Checking %d blacklist entries ...", len(_blacklist))
  78     for blocked in _blacklist:
  79         logger.debug("Checking blocked='%s' ...", blocked)
  80         if blocked in domain:
  81             logger.debug("domain='%s' is blacklisted.", domain)
  82             blacklisted = True
  83             break
  84
  85     logger.debug("blacklisted='%s' - EXIT!", blacklisted)
  86     return blacklisted
  87
  88 def get_all() -> dict:
  89     logger.debug("_blacklist()=%d - CALLED!", len(_blacklist))
  90     return _blacklist