Continued:
- reduced duplicated code into a local variable 'response_url'
- need to recheck validity of 'response_url'

Continued:
- logged types (string or 'None' type)

Continued:
- handled ParserRejectedMarkup properly

Continued:
- added alias 'nexkey' for 'misskey'

Continued:
- added 'piefed' as possible source for block lists, still the network lacks
  API for instance list retrival

Continued:
- that Wiki page was listing "evil instances" and now explains the view of the
  owner of what FediBlock is

Continued:
- added 'hugo' as a source for more peers (only one so far)

Continued:
- added new aliases for pleroma
- moved pleroma aliases to "private" module variable

Continued:
- added aliases for misskey, mastodon and pleroma (each one)
- moved mastodon aliases to module ("private") variable, please don't access it
  outside the module!

Continued:
- fixed SQL string
- partly reverted because simple code like 'tuple(row)' doesn't work

Continued:
- need to convert type Row to a true tuple

Continued:
- row[] does already contain named keys, e.g. 'total_websites' so let's alias
  the COUNT() statement to such key name which reduces some code
- renamed 'blocks_recorded' to 'total_blocks'

Continued:
- renamed known_instances to total_websites because this is more clear
- you cannot distinguish between a regular website and a former Fediverse
  instance (e.g. before: Mastodon was installed, now IBM Connections)

Continued:
- check 'json' key

Continued:
- added missing key 'json' (ops!)

Continued:
- added 7988276.xyz as a testing/development hoster

Continued:
- added another alias "hijikey" for "misskey"

Continued:
- moved --same from nodeinfo.sh to command update_nodeinfo()

Continued:
- also log parameter 'column'
- blocks.add() should not be invoked with 'blocker' is already blocking
  'blocked' at 'block_level'

Continued:
- added another gardenfence blocklist for bootstrapping FBA
- just run ./fba.py fetch_txt and you can build up an initial list of peers

Continued:
- more pre-checks to avoid exceptions
- don't abuse catching them here as a control statement (if)

Continued:
- added network type 'vebinet' (Mozilla's Fediverse software) for peer retrival
- domain blocks aren't supported (yet)

Continued:
- first simple variable checks
- next "lighter" functions being invoked
- last "heavy" function, which means possible database queries

Continued:
- added some more plain-text block lists (thanks to @Kromonos)

Continued:
- check parameters first, then "expensive" function invocation's returned value
- command fetch_instances should always fetch instances from a provided domain
  name
- only when --software=bar is used and no --force parameter was given

Continued:
- make --domain parameter for command fetch_instances optional so --software
  can be handled, too
- skip recently crawled domains in same loop
- args.<domain|software> can be both of type None, too

Continued:
- github isn't any fediverse instance
- https://github.io redirects to a bad URL

Continued:
- it was imported from previous code and seem not to work everywhere
- so let's remove the non-working part

Continued:
- added alias 'rosekey' for 'misskey'
- also 'smithereen' is a federating (at least peer list is provided) software

Continued:
- maybe there is no unsorted list or table at all

Continued:
- 'continue' if an exception is thrown because that instance can be "ignored"

Continued:
- handled unregistered instances

Continued/WIP:
- in commands.fetch_instances() added initialization of variables 'rows'
- also moved fetching rows into if() block
- commented some more code

Continued:
- added alias "kmyblue" for mastodon

WIP:
- rewritten fetch_instances towars allowing also --software=foo as an
  alternative parameter

Continued:
- changed string "true/false" to boolean
- please update your configuration file (all occurances!)

Continued:
- need to negate this state: only skip/reject .i2p domains when they are not
  allowed by configuration (which is default)

Continued:
- moved utils.fetch_url() to module network as this is network-related
- added some debug lines

Continued:
- need to remove prefix "re:" before cleaning up software, else all software is called "re"
- added alias "lovers" for "misskey"

Continued:
- added alias "miraiskey" for "misskey"
- moved all those aliases to "private" variable _misskey_aliases

Continued:
- fediverse.observer has changed their API to Graph (JSON POST)
- domain singleuser.club blacklisted, this domain started flooding with
  sub-domains which have wwXX as another sub-domain

Continued:
- need to cut off everything after hash symbol because that is for JavaScript
  click-event loaded content anyway
- prevented a few empty/None strings for invoking tidyup.domain()
- improved a few log messages

Continued:
- don't allow empty peer list in federation.add_peers()

Continued:
- added missing 'continue'
- added some debug messages
- skip empty/NoneType domain names

Continued:
- maybe error[json][error] is not a dict

Continued:
- added "error_message" JSON error message

Continued:
- also check blacklist first, before invoking instances.is_recent()

Continued:
- also check blacklist in instances.is_recent() function
- first check against blacklist, then if it is recent (in commands.py)

Continued:
- added alias 'goblin' for 'misskey'
- added debug line

Continued:
- Python still needs a backslash here

Continued:
- check validity of href URL before parsing it (controlled skip instead of
  uncontrolled raised exception)

Continued:
- reformatted

Continued:
- some relays may have removed/never set nodeinfo URL, these need to be skipped
  to avoid exception in fetch_url() function

Continued:
- command 'fetch_txt' supports now --force parameter
- check against blacklist (wasn't in is_registered())
- some debug messages added

Continued:
- formatted SQL statements

Continued:
- forgot to vacuum-clean it

Continued:
- simplified code, no need for this extra indenting

Continued:
- combined None and "" (empty string) for lesser code
- added/improved debug messages
- got rid of one local variable, added another one ;-)

Continued:
- improved logger messages

Continued:
- logged domain name
- better check variable software against None and empty string

Continued:
- initially set original_software, maybe it needs fixing later

Continued:
- need to catch any network-related exceptions to reduce _DEPTH counter

Continued:
- moved original_software next to 'software' column
- replaced own _cache dict with @lru_cache

Continued:
- check if domain is valid before checking if it is blacklisted, else an
  exception will raise

Continued:
- check all URLs against validator

Continued:
- also search for instances with detected software

Continued:
- more checks against blacklist

Continued:
- ops, column and title confused

Continued:
- added list/scoreboard mode for column 'original_software'

Continued:
- added column original_software, it contains the original software name, but
  without any version number or " powered by " in it

Continued:
- more checks against blacklist

Continued:
- added another alias 'lycheebridge' for 'misskey'

Continued:
- added alias 'catodon' for 'misskey'

Continued:
- check blacklist and skip below code
- also handle "error" (int) and "msg" (string) JSON response

Continued:
- check row[software] if not None, then if it is a relay

Continued:
- software.is_relay() doesn't allow None/empty strings, let's handle them, too

Continued:
- daemon.py is already executable

Continued:
- skip blacklisted domains (aka. instances)

Continued:
- `foo is None or foo == ""` can be simplified to `foo in [None, ""]`
- added more blacklist check
- improved/added some debug messages

Continued:
- fixed copy-paste mistakes in debug messages

Continued:
- ops, one parameter 'key' to much ...

Continued:
- check domain more again blacklist to avoid bad function invocations
- improved some debug logging messages

Continued:
- also log 'path' here

Continued:
- nodeinfo_url is not always a path only, better don't handle it over
- check if parameter 'path' starts with a slash if not 'None'

Continued:
- should be always aliased ;-)

Continued:
- renamed $DOMAINS to $DOMAIN_LIST (Bash script)
- need to exclude None as possible value for parameter 'path'
- added another parked domain

Blacklist updated:
- added mass sub-domain flooder
- added fb.me (Facebook websites)

Continued:
- these parked domains are the pest of the Internet :-( They just don't contain
  any real content and flood crawl indexes and tables such as 'instances' in
  this software

Continued:
- Parameter 'path' need to start with a slash
- checked more against blacklist
- logger message after API returned JSON made similar

Continued:
- cached function software.alias()
- moved cached initialization to file header

Continued:
- also cache invocations of raise_on() which is being very often invoked

Continued:
- first check parameter (better performance)
- cache is_wanted() and is_in_url() invocations

Continued:
- blocked more parked domains

Continued:
- parked domains blocked

Continued:
- also skip empty 'href' values
- include 'infos' array, too

Continued:
- rewrote so all parameters for command fetch_blocks() can have parameter --force
- added parameter --only-none

Continued:
- added 'sutty.nl' for flooding fediverse with useless "instances"
- it is a mass website hoster

Continued:
- improved/added debug lines

Continued:
- added another array dimension where an error message might be set

Continued:
- check config key against "true"
- improved logger messages
- added some