fba/networks/friendica.py

   1 # Fedi API Block - An aggregator for fetching blocking data from fediverse nodes
   2 # Copyright (C) 2023 Free Software Foundation
   3 #
   4 # This program is free software: you can redistribute it and/or modify
   5 # it under the terms of the GNU Affero General Public License as published
   6 # by the Free Software Foundation, either version 3 of the License, or
   7 # (at your option) any later version.
   8 #
   9 # This program is distributed in the hope that it will be useful,
  10 # but WITHOUT ANY WARRANTY; without even the implied warranty of
  11 # MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
  12 # GNU Affero General Public License for more details.
  13 #
  14 # You should have received a copy of the GNU Affero General Public License
  15 # along with this program.  If not, see <https://www.gnu.org/licenses/>.
  16
  17 import bs4
  18
  19 from fba import config
  20 from fba import network
  21
  22 from fba.helpers import tidyup
  23
  24 def fetch_blocks(domain: str) -> dict:
  25     # DEBUG: print(f"DEBUG: domain='{domain}' - CALLED!")
  26     if not isinstance(domain, str):
  27         raise ValueError(f"Parameter domain[]='{type(domain)}' is not 'str'")
  28     elif domain == "":
  29         raise ValueError("Parameter 'domain' is empty")
  30
  31     # DEBUG: print("DEBUG: Fetching friendica blocks from domain:", domain)
  32     blocked = list()
  33
  34     doc = bs4.BeautifulSoup(
  35         network.fetch_response(
  36             domain,
  37             "/friendica",
  38             network.web_headers,
  39             (config.get("connection_timeout"), config.get("read_timeout"))
  40         ).text,
  41         "html.parser",
  42     )
  43     # DEBUG: print(f"DEBUG: doc[]='{type(doc)}'")
  44
  45     blocklist = doc.find(id="about_blocklist")
  46
  47     # Prevents exceptions:
  48     if blocklist is None:
  49         # DEBUG: print("DEBUG: Instance has no block list:", domain)
  50         return {}
  51
  52     table = blocklist.find("table")
  53
  54     # DEBUG: print(f"DEBUG: table[]='{type(table)}'")
  55     if table.find("tbody"):
  56         rows = table.find("tbody").find_all("tr")
  57     else:
  58         rows = table.find_all("tr")
  59
  60     # DEBUG: print(f"DEBUG: Found rows()={len(rows)}")
  61     for line in rows:
  62         # DEBUG: print(f"DEBUG: line='{line}'")
  63         blocked.append({
  64             "domain": tidyup.domain(line.find_all("td")[0].text),
  65             "reason": tidyup.reason(line.find_all("td")[1].text)
  66         })
  67         # DEBUG: print("DEBUG: Next!")
  68
  69     # DEBUG: print("DEBUG: Returning blocklist() for domain:", domain, len(blocklist))
  70     return {
  71         "reject": blocked
  72     }