actions/robotstxt.php

   1 <?php
   2 /**
   3  * StatusNet - the distributed open-source microblogging tool
   4  * Copyright (C) 2010, StatusNet, Inc.
   5  *
   6  * robots.txt generator
   7  *
   8  * PHP version 5
   9  *
  10  * @category Action
  11  * @package  StatusNet
  12  * @author   Evan Prodromou <evan@status.net>
  13  * @license  http://www.fsf.org/licensing/licenses/agpl.html AGPLv3
  14  * @link     http://status.net/
  15  *
  16  * This program is free software: you can redistribute it and/or modify
  17  * it under the terms of the GNU Affero General Public License as published by
  18  * the Free Software Foundation, either version 3 of the License, or
  19  * (at your option) any later version.
  20  *
  21  * This program is distributed in the hope that it will be useful,
  22  * but WITHOUT ANY WARRANTY; without even the implied warranty of
  23  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
  24  * GNU Affero General Public License for more details.
  25  *
  26  * You should have received a copy of the GNU Affero General Public License
  27  * along with this program.  If not, see <http://www.gnu.org/licenses/>.
  28  */
  29
  30 if (!defined('STATUSNET')) {
  31     exit(1);
  32 }
  33
  34 /**
  35  * Prints out a static robots.txt
  36  *
  37  * @category Action
  38  * @package  StatusNet
  39  * @author   Evan Prodromou <evan@status.net>
  40  * @license  http://www.fsf.org/licensing/licenses/agpl.html AGPLv3
  41  * @link     http://status.net/
  42  */
  43 class RobotstxtAction extends Action
  44 {
  45     /**
  46      * Handles requests
  47      *
  48      * Since this is a relatively static document, we
  49      * don't do a prepare()
  50      *
  51      * @param array $args GET, POST, and URL params; unused.
  52      *
  53      * @return void
  54      */
  55     function handle($args)
  56     {
  57         if (Event::handle('StartRobotsTxt', array($this))) {
  58
  59             header('Content-Type: text/plain');
  60
  61             print "User-Agent: *\n";
  62
  63             if (common_config('site', 'private')) {
  64
  65                 print "Disallow: /\n";
  66             } else {
  67                 $disallow = common_config('robotstxt', 'disallow');
  68
  69                 foreach ($disallow as $dir) {
  70                     print "Disallow: /$dir/\n";
  71                 }
  72
  73                 $crawldelay = common_config('robotstxt', 'crawldelay');
  74
  75                 if (!empty($crawldelay)) {
  76                     print "Crawl-delay: " . $crawldelay . "\n";
  77                 }
  78             }
  79
  80             Event::handle('EndRobotsTxt', array($this));
  81         }
  82     }
  83
  84     /**
  85      * Return true; this page doesn't touch the DB.
  86      *
  87      * @param array $args other arguments
  88      *
  89      * @return boolean is read only action?
  90      */
  91     function isReadOnly($args)
  92     {
  93         return true;
  94     }
  95 }