Updated copyright year.
[mailer.git] / inc / http-functions.php
index b0cbca319d79501193253058fab94b37f113ff3e..e82ca2ce198709458fd5bd41d98eb0cac2c7b1ed 100644 (file)
  * -------------------------------------------------------------------- *
  * Kurzbeschreibung  : HTTP-relevante Funktionen                        *
  * -------------------------------------------------------------------- *
- * $Revision::                                                        $ *
- * $Date::                                                            $ *
- * $Tag:: 0.2.1-FINAL                                                 $ *
- * $Author::                                                          $ *
- * -------------------------------------------------------------------- *
  * Copyright (c) 2003 - 2009 by Roland Haeder                           *
- * Copyright (c) 2009 - 2011 by Mailer Developer Team                   *
- * For more information visit: http://www.mxchange.org                  *
+ * Copyright (c) 2009 - 2016 by Mailer Developer Team                   *
+ * For more information visit: http://mxchange.org                      *
  *                                                                      *
  * This program is free software; you can redistribute it and/or modify *
  * it under the terms of the GNU General Public License as published by *
@@ -40,36 +35,73 @@ if (!defined('__SECURITY')) {
        die();
 } // END - if
 
+// Initialize HTTP handling
+function initHttp () {
+       // Initialize array
+       $GLOBALS['http_header'] = array();
+}
+
 // Sends out all headers required for HTTP/1.1 reply
 function sendHttpHeaders () {
        // Used later
        $now = gmdate('D, d M Y H:i:s') . ' GMT';
 
        // Send HTTP header
-       sendHeader('HTTP/1.1 ' . getHttpStatus());
+       addHttpHeader('HTTP/1.1 ' . getHttpStatus());
 
        // General headers for no caching
-       sendHeader('Expires: ' . $now); // RFC2616 - Section 14.21
-       sendHeader('Last-Modified: ' . $now);
-       sendHeader('Cache-Control: no-store, no-cache, must-revalidate, pre-check=0, post-check=0, max-age=0'); // HTTP/1.1
-       sendHeader('Pragma: no-cache'); // HTTP/1.0
-       sendHeader('Connection: Close');
-       sendHeader('Content-Type: ' . getContentType() . '; charset=UTF-8');
-       sendHeader('Content-Language: ' . getLanguage());
+       addHttpHeader('Expires: ' . $now); // RFC2616 - Section 14.21
+       addHttpHeader('Last-Modified: ' . $now);
+       addHttpHeader('Cache-Control: no-store, no-cache, must-revalidate, pre-check=0, post-check=0, max-age=0'); // HTTP/1.1
+       addHttpHeader('Pragma: no-cache'); // HTTP/1.0
+       addHttpHeader('Connection: Close');
+
+       // There shall be no output mode in raw output-mode
+       if (!isRawOutputMode()) {
+               // Send content-type not in raw output-mode
+               addHttpHeader('Content-Type: ' . getContentType() . '; charset=UTF-8');
+       } // END - if
+
+       // Add language
+       addHttpHeader('Content-Language: ' . getLanguage());
 }
 
-// Send a GET request
-function sendGetRequest ($script, $data = array(), $removeHeader = false) {
-       // Extract hostname and port from script
-       $host = extractHostnameFromUrl($script);
+// Checks whether the URL is full-qualified (http[s]:// + hostname [+ request data])
+function isFullQualifiedUrl ($url) {
+       // Is there cache?
+       if (!isset($GLOBALS[__FUNCTION__][$url])) {
+               // Determine it
+               $GLOBALS[__FUNCTION__][$url] = ((substr($url, 0, 7) == 'http://') || (substr($url, 0, 8) == 'https://'));
+       } // END - if
+
+       // Return cache
+       return $GLOBALS[__FUNCTION__][$url];
+}
+
+// Generates the full GET URL from given base URL and data array
+function generateGetUrlFromBaseUrlData ($baseUrl, $requestData = array()) {
+       // Init URL
+       $getUrl = $baseUrl;
+
+       // Is it full-qualified?
+       if (!isFullQualifiedUrl($getUrl)) {
+               // Need to prepend a slash?
+               if (substr($getUrl, 0, 1) != '/') {
+                       // Prepend it
+                       $getUrl = '/' . $getUrl;
+               } // END - if
+
+               // Prepend http://hostname from mxchange.org server
+               $getUrl = getServerUrl() . $getUrl;
+       } // END - if
 
        // Add data
-       $body = http_build_query($data, '', '&');
+       $body = http_build_query($requestData, '', '&');
 
-       // There should be data, else we don't need to extend $script with $body
+       // There should be data, else we don't need to extend $baseUrl with $body
        if (!empty($body)) {
-               // Do we have a question-mark in the script?
-               if (strpos($script, '?') === false) {
+               // Is there a question-mark in the script?
+               if (!isInString('?', $baseUrl)) {
                        // No, so first char must be question mark
                        $body = '?' . $body;
                } else {
@@ -78,16 +110,122 @@ function sendGetRequest ($script, $data = array(), $removeHeader = false) {
                }
 
                // Add script data
-               $script .= $body;
+               $getUrl .= $body;
 
                // Remove trailed & to make it more conform
-               if (substr($script, -1, 1) == '&') {
-                       $script = substr($script, 0, -1);
+               if (substr($getUrl, -1, 1) == '&') {
+                       $getUrl = substr($getUrl, 0, -1);
                } // END - if
        } // END - if
 
+       // Return it
+       return $getUrl;
+}
+
+// Removes http[s]://<hostname> from given url
+function removeHttpHostNameFromUrl ($url) {
+       // Remove http[s]://
+       $remove = explode(':', $url);
+       $remove = explode('/', substr($remove[1], 3));
+
+       // Remove the first element (should be the hostname)
+       unset($remove[0]);
+
+       // implode() back all other elements and prepend a slash
+       $url = '/' . implode('/', $remove);
+
+       // Return prepared URL
+       return $url;
+}
+
+// Sends a HTTP request (GET, POST, HEAD are currently supported)
+function sendHttpRequest ($requestType, $baseUrl, $requestData = array(), $removeHeader = FALSE, $allowOnlyHttpOkay = TRUE) {
+       // Init response
+       $response = array();
+
+       // Start "detecting" the request type
+       switch ($requestType) {
+               case 'HEAD': // Send a HTTP/1.1 HEAD request
+                       $response = sendHttpHeadRequest($baseUrl, $requestData, $allowOnlyHttpOkay);
+                       break;
+
+               case 'GET': // Send a HTTP/1.1 GET request
+                       $response = sendHttpGetRequest($baseUrl, $requestData, $removeHeader, $allowOnlyHttpOkay);
+                       break;
+
+               case 'POST': // Send a HTTP/1.1 POST request
+                       $response = sendHttpPostRequest($baseUrl, $requestData, $removeHeader, $allowOnlyHttpOkay);
+                       break;
+
+               default: // Unsupported HTTP request, this is really bad and needs fixing
+                       reportBug(__FUNCTION__, __LINE__, 'Unsupported request detected. requestType=' . $requestType . ',baseUrl=' . $baseUrl . ',requestData()=' . count($requestData));
+                       break;
+       } // END - switch
+
+       // Return response
+       return $response;
+}
+
+// Sends a HEAD request
+function sendHttpHeadRequest ($baseUrl, $requestData = array(), $allowOnlyHttpOkay = TRUE) {
+       // Generate full GET URL
+       $getUrl = generateGetUrlFromBaseUrlData($baseUrl, $requestData);
+       //* DEBUG: */ logDebugMessage(__FUNCTION__, __LINE__, 'getUrl=' . $getUrl);
+
+       // Is there http[s]:// in front of the URL?
+       if (isFullQualifiedUrl($getUrl)) {
+               // Remove http[s]://<hostname> from URL
+               $getUrl = removeHttpHostNameFromUrl($getUrl);
+       } elseif (substr($getUrl, 0, 1) != '/') {
+               // Prepend a slash
+               $getUrl = '/' . $getUrl;
+       }
+
+       // Extract hostname and port from script
+       $host = extractHostnameFromUrl($baseUrl);
+
+       // Generate HEAD request header
+       $request  = 'HEAD ' . (isProxyUsed() === TRUE ? $baseUrl : '') . trim($getUrl) . ' HTTP/1.1' . getConfig('HTTP_EOL');
+       $request .= 'Host: ' . $host . getConfig('HTTP_EOL');
+       $request .= 'Referer: ' . getUrl() . '/admin.php' . getConfig('HTTP_EOL');
+       if (isConfigEntrySet('FULL_VERSION')) {
+               $request .= 'User-Agent: ' . getTitle() . '/' . getFullVersion() . getConfig('HTTP_EOL');
+       } else {
+               $request .= 'User-Agent: ' . getTitle() . '/' . getConfig('VERSION') . getConfig('HTTP_EOL');
+       }
+       $request .= 'Accept: image/png,image/*;q=0.8,text/plain,text/html,*/*;q=0.5' . getConfig('HTTP_EOL');
+       $request .= 'Accept-Charset: UTF-8,*' . getConfig('HTTP_EOL');
+       $request .= 'Cache-Control: no-store, no-cache, must-revalidate, post-check=0, pre-check=0' . getConfig('HTTP_EOL');
+       $request .= 'Connection: close' . getConfig('HTTP_EOL');
+       $request .= getConfig('HTTP_EOL');
+
+       // Send the raw request
+       $response = sendRawRequest($host, $request, $allowOnlyHttpOkay);
+
+       // Return the result to the caller function
+       return $response;
+}
+
+// Send a GET request
+function sendHttpGetRequest ($baseUrl, $requestData = array(), $removeHeader = FALSE, $allowOnlyHttpOkay = TRUE) {
+       // Generate full GET URL
+       $getUrl = generateGetUrlFromBaseUrlData($baseUrl, $requestData);
+       //* DEBUG: */ logDebugMessage(__FUNCTION__, __LINE__, 'getUrl=' . $getUrl);
+
+       // Is there http[s]:// in front of the URL?
+       if (isFullQualifiedUrl($getUrl)) {
+               // Remove http[s]://<hostname> from url
+               $getUrl = removeHttpHostNameFromUrl($getUrl);
+       } elseif (substr($getUrl, 0, 1) != '/') {
+               // Prepend a slash
+               $getUrl = '/' . $getUrl;
+       }
+
+       // Extract hostname and port from script
+       $host = extractHostnameFromUrl($baseUrl);
+
        // Generate GET request header
-       $request  = 'GET /' . trim($script) . ' HTTP/1.1' . getConfig('HTTP_EOL');
+       $request  = 'GET ' . (isProxyUsed() === TRUE ? $baseUrl : '') . trim($getUrl) . ' HTTP/1.1' . getConfig('HTTP_EOL');
        $request .= 'Host: ' . $host . getConfig('HTTP_EOL');
        $request .= 'Referer: ' . getUrl() . '/admin.php' . getConfig('HTTP_EOL');
        if (isConfigEntrySet('FULL_VERSION')) {
@@ -102,10 +240,10 @@ function sendGetRequest ($script, $data = array(), $removeHeader = false) {
        $request .= getConfig('HTTP_EOL');
 
        // Send the raw request
-       $response = sendRawRequest($host, $request);
+       $response = sendRawRequest($host, $request, $allowOnlyHttpOkay);
 
        // Should we remove header lines?
-       if ($removeHeader === true) {
+       if ($removeHeader === TRUE) {
                // Okay, remove them
                $response = removeHttpHeaderFromResponse($response);
        } // END - if
@@ -114,22 +252,38 @@ function sendGetRequest ($script, $data = array(), $removeHeader = false) {
        return $response;
 }
 
-// Send a POST request
-function sendPostRequest ($script, array $postData, $removeHeader = false) {
+// Send a POST request, sometimes even POST requests have no parameters
+function sendHttpPostRequest ($baseUrl, $requestData = array(), $removeHeader = FALSE, $allowOnlyHttpOkay = TRUE) {
+       // Copy baseUrl to getUrl
+       $getUrl = $baseUrl;
+
+       // Is there http[s]:// in front of the URL?
+       if (isFullQualifiedUrl($getUrl)) {
+               // Remove http[s]://<hostname> from url
+               $getUrl = removeHttpHostNameFromUrl($getUrl);
+       } elseif (substr($getUrl, 0, 1) != '/') {
+               // Prepend a slash
+               $getUrl = '/' . $getUrl;
+       }
+
        // Extract host name from script
-       $host = extractHostnameFromUrl($script);
+       $host = extractHostnameFromUrl($baseUrl);
 
        // Construct request body
-       $body = http_build_query($postData, '', '&');
+       $body = http_build_query($requestData, '', '&');
 
        // Generate POST request header
-       $request  = 'POST /' . trim($script) . ' HTTP/1.0' . getConfig('HTTP_EOL');
+       $request  = 'POST ' . (isProxyUsed() === TRUE ? $getUrl : '') . trim($getUrl) . ' HTTP/1.0' . getConfig('HTTP_EOL');
        $request .= 'Host: ' . $host . getConfig('HTTP_EOL');
        $request .= 'Referer: ' . getUrl() . '/admin.php' . getConfig('HTTP_EOL');
-       $request .= 'User-Agent: ' . getTitle() . '/' . getFullVersion() . getConfig('HTTP_EOL');
+       if (isConfigEntrySet('FULL_VERSION')) {
+               $request .= 'User-Agent: ' . getTitle() . '/' . getFullVersion() . getConfig('HTTP_EOL');
+       } else {
+               $request .= 'User-Agent: ' . getTitle() . '/' . getConfig('VERSION') . getConfig('HTTP_EOL');
+       }
        $request .= 'Accept: text/plain;q=0.8' . getConfig('HTTP_EOL');
        $request .= 'Accept-Charset: UTF-8,*' . getConfig('HTTP_EOL');
-       $request .= 'Cache-Control: no-cache' . getConfig('HTTP_EOL');
+       $request .= 'Cache-Control: no-store, no-cache, must-revalidate, post-check=0, pre-check=0' . getConfig('HTTP_EOL');
        $request .= 'Content-Type: application/x-www-form-urlencoded' . getConfig('HTTP_EOL');
        $request .= 'Content-Length: ' . strlen($body) . getConfig('HTTP_EOL');
        $request .= 'Connection: close' . getConfig('HTTP_EOL');
@@ -139,10 +293,10 @@ function sendPostRequest ($script, array $postData, $removeHeader = false) {
        $request .= $body;
 
        // Send the raw request
-       $response = sendRawRequest($host, $request);
+       $response = sendRawRequest($host, $request, $allowOnlyHttpOkay);
 
        // Should we remove header lines?
-       if ($removeHeader === true) {
+       if ($removeHeader === TRUE) {
                // Okay, remove them
                $response = removeHttpHeaderFromResponse($response);
        } // END - if
@@ -151,8 +305,9 @@ function sendPostRequest ($script, array $postData, $removeHeader = false) {
        return $response;
 }
 
-// Sends a raw request to another host
-function sendRawRequest ($host, $request) {
+// Sends a raw request (string) to given host (hostnames will be solved)
+function sendRawRequest ($host, $request, $allowOnlyHttpOkay = TRUE) {
+       //* DEBUG: */ die('host='.$host.',request=<pre>'.$request.'</pre>');
        // Init errno and errdesc with 'all fine' values
        $errno = '0';
        $errdesc = '';
@@ -161,19 +316,10 @@ function sendRawRequest ($host, $request) {
        $port = 80;
 
        // Initialize array
-       $response = array('', '', '');
-
-       // Default is not to use proxy
-       $useProxy = false;
+       $response = array();
 
        // Default is non-broken HTTP server implementation
-       $GLOBALS['is_http_server_broken'] = false;
-
-       // Are proxy settins set?
-       if (isProxyUsed()) {
-               // Then use it
-               $useProxy = true;
-       } // END - if
+       $GLOBALS['is_http_server_broken'] = FALSE;
 
        // Load include
        loadIncludeOnce('inc/classes/resolver.class.php');
@@ -186,43 +332,52 @@ function sendRawRequest ($host, $request) {
                $port = $portArray[1];
        } elseif (count($portArray) > 2) {
                // This should not happen!
-               debug_report_bug(__FUNCTION__, __LINE__, 'Invalid ' . $host . '. Please report this to the Mailer-Project team.');
+               reportBug(__FUNCTION__, __LINE__, 'Invalid ' . $host . '. Please report this to the Mailer-Project team.');
        }
 
        // Get resolver instance
        $resolver = new HostnameResolver();
 
+       // Default is no proxy
+       $proxyHost = NULL;
+
+       // Is the configuration entry set?
+       if ((!isInstaller()) && (isConfigEntrySet('proxy_host'))) {
+               // Get proxy host
+               $proxyHost = compileRawCode(getProxyHost());
+       } // END - if
+
        // Open connection
-       //* DEBUG: */ die('SCRIPT=' . $script);
-       if ($useProxy === true) {
+       if (isProxyUsed() === TRUE) {
                // Resolve hostname into IP address
-               $ip = $resolver->resolveHostname(compileRawCode(getProxyHost()));
+               $ip = $resolver->resolveHostname($proxyHost);
 
                // Connect to host through proxy connection
-               $fp = fsockopen($ip, bigintval(getProxyPort()), $errno, $errdesc, 30);
+               $resource = fsockopen($ip, bigintval(getProxyPort()), $errno, $errdesc, 30);
        } else {
                // Resolve hostname into IP address
                $ip = $resolver->resolveHostname($host);
 
                // Connect to host directly
-               $fp = fsockopen($ip, $port, $errno, $errdesc, 30);
+               $resource = fsockopen($ip, $port, $errno, $errdesc, 30);
        }
+       //* DEBUG: */ logDebugMessage(__FUNCTION__, __LINE__, 'ip=' . $ip . ',host=' . $host . ',isProxyUsed()=' . intval(isProxyUsed()));
 
        // Is there a link?
-       if (!is_resource($fp)) {
+       if (!is_resource($resource)) {
                // Failed!
                logDebugMessage(__FUNCTION__, __LINE__, $errdesc . ' (' . $errno . ')');
-               return $response;
-       } elseif ((!stream_set_blocking($fp, 0)) || (!stream_set_timeout($fp, 1))) {
+               return array('', '', '');
+       } elseif ((!stream_set_blocking($resource, 0)) || (!stream_set_timeout($resource, 1))) {
                // Cannot set non-blocking mode or timeout
                logDebugMessage(__FUNCTION__, __LINE__, socket_strerror(socket_last_error()));
-               return $response;
+               return array('', '', '');
        }
 
-       // Do we use proxy?
-       if ($useProxy === true) {
+       // Shall proxy be used?
+       if (isProxyUsed() === TRUE) {
                // Setup proxy tunnel
-               $response = setupProxyTunnel($host, $port, $fp);
+               $response = setupProxyTunnel($host, $proxyHost, $port, $resource);
 
                // If the response is invalid, abort
                if ((count($response) == 3) && (empty($response[0])) && (empty($response[1])) && (empty($response[2]))) {
@@ -233,18 +388,18 @@ function sendRawRequest ($host, $request) {
        } // END - if
 
        // Write request
-       fwrite($fp, $request);
+       fwrite($resource, $request);
 
        // Start counting
-       $start = microtime(true);
+       $start = microtime(TRUE);
 
        // Read response
-       while (!feof($fp)) {
+       while (!feof($resource)) {
                // Get info from stream
-               $info = stream_get_meta_data($fp);
+               $info = stream_get_meta_data($resource);
 
                // Is it timed out? 15 seconds is a really patient...
-               if (($info['timed_out'] == true) || (microtime(true) - $start) > 15) {
+               if (($info['timed_out'] == TRUE) || (microtime(TRUE) - $start) > 15) {
                        // Timeout
                        logDebugMessage(__FUNCTION__, __LINE__, 'Timed out to get data from host ' . $host);
 
@@ -253,10 +408,13 @@ function sendRawRequest ($host, $request) {
                } // END - if
 
                // Get line from stream
-               $line = fgets($fp, 128);
+               $line = fgets($resource, 128);
 
-               // Ignore empty lines because of non-blocking mode
-               if (empty($line)) {
+               /*
+                * Ignore empty lines because of non-blocking mode, you cannot use
+                * empty() here as it would also see \r\n as "empty".
+                */
+               if (strlen($line) == 0) {
                        // uslepp a little to avoid 100% CPU load
                        usleep(10);
 
@@ -267,54 +425,39 @@ function sendRawRequest ($host, $request) {
                // Check for broken HTTP implementations
                if (substr(strtolower($line), 0, 7) == 'server:') {
                        // Anomic (see http://anomic.de, http://yacy.net) is currently broken
-                       $GLOBALS['is_http_server_broken'] = in_array(trim(substr(strtolower($line), 7)), array('anomichttpd'));
+                       $GLOBALS['is_http_server_broken'] = (count(getArrayKeysFromSubStrArray(strtolower($line), array('anomichttpd'))) > 0);
                } // END - if
 
                // Add it to response
-               $response[] = $line;
+               //* DEBUG: */ print 'line(' . strlen($line) . ')='.$line.'<br />';
+               array_push($response, $line);
        } // END - while
 
        // Close socket
-       fclose($fp);
+       fclose($resource);
 
        // Time request if debug-mode is enabled
        if (isDebugModeEnabled()) {
                // Add debug message...
-               logDebugMessage(__FUNCTION__, __LINE__, 'Request took ' . (microtime(true) - $start) . ' seconds and returned ' . count($response) . ' line(s).');
+               logDebugMessage(__FUNCTION__, __LINE__, 'Request took ' . (microtime(TRUE) - $start) . ' seconds and returned ' . count($response) . ' line(s).');
        } // END - if
 
-       // Skip first empty lines
-       $resp = $response;
-       foreach ($resp as $idx => $line) {
-               // Trim space away
-               $line = trim($line);
-
-               // Is this line empty?
-               if (empty($line)) {
-                       // Then remove it
-                       array_shift($response);
-               } else {
-                       // Abort on first non-empty line
-                       break;
-               }
-       } // END - foreach
-
-       //* DEBUG: */ debugOutput('<strong>Request:</strong><pre>'.print_r($request, true).'</pre>');
-       //* DEBUG: */ debugOutput('<strong>Response:</strong><pre>'.print_r($response, true).'</pre>');
+       //* DEBUG: */ debugOutput('<strong>Request:</strong><pre>'.print_r($request, TRUE).'</pre>');
+       //* DEBUG: */ debugOutput('<strong>Response:</strong><pre>'.print_r($response, TRUE).'</pre>');
 
        // Proxy agent found or something went wrong?
-       if (!isset($response[0])) {
+       if (!isFilledArray($response)) {
                // No response, maybe timeout
                $response = array('', '', '');
                logDebugMessage(__FUNCTION__, __LINE__, 'Invalid empty response array, maybe timed out?');
-       } elseif ((substr(strtolower($response[0]), 0, 11) == 'proxy-agent') && ($useProxy === true)) {
+       } elseif ((substr(strtolower($response[0]), 0, 11) == 'proxy-agent') && (isProxyUsed() === TRUE)) {
                // Proxy header detected, so remove two lines
                array_shift($response);
                array_shift($response);
        } // END - if
 
        // Was the request successfull?
-       if ((!isInStringIgnoreCase('200 OK', $response[0])) || (empty($response[0]))) {
+       if ((!isHttpStatusOkay($response[0])) && ($allowOnlyHttpOkay === TRUE)) {
                // Not found / access forbidden
                logDebugMessage(__FUNCTION__, __LINE__, 'Unexpected status code ' . $response[0] . ' detected. "200 OK" was expected.');
                $response = array('', '', '');
@@ -327,14 +470,21 @@ function sendRawRequest ($host, $request) {
        return $response;
 }
 
+// Is HTTP status okay?
+function isHttpStatusOkay ($header) {
+       // Determine it
+       return in_array(strtoupper(trim($header)), array('HTTP/1.1 200 OK', 'HTTP/1.0 200 OK'));
+}
+
 // Sets up a proxy tunnel for given hostname and through resource
-function setupProxyTunnel ($host, $port, $resource) {
+function setupProxyTunnel ($host, $proxyHost, $port, $resource) {
        // Initialize array
        $response = array('', '', '');
 
        // Generate CONNECT request header
        $proxyTunnel  = 'CONNECT ' . $host . ':' . $port . ' HTTP/1.0' . getConfig('HTTP_EOL');
        $proxyTunnel .= 'Host: ' . $host . getConfig('HTTP_EOL');
+       $proxyTunnel .= 'Proxy-Connection: Keep-Alive' . getConfig('HTTP_EOL');
 
        // Use login data to proxy? (username at least!)
        if (getProxyUsername() != '') {
@@ -348,18 +498,18 @@ function setupProxyTunnel ($host, $port, $resource) {
        //* DEBUG: */ debugOutput('<strong>proxyTunnel=</strong><pre>' . $proxyTunnel.'</pre>');
 
        // Write request
-       fwrite($fp, $proxyTunnel);
+       fwrite($resource, $proxyTunnel);
 
        // Got response?
-       if (feof($fp)) {
+       if (feof($resource)) {
                // No response received
                return $response;
        } // END - if
 
        // Read the first line
-       $resp = trim(fgets($fp, 10240));
+       $resp = trim(fgets($resource, 10240));
        $respArray = explode(' ', $resp);
-       if ((strtolower($respArray[0]) !== 'http/1.0') || ($respArray[1] != '200')) {
+       if (((strtolower($respArray[0]) !== 'http/1.0') && (strtolower($respArray[0]) !== 'http/1.1')) || ($respArray[1] != '200')) {
                // Invalid response!
                return $response;
        } // END - if
@@ -369,43 +519,76 @@ function setupProxyTunnel ($host, $port, $resource) {
 }
 
 // Check array for chuncked encoding
-function unchunkHttpResponse (array $response) {
+function unchunkHttpResponse ($response) {
        // Default is not chunked
-       $isChunked = false;
+       $isChunked = FALSE;
 
        // Check if we have chunks
        foreach ($response as $line) {
                // Make lower-case and trim it
-               $line = trim(strtolower($line));
+               $line = trim($line);
 
                // Entry found?
-               if ((strpos($line, 'transfer-encoding') !== false) && (strpos($line, 'chunked') !== false)) {
+               if ((isInStringIgnoreCase('transfer-encoding', $line)) && (isInStringIgnoreCase('chunked', $line))) {
                        // Found!
-                       $isChunked = true;
+                       $isChunked = TRUE;
                        break;
-               } // END - if
+               } elseif (empty($line)) {
+                       // Empty line found (header->body)
+                       break;
+               }
        } // END - foreach
 
+       // Save whole body
+       $body = removeHttpHeaderFromResponse($response);
+
        // Is it chunked?
-       if ($isChunked === true) {
+       //* DEBUG: */ logDebugMessage(__FUNCTION__, __LINE__, 'isChunked=' . intval($isChunked));
+       if ($isChunked === TRUE) {
+               // Make sure, that body is an array
+               assert(is_array($body));
+
                // Good, we still have the HTTP headers in there, so we need to get rid
                // of them temporarly
-               //* DEBUG: */ die('<pre>'.htmlentities(print_r(removeHttpHeaderFromResponse($response), true)).'</pre>');
-               $tempResponse = http_chunked_decode(implode('', removeHttpHeaderFromResponse($response)));
+               //* DEBUG: */ die('<pre>'.htmlentities(print_r(removeHttpHeaderFromResponse($response), TRUE)).'</pre>');
+               $tempResponse = http_chunked_decode(implode('', $body));
 
                // We got a string back from http_chunked_decode(), so we need to convert it back to an array
-               //* DEBUG: */ die('tempResponse['.strlen($tempResponse).']=<pre>'.replaceReturnNewLine(htmlentities($tempResponse)).'</pre>');
+               //* DEBUG: */ die('tempResponse['.strlen($tempResponse).'/'.gettype($tempResponse).']=<pre>'.replaceReturnNewLine(htmlentities($tempResponse)).'</pre>');
 
                // Re-add the headers
-               $response = merge_array($GLOBALS['http_headers'], stringToArray("\n", $tempResponse));
-       } // END - if
+               $response = mergeHttpHeadersWithBody($tempResponse);
+       } elseif (is_array($body)) {
+               /*
+                * Make sure the body is in one array element as many other functions
+                * get disturbed by it.
+                */
+
+               // Put all array elements from body together
+               $body = implode('', $body);
+
+               // Now merge the extracted headers + fixed body together
+               $response = mergeHttpHeadersWithBody($body);
+       }
 
        // Return the unchunked array
        return $response;
 }
 
+// Merges HTTP header lines with given body (string)
+function mergeHttpHeadersWithBody ($body) {
+       // Add empty entry to mimic header->body
+       $GLOBALS['http_headers'][] = getConfig('HTTP_EOL');
+
+       // Make sure at least one header is there (which is still not valid but okay here)
+       assert(isFilledArray($GLOBALS['http_headers']));
+
+       // Merge both together
+       return merge_array($GLOBALS['http_headers'], array(count($GLOBALS['http_headers']) => $body));
+}
+
 // Removes HTTP header lines from a response array (e.g. output from send<Get|Post>Request() )
-function removeHttpHeaderFromResponse (array $response) {
+function removeHttpHeaderFromResponse ($response) {
        // Save headers for later usage
        $GLOBALS['http_headers'] = array();
 
@@ -417,9 +600,6 @@ function removeHttpHeaderFromResponse (array $response) {
                        // Remove line
                        array_shift($response2);
 
-                       // Add full line to temporary global array
-                       $GLOBALS['http_headers'][] = $line;
-
                        // Trim it for testing
                        $lineTest = trim($line);
 
@@ -428,6 +608,15 @@ function removeHttpHeaderFromResponse (array $response) {
                                // Then stop here
                                break;
                        } // END - if
+
+                       // Is the last line set and is not ending with \r\n?
+                       if ((isset($GLOBALS['http_headers'][count($GLOBALS['http_headers']) - 1])) && (substr($GLOBALS['http_headers'][count($GLOBALS['http_headers']) - 1], -2, 2) != getConfig('HTTP_EOL'))) {
+                               // Add it to previous one
+                               $GLOBALS['http_headers'][count($GLOBALS['http_headers']) - 1] .= $line;
+                       } else {
+                               // Add full line to temporary global array
+                               array_push($GLOBALS['http_headers'], $line);
+                       }
                } // END - foreach
 
                // Write back the array
@@ -441,22 +630,100 @@ function removeHttpHeaderFromResponse (array $response) {
 // Returns the flag if a broken HTTP server implementation was detected
 function isBrokenHttpServerImplentation () {
        // Determine it
-       $isBroken = ((isset($GLOBALS['is_http_server_broken'])) && ($GLOBALS['is_http_server_broken'] === true));
+       $isBroken = ((isset($GLOBALS['is_http_server_broken'])) && ($GLOBALS['is_http_server_broken'] === TRUE));
 
        // ... and return it
        return $isBroken;
 }
 
+// Extract host from script name
+function extractHostnameFromUrl (&$script) {
+       // Use default SERVER_URL by default... ;) So?
+       $url = getServerUrl();
+
+       // Is this URL valid?
+       if (substr($script, 0, 7) == 'http://') {
+               // Use the hostname from script URL as new hostname
+               $extract = explode('/', substr($script, 7));
+               $url = $extract[0];
+       } elseif (substr($script, 0, 8) == 'https://') {
+               // Use the hostname from script URL as new hostname
+               $extract = explode('/', substr($script, 8));
+               $url = $extract[0];
+       }
+
+       // Extract host name
+       $host = str_replace(array('http://', 'https://'), array('', ''), $url);
+
+       // Is there a slash at the end?
+       if (isInString('/', $host)) {
+               $host = substr($host, 0, strpos($host, '/'));
+       } // END - if
+
+       // Is there a double-dot in? (Means port number)
+       if (strpos($host, ':') !== FALSE) {
+               // Detected a double-dot
+               $hostArray = explode(':', $host);
+               $host = $hostArray[0];
+       } // END - if
+
+       // Generate relative URL
+       //* DEBUG: */ debugOutput('SCRIPT=' . $script);
+       if (substr(strtolower($script), 0, 7) == 'http://') {
+               // But only if http:// is in front!
+               $script = substr($script, (strlen($url) + 7));
+       } elseif (substr(strtolower($script), 0, 8) == 'https://') {
+               // Does this work?!
+               $script = substr($script, (strlen($url) + 8));
+       }
+
+       //* DEBUG: */ debugOutput('SCRIPT=' . $script);
+       if (substr($script, 0, 1) == '/') {
+               $script = substr($script, 1);
+       } // END - if
+
+       // Return host name
+       return $host;
+}
+
+// Adds a HTTP header to array
+function addHttpHeader ($header) {
+       // Send the header
+       //* DEBUG: */ logDebugMessage(__FUNCTION__, __LINE__, ': header=' . $header);
+       array_push($GLOBALS['http_header'], trim($header));
+}
+
+// Flushes all HTTP headers
+function flushHttpHeaders () {
+       // Is the header already sent?
+       if (headers_sent()) {
+               // Then abort here
+               reportBug(__FUNCTION__, __LINE__, 'Headers already sent!');
+       } elseif ((!isset($GLOBALS['http_header'])) || (!is_array($GLOBALS['http_header']))) {
+               // Not set or not an array
+               reportBug(__FUNCTION__, __LINE__, 'Headers not set or not an array, isset()=' . isset($GLOBALS['http_header']) . ', please report this.');
+       }
+
+       // Flush all headers if found
+       foreach ($GLOBALS['http_header'] as $header) {
+               // Send a single header
+               header($header);
+       } // END - foreach
+
+       // Mark them as flushed
+       $GLOBALS['http_header'] = array();
+}
+
 //-----------------------------------------------------------------------------
 // Automatically re-created functions, all taken from user comments on www.php.net
 //-----------------------------------------------------------------------------
 
 if (!function_exists('http_build_query')) {
        // Taken from documentation on www.php.net, credits to Marco K. (Germany) and some light mods by R.Haeder
-       function http_build_query($data, $prefix = '', $sep = '', $key = '') {
+       function http_build_query($requestData, $prefix = '', $sep = '', $key = '') {
                $ret = array();
-               foreach ((array) $data as $k => $v) {
-                       if (is_int($k) && $prefix != null) {
+               foreach ((array) $requestData as $k => $v) {
+                       if (is_int($k) && !is_null($prefix)) {
                                $k = urlencode($prefix . $k);
                        } // END - if
 
@@ -467,7 +734,7 @@ if (!function_exists('http_build_query')) {
                        if (is_array($v) || is_object($v)) {
                                array_push($ret, http_build_query($v, '', $sep, $k));
                        } else {
-                               array_push($ret, $k.'='.urlencode($v));
+                               array_push($ret, $k . '=' . urlencode($v));
                        }
                } // END - foreach
 
@@ -484,8 +751,9 @@ if (!function_exists('http_chunked_decode')) {
         * dechunk an HTTP 'transfer-encoding: chunked' message.
         *
         * @param       $chunk          The encoded message
-        * @return      $dechunk        The decoded message. If $chunk wasn't encoded properly debug_report_bug() is being called
-        * @author      Marques Johansson
+        * @return      $dechunk        The decoded message. If $chunk wasn't encoded properly reportBug() is being called
+        * @author      Marques Johansson (initial author)
+        * @author      Roland Haeder (heavy modifications and simplification)
         * @link        http://php.net/manual/en/function.http-chunked-decode.php#89786
         */
        function http_chunked_decode ($chunk) {
@@ -522,7 +790,7 @@ next[offset,10]=<pre>'.replaceReturnNewLine(htmlentities(call_user_func_array($m
                        if (!isHexadecimal($chunkLenHex)) {
                                // Please help debugging this
                                //* DEBUG: */ die('ABORT:chunkLenHex=<pre>'.replaceReturnNewLine(htmlentities($chunkLenHex)).'</pre>');
-                               debug_report_bug(__FUNCTION__, __LINE__, 'Value ' . $chunkLenHex . ' is no valid hexa-decimal string.');
+                               reportBug(__FUNCTION__, __LINE__, 'Value ' . $chunkLenHex . ' is no valid hexa-decimal string.');
 
                                // This won't be reached
                                return $chunk;
@@ -543,8 +811,9 @@ offset[<em>'.__LINE__.'</em>]='.$offset.'<br />';
 
                        /*
                         * Hack for e.g. YaCy HTTPDaemon (Anomic Server), this HTTP server
-                        * is currently (revision 7567) broken and does not include the \r\n
-                        * characters when it does sent "chunked" messages.
+                        * is currently (revision 7567 and maybe earlier) broken and does
+                        * not include the \r\n characters when it sents a "chunked" HTTP
+                        * message.
                         */
                        $count = 0;
                        if (isBrokenHttpServerImplentation()) {
@@ -552,7 +821,11 @@ offset[<em>'.__LINE__.'</em>]='.$offset.'<br />';
                                $count = call_user_func_array($mbPrefix . 'substr_count', array($next, getConfig('HTTP_EOL')));
                        } // END - if
 
-                       // Correct it because we need to subtract occurrences of \r\n
+                       /*
+                        * Correct chunk length because some broken HTTP server
+                        * implementation subtract occurrences of \r\n in their chunk
+                        * lengths.
+                        */
                        $chunkLen = hexdec(rtrim($chunkLenHex, getConfig('HTTP_EOL'))) - ($count * strlen(getConfig('HTTP_EOL')));
 
                        // Add next chunk to $dechunk
@@ -575,7 +848,7 @@ chunk=<pre>'.replaceReturnNewLine(htmlentities($chunk)).'</pre>');
                                break;
                        } // END - if
 
-                       // Calculate next offset of chunk
+                       // Calculate offset of next chunk
                        $offset = call_user_func_array($mbPrefix . 'strpos', array($chunk, getConfig('HTTP_EOL'), $offset + $chunkLen)) + 2;
 
                        /* DEBUG: *
@@ -591,5 +864,92 @@ next[100]=<pre>'.replaceReturnNewLine(htmlentities(call_user_func_array($mbPrefi
        }
 } // END - if
 
+// Getter for request method
+function getHttpRequestMethod () {
+       // Console is default
+       $requestMethod = 'console';
+
+       // Is it set?
+       if (isset($_SERVER['REQUEST_METHOD'])) {
+               // Get current request method
+               $requestMethod = $_SERVER['REQUEST_METHOD'];
+       } // END - if
+
+       // Return it
+       return $requestMethod;
+}
+
+// Checks if 'content_type' is set
+function isContentTypeSet () {
+       return isset($GLOBALS['content_type']);
+}
+
+// Setter for content type
+function setContentType ($contentType) {
+       //* DEBUG: */ logDebugMessage(__FUNCTION__, __LINE__, 'contentType=' . $contentType);
+       $GLOBALS['content_type'] = (string) $contentType;
+}
+
+// Getter for content type
+function getContentType () {
+       // Is it there?
+       if (!isContentTypeSet()) {
+               // Please fix this
+               reportBug(__FUNCTION__, __LINE__, 'content_type not set in GLOBALS array.');
+       } // END - if
+
+       // Return it
+       //* DEBUG: */ logDebugMessage(__FUNCTION__, __LINE__, 'content_type=' . $GLOBALS['content_type']);
+       return $GLOBALS['content_type'];
+}
+
+// Logs wrong SERVER_NAME attempts
+function logWrongServerNameRedirect () {
+       // Is ext-sql_patches at least version 0.9.2?
+       if (isExtensionInstalledAndNewer('sql_patches', '0.9.2')) {
+               // Is there an entry?
+               if (countSumTotalData(detectServerName(), 'server_name_log', 'server_name_id', 'server_name', TRUE, str_replace('%', '{PER}', sprintf(" AND `server_name_remote_addr`='%s' AND `server_name_ua`='%s' AND `server_name_referrer`='%s'", sqlEscapeString(detectRemoteAddr(TRUE)), sqlEscapeString(detectUserAgent(TRUE)), sqlEscapeString(detectReferer(TRUE))))) == 1) {
+                       // Update counter, as all are the same
+                       sqlQueryEscaped("UPDATE
+       `{?_MYSQL_PREFIX?}_server_name_log`
+SET
+       `server_name_counter`=`server_name_counter`+1
+WHERE
+       `server_name`='%s' AND
+       `server_name_remote_addr`='%s' AND
+       `server_name_ua`='%s' AND
+       `server_name_referrer`='%s'
+LIMIT 1",
+                               array(
+                                       detectServerName(),
+                                       detectRemoteAddr(TRUE),
+                                       detectUserAgent(TRUE),
+                                       detectReferer(TRUE)
+                               ), __FUNCTION__, __LINE__);
+               } else {
+                       // Then log it away
+                       sqlQueryEscaped("INSERT INTO `{?_MYSQL_PREFIX?}_server_name_log` (`server_name`, `server_name_remote_addr`, `server_name_ua`, `server_name_referrer`) VALUES('%s','%s', '%s', '%s')",
+                               array(
+                                       detectServerName(),
+                                       detectRemoteAddr(TRUE),
+                                       detectUserAgent(TRUE),
+                                       detectReferer(TRUE)
+                               ), __FUNCTION__, __LINE__);
+               }
+       } // END - if
+}
+
+// Check if response status OK and array index 'response' is set
+function isHttpResponseStatusOkay ($response) {
+       // Assertion on array
+       assert(is_array($response));
+
+       // Test it
+       $isOkay = ((isset($response['status'])) && ($response['status'] == 'OK'));
+
+       // Return result
+       return $isOkay;
+}
+
 // [EOF]
 ?>