mod/parse_url.php

   1 <?php
   2 /**
   3  * @copyright Copyright (C) 2020, Friendica
   4  *
   5  * @license GNU AGPL version 3 or any later version
   6  *
   7  * This program is free software: you can redistribute it and/or modify
   8  * it under the terms of the GNU Affero General Public License as
   9  * published by the Free Software Foundation, either version 3 of the
  10  * License, or (at your option) any later version.
  11  *
  12  * This program is distributed in the hope that it will be useful,
  13  * but WITHOUT ANY WARRANTY; without even the implied warranty of
  14  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
  15  * GNU Affero General Public License for more details.
  16  *
  17  * You should have received a copy of the GNU Affero General Public License
  18  * along with this program.  If not, see <https://www.gnu.org/licenses/>.
  19  *
  20  * This module does parse an url for embeddable content (audio, video, image files or link)
  21  * information and does format this information to BBCode
  22  *
  23  * @see ParseUrl::getSiteinfo() for more information about scraping embeddable content
  24  */
  25
  26 use Friendica\App;
  27 use Friendica\Content\PageInfo;
  28 use Friendica\Core\Hook;
  29 use Friendica\Core\Logger;
  30 use Friendica\Core\System;
  31 use Friendica\DI;
  32 use Friendica\Util\ParseUrl;
  33 use Friendica\Util\Strings;
  34
  35 function parse_url_content(App $a)
  36 {
  37         $text = null;
  38         $str_tags = '';
  39         $format = '';
  40         $ret= ['success' => false, 'contentType' => ''];
  41
  42         $br = "\n";
  43
  44         if (!empty($_GET['binurl']) && Strings::isHex($_GET['binurl'])) {
  45                 $url = trim(hex2bin($_GET['binurl']));
  46         } elseif (!empty($_GET['url'])) {
  47                 $url = trim($_GET['url']);
  48         // fallback in case no url is valid
  49         } else {
  50                 Logger::info('No url given');
  51                 exit();
  52         }
  53
  54         if (!empty($_GET['title'])) {
  55                 $title = strip_tags(trim($_GET['title']));
  56         }
  57
  58         if (!empty($_GET['description'])) {
  59                 $text = strip_tags(trim($_GET['description']));
  60         }
  61
  62         if (!empty($_GET['tags'])) {
  63                 $arr_tags = ParseUrl::convertTagsToArray($_GET['tags']);
  64                 if (count($arr_tags)) {
  65                         $str_tags = $br . implode(' ', $arr_tags) . $br;
  66                 }
  67         }
  68
  69         if (isset($_GET['format']) && $_GET['format'] == 'json') {
  70                 $format = 'json';
  71         }
  72
  73         // Add url scheme if it is missing
  74         $arrurl = parse_url($url);
  75         if (empty($arrurl['scheme'])) {
  76                 if (!empty($arrurl['host'])) {
  77                         $url = 'http:' . $url;
  78                 } else {
  79                         $url = 'http://' . $url;
  80                 }
  81         }
  82
  83         Logger::log($url);
  84
  85         // Check if the URL is an image, video or audio file. If so format
  86         // the URL with the corresponding BBCode media tag
  87         // Fetch the header of the URL
  88         $curlResponse = DI::httpRequest()->get($url, ['novalidate' => true, 'nobody' => true]);
  89
  90         if ($curlResponse->isSuccess()) {
  91                 // Convert the header fields into an array
  92                 $hdrs = [];
  93                 $h = explode("\n", $curlResponse->getHeader());
  94                 foreach ($h as $l) {
  95                         $header = array_map('trim', explode(':', trim($l), 2));
  96                         if (count($header) == 2) {
  97                                 list($k, $v) = $header;
  98                                 $hdrs[$k] = $v;
  99                         }
 100                 }
 101                 $type = null;
 102                 $content_type = '';
 103                 $bbcode = '';
 104                 if (array_key_exists('Content-Type', $hdrs)) {
 105                         $type = $hdrs['Content-Type'];
 106                 }
 107                 if ($type) {
 108                         if (stripos($type, 'image/') !== false) {
 109                                 $content_type = 'image';
 110                                 $bbcode = $br . '[img]' . $url . '[/img]' . $br;
 111                         }
 112                         if (stripos($type, 'video/') !== false) {
 113                                 $content_type = 'video';
 114                                 $bbcode = $br . '[video]' . $url . '[/video]' . $br;
 115                         }
 116                         if (stripos($type, 'audio/') !== false) {
 117                                 $content_type = 'audio';
 118                                 $bbcode = $br . '[audio]' . $url . '[/audio]' . $br;
 119                         }
 120                 }
 121                 if (!empty($content_type)) {
 122                         if ($format == 'json') {
 123                                 $ret['contentType'] = $content_type;
 124                                 $ret['data'] = ['url' => $url];
 125                                 $ret['success'] = true;
 126                                 System::jsonExit($ret);
 127                         }
 128
 129                         echo $bbcode;
 130                         exit();
 131                 }
 132         }
 133
 134
 135         $template = '[bookmark=%s]%s[/bookmark]%s';
 136
 137         $arr = ['url' => $url, 'text' => ''];
 138
 139         Hook::callAll('parse_link', $arr);
 140
 141         if (strlen($arr['text'])) {
 142                 echo $arr['text'];
 143                 exit();
 144         }
 145
 146         // If there is already some content information submitted we don't
 147         // need to parse the url for content.
 148         if (!empty($url) && !empty($title) && !empty($text)) {
 149                 $title = str_replace(["\r", "\n"], ['', ''], $title);
 150
 151                 $text = '[quote]' . trim($text) . '[/quote]' . $br;
 152
 153                 $result = sprintf($template, $url, ($title) ? $title : $url, $text) . $str_tags;
 154
 155                 Logger::log('(unparsed): returns: ' . $result);
 156
 157                 echo $result;
 158                 exit();
 159         }
 160
 161         // Fetch the information directly from the webpage
 162         $siteinfo = ParseUrl::getSiteinfo($url);
 163
 164         unset($siteinfo['keywords']);
 165
 166         // Bypass attachment if parse url for a comment
 167         if (!empty($_GET['noAttachment'])) {
 168                 echo $br . '[url=' . $url . ']' . $siteinfo['title'] . '[/url]';
 169                 exit();
 170         }
 171
 172         if ($format == 'json') {
 173                 $ret['data'] = $siteinfo;
 174                 $ret['contentType'] = 'attachment';
 175                 $ret['success'] = true;
 176
 177                 System::jsonExit($ret);
 178         }
 179
 180         // Format it as BBCode attachment
 181         $info = "\n" . PageInfo::getFooterFromData($siteinfo);
 182
 183         echo $info;
 184
 185         exit();
 186 }
 187
 188 /**
 189  * Legacy function to call ParseUrl::getSiteinfoCached
 190  *
 191  * Note: We have moved the function to ParseUrl.php. This function is only for
 192  * legacy support and will be remove in the future
 193  *
 194  * @param string $url         The url of the page which should be scraped
 195  * @param bool   $no_guessing If true the parse doens't search for
 196  *                            preview pictures
 197  * @param bool   $do_oembed   The false option is used by the function fetch_oembed()
 198  *                            to avoid endless loops
 199  *
 200  * @return array which contains needed data for embedding
 201  *
 202  * @throws \Friendica\Network\HTTPException\InternalServerErrorException
 203  * @see   ParseUrl::getSiteinfoCached()
 204  *
 205  * @deprecated since version 3.6 use ParseUrl::getSiteinfoCached instead
 206  */
 207 function parseurl_getsiteinfo_cached($url, $no_guessing = false, $do_oembed = true)
 208 {
 209         $siteinfo = ParseUrl::getSiteinfoCached($url, $no_guessing, $do_oembed);
 210         return $siteinfo;
 211 }