sjero.net Git - wget/blob - src/main.c

   1 /* Command line parsing.
   2    Copyright (C) 1995, 1996, 1997, 1998, 2000 Free Software Foundation, Inc.
   3
   4 This file is part of Wget.
   5
   6 This program is free software; you can redistribute it and/or modify
   7 it under the terms of the GNU General Public License as published by
   8 the Free Software Foundation; either version 2 of the License, or
   9 (at your option) any later version.
  10
  11 This program is distributed in the hope that it will be useful,
  12 but WITHOUT ANY WARRANTY; without even the implied warranty of
  13 MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
  14 GNU General Public License for more details.
  15
  16 You should have received a copy of the GNU General Public License
  17 along with this program; if not, write to the Free Software
  18 Foundation, Inc., 675 Mass Ave, Cambridge, MA 02139, USA.  */
  19
  20 #include <config.h>
  21
  22 #include <stdio.h>
  23 #include <stdlib.h>
  24 #include <ctype.h>
  25 #ifdef HAVE_UNISTD_H
  26 # include <unistd.h>
  27 #endif /* HAVE_UNISTD_H */
  28 #include <sys/types.h>
  29 #ifdef HAVE_STRING_H
  30 # include <string.h>
  31 #else
  32 # include <strings.h>
  33 #endif /* HAVE_STRING_H */
  34 #ifdef HAVE_SIGNAL_H
  35 # include <signal.h>
  36 #endif
  37 #ifdef HAVE_NLS
  38 #ifdef HAVE_LOCALE_H
  39 # include <locale.h>
  40 #endif /* HAVE_LOCALE_H */
  41 #endif /* HAVE_NLS */
  42
  43 #define OPTIONS_DEFINED_HERE    /* for options.h */
  44
  45 #include "wget.h"
  46 #include "utils.h"
  47 #include "getopt.h"
  48 #include "init.h"
  49 #include "retr.h"
  50 #include "recur.h"
  51 #include "host.h"
  52
  53 #ifndef PATH_SEPARATOR
  54 # define PATH_SEPARATOR '/'
  55 #endif
  56
  57 extern char *version_string;
  58
  59 #ifndef errno
  60 extern int errno;
  61 #endif
  62
  63 struct options opt;
  64
  65 /* From log.c.  */
  66 void log_init PARAMS ((const char *, int));
  67 void log_close PARAMS ((void));
  68 void redirect_output PARAMS ((const char *));
  69
  70 static RETSIGTYPE redirect_output_signal PARAMS ((int));
  71
  72 const char *exec_name;
  73 \f
  74 /* Initialize I18N.  The initialization amounts to invoking
  75    setlocale(), bindtextdomain() and textdomain().
  76    Does nothing if NLS is disabled or missing.  */
  77 static void
  78 i18n_initialize (void)
  79 {
  80   /* If HAVE_NLS is defined, assume the existence of the three
  81      functions invoked here.  */
  82 #ifdef HAVE_NLS
  83   /* Set the current locale.  */
  84   /* Here we use LC_MESSAGES instead of LC_ALL, for two reasons.
  85      First, message catalogs are all of I18N Wget uses anyway.
  86      Second, setting LC_ALL has a dangerous potential of messing
  87      things up.  For example, when in a foreign locale, Solaris
  88      strptime() fails to handle international dates correctly, which
  89      makes http_atotm() malfunction.  */
  90 #ifdef LC_MESSAGES
  91   setlocale (LC_MESSAGES, "");
  92 #else
  93   setlocale (LC_ALL, "");
  94 #endif
  95   /* Set the text message domain.  */
  96   bindtextdomain ("wget", LOCALEDIR);
  97   textdomain ("wget");
  98 #endif /* HAVE_NLS */
  99 }
 100
 101 /* It's kosher to declare these here because their interface _has_ to
 102    be void foo(void).  */
 103 void url_init PARAMS ((void));
 104 void host_init PARAMS ((void));
 105
 106 /* This just calls the various initialization functions from the
 107    modules that need one-time initialization. */
 108 static void
 109 private_initialize (void)
 110 {
 111   url_init ();
 112   host_init ();
 113 }
 114 \f
 115 /* Print the usage message.  */
 116 static void
 117 print_usage (void)
 118 {
 119   printf (_("Usage: %s [OPTION]... [URL]...\n"), exec_name);
 120 }
 121
 122 /* Print the help message, describing all the available options.  If
 123    you add an option, be sure to update this list.  */
 124 static void
 125 print_help (void)
 126 {
 127   printf (_("GNU Wget %s, a non-interactive network retriever.\n"),
 128           version_string);
 129   print_usage ();
 130   /* Had to split this in parts, so the #@@#%# Ultrix compiler and cpp
 131      don't bitch.  Also, it makes translation much easier.  */
 132   printf ("%s%s%s%s%s%s%s%s%s%s", _("\
 133 \n\
 134 Mandatory arguments to long options are mandatory for short options too.\n\
 135 \n"), _("\
 136 Startup:\n\
 137   -V,  --version           display the version of Wget and exit.\n\
 138   -h,  --help              print this help.\n\
 139   -b,  --background        go to background after startup.\n\
 140   -e,  --execute=COMMAND   execute a `.wgetrc\'-style command.\n\
 141 \n"), _("\
 142 Logging and input file:\n\
 143   -o,  --output-file=FILE     log messages to FILE.\n\
 144   -a,  --append-output=FILE   append messages to FILE.\n\
 145   -d,  --debug                print debug output.\n\
 146   -q,  --quiet                quiet (no output).\n\
 147   -v,  --verbose              be verbose (this is the default).\n\
 148   -nv, --non-verbose          turn off verboseness, without being quiet.\n\
 149   -i,  --input-file=FILE      download URLs found in FILE.\n\
 150   -F,  --force-html           treat input file as HTML.\n\
 151   -B,  --base=URL             prepends URL to relative links in -F -i file.\n\
 152 \n"), _("\
 153 Download:\n\
 154        --bind-address=ADDRESS   bind to ADDRESS (hostname or IP) on local host.\n\
 155   -t,  --tries=NUMBER           set number of retries to NUMBER (0 unlimits).\n\
 156   -O   --output-document=FILE   write documents to FILE.\n\
 157   -nc, --no-clobber             don\'t clobber existing files or use .# suffixes.\n\
 158   -c,  --continue               restart getting an existing file.\n\
 159        --dot-style=STYLE        set retrieval display style.\n\
 160   -N,  --timestamping           don\'t retrieve files if older than local.\n\
 161   -S,  --server-response        print server response.\n\
 162        --spider                 don\'t download anything.\n\
 163   -T,  --timeout=SECONDS        set the read timeout to SECONDS.\n\
 164   -w,  --wait=SECONDS           wait SECONDS between retrievals.\n\
 165        --waitretry=SECONDS      wait 1...SECONDS between retries of a retrieval.\n\
 166   -Y,  --proxy=on/off           turn proxy on or off.\n\
 167   -Q,  --quota=NUMBER           set retrieval quota to NUMBER.\n\
 168 \n"),  _("\
 169 Directories:\n\
 170   -nd  --no-directories            don\'t create directories.\n\
 171   -x,  --force-directories         force creation of directories.\n\
 172   -nH, --no-host-directories       don\'t create host directories.\n\
 173   -P,  --directory-prefix=PREFIX   save files to PREFIX/...\n\
 174        --cut-dirs=NUMBER           ignore NUMBER remote directory components.\n\
 175 \n"), _("\
 176 HTTP options:\n\
 177        --http-user=USER      set http user to USER.\n\
 178        --http-passwd=PASS    set http password to PASS.\n\
 179   -C,  --cache=on/off        (dis)allow server-cached data (normally allowed).\n\
 180   -E,  --html-extension      save all text/html documents with .html extension.\n\
 181        --ignore-length       ignore `Content-Length\' header field.\n\
 182        --header=STRING       insert STRING among the headers.\n\
 183        --proxy-user=USER     set USER as proxy username.\n\
 184        --proxy-passwd=PASS   set PASS as proxy password.\n\
 185        --referer=URL         include `Referer: URL\' header in HTTP request.\n\
 186   -s,  --save-headers        save the HTTP headers to file.\n\
 187   -U,  --user-agent=AGENT    identify as AGENT instead of Wget/VERSION.\n\
 188 \n"), _("\
 189 FTP options:\n\
 190        --retr-symlinks   when recursing, retrieve linked-to files (not dirs).\n\
 191   -g,  --glob=on/off     turn file name globbing on or off.\n\
 192        --passive-ftp     use the \"passive\" transfer mode.\n\
 193 \n"), _("\
 194 Recursive retrieval:\n\
 195   -r,  --recursive             recursive web-suck -- use with care!.\n\
 196   -l,  --level=NUMBER          maximum recursion depth (inf or 0 for infinite).\n\
 197        --delete-after          delete files locally after downloading them.\n\
 198   -k,  --convert-links         convert non-relative links to relative.\n\
 199   -K,  --backup-converted      before converting file X, back up as X.orig.\n\
 200   -m,  --mirror                shortcut option equivalent to -r -N -l inf -nr.\n\
 201   -nr, --dont-remove-listing   don\'t remove `.listing\' files.\n\
 202   -p,  --page-requisites       get all images, etc. needed to display HTML page.\n\
 203 \n"), _("\
 204 Recursive accept/reject:\n\
 205   -A,  --accept=LIST                comma-separated list of accepted extensions.\n\
 206   -R,  --reject=LIST                comma-separated list of rejected extensions.\n\
 207   -D,  --domains=LIST               comma-separated list of accepted domains.\n\
 208        --exclude-domains=LIST       comma-separated list of rejected domains.\n\
 209        --follow-ftp                 follow FTP links from HTML documents.\n\
 210        --follow-tags=LIST           comma-separated list of followed HTML tags.\n\
 211   -G,  --ignore-tags=LIST           comma-separated list of ignored HTML tags.\n\
 212   -H,  --span-hosts                 go to foreign hosts when recursive.\n\
 213   -L,  --relative                   follow relative links only.\n\
 214   -I,  --include-directories=LIST   list of allowed directories.\n\
 215   -X,  --exclude-directories=LIST   list of excluded directories.\n\
 216   -nh, --no-host-lookup             don\'t DNS-lookup hosts.\n\
 217   -np, --no-parent                  don\'t ascend to the parent directory.\n\
 218 \n"), _("Mail bug reports and suggestions to <bug-wget@gnu.org>.\n"));
 219 }
 220 \f
 221 int
 222 main (int argc, char *const *argv)
 223 {
 224   char **url, **t;
 225   int i, c, nurl, status, append_to_log;
 226   int wr = 0;
 227
 228   static struct option long_options[] =
 229   {
 230     /* Options without arguments: */
 231     { "background", no_argument, NULL, 'b' },
 232     { "continue", no_argument, NULL, 'c' },
 233     { "convert-links", no_argument, NULL, 'k' },
 234     { "backup-converted", no_argument, NULL, 'K' },
 235     { "debug", no_argument, NULL, 'd' },
 236     { "dont-remove-listing", no_argument, NULL, 21 },
 237     { "email-address", no_argument, NULL, 26 }, /* undocumented (debug) */
 238     { "follow-ftp", no_argument, NULL, 14 },
 239     { "force-directories", no_argument, NULL, 'x' },
 240     { "force-hier", no_argument, NULL, 'x' }, /* obsolete */
 241     { "force-html", no_argument, NULL, 'F'},
 242     { "help", no_argument, NULL, 'h' },
 243     { "html-extension", no_argument, NULL, 'E' },
 244     { "ignore-length", no_argument, NULL, 10 },
 245     { "mirror", no_argument, NULL, 'm' },
 246     { "no-clobber", no_argument, NULL, 13 },
 247     { "no-directories", no_argument, NULL, 19 },
 248     { "no-host-directories", no_argument, NULL, 20 },
 249     { "no-host-lookup", no_argument, NULL, 22 },
 250     { "no-http-keep-alive", no_argument, NULL, 28 },
 251     { "no-parent", no_argument, NULL, 5 },
 252     { "non-verbose", no_argument, NULL, 18 },
 253     { "passive-ftp", no_argument, NULL, 11 },
 254     { "page-requisites", no_argument, NULL, 'p' },
 255     { "quiet", no_argument, NULL, 'q' },
 256     { "recursive", no_argument, NULL, 'r' },
 257     { "relative", no_argument, NULL, 'L' },
 258     { "retr-symlinks", no_argument, NULL, 9 },
 259     { "save-headers", no_argument, NULL, 's' },
 260     { "server-response", no_argument, NULL, 'S' },
 261     { "span-hosts", no_argument, NULL, 'H' },
 262     { "spider", no_argument, NULL, 4 },
 263     { "timestamping", no_argument, NULL, 'N' },
 264     { "verbose", no_argument, NULL, 'v' },
 265     { "version", no_argument, NULL, 'V' },
 266
 267     /* Options accepting an argument: */
 268     { "accept", required_argument, NULL, 'A' },
 269     { "append-output", required_argument, NULL, 'a' },
 270     { "backups", required_argument, NULL, 23 }, /* undocumented */
 271     { "base", required_argument, NULL, 'B' },
 272     { "bind-address", required_argument, NULL, 27 },
 273     { "cache", required_argument, NULL, 'C' },
 274     { "cut-dirs", required_argument, NULL, 17 },
 275     { "delete-after", no_argument, NULL, 8 },
 276     { "directory-prefix", required_argument, NULL, 'P' },
 277     { "domains", required_argument, NULL, 'D' },
 278     { "dot-style", required_argument, NULL, 6 },
 279     { "execute", required_argument, NULL, 'e' },
 280     { "exclude-directories", required_argument, NULL, 'X' },
 281     { "exclude-domains", required_argument, NULL, 12 },
 282     { "follow-tags", required_argument, NULL, 25 },
 283     { "glob", required_argument, NULL, 'g' },
 284     { "header", required_argument, NULL, 3 },
 285     { "htmlify", required_argument, NULL, 7 },
 286     { "http-passwd", required_argument, NULL, 2 },
 287     { "http-user", required_argument, NULL, 1 },
 288     { "ignore-tags", required_argument, NULL, 'G' },
 289     { "include-directories", required_argument, NULL, 'I' },
 290     { "input-file", required_argument, NULL, 'i' },
 291     { "level", required_argument, NULL, 'l' },
 292     { "no", required_argument, NULL, 'n' },
 293     { "output-document", required_argument, NULL, 'O' },
 294     { "output-file", required_argument, NULL, 'o' },
 295     { "proxy", required_argument, NULL, 'Y' },
 296     { "proxy-passwd", required_argument, NULL, 16 },
 297     { "proxy-user", required_argument, NULL, 15 },
 298     { "quota", required_argument, NULL, 'Q' },
 299     { "reject", required_argument, NULL, 'R' },
 300     { "timeout", required_argument, NULL, 'T' },
 301     { "tries", required_argument, NULL, 't' },
 302     { "user-agent", required_argument, NULL, 'U' },
 303     { "referer", required_argument, NULL, 129 },
 304     { "use-proxy", required_argument, NULL, 'Y' },
 305     { "wait", required_argument, NULL, 'w' },
 306     { "waitretry", required_argument, NULL, 24 },
 307     { 0, 0, 0, 0 }
 308   };
 309
 310   i18n_initialize ();
 311   private_initialize ();
 312
 313   append_to_log = 0;
 314
 315   /* Construct the name of the executable, without the directory part.  */
 316   exec_name = strrchr (argv[0], PATH_SEPARATOR);
 317   if (!exec_name)
 318     exec_name = argv[0];
 319   else
 320     ++exec_name;
 321
 322 #ifdef WINDOWS
 323   windows_main_junk (&argc, (char **) argv, (char **) &exec_name);
 324 #endif
 325
 326   initialize (); /* sets option defaults; reads the system wgetrc and .wgetrc */
 327
 328   /* [Is the order of the option letters significant?  If not, they should be
 329       alphabetized, like the long_options.  The only thing I know for sure is
 330       that the options with required arguments must be followed by a ':'.
 331       -- Dan Harkless <dan-wget@dilvish.speed.net>] */
 332   while ((c = getopt_long (argc, argv, "\
 333 hpVqvdkKsxmNWrHSLcFbEY:G:g:T:U:O:l:n:i:o:a:t:D:A:R:P:B:e:Q:X:I:w:",
 334                            long_options, (int *)0)) != EOF)
 335     {
 336       switch (c)
 337         {
 338           /* Options without arguments: */
 339         case 4:
 340           setval ("spider", "on");
 341           break;
 342         case 5:
 343           setval ("noparent", "on");
 344           break;
 345         case 8:
 346           setval ("deleteafter", "on");
 347           break;
 348         case 9:
 349           setval ("retrsymlinks", "on");
 350           break;
 351         case 10:
 352           setval ("ignorelength", "on");
 353           break;
 354         case 11:
 355           setval ("passiveftp", "on");
 356           break;
 357         case 13:
 358           setval ("noclobber", "on");
 359           break;
 360         case 14:
 361           setval ("followftp", "on");
 362           break;
 363         case 17:
 364           setval ("cutdirs", optarg);
 365           break;
 366         case 18:
 367           setval ("verbose", "off");
 368           break;
 369         case 19:
 370           setval ("dirstruct", "off");
 371           break;
 372         case 20:
 373           setval ("addhostdir", "off");
 374           break;
 375         case 21:
 376           setval ("removelisting", "off");
 377           break;
 378         case 22:
 379           setval ("simplehostcheck", "on");
 380           break;
 381         case 26:
 382           /* For debugging purposes.  */
 383           printf ("%s\n", ftp_getaddress ());
 384           exit (0);
 385           break;
 386         case 27:
 387           setval ("bindaddress", optarg);
 388           break;
 389         case 28:
 390           setval ("httpkeepalive", "off");
 391           break;
 392         case 'b':
 393           setval ("background", "on");
 394           break;
 395         case 'c':
 396           setval ("continue", "on");
 397           break;
 398         case 'd':
 399 #ifdef DEBUG
 400           setval ("debug", "on");
 401 #else  /* not DEBUG */
 402           fprintf (stderr, _("%s: debug support not compiled in.\n"),
 403                    exec_name);
 404 #endif /* not DEBUG */
 405           break;
 406         case 'E':
 407           setval ("htmlextension", "on");
 408           break;
 409         case 'F':
 410           setval ("forcehtml", "on");
 411           break;
 412         case 'H':
 413           setval ("spanhosts", "on");
 414           break;
 415         case 'h':
 416           print_help ();
 417 #ifdef WINDOWS
 418           ws_help (exec_name);
 419 #endif
 420           exit (0);
 421           break;
 422         case 'K':
 423           setval ("backupconverted", "on");
 424           break;
 425         case 'k':
 426           setval ("convertlinks", "on");
 427           break;
 428         case 'L':
 429           setval ("relativeonly", "on");
 430           break;
 431         case 'm':
 432           setval ("mirror", "on");
 433           break;
 434         case 'N':
 435           setval ("timestamping", "on");
 436           break;
 437         case 'p':
 438           setval ("pagerequisites", "on");
 439           break;
 440         case 'S':
 441           setval ("serverresponse", "on");
 442           break;
 443         case 's':
 444           setval ("saveheaders", "on");
 445           break;
 446         case 'q':
 447           setval ("quiet", "on");
 448           break;
 449         case 'r':
 450           setval ("recursive", "on");
 451           break;
 452         case 'V':
 453           printf ("GNU Wget %s\n\n", version_string);
 454           printf ("%s", _("\
 455 Copyright (C) 1995, 1996, 1997, 1998, 2000 Free Software Foundation, Inc.\n\
 456 This program is distributed in the hope that it will be useful,\n\
 457 but WITHOUT ANY WARRANTY; without even the implied warranty of\n\
 458 MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the\n\
 459 GNU General Public License for more details.\n"));
 460           printf (_("\nOriginally written by Hrvoje Niksic <hniksic@arsdigita.com>.\n"));
 461           exit (0);
 462           break;
 463         case 'v':
 464           setval ("verbose", "on");
 465           break;
 466         case 'x':
 467           setval ("dirstruct", "on");
 468           break;
 469
 470           /* Options accepting an argument: */
 471         case 1:
 472           setval ("httpuser", optarg);
 473           break;
 474         case 2:
 475           setval ("httppasswd", optarg);
 476           break;
 477         case 3:
 478           setval ("header", optarg);
 479           break;
 480         case 6:
 481           setval ("dotstyle", optarg);
 482           break;
 483         case 7:
 484           setval ("htmlify", optarg);
 485           break;
 486         case 12:
 487           setval ("excludedomains", optarg);
 488           break;
 489         case 15:
 490           setval ("proxyuser", optarg);
 491           break;
 492         case 16:
 493           setval ("proxypasswd", optarg);
 494           break;
 495         case 23:
 496           setval ("backups", optarg);
 497           break;
 498         case 24:
 499           setval ("waitretry", optarg);
 500           wr = 1;
 501           break;
 502         case 25:
 503           setval ("followtags", optarg);
 504           break;
 505         case 129:
 506           setval ("referer", optarg);
 507           break;
 508         case 'A':
 509           setval ("accept", optarg);
 510           break;
 511         case 'a':
 512           setval ("logfile", optarg);
 513           append_to_log = 1;
 514           break;
 515         case 'B':
 516           setval ("base", optarg);
 517           break;
 518         case 'C':
 519           setval ("cache", optarg);
 520           break;
 521         case 'D':
 522           setval ("domains", optarg);
 523           break;
 524         case 'e':
 525           {
 526             char *com, *val;
 527             if (parse_line (optarg, &com, &val))
 528               {
 529                 if (!setval (com, val))
 530                   exit (1);
 531               }
 532             else
 533               {
 534                 fprintf (stderr, _("%s: %s: invalid command\n"), exec_name,
 535                          optarg);
 536                 exit (1);
 537               }
 538             xfree (com);
 539             xfree (val);
 540           }
 541           break;
 542         case 'G':
 543           setval ("ignoretags", optarg);
 544           break;
 545         case 'g':
 546           setval ("glob", optarg);
 547           break;
 548         case 'I':
 549           setval ("includedirectories", optarg);
 550           break;
 551         case 'i':
 552           setval ("input", optarg);
 553           break;
 554         case 'l':
 555           setval ("reclevel", optarg);
 556           break;
 557         case 'n':
 558           {
 559             /* #### The n? options are utter crock!  */
 560             char *p;
 561
 562             for (p = optarg; *p; p++)
 563               switch (*p)
 564                 {
 565                 case 'v':
 566                   setval ("verbose", "off");
 567                   break;
 568                 case 'h':
 569                   setval ("simplehostcheck", "on");
 570                   break;
 571                 case 'H':
 572                   setval ("addhostdir", "off");
 573                   break;
 574                 case 'd':
 575                   setval ("dirstruct", "off");
 576                   break;
 577                 case 'c':
 578                   setval ("noclobber", "on");
 579                   break;
 580                 case 'r':
 581                   setval ("removelisting", "off");
 582                   break;
 583                 case 'p':
 584                   setval ("noparent", "on");
 585                   break;
 586                 case 'k':
 587                   setval ("httpkeepalive", "off");
 588                   break;
 589                 default:
 590                   printf (_("%s: illegal option -- `-n%c'\n"), exec_name, *p);
 591                   print_usage ();
 592                   printf ("\n");
 593                   printf (_("Try `%s --help\' for more options.\n"), exec_name);
 594                   exit (1);
 595                 }
 596             break;
 597           }
 598         case 'O':
 599           setval ("outputdocument", optarg);
 600           break;
 601         case 'o':
 602           setval ("logfile", optarg);
 603           break;
 604         case 'P':
 605           setval ("dirprefix", optarg);
 606           break;
 607         case 'Q':
 608           setval ("quota", optarg);
 609           break;
 610         case 'R':
 611           setval ("reject", optarg);
 612           break;
 613         case 'T':
 614           setval ("timeout", optarg);
 615           break;
 616         case 't':
 617           setval ("tries", optarg);
 618           break;
 619         case 'U':
 620           setval ("useragent", optarg);
 621           break;
 622         case 'w':
 623           setval ("wait", optarg);
 624           break;
 625         case 'X':
 626           setval ("excludedirectories", optarg);
 627           break;
 628         case 'Y':
 629           setval ("useproxy", optarg);
 630           break;
 631
 632         case '?':
 633           print_usage ();
 634           printf ("\n");
 635           printf (_("Try `%s --help' for more options.\n"), exec_name);
 636           exit (0);
 637           break;
 638         }
 639     }
 640
 641   /* All user options have now been processed, so it's now safe to do
 642      interoption dependency checks. */
 643
 644   if (opt.reclevel == 0)
 645     opt.reclevel = INFINITE_RECURSION;  /* see wget.h for commentary on this */
 646
 647   if (opt.page_requisites && !opt.recursive)
 648     {
 649       opt.recursive = TRUE;
 650       opt.reclevel = 0;
 651       if (!opt.no_dirstruct)
 652         opt.dirstruct = TRUE;  /* usually handled by cmd_spec_recursive() */
 653     }
 654
 655   if (opt.verbose == -1)
 656     opt.verbose = !opt.quiet;
 657
 658   /* Retain compatibility with previous scripts.
 659      if wait has been set, but waitretry has not, give it the wait value.
 660      A simple check on the values is not enough, I could have set
 661      wait to n>0 and waitretry to 0 - HEH */
 662   if (opt.wait && !wr)
 663     {
 664       char  opt_wait_str[256];  /* bigger than needed buf to prevent overflow */
 665
 666       sprintf(opt_wait_str, "%ld", opt.wait);
 667       setval ("waitretry", opt_wait_str);
 668     }
 669
 670   /* Sanity checks.  */
 671   if (opt.verbose && opt.quiet)
 672     {
 673       printf (_("Can't be verbose and quiet at the same time.\n"));
 674       print_usage ();
 675       exit (1);
 676     }
 677   if (opt.timestamping && opt.noclobber)
 678     {
 679       printf (_("\
 680 Can't timestamp and not clobber old files at the same time.\n"));
 681       print_usage ();
 682       exit (1);
 683     }
 684   nurl = argc - optind;
 685   if (!nurl && !opt.input_filename)
 686     {
 687       /* No URL specified.  */
 688       printf (_("%s: missing URL\n"), exec_name);
 689       print_usage ();
 690       printf ("\n");
 691       /* #### Something nicer should be printed here -- similar to the
 692          pre-1.5 `--help' page.  */
 693       printf (_("Try `%s --help' for more options.\n"), exec_name);
 694       exit (1);
 695     }
 696
 697   if (opt.background)
 698     fork_to_background ();
 699
 700   /* Allocate basic pointer.  */
 701   url = ALLOCA_ARRAY (char *, nurl + 1);
 702   /* Fill in the arguments.  */
 703   for (i = 0; i < nurl; i++, optind++)
 704     {
 705       char *irix4_cc_needs_this;
 706       STRDUP_ALLOCA (irix4_cc_needs_this, argv[optind]);
 707       url[i] = irix4_cc_needs_this;
 708     }
 709   url[i] = NULL;
 710
 711   /* Change the title of console window on Windows.  #### I think this
 712      statement should belong to retrieve_url().  --hniksic.  */
 713 #ifdef WINDOWS
 714   ws_changetitle (*url, nurl);
 715 #endif
 716
 717   /* Initialize logging.  */
 718   log_init (opt.lfilename, append_to_log);
 719
 720   DEBUGP (("DEBUG output created by Wget %s on %s.\n\n", version_string,
 721            OS_TYPE));
 722   /* Open the output filename if necessary.  */
 723   if (opt.output_document)
 724     {
 725       if (HYPHENP (opt.output_document))
 726         opt.dfp = stdout;
 727       else
 728         {
 729           opt.dfp = fopen (opt.output_document, "wb");
 730           if (opt.dfp == NULL)
 731             {
 732               perror (opt.output_document);
 733               exit (1);
 734             }
 735         }
 736     }
 737
 738 #ifdef WINDOWS
 739   ws_startup ();
 740 #endif
 741
 742   /* Setup the signal handler to redirect output when hangup is
 743      received.  */
 744 #ifdef HAVE_SIGNAL
 745   if (signal(SIGHUP, SIG_IGN) != SIG_IGN)
 746     signal(SIGHUP, redirect_output_signal);
 747   /* ...and do the same for SIGUSR1.  */
 748   signal (SIGUSR1, redirect_output_signal);
 749   /* Writing to a closed socket normally signals SIGPIPE, and the
 750      process exits.  What we want is to ignore SIGPIPE and just check
 751      for the return value of write().  */
 752   signal (SIGPIPE, SIG_IGN);
 753 #endif /* HAVE_SIGNAL */
 754
 755   status = RETROK;              /* initialize it, just-in-case */
 756   recursive_reset ();
 757   /* Retrieve the URLs from argument list.  */
 758   for (t = url; *t; t++)
 759     {
 760       char *filename, *redirected_URL;
 761       int dt;
 762
 763       status = retrieve_url (*t, &filename, &redirected_URL, NULL, &dt);
 764       if (opt.recursive && status == RETROK && (dt & TEXTHTML))
 765         status = recursive_retrieve (filename,
 766                                      redirected_URL ? redirected_URL : *t);
 767
 768       if (opt.delete_after && file_exists_p(filename))
 769         {
 770           DEBUGP (("Removing file due to --delete-after in main():\n"));
 771           logprintf (LOG_VERBOSE, _("Removing %s.\n"), filename);
 772           if (unlink (filename))
 773             logprintf (LOG_NOTQUIET, "unlink: %s\n", strerror (errno));
 774         }
 775
 776       FREE_MAYBE (redirected_URL);
 777       FREE_MAYBE (filename);
 778     }
 779
 780   /* And then from the input file, if any.  */
 781   if (opt.input_filename)
 782     {
 783       int count;
 784       status = retrieve_from_file (opt.input_filename, opt.force_html, &count);
 785       if (!count)
 786         logprintf (LOG_NOTQUIET, _("No URLs found in %s.\n"),
 787                    opt.input_filename);
 788     }
 789   /* Print the downloaded sum.  */
 790   if (opt.recursive
 791       || nurl > 1
 792       || (opt.input_filename && opt.downloaded != 0))
 793     {
 794       logprintf (LOG_NOTQUIET,
 795                  _("\nFINISHED --%s--\nDownloaded: %s bytes in %d files\n"),
 796                  time_str (NULL),
 797                  (opt.downloaded_overflow ?
 798                   "<overflow>" : legible_very_long (opt.downloaded)),
 799                  opt.numurls);
 800       /* Print quota warning, if exceeded.  */
 801       if (downloaded_exceeds_quota ())
 802         logprintf (LOG_NOTQUIET,
 803                    _("Download quota (%s bytes) EXCEEDED!\n"),
 804                    legible (opt.quota));
 805     }
 806   if (opt.convert_links & !opt.delete_after)
 807     {
 808       convert_all_links ();
 809     }
 810   log_close ();
 811   cleanup ();
 812 #ifdef DEBUG_MALLOC
 813   print_malloc_debug_stats ();
 814 #endif
 815   if (status == RETROK)
 816     return 0;
 817   else
 818     return 1;
 819 }
 820 \f
 821 /* Hangup signal handler.  When wget receives SIGHUP or SIGUSR1, it
 822    will proceed operation as usual, trying to write into a log file.
 823    If that is impossible, the output will be turned off.  */
 824
 825 #ifdef HAVE_SIGNAL
 826 static RETSIGTYPE
 827 redirect_output_signal (int sig)
 828 {
 829   char tmp[100];
 830   signal (sig, redirect_output_signal);
 831   /* Please note that the double `%' in `%%s' is intentional, because
 832      redirect_output passes tmp through printf.  */
 833   sprintf (tmp, _("%s received, redirecting output to `%%s'.\n"),
 834            (sig == SIGHUP ? "SIGHUP" :
 835             (sig == SIGUSR1 ? "SIGUSR1" :
 836              "WTF?!")));
 837   redirect_output (tmp);
 838 }
 839 #endif /* HAVE_SIGNAL */