sjero.net Git - wget/blob - src/ChangeLog

   1 2001-04-29  Hrvoje Niksic  <hniksic@arsdigita.com>
   2
   3         * ftp.c (ftp_loop_internal): Don't set NO_TRUNCATE if the file is
   4         empty.
   5
   6 2001-04-29  Hrvoje Niksic  <hniksic@arsdigita.com>
   7
   8         * main.c (main): Make `--cookies' respect its argument.
   9
  10 2001-04-28  Hrvoje Niksic  <hniksic@arsdigita.com>
  11
  12         * main.c (main): Removed undocumented option `--email-address'.
  13
  14         * netrc.c: Use the latest read_whole_line.
  15
  16         * init.c (defaults): Set opt.ftp_pass to "-wget@".
  17
  18         * mswindows.c (pwd_cuserid): Ditto.
  19
  20         * utils.c (pwd_cuserid): Removed.
  21
  22         * host.c (ftp_getaddress): Removed.
  23
  24 2001-04-28  Hrvoje Niksic  <hniksic@arsdigita.com>
  25
  26         (http_loop): Allocate space for filename_plus_orig_suffix with
  27         alloca; this is more efficient and removes the need to free it
  28         before each and every return.
  29
  30 2001-04-28  Hrvoje Niksic  <hniksic@arsdigita.com>
  31
  32         * http.c (gethttp): Return RETRUNNEEDED when the retrieval is
  33         unneeded because the file is already there and fully downloaded,
  34         and -c is specified.
  35         (http_loop): Handle RETRUNNEEDED.
  36
  37         * wget.h (uerr_t): New value RETRUNNEEDED.
  38
  39         * http.c (http_loop): Set no_truncate for files that both exist
  40         and are non-empty.
  41         (gethttp): Consider the download finished when restval >= contlen,
  42         not only when restval==contlen.
  43         (gethttp): Handle redirection before giving up due to -c.
  44         (gethttp): Clarify error message which explains that -c will not
  45         truncate the file.
  46         (gethttp): When returning CONTNOTSUPPORTED, don't forget to free
  47         the stuff that needs freeing and release the socket.
  48
  49 2001-04-27  Hrvoje Niksic  <hniksic@arsdigita.com>
  50
  51         * main.c (print_help): Wget booleans accept "off", not "no".
  52
  53 2001-04-27  Hrvoje Niksic  <hniksic@arsdigita.com>
  54
  55         * http.c (http_loop): If allow_cache is zero, always disable
  56         caching, not only when retrieving through proxy.
  57
  58         * init.c: Ditto.
  59
  60         * options.h (struct options): Rename proxy_cache to allow_cache.
  61
  62 2001-04-27  Hrvoje Niksic  <hniksic@arsdigita.com>
  63
  64         * http.c (mktime_from_utc): Improve documentation.
  65         (http_atotm): Put format strings into a separate array.
  66
  67 2001-04-27  Hrvoje Niksic  <hniksic@arsdigita.com>
  68
  69         * safe-ctype.h: Instead of throwing #error when isalpha is
  70         defined, redefine it to something that will throw a compile-time
  71         error if actually *used*.  Do the same for the rest of the
  72         standard C macros.
  73
  74 2001-04-26  Hrvoje Niksic  <hniksic@arsdigita.com>
  75
  76         * url.c (getproxy): Ignore empty proxy vars.
  77
  78 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
  79
  80         * http.c (http_loop): Would load cookies every time.
  81
  82         * cookies.c (load_cookies): Handle cookies whose values contain
  83         embedded spaces.
  84
  85 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
  86
  87         * utils.c: Define each DIGITS_* in one line.
  88
  89 2001-04-25  Roger L. Beeman  <beeman@cisco.com>
  90
  91         * http.c (http_atotm): Initialize t.tm_isdst to 0.
  92         (mktime_from_utc): Prevent mktime() from having discontinuities at
  93         DST transition points.
  94
  95 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
  96
  97         * html-url.c (get_urls_html): Fix documentation.
  98
  99 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
 100
 101         * url.c (UNSAFE_CHAR): Reimplement using a static table.
 102         (url_init): Removed.
 103         (init_unsafe_char_table): Removed.
 104
 105 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
 106
 107         * snprintf.c (dopr): Replace ISDIGIT with '0' <= ch && ch <= '9'.
 108
 109 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
 110
 111         * utils.c: Document timer functions.
 112
 113         * retr.c (rate): Use it.
 114         (rate): Print in GB/s if transfer rate exceeds 1 GB/s.
 115
 116         * utils.c (wtimer_granularity): New function.
 117
 118 2001-04-24  Hrvoje Niksic  <hniksic@arsdigita.com>
 119
 120         * retr.c (show_progress): Ditto.
 121
 122         * ftp.c (getftp): Ditto.
 123
 124         * http.c (gethttp): Use new timer functions.
 125
 126         * utils.c (wtimer_allocate): New function.
 127         (wtimer_new): Ditto.
 128         (wtimer_delete): Ditto.
 129         (wtimer_reset): Ditto.
 130         (wtimer_elapsed): Ditto.
 131
 132 2001-04-24  Hrvoje Niksic  <hniksic@arsdigita.com>
 133
 134         * utils.c (long_to_string): New, faster version.  Favors smaller
 135         numbers; much of the calculation is now done at compile-time.
 136
 137 2001-04-24  Hrvoje Niksic  <hniksic@arsdigita.com>
 138
 139         * utils.c (numdigit): Handle negative numbers.
 140
 141 2001-04-23  Hrvoje Niksic  <hniksic@arsdigita.com>
 142
 143         * retr.c (show_progress): Print the download rate even when the
 144         percentages are not available.
 145
 146 2001-04-21  Hrvoje Niksic  <hniksic@arsdigita.com>
 147
 148         * ftp.c (getftp): Adjust expected_bytes if the length is
 149         authoritative.
 150
 151 2001-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
 152
 153         * url.c: Don't declare `construct'.
 154
 155         * hash.c (grow_hash_table): Speed up rehashing; inline storing of
 156         mappings to new locations.
 157         (hash_table_new): Make resize_threshold a field in the hash table,
 158         so we don't have to recalculate it in each hash_table_put.
 159         (grow_hash_table): Update resize_threshold.
 160         (MAX): Remove unused macro.
 161         (prime_size): Made static.
 162
 163 2001-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
 164
 165         * retr.c (retrieve_url): Call uri_merge, not url_concat.
 166
 167         * html-url.c (collect_tags_mapper): Call uri_merge, not
 168         url_concat.
 169
 170         * url.c (mkstruct): Use encode_string instead of xstrdup followed
 171         by URL_CLEANSE.
 172         (path_simplify_with_kludge): Deleted.
 173         (contains_unsafe): Deleted.
 174         (construct): Renamed to uri_merge_1.
 175         (url_concat): Renamed to uri_merge.
 176
 177 2001-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
 178
 179         * url.c (str_url): Use encode_string instead of the unnecessary
 180         CLEANDUP.
 181         (encode_string_maybe): New function, returns input string if no
 182         encoding is needed.
 183         (encode_string): Call encode_string_maybe to do the dirty work,
 184         xstrdup if no work needed.
 185
 186 2001-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
 187
 188         * wget.h (XDIGIT_TO_xchar): Define here.
 189
 190         * url.c (decode_string): Use new name.
 191         (encode_string): Ditto.
 192
 193         * http.c (XDIGIT_TO_xchar): Rename HEXD2asc to XDIGIT_TO_xchar.
 194         (dump_hash): Use new name.
 195
 196         * wget.h: Rename ASC2HEXD and HEXD2ASC to XCHAR_TO_XDIGIT and
 197         XDIGIT_TO_XCHAR respectively.
 198
 199 2001-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
 200
 201         * init.c: Include cookies.h.
 202
 203         * cookies.h: Declare cookies_cleanup.
 204
 205         * cookies.c (check_domain_match): Remove unused variable.
 206         (save_cookies): Remove extraneous argument from debug statement.
 207
 208         * host.c (same_host): Don't call skip_url.
 209
 210         * url.c (skip_url): Removed.  Removed its calls from various
 211         functions in url.c.
 212
 213 2001-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
 214
 215         * cookies.c (unsigned_string_hash): Use the new code in
 216         string_hash as reference.
 217
 218         * hash.c (hash_table_map): Allow deletion and change of the
 219         element processed by MAPFUN.
 220         (string_hash): Use the function from glib.
 221
 222 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
 223
 224         * config.h.in: Include #undef stub.
 225
 226         * hash.c (hash_table_remove): Rewrite to actually clear deleted
 227         entries instead of just marking them as deleted.
 228
 229 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
 230
 231         * hash.h: Declare hash_table_get_pair and hash_table_count.
 232
 233 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
 234
 235         * cookies.c: Declare http_atotm.
 236
 237 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
 238
 239         * ftp-ls.c (ftp_parse_unix_ls): Use octal constants for
 240         permissions.  A compiler that doesn't accept octal constants is
 241         seriously broken and shouldn't be used -- octal constants were
 242         present in K&R C!
 243
 244 2001-01-20  Karl Eichwalder  <ke@suse.de>
 245
 246         * Makefile.in: Provide and use DESTDIR according to the Coding
 247         Standards.
 248
 249 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
 250
 251         * ftp-ls.c (ftp_parse_vms_ls): Make seconds optional in time
 252         specification.
 253
 254 2001-04-11  Hrvoje Niksic  <hniksic@arsdigita.com>
 255
 256         * url.c (parseurl): Don't strip trailing slash when u->dir is "/"
 257         because that strips the *leading* slash, thus forcing relative
 258         FTP retrieval.
 259
 260 2001-04-10  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
 261
 262         * ftp.c (getftp): Convert initial FTP directory from VMS to UNIX
 263         notation for VMS servers.
 264         (ftp_retrieve_dirs): Do not prepend '/' to f->name when
 265         odir is an empty string.
 266
 267 2001-04-10  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
 268
 269         * ftp-ls.c (ftp_parse_winnt_ls): Made the fix for AM/PM more
 270         effective. Suggested by Edward J. Sabol.
 271
 272 2001-04-10  Hrvoje Niksic  <hniksic@arsdigita.com>
 273
 274         * cookies.c (build_cookies_request): Use and sort cookies from all
 275         matching domains.
 276         (build_cookies_request): Check for duplicates before generating
 277         the `Cookies' header.
 278
 279         * main.c (main): Don't load cookies here.
 280         (main): Make loadcookies and savecookies call the correct command.
 281
 282         * http.c (http_loop): Load cookies on-demand.
 283
 284 2001-04-09  Hrvoje Niksic  <hniksic@arsdigita.com>
 285
 286         * http.c (gethttp): Fix indentation of SSL ifdef.
 287
 288 2001-04-09  Hrvoje Niksic  <hniksic@arsdigita.com>
 289
 290         * ftp.c (ftp_retrieve_dirs): Don't forcibly prepend "/" to u->dir;
 291         that hack is no longer necessary.
 292         (getftp): Prepend initial directory to *non*-absolute u->dir's.
 293
 294 2001-04-09  Hrvoje Niksic  <hniksic@arsdigita.com>
 295
 296         * init.c (cmd_file): New function.
 297         (enable_tilde_expansion): New variable.
 298         (run_wgetrc): Use it.
 299         (cmd_file): Use it.
 300
 301 2001-04-08  Hrvoje Niksic  <hniksic@arsdigita.com>
 302
 303         * init.c: Include cookie-related options.
 304
 305         * main.c (main): Include cookie-specific options.
 306         (main): Load cookies before download is finished.
 307         (main): Save cookies when done.
 308
 309         * http.c (gethttp): Process the `Set-Cookie' header.
 310         (gethttp): Include cookies in the response.
 311
 312         * cookies.c: New file.
 313
 314 2001-04-08  Hrvoje Niksic  <hniksic@arsdigita.com>
 315
 316         * utils.c (datetime_str): New function.
 317
 318 2001-04-08  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
 319
 320         * ftp-ls.c (ftp_parse_winnt_ls): The AM/PM change did assume
 321         12:01PM == 00:01, which was obviously wrong. Taken care of this
 322         anomaly.
 323
 324         * ChangeLog: Removed an excess conflict marker. Reformatted the
 325         entry by Philipp Thomas from 2001-03-09.
 326
 327         * ftp-ls.c (ftp_parse_winnt_ls): Ensure that adjusted PM hours lay
 328         between 0 and 23. Elminate unused variable `sec'.
 329
 330 2001-04-08  Hrvoje Niksic  <hniksic@arsdigita.com>
 331
 332         * hash.c (hash_table_count): New function.
 333
 334 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
 335
 336         * utils.c (read_file): Cast MAP_FAILED to char *.  Enforced by
 337         Digital Unix cc.
 338
 339 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
 340
 341         * config.h.in: Oops, do the namespace tweaks only on systems we
 342         know about.
 343
 344 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
 345
 346         * hash.c: Include <string.h>.
 347
 348 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
 349
 350         * config.h.in: Define "compilation environment" options that work
 351         under Linux and Solaris.  To be reviewed on other OS'es.
 352
 353 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
 354
 355         * http.c (gethttp): Prepend literal newline with `\n\'.
 356
 357 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
 358
 359         * sysdep.h: Don't define VERY_LONG_FORMAT.
 360
 361         * utils.c (very_long_to_string): New function.
 362         (legible_very_long): Use it; don't use VERY_LONG_FORMAT.
 363
 364 2001-04-04  Christian Fraenkel  <christian.fraenkel@gmx.net>
 365
 366         * url.c (parse_uname): Would run past the end of the string if the
 367         username was present, but the URL did not contain a slash, e.g.
 368         http://foo:bar@myhost.
 369
 370 2001-04-03  KOJIMA Hajime  <kjm@rins.ryukoku.ac.jp>
 371
 372         * http.c (http_atotm): Use %A instead of %a to match full
 373         weekday.  (On most systems there is no difference.)
 374
 375 2001-04-03  Paul Bludov  <paul@ozero.net>
 376
 377         * mswindows.c (sleep): Use SleepEx() instead of Sleep().
 378         (ws_changetitle): Use alloca() instead of malloc() to avoid memory
 379         leak.
 380         (ws_mypath): Use GetModuleFileName instead of argv[0].
 381         (ws_startup): Use data.wVersion for comparison.
 382
 383 2001-04-02  Hrvoje Niksic  <hniksic@arsdigita.com>
 384
 385         * http.c (http_loop): Ditto.
 386
 387         * ftp.c (ftp_loop_internal): Made the check whether to continue
 388         retrieval `-O'-friendly.
 389
 390 2001-04-02  Hrvoje Niksic  <hniksic@arsdigita.com>
 391
 392         * netrc.c (parse_netrc): Don't trim the line endings explicitly;
 393         they will be handled as whitespace.
 394         (parse_netrc): Correctly handle lines that end with whitespace.
 395
 396 2001-04-02  Hrvoje Niksic  <hniksic@arsdigita.com>
 397
 398         * retr.c (retrieve_url): New variable global_download_count used
 399         to identify first retrieval.
 400
 401         * ftp.c (getftp): Ditto.
 402
 403         * http.c (gethttp): Rewind opt.dfp only on first retrieval.
 404
 405 2001-04-02  Hrvoje Niksic  <hniksic@arsdigita.com>
 406
 407         * init.c (cmd_address): Heap-allocate the address that gets stored
 408         to CLOSURE.  Old code would simply assign an address on the stack.
 409
 410 2001-04-01  Nicolas Lichtmaier <nick@debian.org>
 411
 412         * ftp.c (ftp_get_listing): Propagate error status.
 413         (ftp_retrieve_glob): Use it.
 414         (ftp_loop): Ditto.
 415
 416 2001-04-01  Nicolas Lichtmaier <nick@debian.org>
 417
 418         * main.c (main): Add -C to the string that is the third arg to
 419         getopt_long().
 420
 421 2001-04-01  Hrvoje Niksic  <hniksic@arsdigita.com>
 422
 423         * ftp.c (getftp): Don't start the download from scratch if `-c'
 424         was specified, but the file is already fully downloaded.
 425
 426         * http.c (gethttp): Don't truncate a pre-existing file if `-c' was
 427         specified and the server doesn't support continued download.
 428         (gethttp): Don't start the download from scratch if `-c' was
 429         specified, but the file is already fully downloaded.
 430
 431 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
 432
 433         (recursive_retrieve): Don't clear the hash tables at this point at
 434         all; it interferes with the normal operation of register_download.
 435
 436 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
 437
 438         * recur.c (recursive_retrieve): Clear the hash tables only when
 439         they are defined.
 440
 441 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
 442
 443         * http.c (gethttp): Make sure the socket is closed with
 444         CLOSE_INVALIDATE before we have drained the body.
 445
 446 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
 447
 448         * retr.c (retrieve_url): Call register_download() for downloaded
 449         files and register_html() for downloaded HTML files.
 450
 451         * recur.c (register_download): New function; register here that a
 452         file has been downloaded, rather than in recursive_retrieve().
 453         (register_html): New function; enqueue the location of HTML files
 454         here rather than in recursive_retrieve().
 455
 456 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
 457
 458         * main.c (print_help): Use multiple fputs instead of a single ugly
 459         printf().
 460         (main): Consistently assign numbers >128 to options without a
 461         corresponding character.
 462
 463 2001-03-09  Philipp Thomas  <pthomas@suse.de>
 464
 465         * safe-ctype.h: New file. Locale independent ctype.h replacement
 466         taken from libiberty.
 467
 468         * safe-ctype.c: New file. Tables for above.
 469
 470         * Makefile.in: Add safe-ctype$o to OBJS.  Add dependencies for
 471         safe-ctype$o.
 472
 473         * cmpt.c: Remove include of ctype.h. Use ISSPACE instead of
 474         isspace.
 475
 476         * ftp-basic.c: Don't include ctype.h.
 477
 478         * ftp-ls.c: Likewise.
 479
 480         * ftp.c: Likewise.
 481
 482         * headers.c: Likewise.
 483
 484         * host.c: Likewise.
 485
 486         * html-parse.c: Likewise.
 487
 488         * html-url.c: Likewise.
 489
 490         * http.c: Likewise.
 491
 492         * init.c: Likewise.
 493
 494         * main.c: Likewise. Set LC_CTYPE along with LC_MESSAGES.
 495
 496         * netrc.c: Likewise.
 497
 498         * recur.c: Likewise.
 499
 500         * retr.c: Likewise.
 501
 502         * snprintf.c: Replace ctype.h with safe-ctype.h. Use ISDIGIT
 503         instead of isdigit.
 504
 505         * sysdep.h: Remove defines of ctype macros as they aren't needed
 506         for safe-ctype-h.
 507
 508         * url.c: Don't include ctype.h.
 509
 510         * utils.c: Likewise.
 511
 512         * wget.h: Include safe-ctype.h.
 513
 514 2001-03-27  Dan Harkless  <wget@harkless.org>
 515
 516         * Makefile.in: Moved top_builddir out of "User configuration
 517         section" of top Makefile and analogous spot in this one.
 518
 519 2001-03-17  Dan Harkless  <wget@harkless.org>
 520
 521         * Makefile.in: Include @SSL_INCLUDES@ substition in INCLUDES.
 522         Define top_builddir.  Link wget with libtool so the user doesn't
 523         have to supply a bunch of custom environment variables to
 524         correctly link with the OpenSSL shared libraries.
 525
 526 2001-03-06  Hack Kampbjorn  <hack@hackdata.com>
 527
 528         * http.c (gethttp): skip :port in host header if it is the
 529         DEFAULT_HTTPS_PORT when using SSL.
 530
 531         * url.c: move the #define of DEFAULT_HTTP_PORT, DEFAULT_FTP_PORT
 532         and DEFAULT_HTTPS_PORT to the header file so it can be use in the
 533         rest of the code.
 534         * url.h: Ditto
 535
 536 2001-03-01  Jonas Jensen  <bones@huleboer.dk>
 537
 538         * retr.c (show_progress): Correctly calculate the number of bytes
 539         in the first line of the download that have been actually
 540         downloaded in this run.
 541
 542 2001-02-23  Dan Harkless  <wget@harkless.org>
 543
 544         * main.c (print_help): --help documentation for -N said it would
 545         re-download files if they had the _same_ timestamp on server.
 546         (print_help): -nr belongs in "FTP options" section of --help
 547         output, not "Recursive retrieval" section.  Alphabetized FTP
 548         options by long option name.
 549
 550 2001-02-16  Dan Harkless  <wget@harkless.org>
 551
 552         * init.c (commands): Hack Kampbjørn <hack@hackdata.com> discovered
 553         that "httpsproxy" had been inserted into commands[] out of
 554         alphabetical order, causing "BUG: unknown command `httpuser'".
 555
 556 2001-02-13  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
 557
 558         * ftp-ls.c (ftp_parse_ls): Added support of ST_MACOS (Unix-like
 559         listing without correct permissons).
 560
 561         * ftp.h (stype): Added ST_MACOS to identify the NetPresenz MacOS
 562         FTP server.
 563
 564         * ftp.c (ftp_retrieve_list): New mirroring logic: A remote file
 565         shall be donwloaded only when it's newer than the local copy or
 566         when it has the same timeestamp but its size is different. ST_VMS
 567         and ST_MACOS as special cases that lie about file size.
 568
 569         * ftp-ls.c (ftp_parse_ls): Support for ST_MACOS.
 570
 571         * Makefile.in: Removed dependency on ftpparse library due to unclear
 572         copyright issues and absence of any feedback to our queries.
 573
 574         * ftp-ls.c: Removed dependency on ftpparse library due to unclear
 575         copyright issues and absence of any feedback to our queries.
 576         (ftp_parse_ls): Added a warning message when remote server system
 577         does not seem to be suported by wget.
 578         (ftp_parse_vms_ls): New function for parsing VMS ftp
 579         server listing output.
 580         (clean_line): New function responsible for removing
 581         end-of-line characters from FTP listing texts.
 582
 583         * ftp.c (getftp): Global variables pwd and host_type are now
 584         member of the ccon structure under names ccon.id and ccon.rs.
 585
 586         * ftp.h (struct ccon): Added formed global variables from ftp.c,
 587         enum stype rs (remote system identification) and char *id (initial
 588         working directory), as suggested by Hrvoje.
 589
 590         * url.c (parse_uname): Added support for passwords containing '@'
 591         characters.
 592         (skip_uname): Ditto.
 593
 594 2001-02-11  Hrvoje Niksic  <hniksic@arsdigita.com>
 595
 596         * ftp.c (ftp_loop): Reset con.
 597
 598 2001-01-06  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
 599
 600         * url.c (parse_uname): Added support for passwords containing '@'
 601         characters.
 602         (skip_uname): Ditto.
 603
 604 2001-02-11  Hack Kampbjørn  <hack@hackdata.com>
 605
 606         * url.c (parseurl): Debug-print u->ftp_type.
 607
 608 2001-02-11  Hrvoje Niksic  <hniksic@arsdigita.com>
 609
 610         * ftp.c (ftp_loop_internal): Disable padding.
 611         (getftp): Ditto.
 612
 613         * http.c (http_loop): Disable padding.
 614
 615         * retr.c (show_progress): Use it to enable padding.
 616
 617         * retr.c (rate): Optional parameter PAD for padding the rate.
 618
 619 2001-02-10  Hrvoje Niksic  <hniksic@arsdigita.com>
 620
 621         * retr.c (show_progress): Make sure that the last output line
 622         includes progress.
 623
 624 2001-02-10  Jonas Jensen  <bones@huleboer.dk>
 625
 626         * retr.c (show_progress): Print the download rate along with the
 627         percentages.
 628         Along with Anders Thorsby <anders@thorsby.dk>.
 629
 630 2001-02-10  Tim Mooney  <mooney@dogbert.cc.ndsu.NoDak.edu>
 631
 632         * ftp.h: Rename enums `command' to `wget_ftp_command' and
 633         `fstatus' to `wget_ftp_status' because old names clash with Tru64
 634         net/if.h.
 635
 636 2001-02-08  Christian Fraenkel <christian.fraenkel@gmx.net>
 637
 638         * gen_sslfunc.c: verify_callback is now static
 639
 640         * gen_sslfunc.c (init_ssl): load certificate if specified
 641
 642         * gen_sslfunc.c (ssl_printerr): new function
 643
 644         * init.c: added new --sslcertfile and --sslcertkey switches
 645
 646         * main.c: ditto
 647
 648         * options.h: ditto
 649
 650         * http.c (gethttp): abort when init_ssl fails
 651
 652 2001-01-23  Herold Heiko  <Heiko.Herold@previnet.it>
 653
 654         * mswindows.h: Include <malloc.h>; it's needed for alloca().
 655
 656 2001-01-10  Dan Harkless  <wget@harkless.org>
 657
 658         * url.c (str_url): Clarified this function's comment header after
 659         Hrvoje answered my question on the list as to when hide != 1.
 660         Also Hrvoje pointed out I need to use xstrdup() on the string literal.
 661
 662 2001-01-06  Hrvoje Niksic  <hniksic@arsdigita.com>
 663
 664         * connect.c (bindport): Declare addrlen as int.  Diagnosed by
 665         Drazen Kacar <dave@arsdigita.com>.
 666         (conaddr): Ditto.
 667
 668 2001-01-09  Dan Harkless  <wget@harkless.org>
 669
 670         * html-url.c: A bunch of fixup of `--page-requisites'-related
 671         comments to reflect Hrvoje's changes to my code when transplanting
 672         it into this new file, to fix spelling mistakes, to clarify, etc.
 673
 674         * url.c (write_backup_file): Clarified a comment.
 675         (str_url): Henrik van Ginhoven pointed out on the list that we
 676         shouldn't give away the number of characters in the password by
 677         replacing each character with a 'x'.  Use "<password>" instead.
 678
 679         * ftp.c (ftp_retrieve_dirs): The bug where recursion into FTP
 680         directories didn't work if logging in put you in a directory other
 681         than "/" is fixed now.  Removed the comment here warning of the bug.
 682
 683         * main.c (print_help): --continue's description was misleading.
 684         We don't "restart", we "resume".  Also, better to say
 685         "partially-downloaded file" rather than just "existing file".
 686
 687 2001-01-06  Dan Harkless  <wget@harkless.org>
 688
 689         * ChangeLog: The '[Not in 1.6 branch.]'s were decided not to be
 690         the best way to go about my aim.  Removed them in favor of:
 691
 692         * ChangeLog-branches/1.6_branch.ChangeLog: New file.
 693
 694 2001-01-04  Hrvoje Niksic  <hniksic@arsdigita.com>
 695
 696         * url.c (replace_attr): New function, to be used by both
 697         TO_COMPLETE and TO_RELATIVE case in convert_links.
 698         (find_fragment): New function for finding URL fragments.
 699         (replace_attr): Better handle the case where the original string
 700         is not quoted.  Use find_fragment.
 701         (convert_links): Use replace_attr().
 702
 703 2000-12-31  Dan Harkless  <wget@harkless.org>
 704
 705         * ChangeLog: Since this flat file doesn't have multiple branches,
 706         looking at the dates would make you think that things went into
 707         1.6 that actually just went into the 1.7-dev branch.  Added "[Not
 708         in 1.6 branch.]" where appropriate to clarify.
 709
 710 2000-12-30  Dan Harkless  <wget@harkless.org>
 711
 712         * ftp.c, http.c:  Applied Hack Kampbjørn <hack@hackdata.com>'s
 713         patch to deal with h_errno not being defined in netdb.h under Cygwin.
 714
 715 2000-12-18  Csaba Raduly  <csaba.raduly@sophos.com>
 716
 717         * sysdep.h: Include <malloc.h> and <io.h> under Watcom.
 718
 719 2000-12-17  Igor Khristophorov  <igor@atdot.org>
 720
 721         * http.c (check_end): Fix test for '+' or '-'.
 722
 723 2000-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
 724
 725         * url.c (parseurl): Rename inner loop var from i to ind to avoid
 726         clash with the function top-level-declared variable i.
 727         (str_url): Likewise, rename inner-loop i to j.
 728
 729         * recur.c (parse_robots): Don't declare LEN at top of function.
 730         (robots_match): Renamed parameter FORBIDDEN to avoid hiding of
 731         global variable.
 732
 733         * main.c (main): Change erroneous use of bitwise and to logical.
 734
 735         * init.c (cmd_address): Don't heap-allocate `sin'; it can be on
 736         the stack because it will be copied to closure.
 737
 738         Thanks to Csaba Raduly's run of PC-LINT over the sources.
 739
 740 2000-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
 741
 742         * http.c (basic_authentication_encode): Use xmalloc(), not
 743         malloc().  Thanks to Csaba Raduly's run of PC-LINT over the
 744         sources.
 745
 746 2000-12-17  Csaba Raduly  <csaba.raduly@sophos.com>
 747
 748         * sysdep.h: Test for __EMX__ rather than for EMXOS2 for OS/2
 749         compilation.
 750
 751 2000-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
 752
 753         * mswindows.c: Include <errno.h>.
 754
 755         * gen_sslfunc.c: Include <errno.h>.
 756
 757         * ftp-basic.c: Don't attempt to declare errno or h_errno because
 758         they're not used.
 759
 760         * main.c: Include <errno.h> because errno is used.
 761
 762         * ftp.c: Ditto.
 763
 764         * http.c: Include <netdb.h> for h_errno.
 765
 766 2000-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
 767
 768         * html-parse.c (advance_declaration): MSVC assert() chokes on
 769         '\"'.  Use '"' instead.
 770
 771 2000-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
 772
 773         * utils.c (xfree_real): Removed.
 774         (xfree_debug): Just call free().
 775
 776         * wget.h (xfree): Make it an alias for free.
 777
 778 2000-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
 779
 780         * http.c (http_loop): Furthermore, touch output_document only if
 781         it is known to be an existing regular file.
 782
 783 2000-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
 784
 785         * ftp.c (ftp_retrieve_list): Ditto.
 786
 787         * http.c (http_loop): Touch output_document if that is used for
 788         output.
 789
 790 2000-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
 791
 792         * http.c: Include gen_sslfunc.h after including Wget's headers.
 793         (persistent_available_p): Needed coma before `int ssl'.
 794
 795 2000-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
 796
 797         * ftp.c (ftp_loop_internal): Ditto.
 798
 799         * http.c (http_loop): Use it.
 800
 801         * retr.c (sleep_between_retrievals): New function that handles the
 802         logic of opt.wait and opt.waitretry.
 803
 804 2000-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
 805
 806         * rbuf.h: Implement only a single version of RBUF_READCHAR, using
 807         rbuf_read_bufferful when the buffer is depleted.
 808
 809         * rbuf.c (rbuf_read_bufferful): New function.
 810
 811 2000-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
 812
 813         * gen_sslfunc.h: Use ansi2knr style function declarations.
 814
 815         * gen_sslfunc.c: Reformat according to the GNU coding standards.
 816         More should be done.
 817
 818         * http.c (persistent_available_p): Place the cheap SSL test nearer
 819         the top of the function.
 820         (CLOSE_FINISH, CLOSE_INVALIDATE): Define only one version of each.
 821
 822 2000-12-05  Hrvoje Niksic  <hniksic@arsdigita.com>
 823
 824         * url.c (init_unsafe_char_table): Reinstate space as an unsafe
 825         char.
 826
 827 2000-12-03  Christian Fraenkel <christian.fraenkel@gmx.net>
 828
 829         * Makefile.in: added gen_sslfunc object
 830         * config.h.in: added HAVE_SSL define
 831         * connect.c: changed select_fd from static int to int
 832         * connect.h: ditto
 833         * gen_sslfunc.h: New file
 834         * gen_sslfunc.c: ditto
 835         * http.c: added HTTPS fuctionality
 836         * retrc.c: ditto
 837         * url.c: ditto
 838         * init.c: added opt.httpsproxy
 839         * options.h: ditto
 840         * rbuf.h: added alternate rbuf struct
 841         * wget.h: added CONSSLERR
 842         * rbuf.c: ditto
 843
 844         * http.c: Added HTTPS fuctionality.
 845
 846         * retrc.c: Ditto.
 847
 848         * url.c: Ditto.
 849
 850         * init.c: Added opt.httpsproxy.
 851
 852         * options.h: Ditto.
 853
 854         * rbuf.h: Added alternate rbuf struct.
 855
 856         * wget.h: Added CONSSLERR.
 857
 858         * rbuf.c: Ditto.
 859
 860 2000-11-30  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
 861
 862         * ftp-ls.c (ftp_parse_unix_ls): Added second parameter
 863         "ignore_perms" to ignore file and directory permissions for
 864         Windows NT FTP server listings.
 865         (ftp_parse_winnt_ls): New function.
 866         (ftp_parse_ls): Parses UNIX and Windows NT listings
 867         separately. Simple heuristics for distinguishing between UNIX and
 868         MS-DOS-like FTP listing provided by Windows NT FTP service.
 869
 870 2000-11-18  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
 871
 872         * ftpparse.c, ftpparse.h: New files.
 873
 874         * ftp-ls.c (ftp_parse_ls): Use ftp_parse_unix_ls for UNIX servers
 875         only. Use ftp_parse_nonunix_ls otherwise.
 876         (ftp_parse_nonunix_ls): Stub to the ftpparse library handling all
 877         exotic FTP servers.
 878
 879         * ftp.h (stype): New enum, distinguishes UNIX, VMS, and "other"
 880         FTP servers.
 881
 882         * ftp.c: New static wariables host_type, pwd, and pwd_len.
 883         (getftp): Support for VMS. Support for FTP servers that do not
 884         place you in the root directory after login.
 885         (ftp_retrieve_list): VMS is silent about the real file size, issue
 886         a more appropriate message.
 887         (ftp_get_listing): Pass host_type to ftp_parse_ls.
 888
 889         * ftp-basic.c (ftp_pwd, ftp_syst): New functions.
 890
 891 2000-11-30  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
 892
 893         * ftp-ls.c (ftp_parse_unix_ls): Added second parameter
 894         "ignore_perms" to ignore file and directory permissions for
 895         Windows NT FTP server listings.
 896         (ftp_parse_winnt_ls): New function.
 897         (ftp_parse_ls): Parses UNIX and Windows NT listings
 898         separately. Simple heuristics for distinguishing between UNIX
 899         and MS-DOS-like FTP listing provided by Windows NT FTP service.
 900
 901 2000-11-29  John Summerfield  <summer@OS2.ami.com.au>
 902
 903         * netrc.c (parse_netrc): Get rid of line ending.
 904
 905 2000-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
 906
 907         * ftp.c (ftp_retrieve_list): Undo typo "fix" until resolution by
 908         Dan.
 909
 910 2000-11-24  Karl Eichwalder  <ke@suse.de>
 911
 912         * main.c (print_help): Untabify.
 913
 914 2000-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
 915
 916         * utils.c (xrealloc_debug): Do the unregister/register thing only
 917         if the pointer has actually changed.
 918         (xmalloc_real): Declare `static' in DEBUG_MALLOC builds.
 919         (xfree_real): Ditto.
 920         (xrealloc_real): Ditto.
 921         (xstrdup_real): Ditto.
 922
 923 2000-11-22  Hrvoje Niksic  <hniksic@arsdigita.com>
 924
 925         * ftp.c (getftp): ftp_getaddress() returns a malloc'ed copy of the
 926         string; no need to strdup() it.
 927         (getftp): Make pwd_len a local variable.
 928         (ftp_loop): Free PWD before returning.
 929
 930         * init.c (cleanup): Free opt.ftp_pass only if it's non-NULL.
 931
 932 2000-11-22  Hrvoje Niksic  <hniksic@arsdigita.com>
 933
 934         * all: Use xfree() instead of free.
 935
 936         * utils.c (xfree): New function.
 937
 938 2000-11-21  Hrvoje Niksic  <hniksic@arsdigita.com>
 939
 940         * url.c (convert_links): HTML-quote the converted string.
 941
 942         * utils.c (html_quote_string): Move here from ftp-ls.c
 943         (html_quote_string): Make non-static; declare in utils.h.
 944         (html_quote_string): Convert SP to &#32;.
 945
 946 2000-11-21  Hrvoje Niksic  <hniksic@arsdigita.com>
 947
 948         * ftp.c (getftp): Reformat Jan's code according to GNU coding
 949         standards; remove (debugging?) printf's; use '\0' for the ASCII
 950         zero character.  Use alloca() instead of malloc() for
 951         inter-function temporary allocations.
 952
 953 2000-11-18  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
 954
 955         * ftpparse.c, ftpparse.h: New files.
 956
 957         * ftp-ls.c (ftp_parse_ls): Use ftp_parse_unix_ls for UNIX servers
 958         only. Use ftp_parse_nonunix_ls otherwise.
 959         (ftp_parse_nonunix_ls): Stub to the ftpparse library handling all
 960         exotic FTP servers.
 961
 962         * ftp.h (stype): New enum, distinguishes UNIX, VMS, and "other"
 963         FTP servers.
 964
 965         * ftp.c: New static wariables host_type, pwd, and pwd_len.
 966         (getftp): Support for VMS. Support for FTP servers that do not
 967         place you in the root directory after login.
 968         (ftp_retrieve_list): VMS is silent about the real file size, issue
 969         a more appropriate message.
 970         (ftp_get_listing): Pass host_type to ftp_parse_ls.
 971
 972         * ftp-basic.c (ftp_pwd, ftp_syst): New functions.
 973
 974 2000-11-21  Hrvoje Niksic  <hniksic@arsdigita.com>
 975
 976         * hash.c (hash_table_put): Don't overwrite deleted mappings.
 977
 978 2000-11-21  Hrvoje Niksic  <hniksic@arsdigita.com>
 979
 980         * hash.c (find_mapping): New function.
 981         (hash_table_get): Use it.
 982         (hash_table_get_pair): Ditto.
 983         (hash_table_exists): Ditto.
 984         (hash_table_remove): Ditto.
 985         (hash_table_remove): Really delete the entry if the mapping
 986         following LOCATION is empty.
 987
 988         * utils.c (string_set_add): Check whether the element has existed
 989         before.
 990
 991         * hash.c (hash_table_get_pair): New function.
 992
 993 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
 994
 995         * http.c (http_process_type): Ignore trailing whitespace; use
 996         strdupdelim().
 997
 998         * recur.c (recursive_retrieve): Use the new `convert' field.
 999         (convert_all_links): Ditto.
1000         (convert_all_links): Don't respect meta_disallow_follow.
1001
1002         * html-url.c (handle_link): Fill out link_relative_p and
1003         link_complete_p.
1004
1005         * url.h (struct _urlpos): Make elements more readable.
1006
1007         * recur.c (recursive_retrieve): Call slist_prepend instead of
1008         slist_append.
1009         (convert_all_links): Call slist_nreverse before iterating through
1010         urls_html.
1011
1012         * utils.c (slist_prepend): New function.
1013         (slist_nreverse): Ditto.
1014
1015 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
1016
1017         * http.c (check_end): Constify.
1018
1019 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
1020
1021         * http.c (http_loop): If username and password are known, try the
1022         `Basic' authentication scheme by default.
1023
1024         * connect.h: Declare test_socket_open.
1025
1026 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
1027
1028         * version.c: Bump version from 1.5.3+dev to 1.7-dev.
1029
1030 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
1031
1032         * http.c (gethttp): Don't use the return value of sprintf().
1033         (gethttp): Inhibit keep-alive if opt.http_keep_alive is 0.
1034
1035 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
1036
1037         * recur.c (recursive_retrieve): Print the "so we don't load"
1038         debugging message only if we really don't load.
1039
1040         * http.c (gethttp): Inhibit keep-alive if proxy is being used.
1041         (gethttp): Don't request keep-alive if keep-alive is inhibited.
1042
1043 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
1044
1045         * http.c (gethttp): Make the HTTP persistent connections more
1046         robust.
1047
1048 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
1049
1050         * retr.c (get_contents): If use_expected, make sure that the
1051         appropriate amount of data is being read.
1052
1053         * http.c (gethttp): Check for both `Keep-Alive: ...' and
1054         `Connection: Keep-Alive'.
1055
1056         * wget.h (DEBUGP): Call debug_logprintf only if opt.debug is
1057         turned on.
1058
1059 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
1060
1061         * http.c (connection_available_p): Use it.
1062
1063         * connect.c (test_socket_open): New function.
1064
1065         * http.c (gethttp): Support persistent connections.  Based on the
1066         ideas, and partly on code, by Sam Horrocks <sam@daemoninc.com>.
1067         (register_persistent): New function.
1068         (connection_available_p): Ditto.
1069         (invalidate_connection): Ditto.
1070
1071 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
1072
1073         * url.c (convert_links): Handle UREL2ABS case.
1074
1075         * recur.c (recursive_retrieve): Instead of the list
1076         urls_downloaded, use hash tables dl_file_url_map and
1077         dl_url_file_map.
1078         (convert_all_links): Use them to retrieve data.
1079
1080         * host.c (clean_hosts): Free the hash tables.
1081
1082         * main.c (private_initialize): Call host_init().
1083
1084         * host.c (store_hostaddress): Use a saner, hash table-based data
1085         model.
1086         (realhost): Ditto.
1087         (host_init): Initialize the hash tables.
1088
1089 2000-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
1090
1091         * utils.c (slist_append): Eviscerate NOSORT.  Hash tables are now
1092         used for what the sorted slists used to be used for.
1093         (slist_contains): Don't rely on the list being sorted.
1094         (slist_append): Simplify the code.
1095
1096         * recur.c (recursive_cleanup): Use free_string_set.
1097
1098         * utils.c (string_set_add, string_set_exists, string_set_free):
1099         New functions for easier freeing of hash tables whose keys are
1100         strdup'ed strings.
1101
1102         * recur.c (recursive_retrieve): Use the hash table functions for
1103         storing undesirable URLs.
1104
1105         * hash.c: New file.
1106
1107 2000-11-17  Hrvoje Niksic  <hniksic@arsdigita.com>
1108
1109         * main.c (private_initialize): Call url_init.
1110         (main): Call private_initialize.
1111
1112         * url.c (unsafe_char_table): New table.
1113         (UNSAFE_CHAR): Use it.
1114         (init_unsafe_char_table): New function.
1115         (url_init): New function; call init_unsafe_char_table.
1116
1117 2000-11-16  Hrvoje Niksic  <hniksic@arsdigita.com>
1118
1119         * mswindows.h: Define snprintf and vsnprintf to _snprintf and
1120         _vsnprintf respectively.
1121
1122 2000-11-15  Hrvoje Niksic  <hniksic@arsdigita.com>
1123
1124         * config.h.in: Do the _XOPEN_SOURCE and _SVID_SOURCE things only
1125         on Linux.
1126
1127 2000-11-15  Hrvoje Niksic  <hniksic@arsdigita.com>
1128
1129         * html-url.c (handle_link): Handle HTML fragment identifiers.
1130
1131         * recur.c (recursive_retrieve): If norobot info is respected and
1132         the file is specified not to be followed by robots, respect that.
1133
1134         * html-url.c (collect_tags_mapper): Handle <meta name=robots
1135         content=X>.  For us the important cases are where X is NONE or
1136         where X contains NOFOLLOW.
1137         (get_urls_html): Propagate that information to the caller.
1138
1139 2000-11-13  Hrvoje Niksic  <hniksic@arsdigita.com>
1140
1141         * url.c (convert_links): Unlink the file we might be reading from
1142         before writing to it.
1143         (convert_links): Use alloca instead of malloc for
1144         filename_plus_orig_suffix.
1145
1146 2000-11-12  Hrvoje Niksic  <hniksic@arsdigita.com>
1147
1148         * host.c (realhost): Add HOST to the list with quality==0 only if
1149         it wasn't already there.
1150         Based on analysis by Lu Guohan <feng@public.bjnet.edu.cn>.
1151
1152 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
1153
1154         * url.c (get_urls_file): Ditto.
1155         (convert_links): Ditto.
1156
1157         * html-url.c (get_urls_html): Use read_file() instead of
1158         load_file().
1159
1160         * utils.c (read_file): New function, instead of the old
1161         load_file().
1162         (read_file_free): Ditto.
1163
1164         * url.c (findurl): Search only for the supported protocols.
1165         (convert_links): Use fwrite() when writing out a region of
1166         characters.
1167
1168 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
1169
1170         * ftp-ls.c: Move html_quote_string and ftp_index here.
1171
1172         * url.c: Remove get_urls_html, since that's now in html-url.c.
1173
1174         * html-url.c: New file.
1175
1176         * html-parse.c: New file.
1177
1178 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
1179
1180         * init.c (run_wgetrc): Don't bother killing off '\r' since
1181         pars_line() skips whitespace at end of line anyway.
1182         (parse_line): Oops, it didn't.  Now it does.
1183
1184         * recur.c (parse_robots): Ditto here.
1185
1186         * ftp-ls.c (ftp_parse_unix_ls): Kill off the newline character
1187         manually because read_whole_line no longer does.
1188
1189         * utils.c (read_whole_line): Rewrite to: a) use less memory
1190         (reallocates to needed size after work), b) work faster -->
1191         fgets() instead of getc, c) be more correct --> doesn't kill the
1192         newline character at the end of line.
1193
1194 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
1195
1196         * init.c (comind): Initialize MAX to array size - 1.
1197
1198 2000-11-08  Hrvoje Niksic  <hniksic@arsdigita.com>
1199
1200         * url.c (construct): Changed last_slash[-1] to *(last_slash - 1).
1201         Suggested by Edward J. Sabol.
1202
1203 2000-11-08  Hrvoje Niksic  <hniksic@arsdigita.com>
1204
1205         * url.c (construct): Handle the case where host name is not
1206         followed by a slash.
1207
1208 2000-11-06  Hrvoje Niksic  <hniksic@arsdigita.com>
1209
1210         * init.c: commands[] need to be sorted!  ("base" wasn't.)
1211
1212 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
1213
1214         * wget.h (DO_REALLOC_FROM_ALLOCA): Use braces to disambiguate
1215         `if'.
1216
1217 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
1218
1219         * url.c (construct): Insert unneeded initialization for the
1220         compiler to shut up.
1221
1222         * config.h.in: Define _XOPEN_SOURCE to 500 to get the prototype
1223         for strptime() (*duh*).  Define _SVID_SOURCE to get S_IFLNK which
1224         otherwise gets lost when you define _XOPEN_SOURCE.
1225
1226         * utils.c (touch): Include the file name in the error message.
1227         From Debian.
1228
1229 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
1230
1231         * log.c (logvprintf): Use vsnprintf() in all cases.  If necessary,
1232         resize the buffer to fit the formated message.  That way, messages
1233         of arbitrary size may be printed.
1234         (logvprintf): Use saved_append() to optionally log the last
1235         several lines of output.
1236         (logputs): Ditto.
1237         (log_close): Adapt to new data structures.
1238         (log_dump): Ditto.
1239         (redirect_output): Print messages to stderr, not to stdout.
1240
1241         * log.c (saved_append_1): New function.  Replaces the old logging
1242         system ("log all output until 10M characters") with a new, much
1243         more reasonable one ("log last screenful of text").
1244         (saved_append): New function; call saved_append_1.
1245         (free_log_line): New function.
1246
1247 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
1248
1249         * url.c (construct): Fix comment.
1250         (find_last_char): Document.
1251
1252 2000-11-04  Hrvoje Niksic  <hniksic@arsdigita.com>
1253
1254         * snprintf.c: New file.
1255
1256 2000-11-03  Hrvoje Niksic  <hniksic@arsdigita.com>
1257
1258         * wget.h: If HAVE_STDARG_H is not defined, don't declare argument
1259         types to logprintf() and debug_logprintf().
1260
1261 2000-11-02  Hrvoje Niksic  <hniksic@arsdigita.com>
1262
1263         * ftp.c (ftp_loop_internal): Hide the password from the URL when
1264         printing non-verbose.  Problem spotted by Dariusz Mlynarczyk
1265         <darekm@bydg.lomac.com.pl>.
1266
1267 2000-11-02  Junio Hamano  <junio@twinsun.com>
1268
1269         * ftp-basic.c (ftp_login): Make comparison case-insensitive.
1270
1271 2000-11-02  Tyler Riddle  <triddle@liquidmarket.com>
1272
1273         * http.c (known_authentication_scheme_p): Recognize NTML
1274         authentication.
1275         (create_authorization_line): Treat NTML the same as `Basic'.
1276
1277 2000-11-02  Hrvoje Niksic  <hniksic@arsdigita.com>
1278
1279         * retr.c (retrieve_url): Free url before returning.
1280         (retrieve_url): Free mynewloc before returning.
1281         Spotted by Mark A. Mankins <Mankins_Mark@prc.com>.
1282
1283 2000-11-02  Hrvoje Niksic  <hniksic@arsdigita.com>
1284
1285         * url.c (parseurl): Remove possible reading past the end of
1286         sup_protos[].  Spotted by Mark A. Mankins <Mankins_Mark@prc.com>.
1287
1288 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
1289
1290         * main.c (main): In case of opt.downloaded overflowing, print
1291         <overflow> instead of a totally bogus random value.
1292
1293         * retr.c (retrieve_from_file): Ditto.
1294
1295         * recur.c (recursive_retrieve): Ditto.
1296
1297         * main.c (main): Ditto.
1298
1299         * http.c (http_loop): Ditto.
1300
1301         * ftp.c (ftp_loop_internal): Use downloaded_increase() instead of
1302         `+=', and downloaded_exceeds_quota() instead of the simple-minded
1303         check.
1304         (ftp_retrieve_list): Ditto.
1305         (ftp_retrieve_dirs): Ditto.
1306         (ftp_retrieve_glob): Ditto.
1307
1308         * retr.c (downloaded_increase): New function.  Notice overflows of
1309         opt.downloaded.
1310         (downloaded_exceeds_quota): Make sure that opt.downloaded is not
1311         used if it overflowed.
1312
1313         * options.h (struct options): New member downloaded_overflow.
1314
1315 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
1316
1317         * wget.h (enum): Remove extra space after last enumeration.
1318
1319 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
1320
1321         * main.c (main): Use legible_very_long() for printing
1322         opt.downloaded.
1323
1324         * utils.c (legible_1): New function that operates on strings and
1325         does the brunt of legible()'s work.
1326         (legible): Use legible_1().
1327         (legible_very_long): New function; dump the argument with
1328         sprintf(), and call legible_1().
1329
1330         * options.h (struct options): Use VERY_LONG_TYPE for
1331         opt.downloaded.
1332
1333         * sysdep.h (VERY_LONG_TYPE): Define it to have a 64-bit or greater
1334         type.
1335
1336         * config.h.in: Make sure that SIZEOF_LONG and SIZEOF_LONG_LONG get
1337         defined.  Define HAVE_LONG_LONG if long long is available.
1338
1339 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
1340
1341         * utils.c (long_to_string): Update with a later, better version.
1342
1343 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
1344
1345         * url.c (path_simplify_with_kludge): New function.
1346         (path_simplify_with_kludge): Disable it.  Instead...
1347         (parse_dir): ...make sure that at this point the right thing is
1348         done, i.e. that "query" part of the URL (?...) is always assigned
1349         to the file, never to the directory portion of the path.
1350
1351 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
1352
1353         * retr.c (retrieve_url): Detect redirection cycles.
1354
1355 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
1356
1357         * url.c (get_urls_html): Decode HTML entities using
1358         html_decode_entities.
1359
1360         * html.c (htmlfindurl): Don't count the `#' in numeric entities
1361         (&#NNN;) as an HTML fragemnt.
1362         (html_decode_entities): New function.
1363
1364 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
1365
1366         * html.c (htmlfindurl): Fix recognition of # HTML fragments.
1367
1368 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
1369
1370         * url.c (construct): Rewritten for clarity.  Avoids the
1371         unnecessary copying and stack-allocation the old version
1372         performed.
1373
1374 2000-10-31  Hrvoje Niksic  <hniksic@arsdigita.com>
1375
1376         * ftp.c (getftp): Ditto.
1377
1378         * http.c (gethttp): Rewind the stream when retrying from scratch.
1379
1380 2000-10-31  Hrvoje Niksic  <hniksic@arsdigita.com>
1381
1382         * retr.c (retrieve_url): Use url_concat() to handle relative
1383         redirections instead of /ad hoc/ code.
1384
1385         * url.c (url_concat): New function encapsulating weird
1386         construct().
1387         (urllen_http_hack): New function.
1388         (construct): When constructing new URLs, recognize that `?' does
1389         not form part of the file name in HTTP.
1390
1391 2000-10-13  Adrian Aichner  <adrian@xemacs.org>
1392
1393         * retr.c: Add msec timing support for WINDOWS.
1394         * retr.c (reset_timer): GetSystemTime() on WINDOWS.
1395         * retr.c (elapsed_time): Calculate delta time to msec on WINDOWS.
1396
1397 2000-10-27  Dan Harkless  <wget@harkless.org>
1398
1399         * retr.c (retrieve_url): Manually applied T. Bharath
1400         <TBharath@responsenetworks.com>'s patch to get wget to grok
1401         illegal relative URL redirects.  Reformatted and re-commented it.
1402
1403 2000-10-23  Dan Harkless  <wget@harkless.org>
1404
1405         * connect.c (make_connection and bindport): Manually applied Rob
1406         Mayoff <mayoff@dqd.com>'s 1.5.3 patch to add --bind-address,
1407         changing coding style to GNU's.
1408
1409         * ftp.c (ftp_loop_internal): --delete-after wasn't implemented for
1410         files downloaded via FTP.  Per a comment, .listing files were not
1411         counted towards number of bytes and files downloaded because they're
1412         deleted anyway.  Well, they aren't under -nr, so count them then.
1413
1414         * init.c: Manually applied Rob Mayoff's 1.5.3 patch to add
1415         --bind-address, alphabetizing, changing coding style to GNU's,
1416         commenting, and renaming cmd_ip_address() to cmd_address() to
1417         imply hostnames also okay.
1418
1419         * main.c (main): --delete-after didn't delete the root of the
1420         tree.  Ignore --convert-links if --delete-after was specified.
1421         Manually applied Rob Mayoff's 1.5.3 patch to add --bind-address,
1422         fixing duplicate use of added-since-1.5.3 case value.
1423         (print_help): Clarified that --delete-after deletes local files.
1424         Rob forgot to add a line for his new --bind-address option.
1425
1426         * options.h (struct options): Manually applied Rob Mayoff's patch
1427         to add --bind-address (bind_address structure member).
1428
1429         * recur.c (recursive_retrieve): Improved comment; added DEBUGP().
1430         Ignore --convert-links if --delete-after was specified.
1431
1432         * retr.c (retrieve_from_file): Just added a DEBUGP().
1433
1434 2000-10-19  Dan Harkless  <wget@harkless.org>
1435
1436         * ftp.c (ftp_loop_internal): downloaded_file() enumerators changed.
1437         (getftp): Applied Piotr Sulecki <Piotr.Sulecki@ios.krakow.pl>'s
1438         patch to work around FTP servers that incorrectly respond to the
1439         "REST" command with the remaining size rather than the total file size.
1440
1441         * http.c (gethttp): Improved a comment and added code to tack on
1442         ".html" to text/html files without that extension when -E specified.
1443         (http_loop): Use new downloaded_file() enumerators and deal with
1444         the case of gethttp() called xrealloc() on u->local.
1445
1446         * init.c (commands): Added new "htmlextension" command.
1447         Also renamed John Daily's cmd_quad() to the more descriptive
1448         cmd_lockable_boolean(), alpha-sorted the CMD_DECLARE()s and
1449         removed duplicate cmd_boolean() declaration.
1450
1451         * main.c (print_help): Added my new -E / --html-extension option.
1452         (main): Undocumented --email-address option previously used -E synonym.
1453         Stole it away for the much more deserving --html-extension's use.
1454
1455         * options.h (struct options): Added html_extension field.
1456
1457         * url.c (convert_links): URL X that we saved as X.html locally due
1458         to -E needs to be backed up as X.orig, not X.html.orig.  Added comments.
1459         (downloaded_file): Now remembers if we added .html extension to a file.
1460
1461         * url.h (downloaded_file_t): Added extra enumerators to support above.
1462         (downloaded_file): Now takes and returns a downloaded_file_t.
1463
1464         * wget.h (unnamed "dt" enum): Added ADDED_HTML_EXTENSION enumerator.
1465
1466 2000-10-09  Dan Harkless  <wget@harkless.org>
1467
1468         * html.c (htmlfindurl): Added unneeded initialization to quiet warning.
1469
1470         * main.c (print_help): Clarified what --retr-symlinks does.
1471
1472 2000-09-15  John Daily  <jdaily@cyberdude.com>
1473
1474         * init.c: Add support for "always" and "never" values to allow
1475         .wgetrc to override commandline (useful e.g. with .pm files
1476         calling `wget --passive-ftp' when your firewall doesn't allow that).
1477
1478         * ftp.c (getftp): passive_ftp is first option to support always/never.
1479
1480 2000-08-30  Dan Harkless  <wget@harkless.org>
1481
1482         * ftp.c (ftp_retrieve_list): Use new INFINITE_RECURSION #define.
1483
1484         * html.c: htmlfindurl() now takes final `dash_p_leaf_HTML' parameter.
1485         Wrapped some > 80-column lines.  When -p is specified and we're at a
1486         leaf node, do not traverse <A>, <AREA>, or <LINK> tags other than
1487         <LINK REL="stylesheet">.
1488
1489         * html.h (htmlfindurl): Now takes final `dash_p_leaf_HTML' parameter.
1490
1491         * init.c: Added new -p / --page-requisites / page_requisites option.
1492
1493         * main.c (print_help): Clarified that -l inf and -l 0 both allow
1494         infinite recursion.  Changed the unhelpful --mirrior description
1495         to simply give the options it's equivalent to.  Added new -p option.
1496         (main): Added some comments; handle new -p / --page-requisites.
1497
1498         * options.h (struct options): Added new page_requisites field.
1499
1500         * recur.c: Changed "URL-s" to "URLs" and "HTML-s" to "HTMLs".
1501         Calculate and pass down new `dash_p_leaf_HTML' parameter to
1502         get_urls_html().  Use new INFINITE_RECURSION #define.
1503
1504         * retr.c: Changed "URL-s" to "URLs".  get_urls_html() now takes
1505         final `dash_p_leaf_HTML' parameter.
1506
1507         * url.c: get_urls_html() and htmlfindurl() now take final
1508         `dash_p_leaf_HTML' parameter.
1509
1510         * url.h (get_urls_html): Now takes final `dash_p_leaf_HTML' parameter.
1511
1512         * wget.h: Added some comments and new INFINITE_RECURSION #define.
1513
1514 2000-08-23  Dan Harkless  <wget@harkless.org>
1515
1516         * main.c (print_help): -B / --base was not mentioned.
1517
1518 2000-08-22  Dan Harkless  <wget@harkless.org>
1519
1520         * main.c (print_help): Modified -nc description to mention that it
1521         also prevents the creation of multiple versions of the same file
1522         with ".<number>" suffixes.
1523
1524 2000-07-14  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
1525
1526         * retr.c (retrieve_url): Consistently strdup opt.referer when
1527         setting u->referer.
1528
1529 2000-06-09  Dan Harkless  <wget@harkless.org>
1530
1531         * main.c (print_help): --help output for --waitretry was over 80 cols.
1532
1533 2000-06-09  Hrvoje Niksic  <hniksic@iskon.hr>
1534
1535         * url.c (encode_string): Fix comment.
1536         Suggested by Herold Heiko <Heiko.Herold@previnet.it>.
1537
1538 2000-06-01  Const Kaplinsky  <const@ce.cctpu.edu.ru>
1539
1540         * ftp.c (ftp_retrieve_list): Change permissions only on plain
1541         files.
1542
1543 2000-06-01  Hrvoje Niksic  <hniksic@iskon.hr>
1544
1545         * url.c (str_url): Print the port number only if it's different
1546         from the default port number for that protocol.
1547
1548 2000-05-22  Dan Harkless  <wget@harkless.org>
1549
1550         * main.c (print_help): Added --help line for Damir Dzeko
1551         <ddzeko@zesoi.fer.hr>'s until-now-undocumented --referer option.
1552         Removed comments that --referer and --waitretry were undocumented.
1553         Changed "`.wgetrc' command" to "`.wgetrc'-style command" on --help
1554         line for --execute.
1555
1556 2000-05-18  Hrvoje Niksic  <hniksic@iskon.hr>
1557
1558         * ftp.c (getftp): Ditto.
1559
1560         * http.c (gethttp): Check for return value of fclose/fflush.
1561
1562 2000-04-12  Hrvoje Niksic  <hniksic@iskon.hr>
1563
1564         * host.c (store_hostaddress): Instead of shifting ADDR, start
1565         copying from the correct address.
1566
1567 2000-04-12  Hrvoje Niksic  <hniksic@iskon.hr>
1568
1569         * http.c (gethttp): Don't free REQUEST -- it was allocated with
1570         alloca().
1571         Pointed out by Gisle Vanem <gvanem@eunet.no>.
1572
1573 2000-04-04  Dan Harkless  <wget@harkless.org>
1574
1575         * host.c (store_hostaddress): R. K. Owen's patch introduces a
1576         "left shift count >= width of type" warning on 32-bit
1577         architectures.  Got rid of it by tricking the compiler w/ a variable.
1578
1579         * url.c (UNSAFE_CHAR): The macro didn't include all the illegal
1580         characters per RFC1738, namely everything above '~'.  It also
1581         generated a warning on OSes where char =~ unsigned char.  Fixed.
1582
1583 1998-10-17  Hrvoje Niksic  <hniksic@srce.hr>
1584
1585         * http.c (http_process_type): Removed needless strdup(), a memory
1586         leak.
1587
1588 1998-09-25  Hrvoje Niksic  <hniksic@srce.hr>
1589
1590         * html.c (htmlfindurl): Set PH to the first occurrence of `#'.
1591
1592 1998-09-25  Simon Munton  <simonm@m4data.co.uk>
1593
1594         * init.c (wgetrc_file_name): Don't free HOME under Windows.
1595
1596 1998-12-01  "R. K. Owen"  <rkowen@Nersc.GOV>
1597
1598         * host.c (store_hostaddress): Fix for big endian 64-bit machines.
1599
1600 1998-12-01  Hrvoje Niksic  <hniksic@srce.hr>
1601
1602         * url.c (UNSAFE_CHAR): New macro.
1603         (contains_unsafe): Use it.
1604         (encode_string): Ditto.
1605
1606 1998-12-01  Hrvoje Niksic  <hniksic@srce.hr>
1607
1608         * main.c (i18n_initialize): Use LC_MESSAGES only if available.
1609
1610 2000-03-31  Hrvoje Niksic  <hniksic@srce.hr>
1611
1612         * Use TOUPPER/TOLOWER.
1613
1614 1998-12-22  Alexander V. Lukyanov  <lav@yars.free.net>
1615
1616         * ftp-opie.c (btoe): Zero-terminate OSTORE.
1617
1618 2000-03-21  Hrvoje Niksic  <hniksic@iskon.hr>
1619
1620         * wget.h (DO_REALLOC_FROM_ALLOCA): Ditto.
1621
1622         * sysdep.h (ISALNUM): New macro.
1623         (TOLOWER): Ditto.
1624         (TOUPPER): Ditto.
1625
1626 2000-03-10  Dan Harkless  <wget@harkless.org>
1627
1628         * html.c (idmatch): Implemented checking of my new --follow-tags
1629         and --ignore-tags options.
1630
1631         * init.c (commands): Added comment reminding people adding new
1632         entries doing allocation to add corresponding freeing in cleanup().
1633         (commands): Added new followtags and ignoretags commands.
1634         (cleanup): Free storage for new followtags and ignoretags.
1635
1636         * main.c: Use of "comma-separated list" was random -- normalized
1637         it.  Did some alphabetization.  Added comments pointing out
1638         "Options without arguments" and "Options accepting an argument"
1639         sections of long_options[].  Added new options --follow-tags and
1640         -G / --ignore-tags.  Added comment that Damir's --referer is
1641         currently undocumented.  Added comment that Heiko's --waitretry is
1642         partially undocumented (mentioned in --help but not in
1643         wget.texi).  Moved improperly sorted 24, 129, and 'G' cases.
1644
1645         * options.h (struct options): Added new fields follow_tags and
1646         ignore_tags.
1647
1648         * wget.h: Added "#define EQ 0" so we can say "strcmp(a, b) == EQ".
1649
1650 2000-03-02  Dan Harkless  <wget@harkless.org>
1651
1652         * ftp.c (ftp_loop_internal): Heiko introduced "suggest explicit
1653         braces to avoid ambiguous `else'" warnings.  Eliminated them.
1654
1655         * http.c (gethttp): Dan Berger's query string patch is totally
1656         bogus.  If you have two different URLs, gen_page.cgi?page1 and
1657         get_page.cgi?page2, they'll both be saved as get_page.cgi and the
1658         second will overwrite the first.  Also, parameters to implicit
1659         CGIs, like "http://www.host.com/db/?2000-03-02" cause the URLs to
1660         be printed with trailing garbage characters, and could seg fault.
1661         Backing out the patch, which Dan B. informed me by email was just
1662         a kludge to download StarOffice from Sun made necessary due to
1663         wget's unconditional escaping of certain characters (room for an
1664         option there?).
1665         (http_loop): Heiko introduced "suggest explicit braces to avoid
1666         ambiguous `else'" warnings.  Eliminated them.
1667
1668         * main.c: Heiko's --wait / --waitretry backwards compatibility
1669         code looks to have been totally untested -- automatic variable
1670         'wr' was used without being initialized, and a long int was passed
1671         into setval()'s char* val parameter.
1672
1673         * recur.c (parse_robots): Applied Edward J. Sabol
1674         <sabol@alderaan.gsfc.nasa.gov>'s patch for Guan Yang's reported
1675         problem with "User-agent:<space>*<space>" lines in robots.txt.
1676
1677         * url.c (parseurl, str_url): Removing Dan Berger's code (see
1678         http.c above for explanation).
1679
1680 1999-08-25  Heiko Herold  <Heiko.Herold@previnet.it>
1681
1682         * ftp.c: Respect new option waitretry.
1683
1684 2000-01-30  Damir Dzeko  <ddzeko@zesoi.fer.hr>
1685
1686         * http.c (gethttp): Send custom Referer, if required.
1687
1688 1999-09-24  Charles G Waldman  <cgw@fnal.gov>
1689
1690         * netrc.c (parse_netrc): Allow passwords to contain spaces.
1691
1692         * netrc.c (parse_netrc): New function.
1693
1694 1999-09-17  Dan Berger  <dberger@ix.netcom.com>
1695
1696         * http.c (gethttp): Send it.
1697
1698         * url.c (parseurl): Detect query string in HTTP URL-s.
1699         (str_url): Print it.
1700
1701 2000-03-02  HIROSE Masaaki  <hirose31@t3.rim.or.jp>
1702
1703         * html.c (html_allow): Add <link href=...> and <script src=...>.
1704
1705 1999-05-02  andrew deryabin  <djsf@softhome.net>
1706
1707         * http.c (gethttp): Specify port in `Host' header only if it's
1708         different from 80.
1709
1710 1998-11-03  Edward J. Sabol  <sabol@alderaan.gsfc.nasa.gov>
1711
1712         * recur.c (recursive_retrieve): If a finite maximum depth is
1713         specified, and we're are already at that depth, don't download the
1714         HTML file for parsing.
1715
1716 2000-03-01  Dan Harkless  <wget@harkless.org>
1717
1718         * ftp.c (ftp_loop_internal): Call new downloaded_file() function,
1719         even though we don't do conversion on HTML files retrieved via
1720         FTP, so _current_ usage of downloaded_file() makes this call unneeded.
1721         (ftp_retrieve_list): Added a comment saying where we need to
1722         stat() a .orig file if FTP'd HTML file conversion is ever implemented.
1723         (ftp_retrieve_list): "Local file '%s' is more recent," is sometimes
1724         a lie -- reworded as "Server file no newer than local file '%s' --".
1725
1726         * http.c (http_loop): Fixed a typo and clarified a comment.
1727         (http_loop): When -K and -N are specified together, compare size
1728         and timestamp of server file X against local file X.orig (if
1729         extant) rather than converted local file X.
1730         (http_loop): "Local file '%s' is more recent," is sometimes a lie
1731         -- reworded as "Server file no newer than local file '%s' --".
1732         (http_loop): Call new downloaded_file() function to prevent
1733         wrongful overwriting of .orig file when -N is specified.
1734
1735         * url.c (convert_links): When -K specified, only rename X to
1736         X.orig if downloaded_file() returns TRUE.  Otherwise when we skip
1737         file X due to -N, we clobber an X.orig from a previous invocation.
1738         (convert_links): Call the failsafe xstrdup(), not the real strdup().
1739         (convert_links): Added a note asking anyone who understands how
1740         multiple URLs can correspond to a single file to comment it.
1741         (downloaded_file): Added this new function.
1742
1743         * url.h (downloaded_file): Added prototype for this new function
1744         as well as its downloaded_file_t enum type.
1745
1746         * wget.h (boolean): Added this new typedef and TRUE and FALSE #defines.
1747
1748 2000-02-29  Dan Harkless  <wget@harkless.org>
1749
1750         * version.c: Upped version to developer-only "1.5.3+dev".
1751
1752 2000-02-18  Dan Harkless  <wget@harkless.org>
1753
1754         * init.c (backup_converted): Added this new option.
1755
1756         * main.c (-K / --backup-converted): Added this new option.
1757
1758         * options.h (backup_converted): Added this new option.
1759
1760         * url.c (convert_links): When backup_converted is specified, save
1761         file X as X.orig before converting.
1762
1763         * url.h (urlpos): Fixed typo -- said "Rekative" instead of "Relative".
1764
1765 1998-09-21  Hrvoje Niksic  <hniksic@srce.hr>
1766
1767         * version.c: Wget 1.5.3 is released.
1768
1769 1998-09-21  Hrvoje Niksic  <hniksic@srce.hr>
1770
1771         * host.c (ftp_getaddress): Don't warn when reverse-lookup of local
1772         address doesn't yield FQDN.
1773
1774 1998-09-21  Andreas Schwab  <schwab@issan.informatik.uni-dortmund.de>
1775
1776         * cmpt.c (strerror): Fix declaration of sys_errlist.
1777
1778 1998-09-11  Hrvoje Niksic  <hniksic@srce.hr>
1779
1780         * main.c (main): Don't use an array subscript as the first
1781         argument to STRDUP_ALLOCA.
1782         From Kaveh R. Ghazi.
1783
1784 1998-09-11  Szakacsits Szabolcs  <szaka@sienet.hu>
1785
1786         * html.c (htmlfindurl): Download table background.
1787
1788 1998-09-11  Hans Grobler  <grobh@conde.ee.sun.ac.za>
1789
1790         * init.c (parse_line): Would free *com before allocating it.
1791         (parse_line): Would free com instead of *com.
1792
1793 1998-09-10  Howard Gayle  <howard@fjst.com>
1794
1795         * url.c (get_urls_html): Would drop the last character of the
1796         link.
1797
1798 1998-09-10  Hrvoje Niksic  <hniksic@srce.hr>
1799
1800         * http.c (http_loop): Don't print status code if quiet.
1801
1802 1998-09-10  Kaveh R. Ghazi  <ghazi@caip.rutgers.edu>
1803
1804         * log.c: Use <stdarg.h> only when __STDC__.
1805
1806 1998-09-10  Adam D. Moss  <adam@foxbox.org>
1807
1808         * html.c (htmlfindurl): Download <layer src=...>.
1809
1810 1998-09-10  Howard Gayle  <howard@fjst.com>
1811
1812         * ftp.c (ftp_retrieve_list): Don't update the time stamp of a file
1813         not retrieved.
1814
1815 1998-06-27  Hrvoje Niksic  <hniksic@srce.hr>
1816
1817         * utils.c: Include <libc.h> on NeXT.
1818
1819 1998-06-26  Heinz Salzmann  <heinz.salzmann@intermetall.de>
1820
1821         * url.c (get_urls_html): Fix calculation of URL position.
1822
1823 1998-06-23  Hrvoje Niksic  <hniksic@srce.hr>
1824
1825         * version.c: Wget 1.5.2 is released.
1826
1827 1998-06-23  Dave Love  <d.love@dl.ac.uk>
1828
1829         * ftp.c, init.c, netrc.c: Include errno.h.
1830
1831         * http.c: Include errno.h and time header.
1832
1833         * Makefile.in (exext): Define.
1834         (install.bin, uninstall.bin): Use it.
1835
1836 1998-06-21  Hrvoje Niksic  <hniksic@srce.hr>
1837
1838         * http.c (http_loop): Don't attempt to compare local and remote
1839         sizes if the remote size is unknown.
1840
1841 1998-06-16  Hrvoje Niksic  <hniksic@srce.hr>
1842
1843         * url.c (get_urls_html): Use malloc() instead of alloca in the
1844         loop.
1845
1846 1998-06-13  Hrvoje Niksic  <hniksic@srce.hr>
1847
1848         * version.c: Wget 1.5.2-b4 is released.
1849
1850 1998-06-13  Hrvoje Niksic  <hniksic@srce.hr>
1851
1852         * url.c (get_urls_html): Ignore spaces before and after the URI.
1853
1854 1998-06-08  Wanderlei Antonio Cavassin  <cavassin@conectiva.com.br>
1855
1856         * ftp.c (getftp): Translate `done'.
1857
1858 1998-06-06  Hrvoje Niksic  <hniksic@srce.hr>
1859
1860         * version.c: Wget 1.5.2-b3 is released.
1861
1862 1998-06-06  Alexander Kourakos  <awk@bnt.com>
1863
1864         * init.c (cleanup): Close dfp, don't free it.
1865
1866 1998-06-06  Hrvoje Niksic  <hniksic@srce.hr>
1867
1868         * utils.c (make_directory): Twiddle.
1869
1870         * config.h.in: Added template for access().
1871
1872 1998-06-05  Mathieu Guillaume  <mat@cythere.com>
1873
1874         * html.c (htmlfindurl): Download <input src=...>
1875
1876 1998-06-03  Hrvoje Niksic  <hniksic@srce.hr>
1877
1878         * utils.c (file_exists_p): Use access() with two arguments.
1879
1880 1998-05-27  Martin Kraemer  <Martin.Kraemer@mch.sni.de>
1881
1882         * netrc.c (parse_netrc): Correct logic.
1883
1884 1998-05-27  Hrvoje Niksic  <hniksic@srce.hr>
1885
1886         * ftp.c (getftp): Added `break'; suggested by Lin Zhe Min
1887         <ljm@ljm.wownet.net>.
1888
1889 1998-05-24  Hrvoje Niksic  <hniksic@srce.hr>
1890
1891         * version.c: Wget 1.5.2-b2 is released.
1892
1893 1998-05-18  Juan Jose Rodriguez  <jcnsoft@jal1.telmex.net.mx>
1894
1895         * mswindows.h: Don't translate mkdir to _mkdir under Borland.
1896
1897 1998-05-17  Hrvoje Niksic  <hniksic@srce.hr>
1898
1899         * retr.c (elapsed_time): Return correct value when
1900         HAVE_GETTIMEOFDAY is undefined.
1901
1902 1998-05-13  Hrvoje Niksic  <hniksic@srce.hr>
1903
1904         * version.c: Wget 1.5.2-b1 is released.
1905
1906 1998-05-08  Hrvoje Niksic  <hniksic@srce.hr>
1907
1908         * getopt.c (_getopt_internal): Use exec_name instead of argv[0].
1909         (_getopt_internal): Don't translate `#if 0'-ed strings.
1910
1911 1998-05-06  Douglas E. Wegscheid  <wegscd@whirlpool.com>
1912
1913         * mswindows.c (ws_handler): Use fork_to_background().
1914
1915 1998-05-05  Hrvoje Niksic  <hniksic@srce.hr>
1916
1917         * version.c: Wget 1.5.1 is released.
1918
1919 1998-05-05  Hrvoje Niksic  <hniksic@srce.hr>
1920
1921         * http.c (parse_http_status_line): Avoid `minor' and `major'
1922         names.
1923
1924 1998-05-02  Hrvoje Niksic  <hniksic@srce.hr>
1925
1926         * utils.c (mkdirhier): Renamed to make_directory.
1927
1928 1998-05-01  Hrvoje Niksic  <hniksic@srce.hr>
1929
1930         * mswindows.c (fork_to_background): Define under Windows.
1931
1932         * utils.c (fork_to_background): New function.
1933
1934         * html.c (htmlfindurl): Removed rerdundant casts.
1935
1936 1998-05-01  Douglas E. Wegscheid  <wegscd@whirlpool.com>
1937
1938         * mswindows.c (ws_mypath): Cache the path.
1939
1940 1998-04-30  Douglas E. Wegscheid  <wegscd@whirlpool.com>
1941
1942         * ftp.h: Prefix enum ftype members with FT_.
1943
1944         * ftp-ls.c, ftp.c, html.h: Adjust accordingly.
1945
1946         * mswindows.h: Use stat under Borland, _stat under MSVC.
1947
1948 1998-04-28  Hrvoje Niksic  <hniksic@srce.hr>
1949
1950         * http.c (known_authentication_scheme_p): New function.
1951         (gethttp): Handle authorization more correctly.
1952
1953         * ftp-basic.h: Removed.
1954
1955         * cmpt.h: Removed.
1956
1957         * utils.c: Include <unistd.h> before <pwd.h>; needed under SunOS
1958         with gcc 2.8.
1959         (numdigit): Use `while' loop.
1960
1961         * http.c (create_authorization_line): Detect authentication
1962         schemes case-insensitively.
1963
1964         * http.c (extract_header_attr): Use strdupdelim().
1965         (digest_authentication_encode): Move declaration of local
1966         variables to smaller scope.
1967         (digest_authentication_encode): Reset REALM, OPAQUE and NONCE.
1968         (create_authorization_line): Detect authentication schemes
1969         case-insensitively.
1970
1971         * utils.c (touch): Constify.
1972
1973         * http.c (gethttp): Report a nicer error when no data is received.
1974
1975         * rbuf.h (RBUF_READCHAR): Ditto.
1976
1977         * ftp-basic.c (ftp_response): Use sizeof.
1978
1979 1998-04-27  Hrvoje Niksic  <hniksic@srce.hr>
1980
1981         * retr.c (print_percentage): EXPECTED is long, not int.
1982         (print_percentage): Use floating-point arithmetic to avoid
1983         overflow with large files' sizes multiplied with 100.
1984
1985 1998-04-27  Gregor Hoffleit  <flight@mathi.uni-heidelberg.de>
1986
1987         * config.h.in: Added pid_t stub.
1988
1989         * sysdep.h (S_ISREG): Moved here from mswindows.h (NeXT doesn't
1990         define it).
1991
1992 1998-04-20  Hrvoje Niksic  <hniksic@srce.hr>
1993
1994         * version.c: Wget 1.5.0 is released.
1995
1996 1998-04-18  Hrvoje Niksic  <hniksic@srce.hr>
1997
1998         * url.c (str_url): Ditto.
1999
2000         * ftp-basic.c (ftp_rest): Use new name.
2001
2002         * utils.c (long_to_string): Renamed from prnum().
2003
2004 1998-04-16  Hrvoje Niksic  <hniksic@srce.hr>
2005
2006         * version.c: Wget 1.5-b17 is released.
2007
2008 1998-04-08  Hrvoje Niksic  <hniksic@srce.hr>
2009
2010         * headers.c (header_get): New argument FLAGS.
2011
2012         * http.c (gethttp): If request is malformed, bail out of the
2013         header loop.
2014         (gethttp): Check for empty header *after* the status line checks.
2015         (gethttp): Disallow continuations for status line.
2016
2017 1998-04-08  Hrvoje Niksic  <hniksic@srce.hr>
2018
2019         * version.c: Wget 1.5-b16 is released.
2020
2021 1998-04-08  Hrvoje Niksic  <hniksic@srce.hr>
2022
2023         * init.c (commands): Renamed `always_rest' to `continue'.
2024
2025 1998-04-05  Hrvoje Niksic  <hniksic@srce.hr>
2026
2027         * all: Use it.
2028
2029         * log.c (logputs): New argument.
2030         (logvprintf): Ditto.
2031         (logprintf): Ditto.
2032
2033 1998-04-04  Hrvoje Niksic  <hniksic@srce.hr>
2034
2035         * http.c (http_atotm): Update comment.
2036
2037         * main.c (i18n_initialize): Set LC_MESSAGES, not LC_ALL.
2038
2039         * wget.h: Renamed ENABLED_NLS to HAVE_NLS.
2040
2041         * main.c (i18n_initialize): New function.
2042         (main): Use it.
2043
2044         * log.c: Include <unistd.h>.
2045
2046         * retr.c (show_progress): Cast alloca to char *.
2047
2048 1998-04-04  Hrvoje Niksic  <hniksic@srce.hr>
2049
2050         * version.c: Wget 1.5-b15 is released.
2051
2052 1998-04-04  Hrvoje Niksic  <hniksic@srce.hr>
2053
2054         * utils.h: Declare file_non_directory_p().
2055
2056 1998-04-03  Hrvoje Niksic  <hniksic@srce.hr>
2057
2058         * main.c (main): It's `tries', not `numtries' now.
2059
2060 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
2061
2062         * init.c (getperms): Removed.
2063
2064 1998-04-01  Tim Charron  <tcharron@interlog.com>
2065
2066         * log.c (logvprintf): Don't use ARGS twice.
2067
2068 1998-04-01  John  <john@futuresguide.com>
2069
2070         * mswindows.c: Cleaned up.
2071
2072 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
2073
2074         * version.c: Wget 1.5-b14 is released.
2075
2076 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
2077
2078         * ftp-opie.c (STRLEN4): New macro.
2079         (btoe): Use it.
2080
2081 1998-04-01  Junio Hamano  <junio@twinsun.com>
2082
2083         * http.c: Document all the Digest functions.
2084
2085 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
2086
2087         * utils.c (file_non_directory_p): Renamed from isfile().
2088
2089         * mswindows.h (S_ISREG): New macro, suggested by Tim Adam.
2090
2091 1998-03-31  Hrvoje Niksic  <hniksic@srce.hr>
2092
2093         * utils.c (mkdirhier): Use 0777 instead of opt.dirmode.
2094
2095         * init.c (cmd_spec_dotstyle): Use 48 dots per line for binary
2096         style.
2097         (cmd_permissions): Removed.
2098
2099         * config.h.in: Add template for WORDS_BIGENDIAN.
2100
2101 1998-03-31  Junio Hamano  <junio@twinsun.com>
2102
2103         * http.c (HEXD2asc): New macro.
2104         (dump_hash): Use it.
2105
2106 1998-03-31  Hrvoje Niksic  <hniksic@srce.hr>
2107
2108         * version.c: Wget 1.5-b13 is released.
2109
2110 1998-03-31  Hrvoje Niksic  <hniksic@srce.hr>
2111
2112         * main.c (main): Don't try to use `com'.
2113
2114 1998-03-30  Hrvoje Niksic  <hniksic@srce.hr>
2115
2116         * init.c (cmd_permissions): New function.
2117
2118 1998-03-30  Hrvoje Niksic  <hniksic@srce.hr>
2119
2120         * version.c: Wget 1.5-b12 is released.
2121
2122 1998-03-30  Hrvoje Niksic  <hniksic@srce.hr>
2123
2124         * init.c (commands): Renamed `numtries' to `tries'.
2125         (cmd_spec_debug): Removed.
2126         (home_dir): Under Windows, return `C:\' if HOME is undefined.
2127
2128 1998-03-29  Hrvoje Niksic  <hniksic@srce.hr>
2129
2130         * config.h.in: Define _XOPEN_SOURCE.
2131
2132         * init.c (check_user_specified_header): New function.
2133         (cmd_spec_header): Use it.
2134         (cmd_spec_useragent): New function.
2135
2136 1998-03-29  Hrvoje Niksic  <hniksic@srce.hr>
2137
2138         * version.c: Wget 1.5-b11 is released.
2139
2140 1998-03-28  Hrvoje Niksic  <hniksic@srce.hr>
2141
2142         * wget.h: Include <libintl.h> only if NLS is enabled.
2143
2144 1998-03-26  Hrvoje Niksic  <hniksic@srce.hr>
2145
2146         * options.h (struct options): Made `wait' a long.
2147         (struct options): Ditto for `timeout'.
2148
2149 1998-03-19  Hrvoje Niksic  <hniksic@srce.hr>
2150
2151         * utils.c (exists): Renamed to file_exists_p.
2152         (file_exists_p): Use access() if available.
2153
2154 1998-03-17  Hrvoje Niksic  <hniksic@srce.hr>
2155
2156         * utils.c (memfatal): Set save_log_p to 0 to avoid potential
2157         infloop.
2158
2159         * log.c: do_logging -> save_log_p.
2160
2161         * config.h.in: Added template for HAVE_VSNPRINTF.
2162
2163 1998-03-16  Hrvoje Niksic  <hniksic@srce.hr>
2164
2165         * init.c: Ditto.
2166
2167         * http.c: Protect declaration against non-ANSI compiler.
2168
2169         * log.c (logvprintf): Use vsnprintf() if available.
2170
2171         * getopt.c (main): Don't translate test stuff.
2172
2173 1998-03-16  Hrvoje Niksic  <hniksic@srce.hr>
2174
2175         * version.c: Wget 1.5-b10 is released.
2176
2177 1998-03-11  Hrvoje Niksic  <hniksic@srce.hr>
2178
2179         * ftp.c (getftp): Don't translate "CWD %s".
2180
2181         * wget.h (GCC_FORMAT_ATTR): Renamed from FORMAT_ATTR.
2182
2183 1998-03-07  Hrvoje Niksic  <hniksic@srce.hr>
2184
2185         * ftp-opie.c (btoe): Use memcpy() instead of strncat().
2186
2187         * log.c (logputs): New function.
2188         (logvprintf): Renamed from vlogmsg; use logputs().
2189
2190         * retr.c (show_progress): Print `[100%]' when the retrieval is
2191         finished.
2192
2193         * init.c (run_wgetrc): Use FILE, not PATH.
2194         (wgetrc_file_name): Ditto.
2195
2196 1998-03-07  Tim Adam  <tma@osa.com.au>
2197
2198         * recur.c (parse_robots): Correctly reset `entries' on empty
2199         disallow.
2200
2201 1998-03-07  Hrvoje Niksic  <hniksic@srce.hr>
2202
2203         * init.c (cmd_spec_debug): Use cmd_boolean().
2204
2205 1998-02-23  Hrvoje Niksic  <hniksic@srce.hr>
2206
2207         * http.c (gethttp): Create proxy-authorization correctly.
2208
2209 1998-02-22  Hrvoje Niksic  <hniksic@srce.hr>
2210
2211         * md5.c: Ditto.
2212
2213         * getopt.c: Use ANSI function definitions.
2214
2215         * ftp-opie.c: New file.
2216
2217         * options.h: Don't redefine EXTERN.
2218
2219         * init.c: Sort it correctly.
2220
2221 1998-02-22  Hrvoje Niksic  <hniksic@srce.hr>
2222
2223         * version.c: Wget 1.5-b9 is released.
2224
2225 1998-02-22  Hrvoje Niksic  <hniksic@srce.hr>
2226
2227         * recur.c (recursive_retrieve): Reset `first_time'.
2228
2229         * ftp.c (getftp): Added `default' clause to switches of uerr_t.
2230
2231         * rbuf.c (rbuf_peek): Simplified.
2232         (rbuf_flush): Use MINVAL.
2233
2234         * wget.h (MINVAL): Moved from url.h.
2235
2236         * rbuf.h (RBUF_FD): New macro.
2237
2238         * url.c (add_url): Add to the head of the list.
2239
2240         * ftp.c (ftp_retrieve_list): Set the permissions to downloaded
2241         file.
2242         (getftp): Set the default permissions to 0600.
2243
2244 1998-02-21  Hrvoje Niksic  <hniksic@srce.hr>
2245
2246         * url.c (get_urls_html): Ditto.
2247         (convert_links): Ditto.
2248
2249         * recur.c (parse_robots): Ditto.
2250
2251         * html.c (ftp_index): Ditto.
2252
2253         * ftp-ls.c (ftp_parse_unix_ls): Open file as binary.
2254
2255         * init.c (defaults): Initialize `opt' to zero via memset.
2256
2257         * http.c (digest_authentication_encode): goto considered harmful.
2258
2259 1998-02-19  Hrvoje Niksic  <hniksic@srce.hr>
2260
2261         * ftp.c (delelement): Simplify and fix leak.
2262
2263 1998-02-18  Hrvoje Niksic  <hniksic@srce.hr>
2264
2265         * http.c (dump_hash): Use HEXD2ASC instead of home-grown stuff.
2266
2267         * url.h (HEXD2ASC): Removed warning.
2268
2269         * init.c (comind): Use binary search.
2270         (commands): Reorganized.
2271         (setval): Ditto.
2272         (cmd_boolean): New function.
2273         (cmd_number): Ditto.
2274         (cmd_number_inf): Ditto.
2275         (cmd_string): Ditto.
2276         (cmd_vector): Ditto.
2277         (cmd_directory_vector): Ditto.
2278         (cmd_bytes): Ditto.
2279         (cmd_time): Ditto.
2280         (cmd_spec_debug): Ditto.
2281         (cmd_spec_dirmode): Ditto.
2282         (cmd_spec_dirstruct): Ditto.
2283         (cmd_spec_dotstyle): Ditto.
2284         (cmd_spec_header): Ditto.
2285         (cmd_spec_htmlify): Ditto.
2286         (cmd_spec_mirror): Ditto.
2287         (cmd_spec_outputdocument): Ditto.
2288         (cmd_spec_recursive): Ditto.
2289         (settime): Merged with cmd_time().
2290         (setbytes): Merged with cmd_bytes().
2291         (setonoff): Merged with cmd_boolean().
2292         (onoff): Ditto.
2293
2294 1998-02-17  Hrvoje Niksic  <hniksic@srce.hr>
2295
2296         * Makefile.in (distclean): Remove `config.h'.
2297
2298 1998-02-17  Hrvoje Niksic  <hniksic@srce.hr>
2299
2300         * version.c: Wget 1.5-b8 is released.
2301
2302 1998-02-17  Hrvoje Niksic  <hniksic@srce.hr>
2303
2304         * http.c (digest_authentication_encode): New function.
2305         (create_authorization_line): Use it.
2306         (dump_hash): New function.
2307         (digest_authentication_encode): Use it.
2308
2309         * fnmatch.c: Renamed from `mtch.c'.
2310
2311 1998-02-15  Karl Eichwalder  <ke@suse.de>
2312
2313         * main.c (main): Tag "Written by..." string as translatable.
2314
2315 1998-02-15  Hrvoje Niksic  <hniksic@srce.hr>
2316
2317         * wget.h (FREE_MAYBE): New macro.
2318
2319         * http.c (create_authorization_line): Don't use ANSI C string
2320         concatenation feature.
2321         (basic_authentication_encode): Use alloca() for temporary
2322         variables.
2323
2324         * recur.h: Ditto.
2325
2326         * http.c: Ditto.
2327
2328         * headers.h: Ditto.
2329
2330         * ftp-basic.c: Protect declaration against non-ANSI compiler.
2331
2332         * http.c (create_authorization_line): Cast `unsigned char *' to
2333         `char *' for sprintf, to shut up the noisy Digital Unix cc.
2334
2335 1998-02-15  Hrvoje Niksic  <hniksic@srce.hr>
2336
2337         * version.c: Wget 1.5-b7 is released.
2338
2339 1998-02-15  Hrvoje Niksic  <hniksic@srce.hr>
2340
2341         * cmpt.c (strstr): Synched with glibc-2.0.6.
2342
2343         * ftp-basic.c (calculate_skey_response): Ditto.
2344         (calculate_skey_response): Use alloca().
2345
2346         * http.c (create_authorization_line): Work with FSF's version of
2347         md5.c.
2348
2349         * md5.c: New file, from GNU libc.
2350
2351 1998-02-14  Hrvoje Niksic  <hniksic@srce.hr>
2352
2353         * url.h (URL_CLEANSE): Name the temporary variable more carefully.
2354
2355 1998-02-13  Hrvoje Niksic  <hniksic@srce.hr>
2356
2357         * http.c (basic_authentication_encode): New function, instead of
2358         the macro.
2359
2360 1998-02-13  Junio Hamano  <junio@twinsun.com>
2361
2362         * http.c: Add HTTP-DA support.
2363         * ftp-basic.c: Add Opie/S-key support.
2364         * config.h.in, Makefile.in: Add HTTP-DA and Opie/S-key support.
2365         * md5.c, md5.h: New files.
2366
2367 1998-02-13  Hrvoje Niksic  <hniksic@srce.hr>
2368
2369         * http.c (http_process_range): Renamed from hprocrange().
2370         (http_process_range): Parse the whole header.
2371
2372         * headers.c: New file.
2373         (header_process): New function.
2374         (header_get): Renamed from fetch_next_header.
2375
2376         * all: Include utils.h only where necessary.
2377
2378         * wget.h: Declare xmalloc(), xrealloc() and xstrdup() here.
2379
2380         * wget.h: Add provisions for dmalloc.
2381
2382 1998-02-12  Hrvoje Niksic  <hniksic@srce.hr>
2383
2384         * version.c: Wget 1.5-b6 is released.
2385
2386 1998-02-12  Hrvoje Niksic  <hniksic@srce.hr>
2387
2388         * ftp.c (ftp_loop): Determine `filename' more precisely.
2389
2390         * init.c (setval): Don't set `opt.quiet' if output-document is
2391         `-'.
2392
2393         * log.c (log_init): Print to STDERR instead of STDOUT.
2394         (vlogmsg): Use STDERR by default.
2395         (logflush): Ditto.
2396
2397 1998-02-11  Simon Josefsson  <jas@pdc.kth.se>
2398
2399         * host.c: Use addr_in again.
2400
2401 1998-02-08  Karl Eichwalder  <karl@suse.de>
2402
2403         * http.c (gethttp): Fixed typo.
2404
2405 1998-02-08  Hrvoje Niksic  <hniksic@srce.hr>
2406
2407         * version.c: Wget 1.5-b5 is released.
2408
2409 1998-02-08  Hrvoje Niksic  <hniksic@srce.hr>
2410
2411         * retr.c (show_progress): Use it.
2412
2413         * log.c (logflush): New function.
2414
2415         * wget.h: Utilize __attribute__ if on gcc.
2416
2417 1998-02-07  Hrvoje Niksic  <hniksic@srce.hr>
2418
2419         * http.c (base64_encode_line): New argument LENGTH.
2420         (BASIC_AUTHENTICATION_ENCODE): Use it.
2421         (BASIC_AUTHENTICATION_ENCODE): Take length of HEADER into account.
2422
2423         * main.c (main): Fixed fprintf() format mismatch.
2424
2425 1998-02-06  Hrvoje Niksic  <hniksic@srce.hr>
2426
2427         * version.c: Wget 1.5-b4 is released.
2428
2429 1998-02-03  Simon Josefsson  <jas@pdc.kth.se>
2430
2431         * host.c: use sockaddr_in instead of addr_in.
2432
2433 1998-02-04  Hrvoje Niksic  <hniksic@srce.hr>
2434
2435         * init.c (cleanup): Use it.
2436
2437         * recur.c (recursive_cleanup): New function.
2438
2439         * retr.c (retrieve_from_file): Ditto.
2440
2441         * main.c (main): Use it.
2442
2443         * recur.c (recursive_reset): New function.
2444
2445         * retr.c (retrieve_from_file): Ditto.
2446
2447         * main.c (main): Simplify call to recursive_retrieve().
2448
2449         * recur.c (recursive_retrieve): Removed FLAGS argument.
2450
2451         * http.c (gethttp): Changed call to iwrite().
2452
2453 1998-02-03  Hrvoje Niksic  <hniksic@srce.hr>
2454
2455         * url.c (get_urls_html): Ditto.
2456         (free_urlpos): Ditto.
2457         (mkstruct): Ditto.
2458         (construct): Ditto.
2459
2460         * retr.c (retrieve_url): Move declaration of local variables to
2461         smaller scope.
2462
2463         * url.c (urlproto): Use it.
2464         (parseurl): Ditto.
2465         (str_url): Ditto.
2466         (get_urls_html): Ditto.
2467
2468         * utils.h (ARRAY_SIZE): New macro.
2469
2470         * url.c (proto): Moved from url.h.
2471
2472         * url.h (URL_CLEANSE): Reformatted.
2473         (USE_PROXY_P): Renamed from USE_PROXY.
2474
2475         * ftp-basic.c: Adjust to the new interface of iwrite().
2476
2477         * ftp-basic.c (ftp_port): Use alloca().
2478
2479 1998-02-03  Hrvoje Niksic  <hniksic@srce.hr>
2480
2481         * version.c: Wget 1.5-b3 is released.
2482
2483         * host.c (ftp_getaddress): Don't print to stderr directly.
2484
2485         * init.c (setbytes): Support `g' for gigabytes.
2486         (cmdtype): New specification CTIME.
2487         (setval): Use it with settime().
2488         (commands): Use it for WAIT and TIMEOUT.
2489
2490 1998-02-02  Hrvoje Niksic  <hniksic@srce.hr>
2491
2492         * http.c (BASIC_AUTHENTICATION_ENCODE): New macro.
2493         (gethttp): Use it.
2494
2495         * utils.c (unique_name_1): Moved from url.c.
2496         (unique_name): Ditto.
2497
2498         * url.c (url_filename): Ditto.
2499
2500         * log.c (redirect_output): Changed call to unique_name().
2501
2502         * url.c (unique_name_1): Renamed from unique_name().
2503         (unique_name): Changed interface.
2504
2505         * init.c (enum cmdid): Moved from init.h.
2506         (cmdtype): Ditto.
2507         (struct cmd): Ditto.
2508
2509         * main.c (main): Use it.
2510         (main): Moved `--backups' to not have a short option.
2511
2512         * options.h (struct options): New member BACKGROUND.
2513
2514         * main.c (print_help): Rearranged.
2515         (main): New long options for -n* short options: --no-directories,
2516         --no-host-directories, --non-verbose, --no-host-lookup and
2517         --dont-remove-listing.
2518
2519 1998-02-01  Hrvoje Niksic  <hniksic@srce.hr>
2520
2521         * main.c (main): Use log_close().
2522
2523         * log.c: New variable LOGFP.
2524         (vlogmsg): Use it.
2525         (redirect_output): Don't open /dev/null; set LOGFP to stdin
2526         instead.
2527         (log_close): New function.
2528
2529         * options.h (struct options): Removed LFILE.
2530
2531         * log.c (log_enable): Removed.
2532
2533         * main.c (main): Use it.
2534
2535         * log.c (log_init): New function.
2536
2537         * url.c (get_urls_html): Removed needless assignment to BASE.
2538
2539         * host.c (add_hlist): Don't set CMP needlessly.
2540
2541         * utils.c (match_backwards): Ditto.
2542         (in_acclist): Ditto.
2543
2544         * url.c (findurl): Ditto.
2545
2546         * netrc.c (parse_netrc): Ditto.
2547
2548         * log.c (log_dump): Ditto.
2549
2550         * html.c (html_quote_string): Ditto.
2551
2552         * ftp-basic.c (ftp_request): Made static.
2553
2554         * connect.c: Made global variables static.
2555
2556         * url.c (construct): Ditto.
2557
2558         * init.c (init_path): Avoid assignment inside `if'-condition.
2559
2560         * ftp.c: Don't include in.h or winsock.h.
2561
2562         * ftp.c (ftp_loop): Use SZ.
2563
2564         * connect.c (bindport): Cast &addrlen to int *.
2565         (conaddr): Ditto.
2566
2567         * init.c (initialize): Don't use SYSTEM_WGETRC unconditionally.
2568
2569 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
2570
2571         * ftp.c (getftp): Initialize opt.ftp_pass here.
2572         (ftp_retrieve_dirs): Use alloca().
2573
2574         * init.c (defaults): Don't initialize opt.ftp_pass.
2575
2576         * sysdep.h (S_ISLNK): Declare for OS/2; ditto for lstat.
2577         From Ivan F. Martinez <ivanfm@ecodigit.com.br>.
2578
2579 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
2580
2581         * recur.c (parse_robots): Check for comments more correctly.
2582
2583         * host.c (ftp_getaddress): Use STRDUP_ALLOCA.
2584         (ftp_getaddress): Add diagnostics when reverse-lookup yields only
2585         hostname.
2586
2587 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
2588
2589         * version.c: Wget 1.5-b2 is released.
2590
2591         * netrc.c (NETRC_FILE_NAME): Moved from netrc.h.
2592
2593         * utils.c (proclist): Pass FNM_PATHNAME to fnmatch().
2594
2595         * ftp-basic.c (ftp_pasv): Avoid unnecessary casting to unsigned
2596         char.
2597
2598         * log.c: Don't attempt to hide arguments from ansi2knr.
2599
2600         * cmpt.c: Synched strptime() and mktime() with glibc-2.0.6.
2601
2602         * ansi2knr.c: Use a later version, from fileutils-3.16l alpha.
2603
2604         * ftp.c (getftp): Ditto.
2605
2606         * http.c (gethttp): Use it.
2607
2608         * retr.c (get_contents): New argument EXPECTED; pass it to
2609         show_progress().
2610         (show_progress): New argument EXPECTED; use it to display
2611         percentages.
2612
2613         * init.c (setval): Ditto.
2614
2615         * http.c (gethttp): Ditto.
2616         (http_loop): Ditto.
2617
2618         * ftp.c (getftp): Ditto.
2619         (ftp_loop_internal): Ditto.
2620
2621         * ftp-ls.c (ftp_parse_unix_ls): Use abort() instead of assert(0).
2622
2623         * sysdep.h (CLOSE): Simplify; use DEBUGP.
2624
2625         * netrc.c (search_netrc): Use alloca().
2626
2627         * init.c (defaults): Initialize no_flush.
2628
2629         * log.c (vlogmsg): Don't flush if no_flush.
2630
2631         * options.h (struct options): New variable no_flush.
2632
2633         * main.c (main): Don't play games with buffering.
2634
2635         * log.c (vlogmsg): Flush the output after every message.
2636
2637 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
2638
2639         * init.c (parse_line): Ditto.
2640
2641         * url.c (get_urls_html): Ditto.
2642
2643         * main.c (main): Don't cast to unsigned char.
2644
2645         * init.c (run_wgetrc): Don't cast to unsigned char.
2646         (parse_line): Accept char instead of unsigned char.
2647
2648         * html.c (htmlfindurl): Use char instead of unsigned char.
2649
2650         * all: Use them.
2651
2652         * sysdep.h: Add wrappers to ctype macros to make them
2653         eight-bit-clean:
2654
2655 1998-01-30  Hrvoje Niksic  <hniksic@srce.hr>
2656
2657         * html.c (htmlfindurl): Download <img lowsrc=...>
2658
2659         * main.c (main): Ignore SIGPIPE.
2660
2661         * connect.c (select_fd): New argument WRITEP.
2662         (iwrite): Call select_fd().
2663
2664 1997-02-27  Fila Kolodny <fila@ibi.com>
2665
2666         * ftp.c (ftp_retrieve_list): If retrieving symlink and the proper
2667         one already exists, just skip it.
2668
2669 1998-01-30  Hrvoje Niksic  <hniksic@srce.hr>
2670
2671         * http.c (gethttp): Cosmetic changes.
2672
2673         * http.c (check_end): Allow `+D...' instead of `GMT'.
2674         From Fabrizio Pollastri <pollastri@cstv.to.cnr.it>.
2675
2676         * url.c (process_ftp_type): New function.
2677         (parseurl): Use it.
2678
2679         * connect.c (iwrite): Allow writing in a few chunks.
2680         (bindport): Made SRV static, so addr can point to it.
2681         (select_fd): Removed HPUX kludge.
2682
2683         * host.c (free_hlist): Incorporated into clean_hosts().
2684
2685 1998-01-29  Hrvoje Niksic  <hniksic@srce.hr>
2686
2687         * host.c (hlist): Made static.
2688         (search_address): Cosmetic change.
2689
2690 1998-01-29  Hrvoje Niksic  <hniksic@srce.hr>
2691
2692         * version.c: Wget v1.5-b1 is released.
2693
2694         * http.c (hgetlen): Use sizeof() to get the header length.
2695         (hgetrange): Ditto.
2696         (hgettype): Ditto.
2697         (hgetlocation): Ditto.
2698         (hgetmodified): Ditto.
2699         (haccepts_none): Ditto.
2700
2701         * main.c (main): Updated `--version' and `--help' output, as per
2702         Francois Pinard's suggestions.
2703
2704         * main.c: Include locale.h; call setlocale(), bindtextdomain() and
2705         textdomain().
2706
2707         * config.h.in: Define stubs for I18N3.
2708
2709         * wget.h: Include libintl.h.
2710
2711 1998-01-28  Hrvoje Niksic  <hniksic@srce.hr>
2712
2713         * url.c (mkstruct): Check for opt.cut_dirs.
2714         (mkstruct): alloca()-te more, xmalloc() less.
2715
2716         * utils.c (load_file): Check for ferror().
2717
2718         * url.c (get_urls_file): Close only the files we opened.
2719         (get_urls_html): Ditto.
2720         (count_slashes): New function.
2721
2722         * http.h: Removed.
2723
2724         * http.c (gethttp): Respect username and password provided by
2725         proxy URL.
2726         (base64_encode_line): Write into an existing buffer instead of
2727         malloc-ing a new one.
2728         (struct http_stat): Moved from http.h
2729
2730         * retr.c (retrieve_url): Free SUF.
2731
2732         * all: Removed lots of unnecessary .h dependencies.
2733
2734         * html.c (global_state): Made static.
2735
2736         * utils.h (ALLOCA_ARRAY): New macro.
2737
2738         * main.c (main): New option `--cut-dirs'.
2739
2740         * url.c (construct): Use alloca() for T.
2741
2742         * utils.c (mkdirhier): Use STRDUP_ALLOCA.
2743
2744         * host.c (_host_t): Moved from host.h.
2745         (struct host): Renamed from _host_t.
2746         (store_hostaddress): Use STRDUP_ALLOCA for INET_S.
2747         (realhost): Ditto.
2748
2749         * host.h: Don't include url.h.
2750
2751         * ftp.c (LIST_FILENAME): Moved from ftp.h.
2752
2753         * init.c (DEFAULT_FTP_ACCT): Moved from ftp.h.
2754
2755         * main.c (main): Enable log if the output goes to a TTY.
2756
2757         * connect.h: Removed unused constant `BACKLOG'.
2758
2759         * config.h.in: Check for isatty().
2760
2761         * Makefile.in (LINK): Use CFLAGS when linking.
2762
2763 1998-01-27  Hrvoje Niksic  <hniksic@srce.hr>
2764
2765         * mswindows.c (ws_hangup): Use redirect_output().
2766
2767         * main.c (redirect_output_signal): New function; use
2768         redirect_output().
2769
2770         * log.c (redirect_output): New function, based on hangup(), which
2771         is deleted.
2772
2773         * log.c (vlogmsg): New function.
2774
2775         * wget.h (DEBUGP): Use debug_logmsg().
2776
2777         * main.c (hangup): Use it.
2778
2779         * log.c (log_dump): New function.
2780
2781         * utils.h (DO_REALLOC): Use `long' for various sizes.
2782
2783         * http.c (hskip_lws): Use `while', for clarity.
2784         (HTTP_DYNAMIC_LINE_BUFFER): New constant.
2785         (fetch_next_header): Use it instead of DYNAMIC_LINE_BUFFER.
2786
2787         * ftp-basic.c (FTP_DYNAMIC_LINE_BUFFER): New constant.
2788         (ftp_response): Use it instead of DYNAMIC_LINE_BUFFER.
2789
2790         * utils.c (DYNAMIC_LINE_BUFFER): Moved from utils.c.
2791         (LEGIBLE_SEPARATOR): Ditto.
2792         (FILE_BUFFER_SIZE): Ditto.
2793
2794         * retr.c (BUFFER_SIZE): Moved from retr.h.
2795
2796         * log.c: New file.
2797         (logmsg): Moved from utils.c.
2798         (debug_logmsg): New function.
2799
2800         * mswindows.h: Include it here.
2801
2802         * init.c: Ditto.
2803
2804         * utils.c: Don't include <windows.h>.
2805
2806 1998-01-25  Hrvoje Niksic  <hniksic@srce.hr>
2807
2808         * host.c (ftp_getaddress): Ditto.
2809
2810         * main.c (main): Use it.
2811
2812         * utils.h (STRDUP_ALLOCA): New macro.
2813
2814         * init.c: Prepend `wget: ' to error messages printed on stderr.
2815
2816         * utils.c (mkdirhier): Renamed from mymkdir.
2817         (touch): Renamed from my_touch.
2818         (pwd_cuserid): Renamed from my_cuserid().
2819
2820 1998-01-24  Andy Eskilsson  <andy.eskilsson@telelogic.se>
2821
2822         * utils.c (accdir): Process wildcards.
2823         (proclist): New function.
2824         (accdir): Use it to avoid code repetition.
2825
2826 1998-01-24  Hrvoje Niksic  <hniksic@srce.hr>
2827
2828         * recur.c (parse_robots): Respect opt.useragent; use alloca().
2829
2830         * http.c (gethttp): Construct useragent accordingly.
2831
2832         * version.c: Changed version string to numbers-only.
2833
2834         * main.c (print_help): List all the options.
2835
2836         * mswindows.c (windows_main_junk): Initialize argv0 here.
2837
2838 1998-01-24  Karl Heuer  <kwzh@gnu.org>
2839
2840         * netrc.c (search_netrc): Initialize `l' only after processing
2841         netrc.
2842
2843         * main.c (main): Don't trap SIGHUP if it's being ignored.
2844
2845 1998-01-24  Hrvoje Niksic  <hniksic@srce.hr>
2846
2847         * all: Use logmsg().
2848
2849         * utils.c (time_str): Moved from retr.c.
2850         (logmsg): New function.
2851         (logmsg_noflush): Ditto.
2852
2853         * rbuf.c: New file, moved buf_* functions here.
2854
2855         * ftp.c (ftp_expected_bytes): Moved from ftp-basic.c.
2856
2857         * ftp-basic.c (ftp_rest): Use prnum().
2858
2859         * ftp-basic.c: Ditto.
2860
2861         * ftp.c: Use the new reading functions and macros.
2862
2863         * retr.c (buf_initialize): New function.
2864         (buf_initialized_p): Ditto.
2865         (buf_uninitialize): Ditto.
2866         (buf_fd): Ditto.
2867
2868         * http.c (fetch_next_header): Use the BUF_READCHAR macro for
2869         efficiency.
2870         (gethttp): Use alloca() where appropriate.
2871
2872         * retr.c (buf_readchar): Use it.
2873         (buf_peek): Use rstreams.
2874
2875         * retr.h (BUF_READCHAR): New macro.
2876
2877         * init.c (home_dir): Rewritten for clarity.
2878         (init_path): Ditto.
2879
2880         * mswindows.c (ws_backgnd): Made static.
2881         (read_registry): Ditto.
2882         (ws_cleanup): Ditto.
2883         (ws_handler): Ditto.
2884
2885 1998-01-23  Hrvoje Niksic  <hniksic@srce.hr>
2886
2887         * alloca.c: New file.
2888
2889         * Makefile.in (ALLOCA): Define.
2890
2891         * mswindows.c (ws_help): Constify.
2892         (ws_help): Use alloca.
2893
2894         * mswindows.c: Reformat.
2895
2896         * all: Added _(...) annotations for I18N snarfing and translation.
2897
2898         * host.c (ftp_getaddress): Nuke SYSINFO.
2899         (ftp_getaddress): Don't use getdomainname().
2900         (ftp_getaddress): Use uname(), where available.
2901
2902         * http.c (gethttp): Protect a stray fprintf().
2903
2904         * init.c (settime): New function.
2905         (setval): Treat WAIT specially, allowing suffixes like `m' for
2906         minutes, etc.
2907
2908 1998-01-21  Hrvoje Niksic  <hniksic@srce.hr>
2909
2910         * url.c (get_urls_html): Use alloca() for TEMP.
2911
2912 1998-01-21  Jordan Mendelson  <jordy@wserv.com>
2913
2914         * url.c (rotate_backups): New function.
2915
2916         * http.c (gethttp): Ditto.
2917
2918         * ftp.c (getftp): Rotate backups.
2919
2920 1997-12-18  Hrvoje Niksic  <hniksic@srce.hr>
2921
2922         * all: Renamed nmalloc(), nrealloc() and nstrdup() to xmalloc(),
2923         xrealloc() and xstrdup().  Use the new functions.
2924
2925         * url.c (decode_string): Made static.
2926         (has_proto): Ditto.
2927         (parse_dir): Ditto.
2928         (parse_uname): Ditto.
2929         (mkstruct): Ditto.
2930         (construct): Ditto.
2931         (construct_relative): Ditto.
2932
2933         * retr.c (show_progress): Made static.
2934
2935         * recur.c (robots_url): Made static.
2936         (retrieve_robots): Ditto.
2937         (parse_robots): Ditto.
2938         (robots_match): Ditto.
2939
2940         * main.h: Removed.
2941
2942         * main.c (printhelp): Made static.
2943         (hangup): Ditto.
2944
2945         * init.c (comind): Made static.
2946         (defaults): Ditto.
2947         (init_path): Ditto.
2948         (run_wgetrc): Ditto.
2949         (onoff): Ditto.
2950         (setonoff): Ditto.
2951         (setnum): Ditto.
2952         (myatoi): Ditto.
2953         (getperms): Ditto.
2954         (setbytes): Ditto.
2955
2956         * http.c (fetch_next_header): Made static.
2957         (hparsestatline): Ditto.
2958         (hskip_lws): Ditto.
2959         (hgetlen): Ditto.
2960         (hgetrange): Ditto.
2961         (hgettype): Ditto.
2962         (hgetlocation): Ditto.
2963         (hgetmodified): Ditto.
2964         (haccepts_none): Ditto.
2965         (gethttp): Ditto.
2966         (base64_encode_line): Ditto.
2967         (mktime_from_utc): Ditto.
2968         (http_atotm): Ditto.
2969
2970         * html.c (idmatch): Made static.
2971
2972         * host.c (search_host): Made static.
2973         (search_address): Ditto.
2974         (free_hlist): Ditto.
2975
2976         * ftp.c (getftp): Made static.
2977         (ftp_loop_internal): Ditto.
2978         (ftp_get_listing): Ditto.
2979         (ftp_retrieve_list): Ditto.
2980         (ftp_retrieve_dirs): Ditto.
2981         (ftp_retrieve_glob): Ditto.
2982         (freefileinfo): Ditto.
2983         (delelement): Ditto.
2984
2985         * ftp-ls.c (symperms): Made static.
2986         (ftp_parse_unix_ls): Ditto.
2987
2988         * connect.c (select_fd): Made static.
2989
2990         * utils.c (xmalloc): Renamed from nmalloc.
2991         (xrealloc): Renamed from nrealloc.
2992         (xstrdup): Renamed from nstrdup.
2993
2994         * getopt.c (exchange): Use alloca.
2995
2996         * mswindows.c (mycuserid): Use strncpy.
2997
2998         * New files mswindows.c, mswindows.h, sysdep.h.  winjunk.c,
2999         systhings.h, windecl.h and winjunk.h removed.
3000
3001         * mswindows.c (sleep): New function.
3002
3003         * utils.c: Include <windows.h> under Windows.
3004
3005 1997-06-12  Darko Budor  <dbudor@zesoi.fer.hr>
3006
3007         * url.h (URL_UNSAFE): Change default under Windows.
3008
3009         * retr.c (retrieve_from_file): Respect opt.delete_after.
3010
3011         * main.c (main): Call ws_help on Windows.
3012
3013         * winjunk.c (windows_main_junk): New function.
3014
3015         * main.c (main): Junk-process argv[0].
3016
3017         * http.c (mktime_from_utc): Return -1 if mktime failed.
3018
3019         * http.c (http_loop): Ditto.
3020
3021         * ftp.c (ftp_loop_internal): Change title on Windows when using a
3022         new URL.
3023
3024         * winjunk.c (getdomainname): Lots of functions.
3025
3026 1997-06-12  Hrvoje Niksic  <hniksic@srce.hr>
3027
3028         * cmpt.c (strptime_internal): Handle years more correctly for
3029         `%y'.
3030
3031 1997-06-09  Mike Thomas <mthomas@reality.ctron.com>
3032
3033         * http.c (gethttp): Allocate enough space for
3034         `Proxy-Authorization' header.
3035
3036 1997-05-10  Hrvoje Niksic  <hniksic@srce.hr>
3037
3038         * version.c: Wget/1.4.5 is released.
3039
3040 1997-05-10  Hrvoje Niksic  <hniksic@srce.hr>
3041
3042         * retr.c (get_contents): Check return value of fwrite more
3043         carefully.
3044
3045 1997-03-30  Andreas Schwab  <schwab@issan.informatik.uni-dortmund.de>
3046
3047         * cmpt.c (strptime_internal) [case 'Y']: Always subtract 1900 from
3048         year, regardless of century.
3049
3050 1997-03-30  Hrvoje Niksic  <hniksic@srce.hr>
3051
3052         * utils.c (isfile): Use `lstat' instead of `stat'.
3053
3054 1997-03-29  Hrvoje Niksic  <hniksic@srce.hr>
3055
3056         * utils.c (numdigit): Use explicit test.
3057
3058 1997-03-21  Hrvoje Niksic  <hniksic@srce.hr>
3059
3060         * http.c (http_loop): Always use `url_filename' to get u->local.
3061
3062 1997-03-20  Hrvoje Niksic  <hniksic@srce.hr>
3063
3064         * url.c: Recognize https.
3065
3066 1997-03-13  Hrvoje Niksic  <hniksic@srce.hr>
3067
3068         * recur.c (recursive_retrieve): Lowercase just the host name.
3069
3070 1997-03-09  Hrvoje Niksic  <hniksic@srce.hr>
3071
3072         * url.c (get_urls_file): Use the correct test.
3073         (get_urls_html): Ditto.
3074
3075 1997-03-07  Hrvoje Niksic  <hniksic@srce.hr>
3076
3077         * connect.c: Reverted addrlen to int.
3078
3079         * init.c (parse_line): Check for -1 instead of NONE.
3080
3081         * version.c: Changed version to 1.4.5.
3082
3083 1997-02-17  Hrvoje Niksic  <hniksic@srce.hr>
3084
3085         * init.c: New option netrc.
3086         (initialize): Don't parse .netrc.
3087
3088         * cmpt.c (recursive): Return rp.
3089         (strptime_internal): Match the long strings first, the abbreviated
3090         second.
3091
3092 1997-02-16  Hrvoje Niksic  <hniksic@srce.hr>
3093
3094         * http.c (check_end): New function.
3095         (http_atotm): Use it.
3096
3097 1997-02-13  gilles Cedoc  <gilles@cedocar.fr>
3098
3099         * http.c (gethttp): Use them.
3100
3101         * init.c: New options proxy_user and proxy_passwd.
3102
3103 1997-02-14  Hrvoje Niksic  <hniksic@srce.hr>
3104
3105         * ftp.c (ftp_retrieve_list): Create links even if not relative.
3106
3107 1997-02-10  Hrvoje Niksic  <hniksic@srce.hr>
3108
3109         * recur.c (recursive_retrieve): Lowercase the host name, if the
3110         URL is not "optimized".
3111
3112         * host.c (realhost): Return l->hostname, even if it matches with
3113         host.
3114
3115 1997-02-10  Marin Purgar  <pmc@asgard.hr>
3116
3117         * connect.c: Make addrlen size_t instead of int.
3118         (conaddr): Ditto.
3119
3120 1997-02-09  Gregor Hoffleit  <flight@mathi.uni-heidelberg.DE>
3121
3122         * systhings.h: Define S_ISLNK on NeXT too.
3123
3124 1997-02-09  Hrvoje Niksic  <hniksic@srce.hr>
3125
3126         * version.c: Released 1.4.3.
3127
3128         * url.c: Futher update to list of protostrings.
3129         (skip_proto): Skip `//' correctly for FTP and HTTP.
3130
3131         * url.c (get_urls_html): Handle bogus `http:' things a little
3132         different.
3133
3134         * main.c (main): Removed `follow-ftp' from `f'.
3135         (main): Dumped the `prefix-files' and `file-prefix' options and
3136         features; old and bogus.
3137         (main): Exit on failed setval() in `-e'.
3138
3139         * http.c (fetch_next_header): Use it to detect header continuation
3140         correctly.
3141
3142         * retr.c (buf_peek): New function.
3143
3144 1997-02-08  Hrvoje Niksic  <hniksic@srce.hr>
3145
3146         * wget.h: Include time.h and stuff.
3147
3148 1997-02-08  Roger Beeman  <beeman@cisco.com>
3149
3150         * ftp.c: Include <time.h>
3151
3152 1997-02-07  Hrvoje Niksic  <hniksic@srce.hr>
3153
3154         * url.c (findurl): Would read over buffer limits.
3155
3156 1997-02-06  Hrvoje Niksic  <hniksic@srce.hr>
3157
3158         * ftp-ls.c (ftp_parse_unix_ls): Allow spaces in file names.
3159
3160 1997-02-05  Hrvoje Niksic  <hniksic@srce.hr>
3161
3162         * http.c (http_atotm): Initialize tm.is_dst.
3163
3164 1997-02-02  Hrvoje Niksic  <hniksic@srce.hr>
3165
3166         * http.c (gethttp): Don't print the number of retrieved headers.
3167
3168         * main.c (main): New option `--no-clobber', alias for `-nc'.
3169
3170         * url.c: Recognize `https://'.
3171
3172 1997-02-01  Hrvoje Niksic  <hniksic@srce.hr>
3173
3174         * host.c (herrmsg): Don't use h_errno.
3175
3176 1997-01-30  Hrvoje Niksic  <hniksic@srce.hr>
3177
3178         * host.c (accept_domain): Use it.
3179
3180         * main.c (main): New option `--exclude-domains'.
3181
3182         * retr.c (retrieve_url): Use it.
3183         (retrieve_url): Bail out when an URL is redirecting to itself.
3184
3185         * url.c (url_equal): New function.
3186
3187 1997-01-29  Hrvoje Niksic  <hniksic@srce.hr>
3188
3189         * connect.c: Include arpa/inet.h instead of arpa/nameser.h.
3190
3191         * http.c (mk_utc_time): New function.
3192         (http_atotm): Use it; handle time zones correctly.
3193
3194 1997-01-28  Hrvoje Niksic  <hniksic@srce.hr>
3195
3196         * http.c: Ditto.
3197
3198         * ftp-basic.c: Use it instead of WRITE.
3199
3200         * connect.c (iwrite): New function.
3201
3202 1997-01-27  Hrvoje Niksic  <hniksic@srce.hr>
3203
3204         * cmpt.c (mktime): New function.
3205
3206         * netrc.c: Include <sys/types.h>.
3207
3208         * main.c (main): Wouldn't recognize --spider.
3209
3210         * retr.c (rate): Use `B', `KB' and `MB'.
3211         (reset_timer,elapsed_time): Moved from utils.c.
3212
3213         * ftp.c (ftp_retrieve_list): Ditto.
3214
3215         * http.c (http_loop): Don't touch the file if opt.dfp.
3216
3217 1997-01-24  Hrvoje Niksic  <hniksic@srce.hr>
3218
3219         * cmpt.c: New file.
3220
3221         * ftp.c (ftp_retrieve_glob): New argument semantics.
3222         (ftp_retrieve_dirs): Use it.
3223         (ftp_loop): Ditto.
3224
3225         * html.c (htmlfindurl): Recognize `'' as the quote char.
3226
3227 1997-01-23  Hrvoje Niksic  <hniksic@srce.hr>
3228
3229         * ftp.c (ftp_loop_internal): Use it.
3230
3231         * utils.c (remove_link): New function.
3232
3233 1997-01-22  Hrvoje Niksic  <hniksic@srce.hr>
3234
3235         * retr.c (retrieve_url): Require STRICT redirection URL.
3236
3237         * url.c (parseurl): New argument STRICT.
3238
3239         * http.c (hparsestatline): Be a little-bit less strict about
3240         status line format.
3241
3242 1997-01-21  Hrvoje Niksic  <hniksic@srce.hr>
3243
3244         * http.c (gethttp): Use it.
3245
3246         * main.c (main): Don't use '<digit>' as options.
3247
3248         * init.c: New option ignore_length.
3249
3250         * http.c (gethttp): Ditto.
3251         (http_loop): Check for redirection without Location:.
3252         (gethttp): Don't print Length unless RETROKF.
3253
3254         * ftp.c (getftp): Use it.
3255
3256         * url.c (mkalldirs): New function.
3257
3258         * utils.c (mymkdir): Don't check for existing non-directory.
3259
3260         * url.c (mkstruct): Don't create the directory.
3261
3262 1997-01-20  Hrvoje Niksic  <hniksic@srce.hr>
3263
3264         * init.c (setval): Removed NO_RECURSION checks.
3265
3266 1997-01-19  Hrvoje Niksic  <hniksic@srce.hr>
3267
3268         * version.c: "Released" 1.4.3-pre2.
3269
3270         * recur.c (recursive_retrieve): Bypass host checking only if URL
3271         is ftp AND parent URL is not ftp.
3272
3273         * ftp-basic.c (ftp_request): Print out Turtle Power.
3274
3275         * ftp.c (ftp_loop): Call ftp_retrieve_glob with 0 if there's no
3276         wildcard.
3277         (ftp_retrieve_glob): Call ftp_loop_internal even on empty list, if
3278         not glob.
3279
3280         * http.c (gethttp): Be a little bit smarter about status codes.
3281
3282         * recur.c (recursive_retrieve): Always reset opt.recursive when
3283         dealing with FTP.
3284
3285 1997-01-18  Hrvoje Niksic  <hniksic@srce.hr>
3286
3287         * retr.c (retrieve_url): New variable location_changed; use it for
3288         tests instead of mynewloc.
3289         (retrieve_url): Allow heuristic adding of html.
3290
3291         * url.c (url_filename): Don't use the `%' in Windows file names.
3292
3293         * http.c (http_loop): Always time-stamp the local file.
3294
3295         * http.c (http_loop): Ditto.
3296
3297         * ftp.c (ftp_retrieve_list): Use it.
3298
3299         * utils.c (my_touch): New function.
3300
3301         * ftp.c (ftp_retrieve_list): Use #ifdef HAVE_STRUCT_UTIMBUF
3302         instead of #ifndef NeXT.
3303
3304         * utils.c (strptime): New version, by Ulrich Drepper.
3305
3306 1997-01-17  Hrvoje Niksic  <hniksic@srce.hr>
3307
3308         * http.c (haccepts_none): Renamed from `haccepts_bytes'.
3309         (gethttp): If haccepts_none(), disable ACCEPTRANGES.
3310         (http_loop): Would remove ACCEPTRANGES.
3311
3312         * ftp.c (getftp): Call ftp_list with NULL.
3313
3314 1997-01-15  Hrvoje Niksic  <hniksic@srce.hr>
3315
3316         * html.c (ftp_index): Don't print minutes and seconds if we don't
3317         know them; beautify the output.
3318
3319         * ftp.c (getftp): Don't close the socket on FTPNSFOD.
3320
3321 1997-01-14  Hrvoje Niksic  <hniksic@srce.hr>
3322
3323         * utils.c (strptime): New function.
3324         (strptime): Don't use get_alt_number.
3325         (strptime): Don't use locale.
3326         (match_string): Made it a function.
3327
3328 1997-01-12  Hrvoje Niksic  <hniksic@srce.hr>
3329
3330         * http.c (http_atotm): New function.
3331         (http_loop): Use it.
3332
3333         * atotm.c: Removed from the distribution.
3334
3335         * http.c (base64_encode_line): Rewrite.
3336
3337 1997-01-09  Hrvoje Niksic  <hniksic@srce.hr>
3338
3339         * ftp.c (getftp): Use ftp_expected_bytes; print size.
3340
3341         * ftp-basic.c (ftp_response): Use ftp_last_respline.
3342         (ftp_expected_bytes): New function.
3343
3344         * ftp.c (getftp): Print the unauthoritative file length.
3345
3346         * ftp-ls.c: Renamed from ftp-unix.c.
3347         (ftp_parse_ls): Moved from ftp.c.
3348         (ftp_parse_unix_ls): Recognize seconds in time spec.
3349         (ftp_parse_unix_ls): Recognize year-less dates of the previous
3350         year.
3351
3352 1997-01-08  Hrvoje Niksic  <hniksic@srce.hr>
3353
3354         * ftp-basic.c: Don't declare errno if #defined.
3355
3356         * host.c (ftp_getaddress): Check for sysinfo legally.
3357
3358 1997-01-08  Darko Budor  <dbudor@diana.zems.fer.hr>
3359
3360         * connect.c (iread): Use READ.
3361
3362 1996-12-23  Hrvoje Niksic  <hniksic@srce.hr>
3363
3364         * url.c: Recognize finger, rlogin, tn3270, mid and cid as valid
3365         schemes.
3366
3367 1996-12-22  Hrvoje Niksic  <hniksic@srce.hr>
3368
3369         * host.c (ftp_getaddress): Allow `.' in hostname.
3370
3371 1996-12-26  Darko Budor <dbudor@zems.fer.hr>
3372
3373         * wget.h: READ and WRITE macros for use instead of read and write
3374         on sockets, grep READ *.c, grep WRITE *.c
3375
3376         * wsstartup.c: new file - startup for winsock
3377
3378         * wsstartup.h: new file
3379
3380         * win32decl.h: new file - fixup for <errno.h> and winsock trouble
3381
3382         * configure.bat: Configure utility for MSVC
3383
3384         * src/Makefile.ms,config.h.ms: new files for use with MSVC 4.x
3385
3386 1996-12-22  Hrvoje Niksic  <hniksic@srce.hr>
3387
3388         * version.c: Released 1.4.3-pre.
3389
3390         * utils.c (prnum): Accept long.
3391         (legible): Use prnum().
3392
3393         * connect.c (make_connection): Accept port as short.
3394         (bindport): Ditto.
3395
3396         * http.c (gethttp): Use search_netrc.
3397
3398 1996-12-21  Hrvoje Niksic  <hniksic@srce.hr>
3399
3400         * ftp.c (getftp): Use search_netrc.
3401
3402         * netrc.c (free_netrc): New function.
3403
3404         * init.c (home_dir): New function.
3405
3406         * url.c (convert_links): Allow REL2ABS changes.
3407
3408 1996-12-21  Gordon Matzigkeit  <gord@gnu.ai.mit.edu>
3409
3410         * netrc.c: New file.
3411         (parse_netrc, maybe_add_to_list): New functions.
3412
3413 1996-12-17  Hrvoje Niksic  <hniksic@srce.hr>
3414
3415         * retr.c (retrieve_url): Reset opt.recursion before calling
3416         ftp_loop if it is reached through newloc.
3417
3418         * init.c (run_wgetrc): Print the wgetrc path too, when reporting
3419         error; don't use "Syntax error", since we don't know if it is
3420         really a syntax error.
3421
3422 1996-12-16  Hrvoje Niksic  <hniksic@srce.hr>
3423
3424         * utils.c (acceptable): Extract the filename part of the path.
3425
3426         * recur.c (recursive_retrieve): Call acceptable() with the right
3427         argument; would bug out on wildcards.
3428
3429         * init.c (parse_line): Likewise.
3430
3431         * html.c (htmlfindurl): Cast to char * when calling stuff.
3432
3433 1996-12-15  Hrvoje Niksic  <hniksic@srce.hr>
3434
3435         * ftp.c (getftp): Use ftp_pasv.
3436
3437         * ftp-basic.c (ftp_request): Accept NULL value.
3438         (ftp_pasv): New function.
3439
3440         * options.h (struct options): Add passive FTP option.
3441
3442 1996-12-15  Hrvoje Niksic  <hniksic@srce.hr>
3443
3444         * url.c (parseurl): Debug output.
3445
3446         * utils.c (path_simplify): New one, adapted from bash's
3447         canonicalize_pathname().
3448
3449 1996-12-14  Hrvoje Niksic  <hniksic@srce.hr>
3450
3451         * ftp.c (getftp): Don't discard the buffer.
3452
3453         * retr.c (get_contents): New parameter nobuf.
3454
3455 1996-12-13  Shawn McHorse  <riffraff@txdirect.net>
3456
3457         * html.c (htmlfindurl): Recognize <meta contents="d; URL=...".
3458
3459         * init.c (setval): Strip the trailing slashes on CVECDIR.
3460
3461 1996-12-13  Hrvoje Niksic  <hniksic@srce.hr>
3462
3463         * init.c: Make excludes and includes under CVECDIR instead of
3464         CVEC.
3465
3466 1996-12-13  Shawn McHorse  <riffraff@txdirect.net>
3467
3468         * url.c (get_urls_html): Skip "http:".
3469
3470 1996-12-13  Hrvoje Niksic  <hniksic@srce.hr>
3471
3472         * utils.c (strcasecmp): From glibc.
3473         (strncasecmp): Also.
3474         (strstr): Also.
3475
3476         * url.c: Added javascript: to the list of URLs prefixes.
3477
3478 1996-12-12  Shawn McHorse  <riffraff@txdirect.net>
3479
3480         * recur.c (retrieve_robots): Print the warning message only if
3481         verbose.
3482
3483 1996-12-12  Gregor Hoffleit  <flight@mathi.uni-heidelberg.DE>
3484
3485         * ftp.c (ftp_retrieve_list): Use NeXT old utime interface.
3486
3487 1996-12-12  Hrvoje Niksic  <hniksic@srce.hr>
3488
3489         * systhings.h: New file.
3490
3491         * ../configure.in: Check for utime.h
3492
3493         * ftp.c: Check whether we have unistd.h.
3494
3495 1996-11-27  Hrvoje Niksic  <hniksic@srce.hr>
3496
3497         * recur.c (recursive_retrieve): Send the canonical URL as referer.
3498         (recursive_retrieve): Call get_urls_html with the canonical URL.
3499
3500 1996-12-13  Kaveh R. Ghazi  <ghazi@caip.rutgers.edu>
3501
3502         * (configure.in, config.h.in, src/Makefile.in, src/*.[ch]): Add
3503         ansi2knr support for compilers which don't support ANSI style
3504         function prototypes and signatures.
3505
3506         * (aclocal.m4, src/ansi2knr.c, src/ansi2knr.1): New files.
3507
3508 1996-11-26  Hrvoje Niksic  <hniksic@srce.hr>
3509
3510         * url.c: Use it; Recognize paths ending with "." and ".." as
3511         directories.
3512         (url_filename): Append .n whenever file exists and could be a
3513         directory.
3514
3515         * url.h (ISDDOT): New macro.
3516
3517         * init.c (parse_line): Use unsigned char.
3518
3519         * url.c (get_urls_html): Cast to unsigned char * when calling
3520         htmlfindurl.
3521
3522         * html.c (htmlfindurl): Use unsigned char.
3523
3524         * version.c: Changed version to 1.4.3.
3525
3526 1996-11-25  Hrvoje Niksic  <hniksic@srce.hr>
3527
3528         * version.c: Released 1.4.2.
3529
3530         * ftp.c (getftp): Simplified assertion.
3531         (ftp_loop_internal): Remove symlink before downloading.
3532         (ftp_retrieve_list): Unlink the symlink name before attempting to
3533         create a symlink!
3534
3535         * options.h (struct options): Renamed print_server_response to
3536         server_response.
3537
3538         * ftp.c (rel_constr): Removed.
3539         (ftp_retrieve_list): Don't use it.
3540         (ftp_retrieve_list): Use opt.retr_symlinks.
3541
3542 1996-11-24  Hrvoje Niksic  <hniksic@srce.hr>
3543
3544         * main.c (main): New option retr_symlinks.
3545
3546         * url.c (convert_links): Print verbose message.
3547
3548 1996-11-24  Hrvoje Niksic  <hniksic@srce.hr>
3549
3550         * http.c (http_loop): Reset newloc in the beginning of function;
3551         would cause FMR in retrieve_url.
3552
3553 1996-11-23  Hrvoje Niksic  <hniksic@srce.hr>
3554
3555         * recur.c (convert_all_links): Find the URL of each HTML document,
3556         and feed it to get_urls_html; would bug out.
3557         (convert_all_links): Check for l2 instead of dl; removed dl.
3558
3559         * url.c (convert_links): Don't refer to freed newname.
3560
3561         * recur.c (recursive_retrieve): Add this_url to urls_downloaded.
3562
3563         * main.c (main): Print the OS_TYPE in the debug output, too.
3564
3565         * recur.c (recursive_retrieve): Check for opt.delete_after.
3566
3567         * main.c (main): New option delete-after.
3568
3569         * init.c (setval): Cleaned up.
3570
3571 1996-11-21  Hrvoje Niksic  <hniksic@srce.hr>
3572
3573         * Makefile.in (wget): Make `wget' the default target.
3574
3575         * ftp.c (ftp_loop_internal): Move noclobber checking out of the
3576         loop.
3577         (ftp_retrieve_list): Warn about non-matching sizes.
3578
3579         * http.c (http_loop): Made -nc non-dependent on opt.recursive.
3580
3581         * init.c (setnum): Renamed from setnuminf; New argument flags.
3582         (setval): Use it.
3583
3584         * main.c (main): Sorted the options.
3585         (main): New option --wait.
3586
3587 1996-11-21  Shawn McHorse  <riffraff@txdirect.net>
3588
3589         * html.c (htmlfindurl): Reset s->in_quote after getting out of
3590         quotes.
3591
3592 1996-11-20  Hrvoje Niksic  <hniksic@srce.hr>
3593
3594         * version.c: Changed version to 1.4.2.
3595
3596 1996-11-20  Hrvoje Niksic  <hniksic@srce.hr>
3597
3598         * version.c: Released 1.4.1.
3599
3600         * html.c (html_quote_string): New function.
3601         (ftp_index): Use it.
3602         (htmlfindurl): A more gentle ending debug message.
3603
3604         * ftp.c (ftp_loop): Check for opt.htmlify.
3605
3606         * init.c: New command htmlify.
3607
3608         * ftp.c (getftp): Nicer error messages, with `'-encapsulated
3609         strings.
3610         (ftp_loop): Print size of index.html.
3611
3612         * init.c (setval): Implement "styles".
3613
3614         * main.c (main): New option dotstyle.
3615
3616 1996-11-19  Hrvoje Niksic  <hniksic@srce.hr>
3617
3618         * ftp.c (getftp): Close the master socket in case of errors, after
3619         bindport().
3620
3621         * connect.c (bindport): Initialize msock to -1.
3622
3623         * ftp.c (getftp): Initialize dtsock to -1.
3624
3625         * connect.c (closeport): Don't close sock if sock == -1.
3626
3627 1996-11-18  Hrvoje Niksic  <hniksic@srce.hr>
3628
3629         * init.c (setnuminf): Nuked default value -- just leave unchanged.
3630         (setval): Don't send default values.
3631         (defaults): Use DEFAULT_TIMEOUT -- aaargh.
3632
3633         * options.h (struct options): Use long for dot_bytes.
3634
3635         * init.c (setquota): Renamed to setbytes.
3636         (setval): Use setbytes on DOTBYTES.
3637
3638 1996-11-17  Hrvoje Niksic  <hniksic@srce.hr>
3639
3640         * ftp.c (getftp): Initialize con->dltime.
3641
3642         * recur.c (recursive_retrieve): Use same_host instead of
3643         try_robots; simply load robots_txt whenever the host is changed.
3644         (recursive_retrieve): Free forbidden before calling parse_robots.
3645
3646 1996-11-16  Hrvoje Niksic  <hniksic@srce.hr>
3647
3648         * retr.c (show_progress): Use them.
3649
3650         * options.h (struct options): New options dot_bytes, dots_on_line
3651         and dot_spacing.
3652
3653 1996-11-16  Mark Boyns  <boyns@sdsu.edu>
3654
3655         * recur.c (recursive_retrieve): Retrieve directories regardless of
3656         acc/rej rules; check for empty u->file.
3657
3658 1996-11-14  Hrvoje Niksic  <hniksic@srce.hr>
3659
3660         * init.c (setval): Use it.
3661
3662         * utils.c (merge_vecs): New function.
3663
3664         * init.c (setval): Reset the list-type functions when encountering
3665         "".
3666
3667 1996-11-14  Shawn McHorse  <riffraff@txdirect.net>
3668
3669         * recur.c (recursive_retrieve): Use base_url instead of this_url
3670         for no_parent.
3671
3672 1996-11-14  Shawn McHorse  <riffraff@txdirect.net>
3673
3674         * html.c (htmlfindurl): Reset s->in_quote after exiting the quote.
3675
3676 1996-11-13  Hrvoje Niksic  <hniksic@srce.hr>
3677
3678         * utils.c (sepstring): Rewrote; don't use strtok.
3679
3680         * recur.c (recursive_retrieve): Enter assorted this_url to slist
3681         when running the first time.
3682         (retrieve_robots): Warn to ignore errors when robots are loaded.
3683
3684         * utils.c (load_file): Moved from url.c.
3685
3686         * http.c: Made static variables const too in h* functions.
3687
3688         * main.c (main): Renamed --continue-ftp to --continue.
3689
3690         * recur.c (recursive_retrieve): Use it.
3691
3692         * utils.c (frontcmp): New function.
3693
3694         * url.c (accdir): New function.
3695
3696         * html.c (htmlfindurl): Recognize <area href=...>.
3697
3698         * ftp.c (ftp_retrieve_dirs): Implemented opt.includes.
3699
3700         * init.c (setval): Free the existing opt.excludes and
3701         opt.includes, if available.
3702
3703         * main.c (main): New option -I.
3704
3705 1996-11-12  Hrvoje Niksic  <hniksic@srce.hr>
3706
3707         * ftp.c (ftp_retrieve_glob): Do not weed out directories.
3708
3709         * version.c: Changed version to 1.4.1.
3710
3711 1996-11-11  Hrvoje Niksic  <hniksic@srce.hr>
3712
3713         * version.c: Released 1.4.0.
3714
3715 1996-11-10  Hrvoje Niksic  <hniksic@srce.hr>
3716
3717         * main.c (main): Free com and val after parse_line.
3718         (printhelp): Reorder the listing.
3719
3720         * http.c: More robust header parsing.
3721
3722         * http.c: Allow any number of spaces, or no spaces, precede ':'.
3723         (hskip_lws): New function.
3724         (haccepts_bytes): New function.
3725         (gethttp): Use it.
3726
3727         * init.c (setval): Check header sanity.
3728         (setval): Allow resetting of headers.
3729
3730 1996-11-10  Hrvoje Niksic  <hniksic@srce.hr>
3731
3732         * http.c (http_loop): Don't use has_wildcards.
3733
3734         * http.c (gethttp): Free all_headers -- would leak.
3735
3736         * recur.c (recursive_retrieve): Initialize depth to 1 instead of
3737         0 -- this fixes a long-standing bug in -rl.
3738
3739 1996-11-09  Hrvoje Niksic  <hniksic@srce.hr>
3740
3741         * ftp.c: Use -1 as "impossible" value for con->fd.
3742
3743         * url.h (URL_SEPARATOR): Don't treat `*' and `+' as separators.
3744
3745         * init.c (parse_line): Use isalpha.
3746
3747         * ftp-unix.c: Use HAVE_UNISTD_H.
3748
3749         * mtch.c (has_wildcards): Don't match \.
3750
3751         * http.c (http_loop): Warn on HTTP wildcard usage.
3752
3753 1996-11-08  Hrvoje Niksic  <hniksic@srce.hr>
3754
3755         * url.c (url_filename): Do not create numbered suffixes if
3756         opt.noclobber -- would bug out on -nc.
3757
3758 1996-11-07  Hrvoje Niksic  <hniksic@srce.hr>
3759
3760         * recur.c (parse_robots): Don't chuck out the commands without
3761         arguments (`Disallow:<empty>' didn't work).
3762         (parse_robots): Compare versions lowercase.
3763         (parse_robots): Match on base_version, not version_string!
3764         (parse_robots): Handle comments properly.
3765         (parse_robots): Match versions in a sane way.
3766
3767         * init.c: Print nicer error messages.
3768
3769         * version.c: Changed version to 1.4.0.
3770
3771 1996-11-06  Hrvoje Niksic  <hniksic@srce.hr>
3772
3773         * version.c: Released 1.4.0-test2.
3774
3775         * init.c (run_wgetrc): Close fp.
3776
3777         * ftp.c (ftp_retrieve_dirs): Allocate the correct length for
3778         u->dir.
3779
3780 1996-11-06  Hrvoje Niksic  <hniksic@srce.hr>
3781
3782         * init.c (setquota): Allow inf as quota specification.
3783
3784 1996-11-05  Hrvoje Niksic  <hniksic@srce.hr>
3785
3786         * ftp.c (ftp_retrieve_dirs): Return QUOTEXC if quota exceeded.
3787         (ftp_retrieve_glob): Return QUOTEXC on quota exceeded.
3788
3789         * main.c (main): Check for quota by comparison with downloaded
3790         stuff, not from status.
3791
3792         * connect.c (select_fd): Should compile on HPUX without warnings now.
3793
3794         * ftp.c (ftp_get_listing): Check whether ftp_loop_internal
3795         returned RETROK.
3796
3797 1996-11-04  Hrvoje Niksic  <hniksic@srce.hr>
3798
3799         * ftp.c (ftp_retrieve_glob): Print the pattern nicely.
3800         (getftp): Return FTPRETRINT on control connection error.
3801
3802         * html.c (htmlfindurl): Recognize <embed src=...> and
3803         <bgsound src=...>.
3804         (ftp_index): Handle username and password correctly.
3805
3806         * main.c (main): Made `-np' a synonim for --no-parent.
3807
3808 1996-11-02  Hrvoje Niksic  <hniksic@srce.hr>
3809
3810         * ftp.c (ftp_loop): Check for opt.ftp_glob too before calling
3811         ftp_retrieve_glob.
3812
3813         * version.c: Changed version to 1.4.0-test2.
3814
3815 1996-11-02  Hrvoje Niksic  <hniksic@srce.hr>
3816
3817         * version.c: Released 1.4.0-test1.
3818
3819         * url.c (str_url): Don't use sprintf when creating %2F-prefixed
3820         directory.
3821         (convert_links): Removed definition of make_backup.
3822
3823         * http.h: Removed definition of MAX_ERROR_LENGTH.
3824
3825         * host.c (ftp_getaddress): Check for "(none)" domains.
3826
3827         * ftp.c (ftp_retrieve_dirs): Docfix.
3828
3829         * http.c (gethttp): Use ou->referer instead of u->referer.
3830
3831         * retr.c (retrieve_url): Reset u to avoid freeing pointers twice;
3832         this was known to cause coredumps on Linux.
3833
3834         * html.c (ftp_index): Cast the argument to local_time to time_t *.
3835
3836 1996-11-01  Hrvoje Niksic  <hniksic@srce.hr>
3837
3838         * connect.c (select_fd): Use exceptfds -- once and for all.
3839
3840         * retr.c (retrieve_from_file): Free filename after
3841         recursive_retrieve.
3842         (retrieve_from_file): Send RFIRST_TIME to recursive_retrieve on
3843         first-time retrieval.
3844         (retrieve_from_file): Return uerr_t; new argument, count.
3845         (retrieve_from_file): Break on QUOTEXC.
3846
3847         * init.c (setquota): Fixed a bug that caused rejection of
3848         non-postfixed values..
3849
3850 1996-10-30  Hrvoje Niksic  <hniksic@srce.hr>
3851
3852         * version.c: Changed name to wget.
3853
3854         * connect.c (iread): Smarter use of select.
3855         (select_fd): Set errno on timeout.  If not timeout, return 1
3856         instead of 0.
3857
3858 1996-10-29  Hrvoje Niksic  <hniksic@srce.hr>
3859
3860         * ftp.c (ftp_loop_internal): Don't use con->cmd before
3861         establishing it.
3862
3863 1996-10-26  Hrvoje Niksic  <hniksic@srce.hr>
3864
3865         * http.c (gethttp): Send correct referer when using proxy.
3866         (gethttp): Use struct urlinfo ou to access the relevant data; send
3867         correct authorization in all cases.
3868
3869         * host.c (same_host): Use skip_uname to skip username and
3870         password.
3871
3872         * url.c (skip_uname): New function.
3873         (parseurl): Use it.
3874
3875         * host.c (same_host): Do not assume HTTP -- same_host should now
3876         be totally foolproof.
3877
3878         * url.c (skip_proto): New function.
3879         (parse_uname): Use it.
3880
3881         * http.c (gethttp): Create local user and passwd from what is
3882         given.
3883
3884         * url.c (parseurl): Check for HTTP username and password too.
3885
3886 1996-10-25  Hrvoje Niksic  <hniksic@srce.hr>
3887
3888         * config.h.in: Removed #define gethostbyname R...
3889
3890 1996-10-22  Hrvoje Niksic  <hniksic@srce.hr>
3891
3892         * version.c: Changed version to 1.4.0-test1.
3893
3894 1996-10-21  Hrvoje Niksic  <hniksic@srce.hr>
3895
3896         * version.c: "Released" 1.4b29.
3897
3898         * recur.c (recursive_retrieve): Check for no_parent.
3899
3900         * init.c (setval): Option update.
3901
3902         * main.c (main): New option no-parent.
3903
3904         * options.h (struct options): New variable no_parent.
3905
3906         * recur.c (recursive_retrieve): Only files are checked for
3907         opt.accepts and opt.rejects.
3908         (recursive_retrieve): Check directories for opt.excludes.
3909         (recursive_retrieve): Make the dir absolute when checking
3910         opt.excludes.
3911
3912         * html.c (htmlfindurl): Recognize <applet code=...> and <script
3913         src=...>
3914
3915 1996-10-18  Hrvoje Niksic  <hniksic@srce.hr>
3916
3917         * ftp.c (getftp): Do not line-break assert entries at all.
3918         (ftp_retrieve_dirs): docfix.
3919
3920         * connect.c (select_fd): Use fd + 1 as nfds.
3921
3922         * version.c: Changed version to 1.4b29.
3923
3924 1996-10-18  Hrvoje Niksic  <hniksic@srce.hr>
3925
3926         * version.c: "Released" 1.4b28.
3927
3928         * ftp.c (ftp_loop_internal): Check whether f->size == len and
3929         don't continue the loop if it is.
3930         (ftp_get_listing): Remove list_filename on unsuccesful loop.
3931
3932 1996-10-17  Hrvoje Niksic  <hniksic@srce.hr>
3933
3934         * ftp.c (ftp_loop_internal): Use strcpy to initialize tmp.
3935         (getftp): Do not use multiline assert.
3936
3937         * http.c (hparsestatline): Use mjr and mnr instead of major and
3938         minor, which don't compile on Ultrix.
3939         (http_loop): Use strcpy() to initialize tmp.
3940
3941         * all: Geturl -> Fetch
3942
3943 1996-10-17  Hrvoje Niksic  <hniksic@srce.hr>
3944
3945         * recur.c (parse_robots): Fixed an off-by-one bug when looking for
3946         ':'.
3947
3948         * html.c (htmlfindurl): Fixed several possible off-by-one bugs by
3949         moving `bufsize &&' to the beginning of each check in for-loops.
3950
3951         * recur.c (parse_robots): Close fp on exit.
3952
3953         * url.c (mymkdir): Check for each directory before creating.
3954
3955 1996-10-16  Hrvoje Niksic  <hniksic@srce.hr>
3956
3957         * version.c: Changed version to 1.4b28.
3958
3959 1996-10-16  Hrvoje Niksic  <hniksic@srce.hr>
3960
3961         * version.c: "Released" 1.4b27.
3962
3963         * init.c (parse_line): Use isspace.
3964         (parse_line): Free *com on all errors.
3965
3966         * ftp.c (ftp_loop): Change FTPOK to RETROK before exiting.
3967         (delelement): Use next instead of f->next and prev instead of
3968         f->prev.
3969         (delelement): Free the members of the deleted element.
3970
3971         * http.c (http_loop): Do not return RETROK on code != 20x.
3972
3973         * init.c (cleanup): Free opt.user_header.
3974         (cleanup): Free opt.domains.
3975
3976         * url.c (freelists): Moved to cleanup().
3977
3978         * http.c (hparsestatline): Docfix.
3979
3980         * main.c (main): Return with error status on unsuccesful
3981         retrieval.
3982
3983         * init.c (setval): Do not remove listing when mirroring.
3984
3985         * url.c (url_filename): Use opt.fileprefix.
3986
3987         * ftp.c (ftp_get_listing): Use url_filename to get filename for
3988         .listing.
3989
3990         * main.c (main): New option: -rn.
3991
3992 1996-10-15  Hrvoje Niksic  <hniksic@srce.hr>
3993
3994         * Makefile.in (RM): Added RM = rm -f.
3995
3996         * host.c (clean_hosts): New function.
3997         (free_hlist): Just free the list, no reset.
3998
3999         * version.c: Changed version to 1.4b27.
4000
4001 1996-10-13  Hrvoje Niksic  <hniksic@srce.hr>
4002
4003         * version.c: "Released" 1.4b26.
4004
4005         * retr.c (retrieve_from_file): If call get_urls_html with
4006         opt.spider to make it silent in spider mode.
4007
4008         * url.c (str_url): Use CLEANDUP instead of URL_CLEANSE.
4009
4010         * url.h (CLEANDUP): New macro.
4011
4012         * http.c (gethttp): Fixed a bug that freed location only when it
4013         was NULL.
4014
4015         * retr.c (retrieve_url): Free url if it will not be stored,
4016         i.e. newloc is NULL.
4017
4018         * html.c (htmlfindurl): Handle exiting from quotes correctly; the
4019         old version would bug out on <a href="x#a"href="y">.
4020
4021         * html.h (state_t): New member in_quote.
4022
4023         * html.c (htmlfindurl): Free s->attr at the beginning of
4024         attr-loop.
4025
4026         * recur.c (recursive_retrieve): Recognize RCLEANUP.
4027         (tried_robots): Make hosts a global variable.
4028         (recursive_retrieve): Free constr after URL host optimization.
4029         (tried_robots): Free urlinfo before exiting.
4030
4031         * utils.c (free_slist): New function.
4032
4033         * recur.c (recursive_retrieve): Use flags to add cleanup
4034         possibility.
4035
4036         * main.c (main): Free filename after recursive_retrieve.
4037
4038         * http.c (gethttp): Store successful responses too.
4039
4040 1996-10-12  Hrvoje Niksic  <hniksic@srce.hr>
4041
4042         * all: Constified the whole source.  This required some minor
4043         changes in many functions in url.c, possibly introducing bugs -- I
4044         hope not.
4045
4046         * ftp-basic.c: Removed last_respline.
4047
4048         * http.c (gethttp): Free type.
4049
4050         * host.c (same_host): Free real1 and real2.
4051
4052         * main.c (main): New option --spider.
4053
4054         * retr.c (get_contents): Don't reset errno.
4055
4056         * main.c (main): Sorted the options.
4057
4058         * connect.c (iread): Set errno to ETIMEDOUT only if it was left
4059         uninitialized by select().
4060
4061         * http.c (http_loop): Print the time when the connection is
4062         closed.
4063         (gethttp): Debug-print the HTTP request.
4064
4065 1996-10-11  Hrvoje Niksic  <hniksic@srce.hr>
4066
4067         * connect.c (iread): Do not try reading after timeout.
4068
4069         * main.c (main): Would bug out on -T.
4070
4071         * connect.c (select_fd): Do not use exceptfds.
4072         (iread): Set ETIMEDOUT on select_fd <= 0.
4073
4074         * version.c: Changed version to 1.4b26.
4075
4076 1996-10-10  Hrvoje Niksic  <hniksic@srce.hr>
4077
4078         * version.c: "Released" 1.4b25.
4079
4080         * ftp-unix.c (ftp_parse_unix_ls): Ignore lines without file name
4081         or link name.
4082
4083         * http.c (gethttp): Add errcode to struct hstat.
4084         (http_loop): Use it.
4085
4086         * url.c (no_proxy_match): Simplify using char** for no_proxy.
4087
4088         * options.h (struct options): Make opt.no_proxy a vector.
4089
4090         * utils.c (sepstring): Use !*s instead of !strlen(s).
4091
4092         * init.c (setval): Set opt.maxreclevel to 0 on --mirror.
4093         (getperms): Use ISODIGIT instead of isdigit.
4094
4095         * ftp.c (getftp): Print time.
4096
4097         * main.c (main): Use legible output of downloaded quantity.
4098
4099         * ftp.c (getftp): Use elapsed_time().
4100         (ftp_loop_internal): Use rate().
4101
4102         * http.c (http_loop): Add download ratio output; Use rate().
4103
4104         * utils.c (rate): New function.
4105
4106 1996-10-09  Hrvoje Niksic  <hniksic@srce.hr>
4107
4108         * http.c (http_loop): Use timer.
4109
4110         * ftp.c: Split to ftp-basic.c and ftp.c
4111
4112         * utils.c (reset_timer): New function.
4113         (elapsed_time): New function.
4114
4115         * retr.c (show_progress): Make bytes_in_line and offs long; should
4116         work on 16-bit machines.
4117
4118 1996-10-08  Hrvoje Niksic  <hniksic@srce.hr>
4119
4120         * url.c (in_acclist): New argument backward.
4121
4122         * ftp.c (ftp_retrieve_glob): Use acceptable() to determine whether
4123         a file should be retrieved according to suffix.
4124         (ftp_get_listing): Check the return value of unlink; Do not call
4125         ftp_retrieve_dirs if depth reached maxreclevel.
4126         (ftp_retrieve_dirs): Check whether the directory is in
4127         exclude-list.
4128
4129         * main.c (main): Print the version number at the beginning of
4130         DEBUG output.
4131         (main): Use strrchr when creating exec_name.
4132
4133         * ftp.c (ftp_retrieve_glob): Do not close control connection.
4134
4135         * version.c: Changed version to 1.4b25.
4136
4137 1996-10-07  Hrvoje Niksic  <hniksic@srce.hr>
4138
4139         * version.c: "Released" 1.4b24.
4140
4141         * Makefile.in: Rewrite.
4142
4143         * ftp.c (ftp_loop_internal): Likewise.
4144
4145         * retr.c (time_str): Check for failed time().
4146
4147         * html.c (htmlfindurl): Recognize <fig src> and <overlay src> from
4148         HTML3.0.
4149
4150         * retr.c (time_str): Return time_t *.
4151
4152         * connect.c (bindport): Close msock on unsuccesful bind.
4153         (bindport): The same for getsockname and listen.
4154
4155         * retr.c (retrieve_url): Allow any number of retries on
4156         proxy.
4157
4158         * http.c (gethttp): Do not treat errno == 0 as timeout.
4159         (http_loop): Likewise.
4160         (http_loop): Cosmetic changes.
4161
4162         * connect.c (iread): Set errno to ETIMEDOUT in case of timeout.
4163
4164         * retr.c (get_contents): Reset errno.
4165
4166         * ftp.c (getftp): Minor fixes.
4167
4168 1996-10-06  Hrvoje Niksic  <hniksic@srce.hr>
4169
4170         * http.c: Do not use backups.
4171
4172         * geturl.1 (WARNING): Warn that man-page could be obsolete.
4173
4174         * getopt.c (getopt_long): Moved to getopt.c
4175
4176         * geturl.texi: Enhanced.
4177
4178         * main.c (main): Use it.
4179
4180         * recur.c (convert_all_links): New function.
4181
4182         * utils.c (add_slist): New argument flags.
4183
4184         * recur.c (recursive_retrieve): Update a list of downloaded URLs.
4185         (parse_robots): Do not chuck out empty value fields.
4186         (parse_robots): Make yourself welcome on empty Disallow.
4187
4188         * version.c: Changed version to 1.4b24.
4189
4190 1996-10-06  Hrvoje Niksic  <hniksic@srce.hr>
4191
4192         * version.c: "Released" 1.4b23.
4193
4194         * ftp.c (ftp_loop_internal): Get the time after getftp.
4195
4196         * Makefile.in (install.info): New target.
4197         (install): Use it.
4198
4199         * http.c (http_loop): Fix output when doing -O.
4200
4201 1996-10-05  Hrvoje Niksic  <hniksic@srce.hr>
4202
4203         * geturl.texi: New file.
4204
4205         * main.c (main): Do not print the warnings and download summary if
4206         opt.quiet is set.
4207
4208         * version.c: Changed version to 1.4b23.
4209
4210 1996-10-05  Hrvoje Niksic  <hniksic@srce.hr>
4211
4212         * "Released" 1.4b22.
4213
4214         * atotm.c (atotm): Use True and False instead of TRUE and FALSE,
4215         to avoid redefinition warnings.
4216
4217         * host.c (store_hostaddress): Use memcpy() to copy the address
4218         returned by inet_addr.
4219
4220         * version.c: Changed version to 1.4b22.
4221
4222 1996-10-04  Hrvoje Niksic  <hniksic@srce.hr>
4223
4224         * version.c: "Released" 1.4b21.
4225
4226         * ftp-unix.c (ftp_parse_ls): Renamed to ftp_parse_unix_ls.
4227
4228         * ftp.c (ftp_port): Use conaddr.
4229         (getftp): Print the file length.
4230         (ftp_retrieve_list): Check the stamps of plain files only.
4231
4232         * connect.c (closeport): Do not call shutdown().
4233         (conaddr): New function.
4234
4235         * html.c (ftp_index): Made it dfp-aware.
4236
4237         * init.c (cleanup): New name of freemem. Close opt.dfp.
4238
4239         * ftp.c (getftp): Use opt.dfp if it is set.
4240
4241         * ftp-unix.c (ftp_parse_ls): Recognize time in h:mm format.
4242
4243         * ftp.c (ftp_retrieve_dirs): Fixed a bug that caused incorrect
4244         CWDs to be sent with recursive FTP retrievals.
4245
4246 1996-10-03  Hrvoje Niksic  <hniksic@srce.hr>
4247
4248         * recur.c (parse_robots): Made it more compliant with "official"
4249         specifications.
4250
4251         * http.c: New function.
4252
4253         * ftp-unix.c (ftp_parse_ls): Added better debug output.
4254
4255         * ftp.c (getftp): Print out the LIST in case of
4256         opt.print_server_response.
4257
4258         * version.c: Changed version to 1.4b21.
4259
4260 1996-10-01  Hrvoje Niksic  <hniksic@srce.hr>
4261
4262         * version.c: "Released" 1.4b20.
4263
4264         * README: Update.
4265
4266         * http.c (gethttp): Preset lengths of various headers instead of
4267         calculating them dynamically.
4268         (gethttp): Check for 206 partial contents.
4269
4270 1996-09-30  Hrvoje Niksic  <hniksic@srce.hr>
4271
4272         * configure.in: Set SYSTEM_GETURLRC to $libdir/geturlrc
4273
4274         * http.c (gethttp): Send the port number in the Host: header.
4275
4276 1996-09-29  Hrvoje Niksic  <hniksic@srce.hr>
4277
4278         * http.c (gethttp): Send host: header.
4279         (gethttp): Add the possibility of user-defined headers.
4280         (gethttp): Move decision about pragma: no-cache to http_loop,
4281         where it belongs.
4282         (gethttp): Pass a struct instead of enormous argument list.
4283         (http_loop): Use a new, fancier display format.
4284         (ftp_loop): Likewise.
4285
4286         * main.c: (hangup): Turn off buffering of the new log file.
4287
4288         * install-sh: Likewise.
4289
4290         * config.sub: Replace with the one in autoconf-2.10
4291
4292         * geturl.1: Update.
4293
4294         * init.c: New options httpuser and httppasswd.
4295
4296         * http.c: (base64_encode_line): New function.
4297         (gethttp): Send authentication.
4298
4299         * connect.c (make_connection): Use store_hostaddress.
4300
4301 1996-09-28  Hrvoje Niksic  <hniksic@srce.hr>
4302
4303         * host.c (store_hostaddress): New function.
4304
4305         * NEWS: Update.
4306
4307         * http.c (hgetrange): New function.
4308         (gethttp): Use ranges.
4309
4310         * utils.c (numdigit): Accept long instead of int.
4311
4312         * http.c (http_loop): Add restart capabilities.
4313
4314         * ftp.c (ftp_retrieve_glob): Fixed a bug that could cause matchres
4315         being used uninitialized.
4316         (ftp_retrieve_list): Similar fix.
4317
4318         * host.c (add_hlist): Fixed a bug that could cause cmp being used
4319         uninitialized.
4320
4321         * url.c (construct_relative): New function.
4322
4323         * recur.c (recursive_retrieve): Use it.
4324
4325         * retr.c (convert_links): New function.
4326
4327 1996-09-27  Hrvoje Niksic  <hniksic@srce.hr>
4328
4329         * url.c (free_urlpos): New function.
4330
4331         * recur.c (recursive_retrieve): Adapt.
4332
4333         * url.c (get_urls_html): Return a linked list instead of a vector.
4334
4335         * url.c (get_urls_file): Return a linked list instead of a vector.
4336
4337         * geturl.1: Update.
4338
4339         * http.c (gethttp): Implement it.
4340
4341         * init.c (setval): New option: SAVEHEADERS
4342
4343         * ftp.c (ftp_loop_internal): Do not set restval if listing is to
4344         be retrieved. Lack of this test caused bugs when the connection
4345         was lost during listing.
4346
4347         * retr.c (retrieve_url): Fixed a bug that caused
4348         coredumps. *newloc is now reset by default.
4349         (retrieve_url): Lift the twenty-tries limit on proxies.
4350
4351         * version.c: Changed version to 1.4b20.
4352
4353 1996-09-20  Hrvoje Niksic  <hniksic@srce.hr>
4354
4355         * version.c: "Released" 1.4b19.
4356
4357 1996-09-19  Hrvoje Niksic  <hniksic@srce.hr>
4358
4359         * ftp.c (ftp_loop_internal): Renamed from ftp_1fl_loop.
4360         (getftp): Changed prototype to accept ccon *.
4361
4362 1996-09-17  Hrvoje Niksic  <hniksic@srce.hr>
4363
4364         * ftp.c (ftp_retrieve_list): Fixed a bug that caused setting
4365         incorrect values to files pointed to by symbolic links.
4366         (ftp_1fl_loop): Do not count listings among the downloaded URL-s.
4367
4368 1996-09-16  Hrvoje Niksic  <hniksic@srce.hr>
4369
4370         * url.c (mkstruct): Do not prepend "./" in front of a pathname.
4371
4372         * main.c (main): New option: --user-agent.
4373
4374         * geturl.1: Ditto.
4375
4376         * init.h: Ditto.
4377
4378         * init.c (setval): Ditto.
4379
4380         * main.c (main): Rename "server-headers" to "server-response".
4381
4382         * ftp-unix.c (ftp_parse_ls): Check for asterisks at the end of
4383         executables in 'ls -F' listings.
4384
4385 1996-09-15  Hrvoje Niksic  <hniksic@srce.hr>
4386
4387         * url.c (parseurl): Remove realloc() and sprintf().
4388         (str_url): Get rid of sprintf().
4389
4390         * recur.c (recursive_retrieve): Enable FTP recursion through proxy
4391         servers.
4392
4393         * url.h (URL_CLEANSE): Made it else-resistant.
4394         (USE_PROXY): New macro.
4395
4396 1996-09-14  Hrvoje Niksic  <hniksic@srce.hr>
4397
4398         * NEWS: Update.
4399
4400         * version.c: Changed version to 1.4b19.
4401
4402 1996-09-14  Hrvoje Niksic  <hniksic@srce.hr>
4403
4404         * version.c: "Released" 1.4b18.
4405
4406         * url.c: Made it reallocate space exponentially.
4407
4408 1996-09-14  Drazen Kacar  <dave@fly.cc.fer.hr>
4409
4410         * html.c (htmlfindurl): Added <frame src> and <iframe src> among
4411         the list of stuff to fetch.
4412
4413 1996-09-13  Hrvoje Niksic  <hniksic@srce.hr>
4414
4415         * url.c (get_urls_html): Fixed a bug that caused SIGSEGV's with
4416         -Fi.
4417
4418         * html.c (htmlfindurl): Rewrite.
4419
4420         * http.c (gethttp): Use opt.proxy_cache.
4421
4422         * main.c (main): Added --cache option.
4423
4424         * ftp.c (ftp_response): Print server response if opt.print_server
4425         response is set.
4426         (getftp): Print newlines after each request if the server response
4427         is to be printed.
4428         (ftp_response): Copy the last response line to last_respline.
4429
4430         * http.c (gethttp): Add Pragma: nocache for retried
4431         proxy-retrievals.
4432
4433         * ftp.c (getftp): Use it.
4434
4435         * retr.c (buf_discard): New function.
4436
4437         * ftp.c (ftp_response): Use buf_readchar().
4438         (getftp): Flush the control connection buffer before calling
4439         get_contents().
4440
4441         * retr.c (buf_readchar): New function.
4442         (buf_flush): New function.
4443         (get_contents): Use buf_readchar() instead of read(x, x, 1).
4444         (get_contents): Use buf_flush.
4445
4446 1996-09-12  Hrvoje Niksic  <hniksic@srce.hr>
4447
4448         * ftp.c: Incorporate changes to ftp_response.
4449
4450         * ftp.c (ftp_response): Allocate the server response dynamically,
4451         as in read_whole_line and fetch_next_header.
4452
4453         * utils.c (read_whole_line): Fixed a bug that prevented reading
4454         the last line if it is not \n-terminated. Also fixed a possible
4455         memory overflow.
4456
4457         * http.c (fetch_next_header): Return malloc-ed string as large as
4458         needed.
4459         (gethttp): Use new fetch_next_header.
4460
4461 1996-09-12  Hrvoje Niksic  <hniksic@srce.hr>
4462
4463         * http.c (hgetlen): Compute the header length the first time only.
4464         (hgettype): Ditto.
4465         (hgetlocation): Ditto.
4466         (hgetmodified): Ditto.
4467
4468 1996-09-11  Hrvoje Niksic  <hniksic@srce.hr>
4469
4470         * sample.geturlrc: Update.
4471
4472 1996-09-10  Hrvoje Niksic  <hniksic@srce.hr>
4473
4474         * http.c (http_loop): Ditto.
4475
4476         * ftp.c (getftp): Open the output file as binary.
4477
4478         * version.c: Changed version to 1.4b18.
4479
4480 1996-09-10  Hrvoje Niksic  <hniksic@srce.hr>
4481
4482         * version.c: "Released" 1.4b17.
4483
4484         * ftp-unix.c (ftp_parse_ls): If unable to open file, return NULL
4485         instead of failed assertion.
4486
4487 1996-09-09  Hrvoje Niksic  <hniksic@srce.hr>
4488
4489         * ftp.c (ftp_get_listing): Add a numbered suffix to LIST_FILENAME
4490         if a file of that name already exists.
4491
4492 1996-09-05  Hrvoje Niksic  <hniksic@srce.hr>
4493
4494         * ftp.c (ftp_1fl_loop): Handler FTPPORTERR and FOPENERR correctly.
4495
4496         * config.h.in: Define gethostbyname as Rgethostbyname when using
4497         Socks.
4498
4499         * configure.in: Check for -lresolv if using Socks.
4500
4501         * version.c: Changed version to 1.4b17.
4502
4503 1996-07-15  Hrvoje Niksic  <hniksic@srce.hr>
4504
4505         * version.c: "Released" 1.4b16.
4506
4507         * http.c (gethttp): More intelligent check for first line of HTTP
4508         response.
4509         (gethttp): Would bug out on time-stamping.
4510
4511         * version.c: Changed version to 1.4b16.
4512
4513 1996-07-11  Hrvoje Niksic  <hniksic@srce.hr>
4514
4515         * version.c: Released 1.4b15.
4516
4517         * http.c (http_loop): Print \n after the loop entry, not before.
4518
4519         * url.c (url_filename): Use ISDOT.
4520
4521         * url.h (ISDOT): New macro.
4522
4523         * recur.c (recursive_retrieve): Change only opt.recursive for
4524         following FTP.
4525
4526 1996-07-11  Antonio Rosella <antonio.rosella@agip.it>
4527
4528         * socks/geturl.cgi: Fixed version No.
4529
4530         * socks/download-netscape.html: Ditto.
4531
4532         * socks/download.html: Changed socks.html to download.html.
4533
4534 1996-07-11  Hrvoje Niksic  <hniksic@srce.hr>
4535
4536         * url.c (url_filename): Check for opt.dirstruct instead for
4537         opt.recursive && opt.dirstruct.
4538
4539         * init.c (defaults): Ditto.
4540         (defaults): Reset dirstruct by default.
4541         (setval): Set opt.dirstruct whenever setting recursive.
4542
4543         * init.h: Removed FORCEDIRHIER.
4544
4545         * INSTALL: Added -L to socks-description.
4546
4547         * version.c: Changed version to 1.4b15.
4548
4549 1996-07-10  Hrvoje Niksic  <hniksic@srce.hr>
4550
4551         * version.c: "Released" 1.4b14.
4552
4553         * geturl.1: Update AUTHOR to include Rosella as contributor.
4554
4555         * NEWS: Update.
4556
4557         * socks/geturl.cgi: Simplified command creation, nuked <blink>.
4558
4559         * socks/geturl.cgi: Wrap nutscape extensions within if $netscape.
4560         (cal_time): Fix == to eq.
4561
4562         * socks/geturl.cgi: GPL-ized with permission of A. Rosella.
4563
4564         * geturl.1 (hostname): Moved URL CONVENTIONS to the beginning.
4565
4566         * Makefile.in: Use @VERSION@.
4567
4568         * configure.in: Check version from version.c.
4569
4570         * socks/geturl.cgi: Changed /pub/bin/perl to /usr/bin/perl.
4571
4572         * socks/download.html: Created from download-netscape.html, made
4573         HTML-2.0 compliant.
4574
4575         * recur.c (recursive_retrieve): Set opt.force_dir_hier when
4576         following FTP links from recursions.
4577
4578 1996-07-09  Hrvoje Niksic  <hniksic@srce.hr>
4579
4580         * url.c (mymkdir): Fixed a bug that prevented mymkdir() to create
4581         absolute directories correctly.
4582
4583         * version.c: Changed version to 1.4b14.
4584
4585 1996-07-09  Hrvoje Niksic  <hniksic@srce.hr>
4586
4587         * version.c: "Released" 1.4b13.
4588
4589         * url.c (make_backup): New function.
4590
4591         * http.c (http_loop): Make a backup copy of the local file (using
4592         rename(2)) before opening it.
4593
4594         * main.c (main): Added --backups.
4595
4596         * host.c (ftp_getaddress): Bail out on failed mycuserid().
4597         (ftp_getaddress): Check for leading dot on MY_DOMAIN.
4598         (ftp_getaddress): Check for empty, null or (null) domain.
4599
4600         * url.c (get_urls_html): If this_url is NULL, the base must have a
4601         protocol.
4602         (parseurl): Use has_proto.
4603
4604         * retr.c (retrieve_url): Warn when proxy is used with more than 20
4605         retries.
4606
4607         * url.c (mkstruct): Create the directory (calling mymkdir()) only
4608         if it is not already there.
4609         (has_proto): New function.
4610         (get_urls_html): Eliminate the remaining call to findurl -- use
4611         has_proto.
4612
4613         * geturl.1: Ditto.
4614
4615         * main.c: Change -X to -x.
4616
4617         * url.c (url_filename): Simplify creation of filename if
4618         prefix_files is set.
4619         (url_filename): Simplify everything. And I do mean *everything*.
4620         (mkstruct): Add dir_prefix before hostname.
4621         (path_simplify): Fixed a bug that caused writing outside the path
4622         string in case of "." and ".." path strings.
4623
4624 1996-07-06  Hrvoje Niksic  <hniksic@srce.hr>
4625
4626         * init.c: Added --mirror.
4627
4628         * main.c (main): Added -X to force saving of directory hierarchy.
4629
4630         * ftp.c (ftp_retrieve_list): Added recursion depth counter.
4631         (ftp_retrieve_list): Check whether quota is exceeded.
4632
4633         * url.c (get_urls_html): Skip leading blanks for absolute URIs.
4634
4635         * http.c (gethttp): Use referer if present.
4636
4637         * recur.c (recursive_retrieve): Set u->referer before calling
4638         retrieve_url.
4639
4640         * url.c (newurl): Use memset to nullify the struct members.
4641         (freeurl): Free the referer field too.
4642
4643         * url.h: Added referer to urlinfo.
4644
4645         * geturl.1: Updated the manual to document some of the new features.
4646
4647         * utils.c (numdigit): Moved from url.c.
4648
4649         * README: Rewritten.
4650
4651         * config.h.in: Add the support for socks.
4652
4653         * configure.in: Add the support for socks.
4654
4655         * url.c (url_filename): If the dir_prefix is ".", work with just
4656         the file name.
4657         (url_filename): Do not look for .n extensions if timestamping if
4658         turned on.
4659
4660         * retr.c (show_progress): Skip the over-abundant restval data, and
4661         print the rest of it with ',' instead of '.'.
4662
4663 1996-07-05  Hrvoje Niksic  <hniksic@srce.hr>
4664
4665         * retr.c (show_progress): Changed second arg. to long (as it
4666         should be).
4667         (show_progress): Moved to retr.c.
4668         (get_contents): Moved to retr.c.
4669
4670         * version.c: Change version to 1.4b13.
4671
4672 1996-07-05  Hrvoje Lacko <hlacko@fly.cc.fer.hr>
4673
4674         * url.c (in_acclist): Would return after the first suffix.
4675
4676 1996-07-04  Hrvoje Niksic  <hniksic@srce.hr>
4677
4678         * version.c: "Released" 1.4b12.
4679
4680         * url.c (path_simplify): More kludgifications.
4681         (get_urls_html): Use new parameters for htmlfindurl.
4682
4683         * html.c: Removed memorizing "parser states", since the new
4684         organization does not require them.
4685
4686         * init.c (run_geturlrc): Use read_whole_line.
4687
4688         * ftp-unix.c (ftp_parse_ls): Use read_whole_line.
4689
4690         * recur.c (parse_robots): Use read_whole_line.
4691
4692         * utils.c (read_whole_line): New function.
4693
4694         * recur.c (tried_robots): Use add_slist/in_slist, *much* cleaner.
4695
4696         * host.c (ngethostbyname): Call inet_addr just once. Yet to be
4697         tested on OSF and Ultrix.
4698         (add_hlist): New function.
4699         (free_hlist): New function.
4700         (search_host): New function.
4701         (search_address): New function.
4702         (realhost): Use search_host, search_address and add_hlist.
4703         (same_host): Replaced realloc() with strdupdelim(), made
4704         case-insensitive, fixed a memory leak.
4705
4706         * html.c (ftp_index): Fixed tm_min and tm_sec to be tm_hour and
4707         tm_min, like intended.
4708
4709         * version.c: Change user agent information to
4710         Geturl/version.
4711
4712 1996-07-03  Hrvoje Niksic  <hniksic@srce.hr>
4713
4714         * utils.c: Renamed nmalloc.c to utils.c, .h likewise.
4715
4716         * url.c (acceptable): Always accept directories.
4717
4718         * ftp-unix.c (ftp_parse_ls): Support brain-damaged "ls -F"-loving
4719         servers by stripping trailing @ from symlinks and trailing / from
4720         directories.
4721
4722         * ftp.c (ftp_loop): Debugged the "enhanced" heuristics. :-)
4723
4724         * url.c (skip_url): Use toupper instead of UCASE.
4725
4726         * host.c (sufmatch): Made it case-insensitive.
4727
4728         * url.c (match_backwards_or_pattern): Fixed i == -1 to j == -1.
4729         (match_backwards): New function, instead of
4730         match_backwards_or_pattern.
4731
4732         * recur.c (recursive_retrieve): Increased performance by
4733         introducing inl, which reduces number of calls to in_slist to only
4734         one.
4735
4736         * ftp.c (ftp_loop): Enhanced the heuristics that decides which
4737         routine to use.
4738
4739         * main.c (printhelp): Removed the warranty stuff.
4740
4741 1996-07-02  Hrvoje Niksic  <hniksic@srce.hr>
4742
4743         * url.c (add_slist): Simplify.
4744         (match_backwards_or_pattern): New function.
4745         (in_acclist): Use match_backwards_or_pattern.
4746         (matches): Remove.
4747
4748 1996-06-30  Hrvoje Niksic  <hniksic@srce.hr>
4749
4750         * ftp.c (ftp_loop): Call ftp_index on empty file names, if not
4751         recursive.
4752
4753         * html.c (ftp_index): Fixed to work. Beautified the output.
4754
4755         * ftp.c (ftp_retrieve_glob): Another argument to control whether
4756         globbing is to be used.
4757         (ftp_retrieve_list): Compare the time-stamps of local and remote
4758         files to determine whether to download.
4759
4760 1996-06-29  Hrvoje Niksic  <hniksic@srce.hr>
4761
4762         * ftp.c (rel_constr): New function.
4763
4764         * retr.c (retrieve_from_file): Check for text/html before
4765         retrieving recursively.
4766
4767         * main.c (main): Check whether the file is HTML before going into
4768         recursive HTML retrieving.
4769
4770         * ftp.c (ftp_retrieve_list): Manage directories.
4771         (ftp_retrieve_glob): Pass all the file-types to ftp_retrieve_list.
4772         (ftp_1fl_loop): Fixed a bug that caused con->com to be incorrectly
4773         initialized, causing bugchecks in getftp to fail.
4774
4775         * configure.in: Check for symlink.
4776
4777         * ftp.c (ftp_retrieve_list): Added support for symlinks.
4778
4779         * version.c: "Released" 1.4b10.
4780
4781         * atotm.c (atotm): Redeclared as time_t.
4782
4783         * init.c: New variable "timestamping".
4784
4785         * main.c (main): New option 'N'.
4786
4787         * http.c (hgetlocation): Case-insensitive match.
4788         (hgetmodified): New function.
4789         (http_loop): Implement time-stamping.
4790
4791 1996-06-28  Hrvoje Niksic  <hniksic@srce.hr>
4792
4793         * version.c: Changed version to 1.4b10
4794
4795         * atotm.c: New file, from phttpd.
4796
4797         * options.h (struct options): New parameter timestamping.
4798
4799         * version.c: 1.4b9 "released".
4800
4801         * recur.c (recursive_retrieve): Used linked list (ulist) for
4802         faster storing of URLs.
4803
4804         * url.c (get_urls_html): Removed the old kludge with comparing the
4805         outputs of htmlfindurl and findurl.
4806         (get_urls_html): Added better protocol support here.
4807         (create_hash): Removed, as well as add_hash and in_hash.
4808         (addslist): New function.
4809         (in_slist): ditto
4810
4811         * version.c: Released 1.4b8, changed version to b9.
4812
4813 1996-06-27  Hrvoje Niksic  <hniksic@srce.hr>
4814
4815         * ftp.c (freefileinfo): New function.
4816         (delelement): New function.
4817
4818         * everywhere: GPL!
4819
4820         * ftp.c (ftp_loop): Use ccon.
4821         (ftp_retrieve_glob): Likewise.
4822
4823         * ftp.h: Define ccon, to define status of control connection.
4824
4825         * ftp.c (ftp_get_listing): New function.
4826         (ftp_retrieve_more): New function.
4827         (ftp_retrieve_glob): New function.
4828
4829 1996-06-25  Hrvoje Niksic  <hniksic@srce.hr>
4830
4831         * configure.in: Removed the search for cuserid().
4832
4833         * init.c (getmode): Renamed to getperms.
4834
4835 1996-06-24  Hrvoje Niksic  <hniksic@srce.hr>
4836
4837         * version.c: New version.
4838
4839         * main.c (hangup): New function, that handles hangup. Hangup
4840         signal now causes geturl to stop writing on stdout, and to write
4841         to a log file.
4842
4843         * ftp.c (getftp): "Released" 1.4b7.
4844
4845         * html.c (htmlfindurl): Ignore everything inside <head>...</head>.
4846         (ftp_index): Use fileinfo/urlinfo.
4847
4848         * ftp-unix.c (ftp_parse_ls): New function.
4849         (symperms): New function.
4850
4851         * ftp.c (ftp_1fl_loop): New function, to handle 1-file loops.
4852
4853         * retr.c (retrieve_url): Added FTP support.
4854
4855 1996-06-23  Hrvoje Niksic  <hniksic@srce.hr>
4856
4857         * geturl.h: Removed NOTFTP2HTML enum.
4858         Added DO_LOGIN, DO_CWD and DO_LIST. LIST_ONLY is obsolete.
4859
4860         * ftp.c (getftp): Resynched with urlinfo.
4861         (getftp): Removed HMTL-ization of index.html from getftp.
4862
4863         * version.c: 1.4b6 "released".
4864
4865         * options.h (options): New struct, to keep options in.
4866
4867         * http.c (http_loop,gethttp): Synched with proxy.
4868
4869         * retr.c (retrieve_url): Implemented proxy retrieval.
4870
4871         * main.c (main): Use retrieve_from_file.
4872
4873 1996-06-22  Hrvoje Niksic  <hniksic@srce.hr>
4874
4875         * retr.c (retrieve_from_file): New function.
4876
4877         * url.c (parseurl): Modified to return URLOK if all OK. Protocol
4878         can be found in u->proto.
4879
4880         * ftp.c (ftp_response): Fixed to accept multi-line responses as
4881         per RFC 959.
4882
4883         * recr.c (recursive_retrieve): Take newloc from retrieve_url.
4884
4885         * url.c (mymkdir): Removed the file of the same name, if one
4886         exists.
4887         (isfile): New function.
4888         (mkstruct): Fixed the '/' glitches.
4889         (path_simplify): Hacked to treat something/.. correctly.
4890
4891 1996-06-21  Hrvoje Niksic  <hniksic@srce.hr>
4892
4893         * http.c (gethttp): Close the socket after error in headers.
4894         (http_loop): HEOF no longer a fatal header.
4895
4896         * loop.c (retrieve_url): When dt is NULL, do not modify it. This
4897         simplifies the syntax of calling retrieve_url.
4898
4899         * recr.c (recursive_retrieve): Modified to use get_urls_html.
4900
4901         * url.c (get_urls_file): New function.
4902         (get_urls_html): New function.
4903
4904         * recr.c (recursive_retrieve): Patched up to conform to the
4905         standards.
4906
4907         * http.c (gethttp): Synched with the rest...
4908         (gethttp): Treat only CONREFUSED specially, with connection
4909         errors.
4910
4911         * init.c,geturl.1,http.c (http_loop): Removed kill_error.
4912
4913 1996-06-20  Hrvoje Niksic  <hniksic@srce.hr>
4914
4915         * http.c (http_loop): New function.
4916
4917         * loop.c: Removed *lots* of stuff from retrieve_url.
4918
4919         * url.c (parseurl): Changed to work with urlinfo. Integrated
4920         username finding and path parsing.
4921         (newurl): New function.
4922         (freeurl): New function.
4923         (mkstruct): Removed the old bogosities, made it urlinfo-compliant.
4924         (url_filename): Likewise.
4925         (path_simplify): Accept relative paths too.
4926         (opt_url): Made urlinfo-compliant, removed bogosities.
4927         (path_simplify): Expanded to accept relative paths.
4928         (str_url): A replacement for hide_url
4929         (decode_string): Fixed a bug that caused malfunctioning when
4930         encountering an illegal %.. combination.
4931         (opt_url): Removed the argument. Dot-optimizations are now default.
4932
4933         * nmalloc.c (strdupdelim): New function.
4934
4935         * url.h: Added the urlinfo structure
4936
4937 1996-06-19  Hrvoje Niksic  <hniksic@srce.hr>
4938
4939         * url.c (hide_url): Thrown out the protocol assertion. Do not
4940         change the URL if the protocol if not recognized.
4941         (findurl): Put continue instead of break.
4942
4943 1996-06-18  Hrvoje Niksic  <hniksic@srce.hr>
4944
4945         * sample.geturlrc: Changed the defaults to be commented out and
4946         harmless (previous defaults caused pains if copied to
4947         ~/.geturlrc).
4948
4949         * http.c (gethttp): Print the HTTP request in debug mode.
4950
4951         * connect.c (iread): Added EINTR check loop to select-ing
4952         too. EINTR is now correctly handled with select().
4953
4954         * TODO: new file
4955
4956 1996-05-07  Hrvoje Niksic  <hniksic@srce.hr>
4957
4958         * host.c (same_host): Made the function a little bit more
4959         intelligent regarding diversified URL syntaxes.
4960
4961         * url.c (skip_url): Spaces are now skipped after URL:
4962
4963         * Released 1.3.1 with the patch to prevent crashing when sending
4964         NULL to robot* functions and the patch to compile "out of the box"
4965         on AIX.
4966
4967         * recr.c (recursive_retrieve): Added checking whether this_url is
4968         NULL when calling the robot functions.
4969
4970         * ChangeLog: New file.