sjero.net Git - wget/blob - src/ChangeLog

   1 2001-12-14  Hrvoje Niksic  <hniksic@arsdigita.com>
   2
   3         * url.c (path_simplify): Move here from utils.c, and make static.
   4
   5 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
   6
   7         * init.c (wgetrc_file_name): Print correct message when loading
   8         getenv("WGETRC") fails.
   9
  10 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
  11
  12         * recur.c (register_download): Don't abort when one URL references
  13         two different files.
  14
  15 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
  16
  17         * http.c (gethttp): Check for conn->scheme, not u->scheme, before
  18         calling ssl_iwrite.
  19
  20 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
  21
  22         * version.c: Wget 1.8.1-pre1 is released.
  23
  24 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
  25
  26         * res.c (matches): Fix broken URL in the docstring.
  27
  28 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
  29
  30         * html-url.c (tag_url_attributes): Mark <embed href=...> as
  31         external.
  32
  33 2001-12-12  Hrvoje Niksic  <hniksic@arsdigita.com>
  34
  35         * url.c (get_urls_file): Cosmetic changes.
  36
  37 2001-12-12  Hrvoje Niksic  <hniksic@arsdigita.com>
  38
  39         * html-url.c (append_one_url): Resurrect warning when unable to
  40         resolve a relative link.
  41
  42 2001-12-12  Hrvoje Niksic  <hniksic@arsdigita.com>
  43
  44         * html-url.c (collect_tags_mapper): Break into several functions.
  45         (tag_url_attributes): Collect <embed href=...>.
  46
  47 2001-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
  48
  49         * host.c: New type ipv4_address.  Use it consistently instead of
  50         `unsigned char[4]' and `unsigned char *'.
  51         (pretty_print_address): Accept a `const void *', to require even
  52         less casting.
  53
  54 2001-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
  55
  56         * ftp-ls.c (ftp_parse_vms_ls): Fix obvious memory leaks.
  57
  58 2001-12-10  Hrvoje Niksic  <hniksic@arsdigita.com>
  59
  60         * main.c (main): Initialize progress after fork_to_background, so
  61         that it knows when to use dots.
  62
  63         * mswindows.c (ws_hangup): Call log_request_redirect_output.
  64
  65         * utils.c (fork_to_background): Print the PID of the child
  66         process.
  67
  68         * log.c (log_request_redirect_output): Set a flag that output
  69         redirection has been requested.  Doing anything else in a signal
  70         handler is unsafe.
  71         (check_redirect_output): New function: check whether redirection
  72         has been requested and, if so, call redirect_output().
  73         (logputs): Call check_redirect_output.
  74         (logprintf): Ditto.
  75         (debug_logprintf): Ditto.
  76         (redirect_output): Print clearer messages.
  77
  78         * main.c (redirect_output_signal): Don't call
  79         redirect_output_signal directly.  Instead, call
  80         log_request_redirect_output.
  81
  82         * utils.c (memfatal): Ditto.
  83
  84         * progress.c (display_image): Use it.
  85
  86         * log.c (log_set_save_context): New function: allow the caller to
  87         turn off saving log context lines.
  88
  89 2001-12-10  Hrvoje Niksic  <hniksic@arsdigita.com>
  90
  91         * host.c (address_list_set_faulty): Uncomment a sanity check.
  92
  93 2001-12-10  Hrvoje Niksic  <hniksic@arsdigita.com>
  94
  95         * utils.c (long_to_string): Return a pointer after where the
  96         number ends.
  97         (long_to_string): Rename to number_to_string.
  98
  99 2001-12-10  Hrvoje Niksic  <hniksic@arsdigita.com>
 100
 101         * utils.c (path_simplify): Correctly handle the unlikely case that
 102         b starts out as path + 1.
 103
 104 2001-12-10  Hrvoje Niksic  <hniksic@arsdigita.com>
 105
 106         * utils.c (path_simplify): Rewrite, with better comments, and
 107         without the use of strcpy to move overlapping blocks.
 108
 109 2001-12-09  Hrvoje Niksic  <hniksic@arsdigita.com>
 110
 111         * init.c (cmd_spec_progress): Resurrect.  Check whether VAL is a
 112         valid progress type before setting it.
 113
 114 2001-12-09  Hrvoje Niksic  <hniksic@arsdigita.com>
 115
 116         * main.c (main): Remove stray debugging message.
 117
 118 2001-12-09  Hrvoje Niksic  <hniksic@arsdigita.com>
 119
 120         * progress.c (create_image): Fix ETA padding when hours are prined.
 121
 122 2001-12-09  Hrvoje Niksic  <hniksic@arsdigita.com>
 123
 124         * version.c: Wget 1.8 is released.
 125
 126 2001-12-09  Hrvoje Niksic  <hniksic@arsdigita.com>
 127
 128         * url.c (reencode_string): Declare static.
 129
 130         * res.c (registered_specs): Declare static.
 131
 132         * progress.c (current_impl_locked): Declare static.
 133
 134         * log.c (flush_log_p): Declare static.
 135         (needs_flushing): Ditto.
 136
 137         * http.c (digest_authentication_encode): Declare static.
 138
 139         * html-url.c (init_interesting): Declare static.
 140
 141         * host.c (host_name_addresses_map): Declare static.
 142
 143         * cookies.c (find_matching_chains): Declare static.
 144
 145         * ftp-ls.c (ftp_parse_vms_ls): Warn about the memory leak
 146         indicated by lint.
 147
 148         * utils.c (path_simplify): Remove unused variable STUB_CHAR.
 149
 150         * host.c (address_list_set_faulty): Document that INDEX is
 151         currently unused.
 152
 153         * url.c (rewrite_shorthand_url): Remove unused variable PATH.
 154
 155 2001-12-08  Hrvoje Niksic  <hniksic@arsdigita.com>
 156
 157         * version.c: Wget 1.8-pre2 is released.
 158
 159 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
 160
 161         * progress.c (progress_handle_sigwinch): Set up the signal again.
 162
 163         * utils.c: Include <sys/termios.h>, where Solaris defines
 164         TIOCGWINSZ.
 165
 166         * progress.c (bar_create): Don't use the last column on the screen.
 167         (create_image): Pad ETA to constant size.  Pad SIZE to nine digits
 168         only until it exceeded them.
 169
 170 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
 171
 172         * version.c: Wget 1.8-pre1 is released.
 173
 174 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
 175
 176         * progress.c (progress_create): Make sure that, when the output is
 177         redirected, the progress implementation gets changed to the
 178         fallback one.
 179         (bar_set_params): Set current_impl_locked to 1 when "force" is
 180         specified.
 181         (progress_create): Don't change the progress implementation if
 182         current_impl_locked is non-zero.
 183
 184         * main.c (redirect_output_signal): Call
 185         progress_schedule_redirect.
 186
 187         * progress.c (progress_schedule_redirect): New function.
 188
 189 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
 190
 191         * log.c (logvprintf): Restructure to allow being called multiple
 192         times.
 193         (logprintf): Call logvprintf in a loop.
 194         (debug_logprintf): Ditto.
 195
 196 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
 197
 198         * gen_sslfunc.c (ssl_init_prng): Allow the user to disable EGD by
 199         setting egd_file it to empty string.
 200
 201         * main.c (main): Change the option name from --sslegdsock to
 202         --egd-file.
 203
 204 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
 205
 206         * gen_sslfunc.c (ssl_init_prng): Make the printed message
 207         translatable.
 208
 209 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
 210
 211         * url.c (scheme_disable): New function.
 212
 213         * main.c (main): Call ssl_init_prng from here rather than from
 214         init_ssl, so that it has a chance to disable support for https
 215         before a URL has been resolved.
 216
 217         * gen_sslfunc.c (ssl_init_prng): Seed with rand() if all else
 218         failed.
 219         (ssl_init_prng): Disable support for https if seeding the PRNG
 220         fails.
 221
 222 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
 223
 224         * utils.c (read_whole_line): Handle lines beginning with \0.
 225
 226 2001-12-05  Hrvoje Niksic  <hniksic@arsdigita.com>
 227
 228         * recur.c (convert_all_links): Guard against duplicates in
 229         downloaded_html_files.
 230         (register_download): Don't invalidate similar-looking URLs.
 231         (match_except_index): New function.
 232
 233 2001-12-05  Hrvoje Niksic  <hniksic@arsdigita.com>
 234
 235         * utils.c (path_simplify): Document with test cases.
 236
 237 2001-12-04  Hrvoje Niksic  <hniksic@arsdigita.com>
 238
 239         * gen_sslfunc.c: Ditto.
 240
 241         * rbuf.c: Include <string.h>.
 242
 243 2001-12-04  Hrvoje Niksic  <hniksic@arsdigita.com>
 244
 245         * recur.c (retrieve_tree): Check whether the URL was already
 246         downloaded before downloading it again.
 247         (descend_child_p): Renamed to download_child_p.
 248         (register_download): When one URL is downloaded to a file already
 249         "owned" by another URL, delete all references that map any URL to
 250         that file.
 251         (register_delete_file): New function.
 252         (retrieve_tree): Use it after deleting a file.
 253
 254         * url.c (url_parse): Re-canonicalize the URL also if the path is
 255         empty, so that e.g. "http://www.server.com" ->
 256         "http://www.server.com/".
 257         (lowercase_str): Use ISUPPER instead of !ISLOWER.
 258
 259         * retr.c (retrieve_url): Use the canonical URL form when calling
 260         register_download().
 261
 262 2001-12-04  Ian Abbott <abbotti@mev.co.uk>
 263
 264         * snprintf.c (dopr): Use `unsigned int' as the second argument to
 265         va_arg when casting to `unsigned short' is intended.
 266
 267 2001-12-04  Herold Heiko  <Heiko.Herold@previnet.it>
 268
 269         * gen_sslfunc.c: on windows provide ssl crypto random
 270           initialization through RAND_screen(); could possibly
 271           be not enough for strong ssl communication (see the
 272           relevant manual page from the openssl package).
 273
 274 2001-12-04  Hrvoje Niksic  <hniksic@arsdigita.com>
 275
 276         * url.c (local_quote_string): Reenable quoting of question marks,
 277         but only when `--html-extension' is used.
 278
 279 2001-12-03  Hrvoje Niksic  <hniksic@arsdigita.com>
 280
 281         * version.c: Wget 1.8-beta3 is released.
 282
 283 2001-12-03  Hrvoje Niksic  <hniksic@arsdigita.com>
 284
 285         * snprintf.c (dopr): Cast the result of va_arg to short int and
 286         short unsigned int where these types are expected to be used.
 287
 288 2001-12-03  Hrvoje Niksic  <hniksic@arsdigita.com>
 289
 290         * snprintf.c (dopr): Replace `short int' and `unsigned short int'
 291         with `int' when using it as the second argument to `va_arg'.
 292
 293 2001-12-03  Hrvoje Niksic  <hniksic@arsdigita.com>
 294
 295         * host.c (address_list_new_one): New function.
 296         (lookup_host): Use it.
 297
 298 2001-12-03  Andre Majorel  <amajorel@teaser.fr>
 299
 300         * host.c (lookup_host): Don't initialize TMPSTORE directly because
 301         it's not legal C.
 302
 303 2001-12-03  Hrvoje Niksic  <hniksic@arsdigita.com>
 304
 305         * ftp-basic.c (ftp_port): Don't return HOSTERR if we fail getting
 306         the socket data.
 307
 308         * ftp.c: Ditto.
 309
 310         * http.c: No need to declare h_errno.
 311
 312         * host.c: Declare h_errno.
 313
 314 2001-12-02  Hrvoje Niksic  <hniksic@arsdigita.com>
 315
 316         * utils.c (file_merge): If BASE doesn't contain a slash, just
 317         return a copy of FILE.
 318
 319 2001-12-02  Hrvoje Niksic  <hniksic@arsdigita.com>
 320
 321         * version.c: Wget 1.8-beta2 is released.
 322
 323 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
 324
 325         * ftp.c (getftp): When PWD fails, assume "/".
 326
 327         * ftp-basic.c (ftp_syst): Fix indentation.
 328
 329 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
 330
 331         * url.c (get_urls_file): If opt.base_href is specified, merge each
 332         URL with the base.
 333
 334 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
 335
 336         * main.c (print_help): Don't document the removed `-nh'.
 337
 338 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
 339
 340         * url.c (url_full_path): Document better.
 341
 342         * http.c (gethttp): Use the full path when creating digest
 343         authorization.
 344
 345 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
 346
 347         * cookies.c (path_matches): Return 0 if PREFIX doesn't begin with
 348         '/'.
 349
 350 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
 351
 352         * cookies.c (path_matches): FULL_PATH doesn't begin with '/', but
 353         PREFIX does.
 354
 355 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
 356
 357         * cookies.c (check_domain_match): Reimplement to match Netscape's
 358         "preliminary specification" for cookies.
 359
 360 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
 361
 362         * url.c (replace_attr_refresh_hack): New function.
 363         (convert_links): Call replace_attr_refresh_hack for Refresh
 364         links.  It will add the "TMOUT; URL=" junk before the link.
 365
 366         * html-url.c (collect_tags_mapper): Set ID to the ID of the
 367         "content" attribute, not "http-equiv".
 368         (collect_tags_mapper): Don't use OFFSET to hack the raw_* values;
 369         instead, store the information that this entry belongs to a
 370         "refresh" link.
 371
 372 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
 373
 374         * version.c: Wget 1.8-beta1 is released.
 375
 376 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
 377
 378         * recur.c (retrieve_tree): Allow -p retrievals to exceed maximum
 379         depth by more than one.
 380
 381 2001-11-30  Hrvoje Niksic  <hniksic@arsdigita.com>
 382
 383         * retr.c (retrieve_url): Don't allow more than 20 redirections.
 384
 385 2001-11-30  Hrvoje Niksic  <hniksic@arsdigita.com>
 386
 387         * recur.c (retrieve_tree): Skip the non-inline entries when
 388         enqueuing the children of a leaf HTML node in -p mode.
 389         (descend_url_p): Ignore opt.no_parent when in -p mode and UPOS is
 390         "inline".
 391
 392         * html-url.c (get_urls_html): Don't accept dash_p_leaf_HTML.
 393         (collect_tags_mapper): When an entry is "inline", mark it as such.
 394
 395         * recur.c (descend_url_p): Fix test when checking for
 396         acceptance/rejection rules.
 397
 398 2001-10-31 Daniel BODEA <dali@dali-designs.com>
 399
 400         * netrc.c (search_netrc): When slack_default is 0, still look for
 401         an account with matching password, just not the "default account".
 402         HTTP Authorization using .netrc should now work as expected.
 403
 404 2001-11-30  T. Bharath  <TBharath@responsenetworks.com>
 405
 406         * http.c (persistent_available_p): Call SHUTDOWN_SSL if
 407         test_socket_open fails.
 408
 409 2001-11-30  Hrvoje Niksic  <hniksic@arsdigita.com>
 410
 411         * progress.c (display_image): Just print one CR to reset the
 412         cursor position.
 413
 414 2001-11-30  Christian Fraenkel  <c.fraenkel@gmx.net>
 415
 416         * init.c: New command `ssl_egd_sock'.
 417
 418         * main.c (main): New option `--sslegdsock'.
 419
 420         * gen_sslfunc.c (ssl_init_prng): Seed the RNG using EGD.
 421
 422 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
 423
 424         * cmpt.c (memmove): Include a simple memmove implementation.
 425
 426 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
 427
 428         * headers: Guard against header files being included twice.
 429
 430 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
 431
 432         * gen-md5.c: Use unsigned char * as the buffer argument to
 433         gen_md5_update.
 434
 435 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
 436
 437         * connect.h: Declare select_fd.
 438
 439 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
 440
 441         * recur.c (descend_url_p): When resolving no_parent, compare with
 442         start_url, not parent url.  Otherwise link from /a/b/ to /a/c/
 443         wouldn't be followed, although the download started from /a/.
 444
 445 2001-01-23  Herold Heiko  <Heiko.Herold@previnet.it>
 446
 447         * config.h.ms, mswindows.h: defined HAVE_ISATTY, use _isatty for
 448         MS VC; somebody with Borland compiler please check and provide
 449         patch if possible;
 450
 451         * cmpt.c: provided a usleep emulation.
 452
 453 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
 454
 455         * host.c (address_list_new): Initialize al->faulty.
 456
 457 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
 458
 459         * http.c (http_process_range): Accept the broken output of
 460         "JavaWebServer/1.1.1".
 461
 462 2001-11-28  Hrvoje Niksic  <hniksic@arsdigita.com>
 463
 464         * progress.c (dot_set_params): If PARAMS is unspecified, use
 465         dot_style, if available.
 466
 467         * init.c: Ditto.
 468
 469         * main.c (main): Resurect --dot-style.
 470
 471         * progress.c (dot_finish): Print the quantity if we're left at the
 472         beginning of a row.
 473
 474 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
 475
 476         * cmpt.c (random): Removed.
 477
 478         * retr.c (sleep_between_retrievals): Use the more portable rand()
 479         instead of random().
 480
 481 2001-11-27  Ian Abbott <abbotti@mev.co.uk>
 482
 483         * retr.c (retrieve_from_file): Initialize `new_file' to NULL to
 484         prevent seg fault.
 485
 486 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
 487
 488         * connect.c (connect_to_many): Use address_list_set_faulty to
 489         prevent the faulty address from being reused.
 490
 491         * host.c (address_list_set_faulty): New function.
 492         (address_list_get_bounds): New function, instead of
 493         address_list_count.
 494
 495 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
 496
 497         * url.c (convert_links): Don't translate %d-%d.
 498
 499         * main.c (print_help): Remove stray HAVE_RANDOM code.
 500
 501 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
 502
 503         * ftp.c (getftp): Improve output after sending PASV.  Don't
 504         attempt to "look up" the IP address we already know; call
 505         connect_to_one directly.
 506
 507 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
 508
 509         * progress.c: Change the default progress implementation to "bar".
 510
 511 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
 512
 513         * progress.c (bar_create): Print two newlines.
 514
 515 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
 516
 517         * cmpt.c (random): New function, a simple-minded replacement for
 518         random() on systems that don't have it.
 519
 520 2001-11-26  Hrvoje Niksic  <hniksic@arsdigita.com>
 521
 522         * config.h.in: Put a HAVE_USLEEP stub.
 523
 524         * cmpt.c (usleep): Replacement implementation of usleep using
 525         select.
 526
 527         * init.c: New option init_rate.
 528
 529         * main.c (main): New option --limit-rate.
 530
 531         * retr.c (limit_bandwidth): New function.
 532         (get_contents): Call it to limit the bandwidth used when
 533         downloading.
 534
 535         * progress.c (dot_update): Would print the wrong download speed on
 536         rows other than the first one when the download was continued.
 537         (dot_finish): Ditto.
 538
 539 2001-11-26  Ian Abbott <abbotti@mev.co.uk>
 540
 541         * http.c (gethttp): fix undeclared variable 'err' when compiled
 542         with HAVE_SSL.
 543
 544 2001-11-26  Hrvoje Niksic  <hniksic@arsdigita.com>
 545
 546         * progress.c: Don't allocate new timers; use the timing data
 547         propagated from the caller.
 548
 549         * retr.c (get_contents): Allocate and use a timer.
 550
 551 2001-11-26  Hrvoje Niksic  <hniksic@arsdigita.com>
 552
 553         * http.c (last_host_ip): Made into an address_list.
 554         (invalidate_persistent): Release pc_last_host_ip.
 555         (register_persistent): Use lookup_host.
 556         (persistent_available_p): Check for equality of hosts using
 557         address_list_match_all.  Call address_list_release.
 558         (http_cleanup): New function.
 559
 560         * ftp.c (getftp): Use lookup_host and connect_to_many.
 561
 562         * http.c (gethttp): Use lookup_host and connect_to_many.
 563
 564         * connect.c (make_connection): Removed.
 565         (connect_to_one): New function.
 566         (connect_to_many): Ditto.
 567         (set_connection_host_name): Ditto.
 568
 569         * host.c (lookup_host): New function; new return type.
 570         (address_list_new): New function.
 571         (address_list_count): Ditto.
 572         (address_list_copy_one): Ditto.
 573         (address_list_delete): Ditto.
 574         (address_list_release): Ditto.
 575         (pretty_print_address): Ditto.
 576
 577 2001-11-26  Hrvoje Niksic  <hniksic@arsdigita.com>
 578
 579         * recur.c (retrieve_tree): In case of followed redirection,
 580         blacklist the pre-redirection URL.
 581
 582 2001-11-26  Hrvoje Niksic  <hniksic@arsdigita.com>
 583
 584         * recur.c (descend_redirect_p): New function.
 585         (retrieve_tree): Make sure redirections are not blindly followed.
 586
 587 2001-11-04  Alan Eldridge  <alane@geeksrus.net>
 588
 589         * config.h.in: added HAVE_RANDOM.
 590
 591         * options.h: added random_wait to struct options.
 592
 593         * main.c (print_help [HAVE_RANDOM], main): added arg parsing, help
 594         for --random-wait.
 595
 596         * retr.c (sleep_between_retrievals) [HAVE_RANDOM]: added
 597         implementation of random wait times.
 598
 599         * init.c (commands): added "randomwait" keyword.
 600
 601 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
 602
 603         * recur.c (descend_url_p): Be more conservative with blacklisting
 604         URLs.
 605         (convert_all_links): Print how many files have been converted, and
 606         how long it took.
 607
 608         * progress.c (create_image): Place the number of downloaded bytes
 609         right after the progress bar.
 610
 611         * utils.c (suffix): Return a pointer into the string.
 612
 613 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
 614
 615         * url.c (convert_links): Handle CO_NULLIFY_BASE.
 616
 617         * recur.c (retrieve_tree): Ignore download-ignorable children.
 618         (convert_all_links): Specify CO_NULLIFY_BASE when link_base_p.
 619
 620         * html-url.c (handle_link): Return the newly created urlpos.
 621         (collect_tags_mapper): When dealing with BASE, store the base
 622         reference and mark it as download-ignorable.
 623
 624 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
 625
 626         * url.c (convert_links): Attempt to quote '?' as "%3F" when
 627         linking to local files.  Given up on the attempt, as it breaks
 628         local browsing.
 629
 630 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
 631
 632         * main.c (private_initialize): Removed.
 633         (main): Don't call private_initialize.
 634
 635         * http.c: Call lookup_host.
 636
 637         * host.c (host_init): Removed.
 638         (add_host_to_cache): Initialize host_name_address_map here, on
 639         demand.
 640         (ngethostbyname): Commented out.
 641
 642         * connect.c (make_connection): Remove dead code; use lookup_host.
 643
 644         * host.c (store_hostaddress): Renamed to lookup_host and reversed
 645         the args.
 646         Removed host_address_name_map and host_slave_master_map.
 647
 648 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
 649
 650         * progress.c (dot_create): Align the "[ skipping ... ]" string
 651         with the dots.
 652
 653         * retr.c (rate): Split into two functions: calc_rate and
 654         retr_rate.
 655
 656         * progress.c (create_image): Draw a dummy progress bar even when
 657         total size is unknown.
 658         (display_image): Place the text cursor at the end of the "image".
 659
 660 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
 661
 662         * url.c (reencode_string): Use unsigned char, not char --
 663         otherwise the hex digits come out wrong for 8-bit chars such as
 664         nbsp.
 665         (lowercase_str): New function.
 666         (url_parse): Canonicalize u->url if needed.
 667         (get_urls_file): Parse each URL, and return only the valid ones.
 668         (free_urlpos): Call url_free.
 669         (mkstruct): Add :port if the port is non-standard.
 670         (mkstruct): Append the query string to the file name, if any.
 671         (urlpath_length): Use strpbrk_or_eos.
 672         (uri_merge_1): Handle the cases where LINK is an empty string,
 673         where LINK consists only of query, and where LINK consists only of
 674         fragment.
 675         (convert_links): Count and report both kinds of conversion.
 676         (downloaded_file): Use a hash table, not a list.
 677         (downloaded_files_free): Free the hash table.
 678
 679         * retr.c (retrieve_from_file): Ditto.
 680
 681         * main.c (main): Call either retrieve_url or retrieve_tree
 682         for each URL, not both.
 683
 684         * retr.c (register_all_redirections): New function.
 685         (register_redirections_mapper): Ditto.
 686         (retrieve_url): Register the redirections.
 687         (retrieve_url): Make the string "Error parsing proxy ..."
 688         translatable.
 689
 690         * res.c (add_path): Strip leading slash from robots.txt paths so
 691         that the path representations are "compatible".
 692         (free_specs): Free each individual path, too.
 693         (res_cleanup): New function.
 694         (cleanup_hash_table_mapper): Ditto.
 695
 696         * recur.c (url_queue_new): New function.
 697         (url_queue_delete): Ditto.
 698         (url_enqueue): Ditto.
 699         (url_dequeue): Ditto.
 700         (retrieve_tree): New function, replacement for recursive_retrieve.
 701         (descend_url_p): New function.
 702         (register_redirection): New function.
 703
 704         * progress.c (create_image): Cosmetic changes.
 705
 706         * init.c (cleanup): Do all those complex cleanups only if
 707         DEBUG_MALLOC is defined.
 708
 709         * main.c: Removed --simple-check and the corresponding
 710         simple_host_check in init.c.
 711
 712         * html-url.c (handle_link): Parse the URL here, and propagate the
 713         parsed URL to the caller, who would otherwise have to parse it
 714         again.
 715
 716         * host.c (xstrdup_lower): Moved to utils.c.
 717         (realhost): Removed.
 718         (same_host): Ditto.
 719
 720 2001-11-24  Hrvoje Niksic  <hniksic@arsdigita.com>
 721
 722         * utils.c (path_simplify): Preserver the (non-)existence of
 723         leading slash.  Return non-zero if changes were made.
 724
 725 2001-11-24  Hrvoje Niksic  <hniksic@arsdigita.com>
 726
 727         * progress.c (bar_update): Don't modify bp->total_length if it is
 728         zero.
 729
 730 2001-11-24  Hrvoje Niksic  <hniksic@arsdigita.com>
 731
 732         * retr.c (retrieve_url): When the redirection URL doesn't parse,
 733         print the correct error message rather than "UNKNOWN".
 734
 735 2001-11-24  Hrvoje Niksic  <hniksic@arsdigita.com>
 736
 737         * progress.c (bar_finish): If the timer didn't record any time
 738         since the download beginning, fake 1ms.
 739
 740 2001-11-24  Hrvoje Niksic  <hniksic@arsdigita.com>
 741
 742         * recur.c (recursive_retrieve): Fix typo.
 743
 744 2001-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
 745
 746         * progress.c (create_image): Don't translate "%ld ".
 747
 748 2001-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
 749
 750         * progress.c (bar_set_params): Allow the user to force the use of
 751         the bar.
 752
 753 2001-11-23  Lemble Gregory  <gregory.lemble@st.com>
 754
 755         * gen_sslfunc.c (ssl_init_prng): New function; seed the SSL RNG.
 756
 757 2001-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
 758
 759         * progress.c: Renamed dp_* functions to dot_* for greater clarity
 760         and consistency with bar_*.
 761         (print_download_speed): Get rid of the unneeded '@' character.
 762         (create_image): Fix download rate geometry.
 763
 764         * progress.c (print_elapsed): Remove spurious space.
 765         (print_elapsed): Renamed to print_download_speed, since that's
 766         what it does.
 767
 768 2001-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
 769
 770         * progress.c (bar_update): If the downloaded amount becomes larger
 771         than the expected amount, adjust the expected amount accordingly.
 772
 773 2001-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
 774
 775         * utils.c (determine_screen_width): New function.
 776
 777         * main.c (main): New option `--progress=TYPE'.
 778         (main): Implement compatibility with the old option `--dot-style'.
 779
 780         * init.c: Removed cmd_spec_dotstyle -- that logic is now in
 781         dp_set_params.
 782         (cmd_spec_progress): New function.
 783
 784         * retr.c (get_contents): Use the progress_* functions instead of
 785         the old show_progress().
 786         (show_progress): Removed.
 787         (rate): Print "xxxx.xx K/s" instead of "KB/s".  Ditto for MB/s,
 788         etc.
 789
 790         * progress.c (set_progress_implementation): New function.
 791         (valid_progress_implementation_p): Ditto.
 792         (progress_create): Ditto.
 793         (progress_update): Ditto.
 794         (progress_finish): Ditto.
 795         (dp_create): Ditto.
 796         (dp_update): Ditto.
 797         (dp_finish): Ditto.
 798         (dp_set_params): Ditto.
 799         (print_elapsed): Ditto.
 800
 801 2001-11-22  Hrvoje Niksic  <hniksic@arsdigita.com>
 802
 803         * retr.c (show_progress): Use it.
 804
 805         * log.c (log_set_flush): New function.
 806
 807 2001-11-22  Hrvoje Niksic  <hniksic@arsdigita.com>
 808
 809         * utils.c (path_simplify): Don't remove trailing slashes.
 810
 811         * ftp.c (ftp_get_listing): Use it.
 812
 813         * utils.c (file_merge): New function.
 814
 815         * url.c (opt_url): Removed.
 816
 817         * recur.c (recursive_retrieve): Inline "opt_url" logic.
 818
 819         * main.c (main): Use xfree(), not free().
 820
 821         * url.c (rewrite_url_maybe): Renamed to rewrite_shorthand_url.
 822
 823         * ftp.c (ccon): Move `ccon' typedef here, since it's only used
 824         internally.
 825
 826         * config.h.in: Include a stub for HAVE_STRPBRK.
 827
 828         * cmpt.c (strpbrk): Include a replacement for systems without
 829         strpbrk().
 830
 831         * ftp.c: Use url_set_dir and url_set_file when modifying the URL.
 832
 833         * url.c (url_set_dir): New function.
 834         (url_set_file): Ditto.
 835
 836         * ftp-basic.c (ftp_process_type): Process FTP type here; the URL
 837         parser makes the URL "params" available, so we can do that in this
 838         function.
 839
 840         * retr.c: Ditto.
 841
 842         * ftp.c: Ditto; pass the local file information in `ccon'.
 843
 844         * http.c: Get rid of the ugly kludge that had URL being replaced
 845         with the proxy URL when proxy retrieval was requested.  Use a
 846         separate parameter to http_loop and gethttp for the proxy URL.
 847
 848         * http.c: Changed to reflect the fact that local file, proxy, and
 849         referer information are no longer stored in struct url.  The local
 850         file information is passed in `struct hstat' now.
 851
 852         * url.c: Reworked URL parsing to be more regular.  Reencode the
 853         URL using reencode_string.
 854         Removed non-URL-related information from struct url.  This
 855         includes fields `proxy', `local', and `referer'.
 856
 857 2001-11-22  Jochen Hein  <jochen@jochen.org>
 858
 859         * main.c (main): Split the copyright notice for easier
 860         translation.
 861
 862 2001-08-21  Dave Turner <dct25@hermes.cam.ac.uk>
 863
 864         * ftp-basic.c (ftp_size): New function to send non-standard SIZE
 865           command to server to request file size.
 866         * ftp.h (ftp_size): Export it.
 867         * ftp.c (getftp): Use new ftp_size function if restoring
 868           transfer of a file with unknown size.
 869
 870 2001-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
 871
 872         * url.c (parseurl): Don't depend on the now-obsolete TYPE.
 873
 874 2001-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
 875
 876         * url.c (getproxy): Handle URL shorthands.
 877
 878 2001-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
 879
 880         * main.c: Remove --wait / --waitretry backwards compatibility
 881         code.
 882
 883 2001-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
 884
 885         * main.c (main): Use it.
 886
 887         * url.c (rewrite_url_maybe): New function.
 888
 889 2001-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
 890
 891         * url.c: Clean up handling of URL schemes.
 892
 893 2001-05-13  Hrvoje Niksic  <hniksic@arsdigita.com>
 894
 895         * url.c: Get rid of `protostrings'.
 896         (skip_proto): Don't use protostrings.
 897         (has_proto): Ditto.
 898
 899 2001-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
 900
 901         * Makefile.in: Conditionally compile getopt.o.
 902
 903 2001-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
 904
 905         * md5.h: Renamed to gnu-md5.h.
 906
 907         * md5.c: Renamed to gnu-md5.c.
 908
 909         * http.c: Ditto.
 910
 911         * ftp-opie.c: Use the new macros.
 912
 913         * sysdep.h: Define md5-related macros.
 914
 915         * config.h.in: Define HAVE_SOLARIS_MD5 or HAVE_BUILTIN_MD5
 916         depending on which md5 implementation is used.
 917
 918 2001-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
 919
 920         * res.c (res_register_specs): Initialize OLD and HP_OLD to appease
 921         the compiler.
 922
 923 2001-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
 924
 925         * http.c (gethttp): Print the whole response line when printing
 926         headers is requested.
 927
 928 2001-05-12  Hrvoje Niksic  <hniksic@arsdigita.com>
 929
 930         * res.c: New file.  Implement all RES-related code here.
 931
 932 2001-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
 933
 934         * version.c: Wget 1.7.1 is released.
 935
 936 2001-11-16  Hrvoje Niksic  <hniksic@arsdigita.com>
 937
 938         * headers.c (header_extract_number): Ignore trailing whitespace.
 939
 940 2001-08-24  Ian Abbott  <abbotti@mev.co.uk>
 941
 942         * html-url.c (collect_tags_mapper): Fix bug converting links
 943         with -k option for tags with multiple link attributes by
 944         handling links in the order they appear.
 945
 946 2001-08-15  Ian Abbott  <abbotti@mev.co.uk>
 947
 948         * ftp.c (ftp_loop_internal): Avoid a potential buffer overflow in
 949           the call to the 'rate' function by moving it past the error
 950           checking for the 'getftp' function return value.
 951
 952 2001-11-16  Hrvoje Niksic  <hniksic@arsdigita.com>
 953
 954         * html-parse.c (advance_declaration): Use 0x22 instead of '"' or
 955         '\"'.  Different compilers' assert macros are broken in different
 956         ways.
 957
 958 2001-09-29  Christian Fraenkel  <c.fraenkel@gmx.net>
 959
 960         * http.c (gethttp): print debug output for errors occuring during
 961         the ssl handshake.
 962
 963 2001-11-16  Chris Seawood  <cls@seawood.org>
 964
 965         * init.c: Ditto.
 966
 967         * host.c: Ditto.
 968
 969         * connect.c: Ditto.
 970
 971         * sysdep.h: Support compilation under BEOS.
 972
 973 2001-06-08  Edward J. Sabol  <sabol@alderaan.gsfc.nasa.gov>
 974
 975         * url.c (url_equal): Fix a memory leak when parseurl returns an
 976         error on the second URL. Also, since url_equal is not used at the
 977         moment, do not compile it.
 978
 979         * url.h: Ditto for the prototype of url_equal.
 980
 981 2001-11-16  Hrvoje Niksic  <hniksic@arsdigita.com>
 982
 983         * html-parse.c (map_html_tags): Support XML-style empty tags.
 984
 985 2001-06-26  Hrvoje Niksic  <hniksic@arsdigita.com>
 986
 987         * wget.h (DO_REALLOC_FROM_ALLOCA): Check for do_realloc_newsize in
 988         loop condition because we're no longer setting SIZEVAR here.
 989
 990 2001-06-26  Hrvoje Niksic  <hniksic@arsdigita.com>
 991
 992         * wget.h (DO_REALLOC_FROM_ALLOCA): Set SIZEVAR after the memcpy()
 993         call because it needs the old value.
 994
 995 2001-06-18  Hrvoje Niksic  <hniksic@arsdigita.com>
 996
 997         * cookies.c (ATTR_NAME_CHAR): Allow almost any character to be in
 998         an attribute name.
 999
1000 2001-06-18  Hrvoje Niksic  <hniksic@arsdigita.com>
1001
1002         * url.c (url_filename): Make sure that slashes that sneak in to
1003         u->file via query string get protected.
1004         (file_name_protect_query_string): New function.
1005
1006 2001-06-14  Hrvoje Niksic  <hniksic@arsdigita.com>
1007
1008         * recur.c (recursive_retrieve): Also check undesirable_urls with
1009         canonicalized URL.
1010
1011 2001-06-14  Hrvoje Niksic  <hniksic@arsdigita.com>
1012
1013         * http.c (gethttp): Search `.netrc' with real host, not the proxy
1014         one.
1015
1016 2001-06-14  Hrvoje Niksic  <hniksic@arsdigita.com>
1017
1018         * sysdep.h (MAP_FAILED): Provide MAP_FAILED for systems that don't
1019         define it.
1020
1021 2001-06-09  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
1022
1023         * ftp.h: Provide correct prototype for ftp_parse_ls().
1024
1025 2001-06-04  Hrvoje Niksic  <hniksic@arsdigita.com>
1026
1027         * version.c: Wget 1.7 is released.
1028
1029 2001-06-03  Karl Eichwalder  <ke@suse.de>
1030
1031         * ftp-ls.c (ftp_parse_ls): Fix typo.
1032
1033 2001-05-27  Hrvoje Niksic  <hniksic@arsdigita.com>
1034
1035         * all: Update copyright information.
1036
1037 2001-05-26  Hrvoje Niksic  <hniksic@arsdigita.com>
1038
1039         * http.c (gethttp): Indicate that the continued download failed
1040         for *this* file.
1041
1042 2001-05-26  Hrvoje Niksic  <hniksic@arsdigita.com>
1043
1044         * version.c: Wget 1.7-pre1 is released.
1045
1046 2001-05-26  Hrvoje Niksic  <hniksic@arsdigita.com>
1047
1048         * version.c: Updated version to 1.7-pre1.
1049
1050 2001-05-14  Hrvoje Niksic  <hniksic@arsdigita.com>
1051
1052         * gen_sslfunc.c: Don't include <sys/time.h> directly.
1053
1054 2001-05-14  Hrvoje Niksic  <hniksic@arsdigita.com>
1055
1056         * http.c (gethttp): Use real URL data for cookies, not the proxy
1057         stuff.
1058
1059 2001-05-12  Hrvoje Niksic  <hniksic@arsdigita.com>
1060
1061         * main.c (print_help): Document `--no-http-keep-alive'.
1062
1063         * utils.c (numdigit): Handle negative numbers *correctly*.
1064
1065         * hash.c (make_nocase_string_hash_table): Use term "nocase" rather
1066         than the confusing "unsigned".
1067
1068         * utils.c (string_set_contains): Renamed from string_set_exists.
1069
1070         * hash.c (hash_table_contains): Renamed from hash_table_exists.
1071
1072         * cookies.c: Move case-insensitive hash tables to hash.c.
1073
1074 2001-05-09  Hrvoje Niksic  <hniksic@arsdigita.com>
1075
1076         * http.c (gethttp): Before concluding that the file is already
1077         fully retrieved, make sure that the file existed and `Range' was
1078         actually requested.
1079
1080 2001-05-09  Hrvoje Niksic  <hniksic@arsdigita.com>
1081
1082         * cookies.c (eliminate_dups): New function.
1083         (build_cookies_request): Use it.
1084         (build_cookies_request): Set chain_store_size after reallocating
1085         all_chains.
1086         (check_domain_match): Annotated for easier future debugging.
1087         (store_cookie): In the debug message, print whether the cookie is
1088         permanent.
1089
1090 2001-05-08  Hrvoje Niksic  <hniksic@arsdigita.com>
1091
1092         * http.c (http_loop): Reset no_truncate before deciding whether to
1093         set it.
1094         (gethttp): Further clarify "-c conflicts with existing file" error
1095         message, based on input from Herold Heiko.
1096
1097 2001-05-07  Hrvoje Niksic  <hniksic@arsdigita.com>
1098
1099         * http.c (http_loop): If restval is set, set no_truncate to 1
1100         unconditionally.
1101
1102 2001-05-02  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
1103
1104         * ftp-ls.c (ftp_parse_winnt_ls): Assure months are being correctly
1105         converted. Pointed out by <Stefan.Weil@de.heidelberg.com>.
1106         (ftp_parse_vms_ls): Ditto.
1107
1108 2001-04-30  Hrvoje Niksic  <hniksic@arsdigita.com>
1109
1110         * init.c (cmd_address): Zero SIN before using it; apparently
1111         needed on *BSD.
1112
1113 2001-04-29  Hrvoje Niksic  <hniksic@arsdigita.com>
1114
1115         * ftp.c (ftp_loop_internal): Don't set NO_TRUNCATE if the file is
1116         empty.
1117
1118 2001-04-29  Hrvoje Niksic  <hniksic@arsdigita.com>
1119
1120         * main.c (main): Make `--cookies' respect its argument.
1121
1122 2001-04-28  Hrvoje Niksic  <hniksic@arsdigita.com>
1123
1124         * main.c (main): Removed undocumented option `--email-address'.
1125
1126         * netrc.c: Use the latest read_whole_line.
1127
1128         * init.c (defaults): Set opt.ftp_pass to "-wget@".
1129
1130         * mswindows.c (pwd_cuserid): Ditto.
1131
1132         * utils.c (pwd_cuserid): Removed.
1133
1134         * host.c (ftp_getaddress): Removed.
1135
1136 2001-04-28  Hrvoje Niksic  <hniksic@arsdigita.com>
1137
1138         (http_loop): Allocate space for filename_plus_orig_suffix with
1139         alloca; this is more efficient and removes the need to free it
1140         before each and every return.
1141
1142 2001-04-28  Hrvoje Niksic  <hniksic@arsdigita.com>
1143
1144         * http.c (gethttp): Return RETRUNNEEDED when the retrieval is
1145         unneeded because the file is already there and fully downloaded,
1146         and -c is specified.
1147         (http_loop): Handle RETRUNNEEDED.
1148
1149         * wget.h (uerr_t): New value RETRUNNEEDED.
1150
1151         * http.c (http_loop): Set no_truncate for files that both exist
1152         and are non-empty.
1153         (gethttp): Consider the download finished when restval >= contlen,
1154         not only when restval==contlen.
1155         (gethttp): Handle redirection before giving up due to -c.
1156         (gethttp): Clarify error message which explains that -c will not
1157         truncate the file.
1158         (gethttp): When returning CONTNOTSUPPORTED, don't forget to free
1159         the stuff that needs freeing and release the socket.
1160
1161 2001-04-27  Hrvoje Niksic  <hniksic@arsdigita.com>
1162
1163         * main.c (print_help): Wget booleans accept "off", not "no".
1164
1165 2001-04-27  Hrvoje Niksic  <hniksic@arsdigita.com>
1166
1167         * http.c (http_loop): If allow_cache is zero, always disable
1168         caching, not only when retrieving through proxy.
1169
1170         * init.c: Ditto.
1171
1172         * options.h (struct options): Rename proxy_cache to allow_cache.
1173
1174 2001-04-27  Hrvoje Niksic  <hniksic@arsdigita.com>
1175
1176         * http.c (mktime_from_utc): Improve documentation.
1177         (http_atotm): Put format strings into a separate array.
1178
1179 2001-04-27  Hrvoje Niksic  <hniksic@arsdigita.com>
1180
1181         * safe-ctype.h: Instead of throwing #error when isalpha is
1182         defined, redefine it to something that will throw a compile-time
1183         error if actually *used*.  Do the same for the rest of the
1184         standard C macros.
1185
1186 2001-04-26  Hrvoje Niksic  <hniksic@arsdigita.com>
1187
1188         * url.c (getproxy): Ignore empty proxy vars.
1189
1190 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
1191
1192         * http.c (http_loop): Would load cookies every time.
1193
1194         * cookies.c (load_cookies): Handle cookies whose values contain
1195         embedded spaces.
1196
1197 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
1198
1199         * utils.c: Define each DIGITS_* in one line.
1200
1201 2001-04-25  Roger L. Beeman  <beeman@cisco.com>
1202
1203         * http.c (http_atotm): Initialize t.tm_isdst to 0.
1204         (mktime_from_utc): Prevent mktime() from having discontinuities at
1205         DST transition points.
1206
1207 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
1208
1209         * html-url.c (get_urls_html): Fix documentation.
1210
1211 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
1212
1213         * url.c (UNSAFE_CHAR): Reimplement using a static table.
1214         (url_init): Removed.
1215         (init_unsafe_char_table): Removed.
1216
1217 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
1218
1219         * snprintf.c (dopr): Replace ISDIGIT with '0' <= ch && ch <= '9'.
1220
1221 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
1222
1223         * utils.c: Document timer functions.
1224
1225         * retr.c (rate): Use it.
1226         (rate): Print in GB/s if transfer rate exceeds 1 GB/s.
1227
1228         * utils.c (wtimer_granularity): New function.
1229
1230 2001-04-24  Hrvoje Niksic  <hniksic@arsdigita.com>
1231
1232         * retr.c (show_progress): Ditto.
1233
1234         * ftp.c (getftp): Ditto.
1235
1236         * http.c (gethttp): Use new timer functions.
1237
1238         * utils.c (wtimer_allocate): New function.
1239         (wtimer_new): Ditto.
1240         (wtimer_delete): Ditto.
1241         (wtimer_reset): Ditto.
1242         (wtimer_elapsed): Ditto.
1243
1244 2001-04-24  Hrvoje Niksic  <hniksic@arsdigita.com>
1245
1246         * utils.c (long_to_string): New, faster version.  Favors smaller
1247         numbers; much of the calculation is now done at compile-time.
1248
1249 2001-04-24  Hrvoje Niksic  <hniksic@arsdigita.com>
1250
1251         * utils.c (numdigit): Handle negative numbers.
1252
1253 2001-04-23  Hrvoje Niksic  <hniksic@arsdigita.com>
1254
1255         * retr.c (show_progress): Print the download rate even when the
1256         percentages are not available.
1257
1258 2001-04-21  Hrvoje Niksic  <hniksic@arsdigita.com>
1259
1260         * ftp.c (getftp): Adjust expected_bytes if the length is
1261         authoritative.
1262
1263 2001-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
1264
1265         * url.c: Don't declare `construct'.
1266
1267         * hash.c (grow_hash_table): Speed up rehashing; inline storing of
1268         mappings to new locations.
1269         (hash_table_new): Make resize_threshold a field in the hash table,
1270         so we don't have to recalculate it in each hash_table_put.
1271         (grow_hash_table): Update resize_threshold.
1272         (MAX): Remove unused macro.
1273         (prime_size): Made static.
1274
1275 2001-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
1276
1277         * retr.c (retrieve_url): Call uri_merge, not url_concat.
1278
1279         * html-url.c (collect_tags_mapper): Call uri_merge, not
1280         url_concat.
1281
1282         * url.c (mkstruct): Use encode_string instead of xstrdup followed
1283         by URL_CLEANSE.
1284         (path_simplify_with_kludge): Deleted.
1285         (contains_unsafe): Deleted.
1286         (construct): Renamed to uri_merge_1.
1287         (url_concat): Renamed to uri_merge.
1288
1289 2001-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
1290
1291         * url.c (str_url): Use encode_string instead of the unnecessary
1292         CLEANDUP.
1293         (encode_string_maybe): New function, returns input string if no
1294         encoding is needed.
1295         (encode_string): Call encode_string_maybe to do the dirty work,
1296         xstrdup if no work needed.
1297
1298 2001-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
1299
1300         * wget.h (XDIGIT_TO_xchar): Define here.
1301
1302         * url.c (decode_string): Use new name.
1303         (encode_string): Ditto.
1304
1305         * http.c (XDIGIT_TO_xchar): Rename HEXD2asc to XDIGIT_TO_xchar.
1306         (dump_hash): Use new name.
1307
1308         * wget.h: Rename ASC2HEXD and HEXD2ASC to XCHAR_TO_XDIGIT and
1309         XDIGIT_TO_XCHAR respectively.
1310
1311 2001-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
1312
1313         * init.c: Include cookies.h.
1314
1315         * cookies.h: Declare cookies_cleanup.
1316
1317         * cookies.c (check_domain_match): Remove unused variable.
1318         (save_cookies): Remove extraneous argument from debug statement.
1319
1320         * host.c (same_host): Don't call skip_url.
1321
1322         * url.c (skip_url): Removed.  Removed its calls from various
1323         functions in url.c.
1324
1325 2001-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
1326
1327         * cookies.c (unsigned_string_hash): Use the new code in
1328         string_hash as reference.
1329
1330         * hash.c (hash_table_map): Allow deletion and change of the
1331         element processed by MAPFUN.
1332         (string_hash): Use the function from glib.
1333
1334 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
1335
1336         * config.h.in: Include #undef stub.
1337
1338         * hash.c (hash_table_remove): Rewrite to actually clear deleted
1339         entries instead of just marking them as deleted.
1340
1341 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
1342
1343         * hash.h: Declare hash_table_get_pair and hash_table_count.
1344
1345 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
1346
1347         * cookies.c: Declare http_atotm.
1348
1349 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
1350
1351         * ftp-ls.c (ftp_parse_unix_ls): Use octal constants for
1352         permissions.  A compiler that doesn't accept octal constants is
1353         seriously broken and shouldn't be used -- octal constants were
1354         present in K&R C!
1355
1356 2001-01-20  Karl Eichwalder  <ke@suse.de>
1357
1358         * Makefile.in: Provide and use DESTDIR according to the Coding
1359         Standards.
1360
1361 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
1362
1363         * ftp-ls.c (ftp_parse_vms_ls): Make seconds optional in time
1364         specification.
1365
1366 2001-04-11  Hrvoje Niksic  <hniksic@arsdigita.com>
1367
1368         * url.c (parseurl): Don't strip trailing slash when u->dir is "/"
1369         because that strips the *leading* slash, thus forcing relative
1370         FTP retrieval.
1371
1372 2001-04-10  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
1373
1374         * ftp.c (getftp): Convert initial FTP directory from VMS to UNIX
1375         notation for VMS servers.
1376         (ftp_retrieve_dirs): Do not prepend '/' to f->name when
1377         odir is an empty string.
1378
1379 2001-04-10  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
1380
1381         * ftp-ls.c (ftp_parse_winnt_ls): Made the fix for AM/PM more
1382         effective. Suggested by Edward J. Sabol.
1383
1384 2001-04-10  Hrvoje Niksic  <hniksic@arsdigita.com>
1385
1386         * cookies.c (build_cookies_request): Use and sort cookies from all
1387         matching domains.
1388         (build_cookies_request): Check for duplicates before generating
1389         the `Cookies' header.
1390
1391         * main.c (main): Don't load cookies here.
1392         (main): Make loadcookies and savecookies call the correct command.
1393
1394         * http.c (http_loop): Load cookies on-demand.
1395
1396 2001-04-09  Hrvoje Niksic  <hniksic@arsdigita.com>
1397
1398         * http.c (gethttp): Fix indentation of SSL ifdef.
1399
1400 2001-04-09  Hrvoje Niksic  <hniksic@arsdigita.com>
1401
1402         * ftp.c (ftp_retrieve_dirs): Don't forcibly prepend "/" to u->dir;
1403         that hack is no longer necessary.
1404         (getftp): Prepend initial directory to *non*-absolute u->dir's.
1405
1406 2001-04-09  Hrvoje Niksic  <hniksic@arsdigita.com>
1407
1408         * init.c (cmd_file): New function.
1409         (enable_tilde_expansion): New variable.
1410         (run_wgetrc): Use it.
1411         (cmd_file): Use it.
1412
1413 2001-04-08  Hrvoje Niksic  <hniksic@arsdigita.com>
1414
1415         * init.c: Include cookie-related options.
1416
1417         * main.c (main): Include cookie-specific options.
1418         (main): Load cookies before download is finished.
1419         (main): Save cookies when done.
1420
1421         * http.c (gethttp): Process the `Set-Cookie' header.
1422         (gethttp): Include cookies in the response.
1423
1424         * cookies.c: New file.
1425
1426 2001-04-08  Hrvoje Niksic  <hniksic@arsdigita.com>
1427
1428         * utils.c (datetime_str): New function.
1429
1430 2001-04-08  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
1431
1432         * ftp-ls.c (ftp_parse_winnt_ls): The AM/PM change did assume
1433         12:01PM == 00:01, which was obviously wrong. Taken care of this
1434         anomaly.
1435
1436         * ChangeLog: Removed an excess conflict marker. Reformatted the
1437         entry by Philipp Thomas from 2001-03-09.
1438
1439         * ftp-ls.c (ftp_parse_winnt_ls): Ensure that adjusted PM hours lay
1440         between 0 and 23. Elminate unused variable `sec'.
1441
1442 2001-04-08  Hrvoje Niksic  <hniksic@arsdigita.com>
1443
1444         * hash.c (hash_table_count): New function.
1445
1446 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
1447
1448         * utils.c (read_file): Cast MAP_FAILED to char *.  Enforced by
1449         Digital Unix cc.
1450
1451 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
1452
1453         * config.h.in: Oops, do the namespace tweaks only on systems we
1454         know about.
1455
1456 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
1457
1458         * hash.c: Include <string.h>.
1459
1460 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
1461
1462         * config.h.in: Define "compilation environment" options that work
1463         under Linux and Solaris.  To be reviewed on other OS'es.
1464
1465 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
1466
1467         * http.c (gethttp): Prepend literal newline with `\n\'.
1468
1469 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
1470
1471         * sysdep.h: Don't define VERY_LONG_FORMAT.
1472
1473         * utils.c (very_long_to_string): New function.
1474         (legible_very_long): Use it; don't use VERY_LONG_FORMAT.
1475
1476 2001-04-04  Christian Fraenkel  <christian.fraenkel@gmx.net>
1477
1478         * url.c (parse_uname): Would run past the end of the string if the
1479         username was present, but the URL did not contain a slash, e.g.
1480         http://foo:bar@myhost.
1481
1482 2001-04-03  KOJIMA Hajime  <kjm@rins.ryukoku.ac.jp>
1483
1484         * http.c (http_atotm): Use %A instead of %a to match full
1485         weekday.  (On most systems there is no difference.)
1486
1487 2001-04-03  Paul Bludov  <paul@ozero.net>
1488
1489         * mswindows.c (sleep): Use SleepEx() instead of Sleep().
1490         (ws_changetitle): Use alloca() instead of malloc() to avoid memory
1491         leak.
1492         (ws_mypath): Use GetModuleFileName instead of argv[0].
1493         (ws_startup): Use data.wVersion for comparison.
1494
1495 2001-04-02  Hrvoje Niksic  <hniksic@arsdigita.com>
1496
1497         * http.c (http_loop): Ditto.
1498
1499         * ftp.c (ftp_loop_internal): Made the check whether to continue
1500         retrieval `-O'-friendly.
1501
1502 2001-04-02  Hrvoje Niksic  <hniksic@arsdigita.com>
1503
1504         * netrc.c (parse_netrc): Don't trim the line endings explicitly;
1505         they will be handled as whitespace.
1506         (parse_netrc): Correctly handle lines that end with whitespace.
1507
1508 2001-04-02  Hrvoje Niksic  <hniksic@arsdigita.com>
1509
1510         * retr.c (retrieve_url): New variable global_download_count used
1511         to identify first retrieval.
1512
1513         * ftp.c (getftp): Ditto.
1514
1515         * http.c (gethttp): Rewind opt.dfp only on first retrieval.
1516
1517 2001-04-02  Hrvoje Niksic  <hniksic@arsdigita.com>
1518
1519         * init.c (cmd_address): Heap-allocate the address that gets stored
1520         to CLOSURE.  Old code would simply assign an address on the stack.
1521
1522 2001-04-01  Nicolas Lichtmaier <nick@debian.org>
1523
1524         * ftp.c (ftp_get_listing): Propagate error status.
1525         (ftp_retrieve_glob): Use it.
1526         (ftp_loop): Ditto.
1527
1528 2001-04-01  Nicolas Lichtmaier <nick@debian.org>
1529
1530         * main.c (main): Add -C to the string that is the third arg to
1531         getopt_long().
1532
1533 2001-04-01  Hrvoje Niksic  <hniksic@arsdigita.com>
1534
1535         * ftp.c (getftp): Don't start the download from scratch if `-c'
1536         was specified, but the file is already fully downloaded.
1537
1538         * http.c (gethttp): Don't truncate a pre-existing file if `-c' was
1539         specified and the server doesn't support continued download.
1540         (gethttp): Don't start the download from scratch if `-c' was
1541         specified, but the file is already fully downloaded.
1542
1543 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
1544
1545         (recursive_retrieve): Don't clear the hash tables at this point at
1546         all; it interferes with the normal operation of register_download.
1547
1548 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
1549
1550         * recur.c (recursive_retrieve): Clear the hash tables only when
1551         they are defined.
1552
1553 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
1554
1555         * http.c (gethttp): Make sure the socket is closed with
1556         CLOSE_INVALIDATE before we have drained the body.
1557
1558 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
1559
1560         * retr.c (retrieve_url): Call register_download() for downloaded
1561         files and register_html() for downloaded HTML files.
1562
1563         * recur.c (register_download): New function; register here that a
1564         file has been downloaded, rather than in recursive_retrieve().
1565         (register_html): New function; enqueue the location of HTML files
1566         here rather than in recursive_retrieve().
1567
1568 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
1569
1570         * main.c (print_help): Use multiple fputs instead of a single ugly
1571         printf().
1572         (main): Consistently assign numbers >128 to options without a
1573         corresponding character.
1574
1575 2001-03-09  Philipp Thomas  <pthomas@suse.de>
1576
1577         * safe-ctype.h: New file. Locale independent ctype.h replacement
1578         taken from libiberty.
1579
1580         * safe-ctype.c: New file. Tables for above.
1581
1582         * Makefile.in: Add safe-ctype$o to OBJS.  Add dependencies for
1583         safe-ctype$o.
1584
1585         * cmpt.c: Remove include of ctype.h. Use ISSPACE instead of
1586         isspace.
1587
1588         * ftp-basic.c: Don't include ctype.h.
1589
1590         * ftp-ls.c: Likewise.
1591
1592         * ftp.c: Likewise.
1593
1594         * headers.c: Likewise.
1595
1596         * host.c: Likewise.
1597
1598         * html-parse.c: Likewise.
1599
1600         * html-url.c: Likewise.
1601
1602         * http.c: Likewise.
1603
1604         * init.c: Likewise.
1605
1606         * main.c: Likewise. Set LC_CTYPE along with LC_MESSAGES.
1607
1608         * netrc.c: Likewise.
1609
1610         * recur.c: Likewise.
1611
1612         * retr.c: Likewise.
1613
1614         * snprintf.c: Replace ctype.h with safe-ctype.h. Use ISDIGIT
1615         instead of isdigit.
1616
1617         * sysdep.h: Remove defines of ctype macros as they aren't needed
1618         for safe-ctype-h.
1619
1620         * url.c: Don't include ctype.h.
1621
1622         * utils.c: Likewise.
1623
1624         * wget.h: Include safe-ctype.h.
1625
1626 2001-03-27  Dan Harkless  <wget@harkless.org>
1627
1628         * Makefile.in: Moved top_builddir out of "User configuration
1629         section" of top Makefile and analogous spot in this one.
1630
1631 2001-03-17  Dan Harkless  <wget@harkless.org>
1632
1633         * Makefile.in: Include @SSL_INCLUDES@ substition in INCLUDES.
1634         Define top_builddir.  Link wget with libtool so the user doesn't
1635         have to supply a bunch of custom environment variables to
1636         correctly link with the OpenSSL shared libraries.
1637
1638 2001-03-06  Hack Kampbjorn  <hack@hackdata.com>
1639
1640         * http.c (gethttp): skip :port in host header if it is the
1641         DEFAULT_HTTPS_PORT when using SSL.
1642
1643         * url.c: move the #define of DEFAULT_HTTP_PORT, DEFAULT_FTP_PORT
1644         and DEFAULT_HTTPS_PORT to the header file so it can be use in the
1645         rest of the code.
1646         * url.h: Ditto
1647
1648 2001-03-01  Jonas Jensen  <bones@huleboer.dk>
1649
1650         * retr.c (show_progress): Correctly calculate the number of bytes
1651         in the first line of the download that have been actually
1652         downloaded in this run.
1653
1654 2001-02-23  Dan Harkless  <wget@harkless.org>
1655
1656         * main.c (print_help): --help documentation for -N said it would
1657         re-download files if they had the _same_ timestamp on server.
1658         (print_help): -nr belongs in "FTP options" section of --help
1659         output, not "Recursive retrieval" section.  Alphabetized FTP
1660         options by long option name.
1661
1662 2001-02-16  Dan Harkless  <wget@harkless.org>
1663
1664         * init.c (commands): Hack Kampbjørn <hack@hackdata.com> discovered
1665         that "httpsproxy" had been inserted into commands[] out of
1666         alphabetical order, causing "BUG: unknown command `httpuser'".
1667
1668 2001-02-13  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
1669
1670         * ftp-ls.c (ftp_parse_ls): Added support of ST_MACOS (Unix-like
1671         listing without correct permissons).
1672
1673         * ftp.h (stype): Added ST_MACOS to identify the NetPresenz MacOS
1674         FTP server.
1675
1676         * ftp.c (ftp_retrieve_list): New mirroring logic: A remote file
1677         shall be donwloaded only when it's newer than the local copy or
1678         when it has the same timeestamp but its size is different. ST_VMS
1679         and ST_MACOS as special cases that lie about file size.
1680
1681         * ftp-ls.c (ftp_parse_ls): Support for ST_MACOS.
1682
1683         * Makefile.in: Removed dependency on ftpparse library due to unclear
1684         copyright issues and absence of any feedback to our queries.
1685
1686         * ftp-ls.c: Removed dependency on ftpparse library due to unclear
1687         copyright issues and absence of any feedback to our queries.
1688         (ftp_parse_ls): Added a warning message when remote server system
1689         does not seem to be suported by wget.
1690         (ftp_parse_vms_ls): New function for parsing VMS ftp
1691         server listing output.
1692         (clean_line): New function responsible for removing
1693         end-of-line characters from FTP listing texts.
1694
1695         * ftp.c (getftp): Global variables pwd and host_type are now
1696         member of the ccon structure under names ccon.id and ccon.rs.
1697
1698         * ftp.h (struct ccon): Added formed global variables from ftp.c,
1699         enum stype rs (remote system identification) and char *id (initial
1700         working directory), as suggested by Hrvoje.
1701
1702         * url.c (parse_uname): Added support for passwords containing '@'
1703         characters.
1704         (skip_uname): Ditto.
1705
1706 2001-02-11  Hrvoje Niksic  <hniksic@arsdigita.com>
1707
1708         * ftp.c (ftp_loop): Reset con.
1709
1710 2001-01-06  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
1711
1712         * url.c (parse_uname): Added support for passwords containing '@'
1713         characters.
1714         (skip_uname): Ditto.
1715
1716 2001-02-11  Hack Kampbjørn  <hack@hackdata.com>
1717
1718         * url.c (parseurl): Debug-print u->ftp_type.
1719
1720 2001-02-11  Hrvoje Niksic  <hniksic@arsdigita.com>
1721
1722         * ftp.c (ftp_loop_internal): Disable padding.
1723         (getftp): Ditto.
1724
1725         * http.c (http_loop): Disable padding.
1726
1727         * retr.c (show_progress): Use it to enable padding.
1728
1729         * retr.c (rate): Optional parameter PAD for padding the rate.
1730
1731 2001-02-10  Hrvoje Niksic  <hniksic@arsdigita.com>
1732
1733         * retr.c (show_progress): Make sure that the last output line
1734         includes progress.
1735
1736 2001-02-10  Jonas Jensen  <bones@huleboer.dk>
1737
1738         * retr.c (show_progress): Print the download rate along with the
1739         percentages.
1740         Along with Anders Thorsby <anders@thorsby.dk>.
1741
1742 2001-02-10  Tim Mooney  <mooney@dogbert.cc.ndsu.NoDak.edu>
1743
1744         * ftp.h: Rename enums `command' to `wget_ftp_command' and
1745         `fstatus' to `wget_ftp_status' because old names clash with Tru64
1746         net/if.h.
1747
1748 2001-02-08  Christian Fraenkel <christian.fraenkel@gmx.net>
1749
1750         * gen_sslfunc.c: verify_callback is now static
1751
1752         * gen_sslfunc.c (init_ssl): load certificate if specified
1753
1754         * gen_sslfunc.c (ssl_printerr): new function
1755
1756         * init.c: added new --sslcertfile and --sslcertkey switches
1757
1758         * main.c: ditto
1759
1760         * options.h: ditto
1761
1762         * http.c (gethttp): abort when init_ssl fails
1763
1764 2001-01-23  Herold Heiko  <Heiko.Herold@previnet.it>
1765
1766         * mswindows.h: Include <malloc.h>; it's needed for alloca().
1767
1768 2001-01-10  Dan Harkless  <wget@harkless.org>
1769
1770         * url.c (str_url): Clarified this function's comment header after
1771         Hrvoje answered my question on the list as to when hide != 1.
1772         Also Hrvoje pointed out I need to use xstrdup() on the string literal.
1773
1774 2001-01-06  Hrvoje Niksic  <hniksic@arsdigita.com>
1775
1776         * connect.c (bindport): Declare addrlen as int.  Diagnosed by
1777         Drazen Kacar <dave@arsdigita.com>.
1778         (conaddr): Ditto.
1779
1780 2001-01-09  Dan Harkless  <wget@harkless.org>
1781
1782         * html-url.c: A bunch of fixup of `--page-requisites'-related
1783         comments to reflect Hrvoje's changes to my code when transplanting
1784         it into this new file, to fix spelling mistakes, to clarify, etc.
1785
1786         * url.c (write_backup_file): Clarified a comment.
1787         (str_url): Henrik van Ginhoven pointed out on the list that we
1788         shouldn't give away the number of characters in the password by
1789         replacing each character with a 'x'.  Use "<password>" instead.
1790
1791         * ftp.c (ftp_retrieve_dirs): The bug where recursion into FTP
1792         directories didn't work if logging in put you in a directory other
1793         than "/" is fixed now.  Removed the comment here warning of the bug.
1794
1795         * main.c (print_help): --continue's description was misleading.
1796         We don't "restart", we "resume".  Also, better to say
1797         "partially-downloaded file" rather than just "existing file".
1798
1799 2001-01-06  Dan Harkless  <wget@harkless.org>
1800
1801         * ChangeLog: The '[Not in 1.6 branch.]'s were decided not to be
1802         the best way to go about my aim.  Removed them in favor of:
1803
1804         * ChangeLog-branches/1.6_branch.ChangeLog: New file.
1805
1806 2001-01-04  Hrvoje Niksic  <hniksic@arsdigita.com>
1807
1808         * url.c (replace_attr): New function, to be used by both
1809         TO_COMPLETE and TO_RELATIVE case in convert_links.
1810         (find_fragment): New function for finding URL fragments.
1811         (replace_attr): Better handle the case where the original string
1812         is not quoted.  Use find_fragment.
1813         (convert_links): Use replace_attr().
1814
1815 2000-12-31  Dan Harkless  <wget@harkless.org>
1816
1817         * ChangeLog: Since this flat file doesn't have multiple branches,
1818         looking at the dates would make you think that things went into
1819         1.6 that actually just went into the 1.7-dev branch.  Added "[Not
1820         in 1.6 branch.]" where appropriate to clarify.
1821
1822 2000-12-30  Dan Harkless  <wget@harkless.org>
1823
1824         * ftp.c, http.c:  Applied Hack Kampbjørn <hack@hackdata.com>'s
1825         patch to deal with h_errno not being defined in netdb.h under Cygwin.
1826
1827 2000-12-18  Csaba Raduly  <csaba.raduly@sophos.com>
1828
1829         * sysdep.h: Include <malloc.h> and <io.h> under Watcom.
1830
1831 2000-12-17  Igor Khristophorov  <igor@atdot.org>
1832
1833         * http.c (check_end): Fix test for '+' or '-'.
1834
1835 2000-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
1836
1837         * url.c (parseurl): Rename inner loop var from i to ind to avoid
1838         clash with the function top-level-declared variable i.
1839         (str_url): Likewise, rename inner-loop i to j.
1840
1841         * recur.c (parse_robots): Don't declare LEN at top of function.
1842         (robots_match): Renamed parameter FORBIDDEN to avoid hiding of
1843         global variable.
1844
1845         * main.c (main): Change erroneous use of bitwise and to logical.
1846
1847         * init.c (cmd_address): Don't heap-allocate `sin'; it can be on
1848         the stack because it will be copied to closure.
1849
1850         Thanks to Csaba Raduly's run of PC-LINT over the sources.
1851
1852 2000-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
1853
1854         * http.c (basic_authentication_encode): Use xmalloc(), not
1855         malloc().  Thanks to Csaba Raduly's run of PC-LINT over the
1856         sources.
1857
1858 2000-12-17  Csaba Raduly  <csaba.raduly@sophos.com>
1859
1860         * sysdep.h: Test for __EMX__ rather than for EMXOS2 for OS/2
1861         compilation.
1862
1863 2000-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
1864
1865         * mswindows.c: Include <errno.h>.
1866
1867         * gen_sslfunc.c: Include <errno.h>.
1868
1869         * ftp-basic.c: Don't attempt to declare errno or h_errno because
1870         they're not used.
1871
1872         * main.c: Include <errno.h> because errno is used.
1873
1874         * ftp.c: Ditto.
1875
1876         * http.c: Include <netdb.h> for h_errno.
1877
1878 2000-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
1879
1880         * html-parse.c (advance_declaration): MSVC assert() chokes on
1881         '\"'.  Use '"' instead.
1882
1883 2000-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
1884
1885         * utils.c (xfree_real): Removed.
1886         (xfree_debug): Just call free().
1887
1888         * wget.h (xfree): Make it an alias for free.
1889
1890 2000-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
1891
1892         * http.c (http_loop): Furthermore, touch output_document only if
1893         it is known to be an existing regular file.
1894
1895 2000-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
1896
1897         * ftp.c (ftp_retrieve_list): Ditto.
1898
1899         * http.c (http_loop): Touch output_document if that is used for
1900         output.
1901
1902 2000-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
1903
1904         * http.c: Include gen_sslfunc.h after including Wget's headers.
1905         (persistent_available_p): Needed coma before `int ssl'.
1906
1907 2000-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
1908
1909         * ftp.c (ftp_loop_internal): Ditto.
1910
1911         * http.c (http_loop): Use it.
1912
1913         * retr.c (sleep_between_retrievals): New function that handles the
1914         logic of opt.wait and opt.waitretry.
1915
1916 2000-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
1917
1918         * rbuf.h: Implement only a single version of RBUF_READCHAR, using
1919         rbuf_read_bufferful when the buffer is depleted.
1920
1921         * rbuf.c (rbuf_read_bufferful): New function.
1922
1923 2000-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
1924
1925         * gen_sslfunc.h: Use ansi2knr style function declarations.
1926
1927         * gen_sslfunc.c: Reformat according to the GNU coding standards.
1928         More should be done.
1929
1930         * http.c (persistent_available_p): Place the cheap SSL test nearer
1931         the top of the function.
1932         (CLOSE_FINISH, CLOSE_INVALIDATE): Define only one version of each.
1933
1934 2000-12-05  Hrvoje Niksic  <hniksic@arsdigita.com>
1935
1936         * url.c (init_unsafe_char_table): Reinstate space as an unsafe
1937         char.
1938
1939 2000-12-03  Christian Fraenkel <christian.fraenkel@gmx.net>
1940
1941         * Makefile.in: added gen_sslfunc object
1942         * config.h.in: added HAVE_SSL define
1943         * connect.c: changed select_fd from static int to int
1944         * connect.h: ditto
1945         * gen_sslfunc.h: New file
1946         * gen_sslfunc.c: ditto
1947         * http.c: added HTTPS fuctionality
1948         * retrc.c: ditto
1949         * url.c: ditto
1950         * init.c: added opt.httpsproxy
1951         * options.h: ditto
1952         * rbuf.h: added alternate rbuf struct
1953         * wget.h: added CONSSLERR
1954         * rbuf.c: ditto
1955
1956         * http.c: Added HTTPS fuctionality.
1957
1958         * retrc.c: Ditto.
1959
1960         * url.c: Ditto.
1961
1962         * init.c: Added opt.httpsproxy.
1963
1964         * options.h: Ditto.
1965
1966         * rbuf.h: Added alternate rbuf struct.
1967
1968         * wget.h: Added CONSSLERR.
1969
1970         * rbuf.c: Ditto.
1971
1972 2000-11-30  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
1973
1974         * ftp-ls.c (ftp_parse_unix_ls): Added second parameter
1975         "ignore_perms" to ignore file and directory permissions for
1976         Windows NT FTP server listings.
1977         (ftp_parse_winnt_ls): New function.
1978         (ftp_parse_ls): Parses UNIX and Windows NT listings
1979         separately. Simple heuristics for distinguishing between UNIX and
1980         MS-DOS-like FTP listing provided by Windows NT FTP service.
1981
1982 2000-11-18  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
1983
1984         * ftpparse.c, ftpparse.h: New files.
1985
1986         * ftp-ls.c (ftp_parse_ls): Use ftp_parse_unix_ls for UNIX servers
1987         only. Use ftp_parse_nonunix_ls otherwise.
1988         (ftp_parse_nonunix_ls): Stub to the ftpparse library handling all
1989         exotic FTP servers.
1990
1991         * ftp.h (stype): New enum, distinguishes UNIX, VMS, and "other"
1992         FTP servers.
1993
1994         * ftp.c: New static wariables host_type, pwd, and pwd_len.
1995         (getftp): Support for VMS. Support for FTP servers that do not
1996         place you in the root directory after login.
1997         (ftp_retrieve_list): VMS is silent about the real file size, issue
1998         a more appropriate message.
1999         (ftp_get_listing): Pass host_type to ftp_parse_ls.
2000
2001         * ftp-basic.c (ftp_pwd, ftp_syst): New functions.
2002
2003 2000-11-30  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
2004
2005         * ftp-ls.c (ftp_parse_unix_ls): Added second parameter
2006         "ignore_perms" to ignore file and directory permissions for
2007         Windows NT FTP server listings.
2008         (ftp_parse_winnt_ls): New function.
2009         (ftp_parse_ls): Parses UNIX and Windows NT listings
2010         separately. Simple heuristics for distinguishing between UNIX
2011         and MS-DOS-like FTP listing provided by Windows NT FTP service.
2012
2013 2000-11-29  John Summerfield  <summer@OS2.ami.com.au>
2014
2015         * netrc.c (parse_netrc): Get rid of line ending.
2016
2017 2000-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
2018
2019         * ftp.c (ftp_retrieve_list): Undo typo "fix" until resolution by
2020         Dan.
2021
2022 2000-11-24  Karl Eichwalder  <ke@suse.de>
2023
2024         * main.c (print_help): Untabify.
2025
2026 2000-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
2027
2028         * utils.c (xrealloc_debug): Do the unregister/register thing only
2029         if the pointer has actually changed.
2030         (xmalloc_real): Declare `static' in DEBUG_MALLOC builds.
2031         (xfree_real): Ditto.
2032         (xrealloc_real): Ditto.
2033         (xstrdup_real): Ditto.
2034
2035 2000-11-22  Hrvoje Niksic  <hniksic@arsdigita.com>
2036
2037         * ftp.c (getftp): ftp_getaddress() returns a malloc'ed copy of the
2038         string; no need to strdup() it.
2039         (getftp): Make pwd_len a local variable.
2040         (ftp_loop): Free PWD before returning.
2041
2042         * init.c (cleanup): Free opt.ftp_pass only if it's non-NULL.
2043
2044 2000-11-22  Hrvoje Niksic  <hniksic@arsdigita.com>
2045
2046         * all: Use xfree() instead of free.
2047
2048         * utils.c (xfree): New function.
2049
2050 2000-11-21  Hrvoje Niksic  <hniksic@arsdigita.com>
2051
2052         * url.c (convert_links): HTML-quote the converted string.
2053
2054         * utils.c (html_quote_string): Move here from ftp-ls.c
2055         (html_quote_string): Make non-static; declare in utils.h.
2056         (html_quote_string): Convert SP to &#32;.
2057
2058 2000-11-21  Hrvoje Niksic  <hniksic@arsdigita.com>
2059
2060         * ftp.c (getftp): Reformat Jan's code according to GNU coding
2061         standards; remove (debugging?) printf's; use '\0' for the ASCII
2062         zero character.  Use alloca() instead of malloc() for
2063         inter-function temporary allocations.
2064
2065 2000-11-18  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
2066
2067         * ftpparse.c, ftpparse.h: New files.
2068
2069         * ftp-ls.c (ftp_parse_ls): Use ftp_parse_unix_ls for UNIX servers
2070         only. Use ftp_parse_nonunix_ls otherwise.
2071         (ftp_parse_nonunix_ls): Stub to the ftpparse library handling all
2072         exotic FTP servers.
2073
2074         * ftp.h (stype): New enum, distinguishes UNIX, VMS, and "other"
2075         FTP servers.
2076
2077         * ftp.c: New static wariables host_type, pwd, and pwd_len.
2078         (getftp): Support for VMS. Support for FTP servers that do not
2079         place you in the root directory after login.
2080         (ftp_retrieve_list): VMS is silent about the real file size, issue
2081         a more appropriate message.
2082         (ftp_get_listing): Pass host_type to ftp_parse_ls.
2083
2084         * ftp-basic.c (ftp_pwd, ftp_syst): New functions.
2085
2086 2000-11-21  Hrvoje Niksic  <hniksic@arsdigita.com>
2087
2088         * hash.c (hash_table_put): Don't overwrite deleted mappings.
2089
2090 2000-11-21  Hrvoje Niksic  <hniksic@arsdigita.com>
2091
2092         * hash.c (find_mapping): New function.
2093         (hash_table_get): Use it.
2094         (hash_table_get_pair): Ditto.
2095         (hash_table_exists): Ditto.
2096         (hash_table_remove): Ditto.
2097         (hash_table_remove): Really delete the entry if the mapping
2098         following LOCATION is empty.
2099
2100         * utils.c (string_set_add): Check whether the element has existed
2101         before.
2102
2103         * hash.c (hash_table_get_pair): New function.
2104
2105 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
2106
2107         * http.c (http_process_type): Ignore trailing whitespace; use
2108         strdupdelim().
2109
2110         * recur.c (recursive_retrieve): Use the new `convert' field.
2111         (convert_all_links): Ditto.
2112         (convert_all_links): Don't respect meta_disallow_follow.
2113
2114         * html-url.c (handle_link): Fill out link_relative_p and
2115         link_complete_p.
2116
2117         * url.h (struct _urlpos): Make elements more readable.
2118
2119         * recur.c (recursive_retrieve): Call slist_prepend instead of
2120         slist_append.
2121         (convert_all_links): Call slist_nreverse before iterating through
2122         urls_html.
2123
2124         * utils.c (slist_prepend): New function.
2125         (slist_nreverse): Ditto.
2126
2127 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
2128
2129         * http.c (check_end): Constify.
2130
2131 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
2132
2133         * http.c (http_loop): If username and password are known, try the
2134         `Basic' authentication scheme by default.
2135
2136         * connect.h: Declare test_socket_open.
2137
2138 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
2139
2140         * version.c: Bump version from 1.5.3+dev to 1.7-dev.
2141
2142 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
2143
2144         * http.c (gethttp): Don't use the return value of sprintf().
2145         (gethttp): Inhibit keep-alive if opt.http_keep_alive is 0.
2146
2147 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
2148
2149         * recur.c (recursive_retrieve): Print the "so we don't load"
2150         debugging message only if we really don't load.
2151
2152         * http.c (gethttp): Inhibit keep-alive if proxy is being used.
2153         (gethttp): Don't request keep-alive if keep-alive is inhibited.
2154
2155 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
2156
2157         * http.c (gethttp): Make the HTTP persistent connections more
2158         robust.
2159
2160 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
2161
2162         * retr.c (get_contents): If use_expected, make sure that the
2163         appropriate amount of data is being read.
2164
2165         * http.c (gethttp): Check for both `Keep-Alive: ...' and
2166         `Connection: Keep-Alive'.
2167
2168         * wget.h (DEBUGP): Call debug_logprintf only if opt.debug is
2169         turned on.
2170
2171 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
2172
2173         * http.c (connection_available_p): Use it.
2174
2175         * connect.c (test_socket_open): New function.
2176
2177         * http.c (gethttp): Support persistent connections.  Based on the
2178         ideas, and partly on code, by Sam Horrocks <sam@daemoninc.com>.
2179         (register_persistent): New function.
2180         (connection_available_p): Ditto.
2181         (invalidate_connection): Ditto.
2182
2183 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
2184
2185         * url.c (convert_links): Handle UREL2ABS case.
2186
2187         * recur.c (recursive_retrieve): Instead of the list
2188         urls_downloaded, use hash tables dl_file_url_map and
2189         dl_url_file_map.
2190         (convert_all_links): Use them to retrieve data.
2191
2192         * host.c (clean_hosts): Free the hash tables.
2193
2194         * main.c (private_initialize): Call host_init().
2195
2196         * host.c (store_hostaddress): Use a saner, hash table-based data
2197         model.
2198         (realhost): Ditto.
2199         (host_init): Initialize the hash tables.
2200
2201 2000-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
2202
2203         * utils.c (slist_append): Eviscerate NOSORT.  Hash tables are now
2204         used for what the sorted slists used to be used for.
2205         (slist_contains): Don't rely on the list being sorted.
2206         (slist_append): Simplify the code.
2207
2208         * recur.c (recursive_cleanup): Use free_string_set.
2209
2210         * utils.c (string_set_add, string_set_exists, string_set_free):
2211         New functions for easier freeing of hash tables whose keys are
2212         strdup'ed strings.
2213
2214         * recur.c (recursive_retrieve): Use the hash table functions for
2215         storing undesirable URLs.
2216
2217         * hash.c: New file.
2218
2219 2000-11-17  Hrvoje Niksic  <hniksic@arsdigita.com>
2220
2221         * main.c (private_initialize): Call url_init.
2222         (main): Call private_initialize.
2223
2224         * url.c (unsafe_char_table): New table.
2225         (UNSAFE_CHAR): Use it.
2226         (init_unsafe_char_table): New function.
2227         (url_init): New function; call init_unsafe_char_table.
2228
2229 2000-11-16  Hrvoje Niksic  <hniksic@arsdigita.com>
2230
2231         * mswindows.h: Define snprintf and vsnprintf to _snprintf and
2232         _vsnprintf respectively.
2233
2234 2000-11-15  Hrvoje Niksic  <hniksic@arsdigita.com>
2235
2236         * config.h.in: Do the _XOPEN_SOURCE and _SVID_SOURCE things only
2237         on Linux.
2238
2239 2000-11-15  Hrvoje Niksic  <hniksic@arsdigita.com>
2240
2241         * html-url.c (handle_link): Handle HTML fragment identifiers.
2242
2243         * recur.c (recursive_retrieve): If norobot info is respected and
2244         the file is specified not to be followed by robots, respect that.
2245
2246         * html-url.c (collect_tags_mapper): Handle <meta name=robots
2247         content=X>.  For us the important cases are where X is NONE or
2248         where X contains NOFOLLOW.
2249         (get_urls_html): Propagate that information to the caller.
2250
2251 2000-11-13  Hrvoje Niksic  <hniksic@arsdigita.com>
2252
2253         * url.c (convert_links): Unlink the file we might be reading from
2254         before writing to it.
2255         (convert_links): Use alloca instead of malloc for
2256         filename_plus_orig_suffix.
2257
2258 2000-11-12  Hrvoje Niksic  <hniksic@arsdigita.com>
2259
2260         * host.c (realhost): Add HOST to the list with quality==0 only if
2261         it wasn't already there.
2262         Based on analysis by Lu Guohan <feng@public.bjnet.edu.cn>.
2263
2264 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
2265
2266         * url.c (get_urls_file): Ditto.
2267         (convert_links): Ditto.
2268
2269         * html-url.c (get_urls_html): Use read_file() instead of
2270         load_file().
2271
2272         * utils.c (read_file): New function, instead of the old
2273         load_file().
2274         (read_file_free): Ditto.
2275
2276         * url.c (findurl): Search only for the supported protocols.
2277         (convert_links): Use fwrite() when writing out a region of
2278         characters.
2279
2280 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
2281
2282         * ftp-ls.c: Move html_quote_string and ftp_index here.
2283
2284         * url.c: Remove get_urls_html, since that's now in html-url.c.
2285
2286         * html-url.c: New file.
2287
2288         * html-parse.c: New file.
2289
2290 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
2291
2292         * init.c (run_wgetrc): Don't bother killing off '\r' since
2293         pars_line() skips whitespace at end of line anyway.
2294         (parse_line): Oops, it didn't.  Now it does.
2295
2296         * recur.c (parse_robots): Ditto here.
2297
2298         * ftp-ls.c (ftp_parse_unix_ls): Kill off the newline character
2299         manually because read_whole_line no longer does.
2300
2301         * utils.c (read_whole_line): Rewrite to: a) use less memory
2302         (reallocates to needed size after work), b) work faster -->
2303         fgets() instead of getc, c) be more correct --> doesn't kill the
2304         newline character at the end of line.
2305
2306 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
2307
2308         * init.c (comind): Initialize MAX to array size - 1.
2309
2310 2000-11-08  Hrvoje Niksic  <hniksic@arsdigita.com>
2311
2312         * url.c (construct): Changed last_slash[-1] to *(last_slash - 1).
2313         Suggested by Edward J. Sabol.
2314
2315 2000-11-08  Hrvoje Niksic  <hniksic@arsdigita.com>
2316
2317         * url.c (construct): Handle the case where host name is not
2318         followed by a slash.
2319
2320 2000-11-06  Hrvoje Niksic  <hniksic@arsdigita.com>
2321
2322         * init.c: commands[] need to be sorted!  ("base" wasn't.)
2323
2324 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
2325
2326         * wget.h (DO_REALLOC_FROM_ALLOCA): Use braces to disambiguate
2327         `if'.
2328
2329 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
2330
2331         * url.c (construct): Insert unneeded initialization for the
2332         compiler to shut up.
2333
2334         * config.h.in: Define _XOPEN_SOURCE to 500 to get the prototype
2335         for strptime() (*duh*).  Define _SVID_SOURCE to get S_IFLNK which
2336         otherwise gets lost when you define _XOPEN_SOURCE.
2337
2338         * utils.c (touch): Include the file name in the error message.
2339         From Debian.
2340
2341 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
2342
2343         * log.c (logvprintf): Use vsnprintf() in all cases.  If necessary,
2344         resize the buffer to fit the formated message.  That way, messages
2345         of arbitrary size may be printed.
2346         (logvprintf): Use saved_append() to optionally log the last
2347         several lines of output.
2348         (logputs): Ditto.
2349         (log_close): Adapt to new data structures.
2350         (log_dump): Ditto.
2351         (redirect_output): Print messages to stderr, not to stdout.
2352
2353         * log.c (saved_append_1): New function.  Replaces the old logging
2354         system ("log all output until 10M characters") with a new, much
2355         more reasonable one ("log last screenful of text").
2356         (saved_append): New function; call saved_append_1.
2357         (free_log_line): New function.
2358
2359 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
2360
2361         * url.c (construct): Fix comment.
2362         (find_last_char): Document.
2363
2364 2000-11-04  Hrvoje Niksic  <hniksic@arsdigita.com>
2365
2366         * snprintf.c: New file.
2367
2368 2000-11-03  Hrvoje Niksic  <hniksic@arsdigita.com>
2369
2370         * wget.h: If HAVE_STDARG_H is not defined, don't declare argument
2371         types to logprintf() and debug_logprintf().
2372
2373 2000-11-02  Hrvoje Niksic  <hniksic@arsdigita.com>
2374
2375         * ftp.c (ftp_loop_internal): Hide the password from the URL when
2376         printing non-verbose.  Problem spotted by Dariusz Mlynarczyk
2377         <darekm@bydg.lomac.com.pl>.
2378
2379 2000-11-02  Junio Hamano  <junio@twinsun.com>
2380
2381         * ftp-basic.c (ftp_login): Make comparison case-insensitive.
2382
2383 2000-11-02  Tyler Riddle  <triddle@liquidmarket.com>
2384
2385         * http.c (known_authentication_scheme_p): Recognize NTML
2386         authentication.
2387         (create_authorization_line): Treat NTML the same as `Basic'.
2388
2389 2000-11-02  Hrvoje Niksic  <hniksic@arsdigita.com>
2390
2391         * retr.c (retrieve_url): Free url before returning.
2392         (retrieve_url): Free mynewloc before returning.
2393         Spotted by Mark A. Mankins <Mankins_Mark@prc.com>.
2394
2395 2000-11-02  Hrvoje Niksic  <hniksic@arsdigita.com>
2396
2397         * url.c (parseurl): Remove possible reading past the end of
2398         sup_protos[].  Spotted by Mark A. Mankins <Mankins_Mark@prc.com>.
2399
2400 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
2401
2402         * main.c (main): In case of opt.downloaded overflowing, print
2403         <overflow> instead of a totally bogus random value.
2404
2405         * retr.c (retrieve_from_file): Ditto.
2406
2407         * recur.c (recursive_retrieve): Ditto.
2408
2409         * main.c (main): Ditto.
2410
2411         * http.c (http_loop): Ditto.
2412
2413         * ftp.c (ftp_loop_internal): Use downloaded_increase() instead of
2414         `+=', and downloaded_exceeds_quota() instead of the simple-minded
2415         check.
2416         (ftp_retrieve_list): Ditto.
2417         (ftp_retrieve_dirs): Ditto.
2418         (ftp_retrieve_glob): Ditto.
2419
2420         * retr.c (downloaded_increase): New function.  Notice overflows of
2421         opt.downloaded.
2422         (downloaded_exceeds_quota): Make sure that opt.downloaded is not
2423         used if it overflowed.
2424
2425         * options.h (struct options): New member downloaded_overflow.
2426
2427 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
2428
2429         * wget.h (enum): Remove extra space after last enumeration.
2430
2431 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
2432
2433         * main.c (main): Use legible_very_long() for printing
2434         opt.downloaded.
2435
2436         * utils.c (legible_1): New function that operates on strings and
2437         does the brunt of legible()'s work.
2438         (legible): Use legible_1().
2439         (legible_very_long): New function; dump the argument with
2440         sprintf(), and call legible_1().
2441
2442         * options.h (struct options): Use VERY_LONG_TYPE for
2443         opt.downloaded.
2444
2445         * sysdep.h (VERY_LONG_TYPE): Define it to have a 64-bit or greater
2446         type.
2447
2448         * config.h.in: Make sure that SIZEOF_LONG and SIZEOF_LONG_LONG get
2449         defined.  Define HAVE_LONG_LONG if long long is available.
2450
2451 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
2452
2453         * utils.c (long_to_string): Update with a later, better version.
2454
2455 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
2456
2457         * url.c (path_simplify_with_kludge): New function.
2458         (path_simplify_with_kludge): Disable it.  Instead...
2459         (parse_dir): ...make sure that at this point the right thing is
2460         done, i.e. that "query" part of the URL (?...) is always assigned
2461         to the file, never to the directory portion of the path.
2462
2463 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
2464
2465         * retr.c (retrieve_url): Detect redirection cycles.
2466
2467 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
2468
2469         * url.c (get_urls_html): Decode HTML entities using
2470         html_decode_entities.
2471
2472         * html.c (htmlfindurl): Don't count the `#' in numeric entities
2473         (&#NNN;) as an HTML fragemnt.
2474         (html_decode_entities): New function.
2475
2476 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
2477
2478         * html.c (htmlfindurl): Fix recognition of # HTML fragments.
2479
2480 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
2481
2482         * url.c (construct): Rewritten for clarity.  Avoids the
2483         unnecessary copying and stack-allocation the old version
2484         performed.
2485
2486 2000-10-31  Hrvoje Niksic  <hniksic@arsdigita.com>
2487
2488         * ftp.c (getftp): Ditto.
2489
2490         * http.c (gethttp): Rewind the stream when retrying from scratch.
2491
2492 2000-10-31  Hrvoje Niksic  <hniksic@arsdigita.com>
2493
2494         * retr.c (retrieve_url): Use url_concat() to handle relative
2495         redirections instead of /ad hoc/ code.
2496
2497         * url.c (url_concat): New function encapsulating weird
2498         construct().
2499         (urllen_http_hack): New function.
2500         (construct): When constructing new URLs, recognize that `?' does
2501         not form part of the file name in HTTP.
2502
2503 2000-10-13  Adrian Aichner  <adrian@xemacs.org>
2504
2505         * retr.c: Add msec timing support for WINDOWS.
2506         * retr.c (reset_timer): GetSystemTime() on WINDOWS.
2507         * retr.c (elapsed_time): Calculate delta time to msec on WINDOWS.
2508
2509 2000-10-27  Dan Harkless  <wget@harkless.org>
2510
2511         * retr.c (retrieve_url): Manually applied T. Bharath
2512         <TBharath@responsenetworks.com>'s patch to get wget to grok
2513         illegal relative URL redirects.  Reformatted and re-commented it.
2514
2515 2000-10-23  Dan Harkless  <wget@harkless.org>
2516
2517         * connect.c (make_connection and bindport): Manually applied Rob
2518         Mayoff <mayoff@dqd.com>'s 1.5.3 patch to add --bind-address,
2519         changing coding style to GNU's.
2520
2521         * ftp.c (ftp_loop_internal): --delete-after wasn't implemented for
2522         files downloaded via FTP.  Per a comment, .listing files were not
2523         counted towards number of bytes and files downloaded because they're
2524         deleted anyway.  Well, they aren't under -nr, so count them then.
2525
2526         * init.c: Manually applied Rob Mayoff's 1.5.3 patch to add
2527         --bind-address, alphabetizing, changing coding style to GNU's,
2528         commenting, and renaming cmd_ip_address() to cmd_address() to
2529         imply hostnames also okay.
2530
2531         * main.c (main): --delete-after didn't delete the root of the
2532         tree.  Ignore --convert-links if --delete-after was specified.
2533         Manually applied Rob Mayoff's 1.5.3 patch to add --bind-address,
2534         fixing duplicate use of added-since-1.5.3 case value.
2535         (print_help): Clarified that --delete-after deletes local files.
2536         Rob forgot to add a line for his new --bind-address option.
2537
2538         * options.h (struct options): Manually applied Rob Mayoff's patch
2539         to add --bind-address (bind_address structure member).
2540
2541         * recur.c (recursive_retrieve): Improved comment; added DEBUGP().
2542         Ignore --convert-links if --delete-after was specified.
2543
2544         * retr.c (retrieve_from_file): Just added a DEBUGP().
2545
2546 2000-10-19  Dan Harkless  <wget@harkless.org>
2547
2548         * ftp.c (ftp_loop_internal): downloaded_file() enumerators changed.
2549         (getftp): Applied Piotr Sulecki <Piotr.Sulecki@ios.krakow.pl>'s
2550         patch to work around FTP servers that incorrectly respond to the
2551         "REST" command with the remaining size rather than the total file size.
2552
2553         * http.c (gethttp): Improved a comment and added code to tack on
2554         ".html" to text/html files without that extension when -E specified.
2555         (http_loop): Use new downloaded_file() enumerators and deal with
2556         the case of gethttp() called xrealloc() on u->local.
2557
2558         * init.c (commands): Added new "htmlextension" command.
2559         Also renamed John Daily's cmd_quad() to the more descriptive
2560         cmd_lockable_boolean(), alpha-sorted the CMD_DECLARE()s and
2561         removed duplicate cmd_boolean() declaration.
2562
2563         * main.c (print_help): Added my new -E / --html-extension option.
2564         (main): Undocumented --email-address option previously used -E synonym.
2565         Stole it away for the much more deserving --html-extension's use.
2566
2567         * options.h (struct options): Added html_extension field.
2568
2569         * url.c (convert_links): URL X that we saved as X.html locally due
2570         to -E needs to be backed up as X.orig, not X.html.orig.  Added comments.
2571         (downloaded_file): Now remembers if we added .html extension to a file.
2572
2573         * url.h (downloaded_file_t): Added extra enumerators to support above.
2574         (downloaded_file): Now takes and returns a downloaded_file_t.
2575
2576         * wget.h (unnamed "dt" enum): Added ADDED_HTML_EXTENSION enumerator.
2577
2578 2000-10-09  Dan Harkless  <wget@harkless.org>
2579
2580         * html.c (htmlfindurl): Added unneeded initialization to quiet warning.
2581
2582         * main.c (print_help): Clarified what --retr-symlinks does.
2583
2584 2000-09-15  John Daily  <jdaily@cyberdude.com>
2585
2586         * init.c: Add support for "always" and "never" values to allow
2587         .wgetrc to override commandline (useful e.g. with .pm files
2588         calling `wget --passive-ftp' when your firewall doesn't allow that).
2589
2590         * ftp.c (getftp): passive_ftp is first option to support always/never.
2591
2592 2000-08-30  Dan Harkless  <wget@harkless.org>
2593
2594         * ftp.c (ftp_retrieve_list): Use new INFINITE_RECURSION #define.
2595
2596         * html.c: htmlfindurl() now takes final `dash_p_leaf_HTML' parameter.
2597         Wrapped some > 80-column lines.  When -p is specified and we're at a
2598         leaf node, do not traverse <A>, <AREA>, or <LINK> tags other than
2599         <LINK REL="stylesheet">.
2600
2601         * html.h (htmlfindurl): Now takes final `dash_p_leaf_HTML' parameter.
2602
2603         * init.c: Added new -p / --page-requisites / page_requisites option.
2604
2605         * main.c (print_help): Clarified that -l inf and -l 0 both allow
2606         infinite recursion.  Changed the unhelpful --mirrior description
2607         to simply give the options it's equivalent to.  Added new -p option.
2608         (main): Added some comments; handle new -p / --page-requisites.
2609
2610         * options.h (struct options): Added new page_requisites field.
2611
2612         * recur.c: Changed "URL-s" to "URLs" and "HTML-s" to "HTMLs".
2613         Calculate and pass down new `dash_p_leaf_HTML' parameter to
2614         get_urls_html().  Use new INFINITE_RECURSION #define.
2615
2616         * retr.c: Changed "URL-s" to "URLs".  get_urls_html() now takes
2617         final `dash_p_leaf_HTML' parameter.
2618
2619         * url.c: get_urls_html() and htmlfindurl() now take final
2620         `dash_p_leaf_HTML' parameter.
2621
2622         * url.h (get_urls_html): Now takes final `dash_p_leaf_HTML' parameter.
2623
2624         * wget.h: Added some comments and new INFINITE_RECURSION #define.
2625
2626 2000-08-23  Dan Harkless  <wget@harkless.org>
2627
2628         * main.c (print_help): -B / --base was not mentioned.
2629
2630 2000-08-22  Dan Harkless  <wget@harkless.org>
2631
2632         * main.c (print_help): Modified -nc description to mention that it
2633         also prevents the creation of multiple versions of the same file
2634         with ".<number>" suffixes.
2635
2636 2000-07-14  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
2637
2638         * retr.c (retrieve_url): Consistently strdup opt.referer when
2639         setting u->referer.
2640
2641 2000-06-09  Dan Harkless  <wget@harkless.org>
2642
2643         * main.c (print_help): --help output for --waitretry was over 80 cols.
2644
2645 2000-06-09  Hrvoje Niksic  <hniksic@iskon.hr>
2646
2647         * url.c (encode_string): Fix comment.
2648         Suggested by Herold Heiko <Heiko.Herold@previnet.it>.
2649
2650 2000-06-01  Const Kaplinsky  <const@ce.cctpu.edu.ru>
2651
2652         * ftp.c (ftp_retrieve_list): Change permissions only on plain
2653         files.
2654
2655 2000-06-01  Hrvoje Niksic  <hniksic@iskon.hr>
2656
2657         * url.c (str_url): Print the port number only if it's different
2658         from the default port number for that protocol.
2659
2660 2000-05-22  Dan Harkless  <wget@harkless.org>
2661
2662         * main.c (print_help): Added --help line for Damir Dzeko
2663         <ddzeko@zesoi.fer.hr>'s until-now-undocumented --referer option.
2664         Removed comments that --referer and --waitretry were undocumented.
2665         Changed "`.wgetrc' command" to "`.wgetrc'-style command" on --help
2666         line for --execute.
2667
2668 2000-05-18  Hrvoje Niksic  <hniksic@iskon.hr>
2669
2670         * ftp.c (getftp): Ditto.
2671
2672         * http.c (gethttp): Check for return value of fclose/fflush.
2673
2674 2000-04-12  Hrvoje Niksic  <hniksic@iskon.hr>
2675
2676         * host.c (store_hostaddress): Instead of shifting ADDR, start
2677         copying from the correct address.
2678
2679 2000-04-12  Hrvoje Niksic  <hniksic@iskon.hr>
2680
2681         * http.c (gethttp): Don't free REQUEST -- it was allocated with
2682         alloca().
2683         Pointed out by Gisle Vanem <gvanem@eunet.no>.
2684
2685 2000-04-04  Dan Harkless  <wget@harkless.org>
2686
2687         * host.c (store_hostaddress): R. K. Owen's patch introduces a
2688         "left shift count >= width of type" warning on 32-bit
2689         architectures.  Got rid of it by tricking the compiler w/ a variable.
2690
2691         * url.c (UNSAFE_CHAR): The macro didn't include all the illegal
2692         characters per RFC1738, namely everything above '~'.  It also
2693         generated a warning on OSes where char =~ unsigned char.  Fixed.
2694
2695 1998-10-17  Hrvoje Niksic  <hniksic@srce.hr>
2696
2697         * http.c (http_process_type): Removed needless strdup(), a memory
2698         leak.
2699
2700 1998-09-25  Hrvoje Niksic  <hniksic@srce.hr>
2701
2702         * html.c (htmlfindurl): Set PH to the first occurrence of `#'.
2703
2704 1998-09-25  Simon Munton  <simonm@m4data.co.uk>
2705
2706         * init.c (wgetrc_file_name): Don't free HOME under Windows.
2707
2708 1998-12-01  "R. K. Owen"  <rkowen@Nersc.GOV>
2709
2710         * host.c (store_hostaddress): Fix for big endian 64-bit machines.
2711
2712 1998-12-01  Hrvoje Niksic  <hniksic@srce.hr>
2713
2714         * url.c (UNSAFE_CHAR): New macro.
2715         (contains_unsafe): Use it.
2716         (encode_string): Ditto.
2717
2718 1998-12-01  Hrvoje Niksic  <hniksic@srce.hr>
2719
2720         * main.c (i18n_initialize): Use LC_MESSAGES only if available.
2721
2722 2000-03-31  Hrvoje Niksic  <hniksic@srce.hr>
2723
2724         * Use TOUPPER/TOLOWER.
2725
2726 1998-12-22  Alexander V. Lukyanov  <lav@yars.free.net>
2727
2728         * ftp-opie.c (btoe): Zero-terminate OSTORE.
2729
2730 2000-03-21  Hrvoje Niksic  <hniksic@iskon.hr>
2731
2732         * wget.h (DO_REALLOC_FROM_ALLOCA): Ditto.
2733
2734         * sysdep.h (ISALNUM): New macro.
2735         (TOLOWER): Ditto.
2736         (TOUPPER): Ditto.
2737
2738 2000-03-10  Dan Harkless  <wget@harkless.org>
2739
2740         * html.c (idmatch): Implemented checking of my new --follow-tags
2741         and --ignore-tags options.
2742
2743         * init.c (commands): Added comment reminding people adding new
2744         entries doing allocation to add corresponding freeing in cleanup().
2745         (commands): Added new followtags and ignoretags commands.
2746         (cleanup): Free storage for new followtags and ignoretags.
2747
2748         * main.c: Use of "comma-separated list" was random -- normalized
2749         it.  Did some alphabetization.  Added comments pointing out
2750         "Options without arguments" and "Options accepting an argument"
2751         sections of long_options[].  Added new options --follow-tags and
2752         -G / --ignore-tags.  Added comment that Damir's --referer is
2753         currently undocumented.  Added comment that Heiko's --waitretry is
2754         partially undocumented (mentioned in --help but not in
2755         wget.texi).  Moved improperly sorted 24, 129, and 'G' cases.
2756
2757         * options.h (struct options): Added new fields follow_tags and
2758         ignore_tags.
2759
2760         * wget.h: Added "#define EQ 0" so we can say "strcmp(a, b) == EQ".
2761
2762 2000-03-02  Dan Harkless  <wget@harkless.org>
2763
2764         * ftp.c (ftp_loop_internal): Heiko introduced "suggest explicit
2765         braces to avoid ambiguous `else'" warnings.  Eliminated them.
2766
2767         * http.c (gethttp): Dan Berger's query string patch is totally
2768         bogus.  If you have two different URLs, gen_page.cgi?page1 and
2769         get_page.cgi?page2, they'll both be saved as get_page.cgi and the
2770         second will overwrite the first.  Also, parameters to implicit
2771         CGIs, like "http://www.host.com/db/?2000-03-02" cause the URLs to
2772         be printed with trailing garbage characters, and could seg fault.
2773         Backing out the patch, which Dan B. informed me by email was just
2774         a kludge to download StarOffice from Sun made necessary due to
2775         wget's unconditional escaping of certain characters (room for an
2776         option there?).
2777         (http_loop): Heiko introduced "suggest explicit braces to avoid
2778         ambiguous `else'" warnings.  Eliminated them.
2779
2780         * main.c: Heiko's --wait / --waitretry backwards compatibility
2781         code looks to have been totally untested -- automatic variable
2782         'wr' was used without being initialized, and a long int was passed
2783         into setval()'s char* val parameter.
2784
2785         * recur.c (parse_robots): Applied Edward J. Sabol
2786         <sabol@alderaan.gsfc.nasa.gov>'s patch for Guan Yang's reported
2787         problem with "User-agent:<space>*<space>" lines in robots.txt.
2788
2789         * url.c (parseurl, str_url): Removing Dan Berger's code (see
2790         http.c above for explanation).
2791
2792 1999-08-25  Heiko Herold  <Heiko.Herold@previnet.it>
2793
2794         * ftp.c: Respect new option waitretry.
2795
2796 2000-01-30  Damir Dzeko  <ddzeko@zesoi.fer.hr>
2797
2798         * http.c (gethttp): Send custom Referer, if required.
2799
2800 1999-09-24  Charles G Waldman  <cgw@fnal.gov>
2801
2802         * netrc.c (parse_netrc): Allow passwords to contain spaces.
2803
2804         * netrc.c (parse_netrc): New function.
2805
2806 1999-09-17  Dan Berger  <dberger@ix.netcom.com>
2807
2808         * http.c (gethttp): Send it.
2809
2810         * url.c (parseurl): Detect query string in HTTP URL-s.
2811         (str_url): Print it.
2812
2813 2000-03-02  HIROSE Masaaki  <hirose31@t3.rim.or.jp>
2814
2815         * html.c (html_allow): Add <link href=...> and <script src=...>.
2816
2817 1999-05-02  andrew deryabin  <djsf@softhome.net>
2818
2819         * http.c (gethttp): Specify port in `Host' header only if it's
2820         different from 80.
2821
2822 1998-11-03  Edward J. Sabol  <sabol@alderaan.gsfc.nasa.gov>
2823
2824         * recur.c (recursive_retrieve): If a finite maximum depth is
2825         specified, and we're are already at that depth, don't download the
2826         HTML file for parsing.
2827
2828 2000-03-01  Dan Harkless  <wget@harkless.org>
2829
2830         * ftp.c (ftp_loop_internal): Call new downloaded_file() function,
2831         even though we don't do conversion on HTML files retrieved via
2832         FTP, so _current_ usage of downloaded_file() makes this call unneeded.
2833         (ftp_retrieve_list): Added a comment saying where we need to
2834         stat() a .orig file if FTP'd HTML file conversion is ever implemented.
2835         (ftp_retrieve_list): "Local file '%s' is more recent," is sometimes
2836         a lie -- reworded as "Server file no newer than local file '%s' --".
2837
2838         * http.c (http_loop): Fixed a typo and clarified a comment.
2839         (http_loop): When -K and -N are specified together, compare size
2840         and timestamp of server file X against local file X.orig (if
2841         extant) rather than converted local file X.
2842         (http_loop): "Local file '%s' is more recent," is sometimes a lie
2843         -- reworded as "Server file no newer than local file '%s' --".
2844         (http_loop): Call new downloaded_file() function to prevent
2845         wrongful overwriting of .orig file when -N is specified.
2846
2847         * url.c (convert_links): When -K specified, only rename X to
2848         X.orig if downloaded_file() returns TRUE.  Otherwise when we skip
2849         file X due to -N, we clobber an X.orig from a previous invocation.
2850         (convert_links): Call the failsafe xstrdup(), not the real strdup().
2851         (convert_links): Added a note asking anyone who understands how
2852         multiple URLs can correspond to a single file to comment it.
2853         (downloaded_file): Added this new function.
2854
2855         * url.h (downloaded_file): Added prototype for this new function
2856         as well as its downloaded_file_t enum type.
2857
2858         * wget.h (boolean): Added this new typedef and TRUE and FALSE #defines.
2859
2860 2000-02-29  Dan Harkless  <wget@harkless.org>
2861
2862         * version.c: Upped version to developer-only "1.5.3+dev".
2863
2864 2000-02-18  Dan Harkless  <wget@harkless.org>
2865
2866         * init.c (backup_converted): Added this new option.
2867
2868         * main.c (-K / --backup-converted): Added this new option.
2869
2870         * options.h (backup_converted): Added this new option.
2871
2872         * url.c (convert_links): When backup_converted is specified, save
2873         file X as X.orig before converting.
2874
2875         * url.h (urlpos): Fixed typo -- said "Rekative" instead of "Relative".
2876
2877 1998-09-21  Hrvoje Niksic  <hniksic@srce.hr>
2878
2879         * version.c: Wget 1.5.3 is released.
2880
2881 1998-09-21  Hrvoje Niksic  <hniksic@srce.hr>
2882
2883         * host.c (ftp_getaddress): Don't warn when reverse-lookup of local
2884         address doesn't yield FQDN.
2885
2886 1998-09-21  Andreas Schwab  <schwab@issan.informatik.uni-dortmund.de>
2887
2888         * cmpt.c (strerror): Fix declaration of sys_errlist.
2889
2890 1998-09-11  Hrvoje Niksic  <hniksic@srce.hr>
2891
2892         * main.c (main): Don't use an array subscript as the first
2893         argument to STRDUP_ALLOCA.
2894         From Kaveh R. Ghazi.
2895
2896 1998-09-11  Szakacsits Szabolcs  <szaka@sienet.hu>
2897
2898         * html.c (htmlfindurl): Download table background.
2899
2900 1998-09-11  Hans Grobler  <grobh@conde.ee.sun.ac.za>
2901
2902         * init.c (parse_line): Would free *com before allocating it.
2903         (parse_line): Would free com instead of *com.
2904
2905 1998-09-10  Howard Gayle  <howard@fjst.com>
2906
2907         * url.c (get_urls_html): Would drop the last character of the
2908         link.
2909
2910 1998-09-10  Hrvoje Niksic  <hniksic@srce.hr>
2911
2912         * http.c (http_loop): Don't print status code if quiet.
2913
2914 1998-09-10  Kaveh R. Ghazi  <ghazi@caip.rutgers.edu>
2915
2916         * log.c: Use <stdarg.h> only when __STDC__.
2917
2918 1998-09-10  Adam D. Moss  <adam@foxbox.org>
2919
2920         * html.c (htmlfindurl): Download <layer src=...>.
2921
2922 1998-09-10  Howard Gayle  <howard@fjst.com>
2923
2924         * ftp.c (ftp_retrieve_list): Don't update the time stamp of a file
2925         not retrieved.
2926
2927 1998-06-27  Hrvoje Niksic  <hniksic@srce.hr>
2928
2929         * utils.c: Include <libc.h> on NeXT.
2930
2931 1998-06-26  Heinz Salzmann  <heinz.salzmann@intermetall.de>
2932
2933         * url.c (get_urls_html): Fix calculation of URL position.
2934
2935 1998-06-23  Hrvoje Niksic  <hniksic@srce.hr>
2936
2937         * version.c: Wget 1.5.2 is released.
2938
2939 1998-06-23  Dave Love  <d.love@dl.ac.uk>
2940
2941         * ftp.c, init.c, netrc.c: Include errno.h.
2942
2943         * http.c: Include errno.h and time header.
2944
2945         * Makefile.in (exext): Define.
2946         (install.bin, uninstall.bin): Use it.
2947
2948 1998-06-21  Hrvoje Niksic  <hniksic@srce.hr>
2949
2950         * http.c (http_loop): Don't attempt to compare local and remote
2951         sizes if the remote size is unknown.
2952
2953 1998-06-16  Hrvoje Niksic  <hniksic@srce.hr>
2954
2955         * url.c (get_urls_html): Use malloc() instead of alloca in the
2956         loop.
2957
2958 1998-06-13  Hrvoje Niksic  <hniksic@srce.hr>
2959
2960         * version.c: Wget 1.5.2-b4 is released.
2961
2962 1998-06-13  Hrvoje Niksic  <hniksic@srce.hr>
2963
2964         * url.c (get_urls_html): Ignore spaces before and after the URI.
2965
2966 1998-06-08  Wanderlei Antonio Cavassin  <cavassin@conectiva.com.br>
2967
2968         * ftp.c (getftp): Translate `done'.
2969
2970 1998-06-06  Hrvoje Niksic  <hniksic@srce.hr>
2971
2972         * version.c: Wget 1.5.2-b3 is released.
2973
2974 1998-06-06  Alexander Kourakos  <awk@bnt.com>
2975
2976         * init.c (cleanup): Close dfp, don't free it.
2977
2978 1998-06-06  Hrvoje Niksic  <hniksic@srce.hr>
2979
2980         * utils.c (make_directory): Twiddle.
2981
2982         * config.h.in: Added template for access().
2983
2984 1998-06-05  Mathieu Guillaume  <mat@cythere.com>
2985
2986         * html.c (htmlfindurl): Download <input src=...>
2987
2988 1998-06-03  Hrvoje Niksic  <hniksic@srce.hr>
2989
2990         * utils.c (file_exists_p): Use access() with two arguments.
2991
2992 1998-05-27  Martin Kraemer  <Martin.Kraemer@mch.sni.de>
2993
2994         * netrc.c (parse_netrc): Correct logic.
2995
2996 1998-05-27  Hrvoje Niksic  <hniksic@srce.hr>
2997
2998         * ftp.c (getftp): Added `break'; suggested by Lin Zhe Min
2999         <ljm@ljm.wownet.net>.
3000
3001 1998-05-24  Hrvoje Niksic  <hniksic@srce.hr>
3002
3003         * version.c: Wget 1.5.2-b2 is released.
3004
3005 1998-05-18  Juan Jose Rodriguez  <jcnsoft@jal1.telmex.net.mx>
3006
3007         * mswindows.h: Don't translate mkdir to _mkdir under Borland.
3008
3009 1998-05-17  Hrvoje Niksic  <hniksic@srce.hr>
3010
3011         * retr.c (elapsed_time): Return correct value when
3012         HAVE_GETTIMEOFDAY is undefined.
3013
3014 1998-05-13  Hrvoje Niksic  <hniksic@srce.hr>
3015
3016         * version.c: Wget 1.5.2-b1 is released.
3017
3018 1998-05-08  Hrvoje Niksic  <hniksic@srce.hr>
3019
3020         * getopt.c (_getopt_internal): Use exec_name instead of argv[0].
3021         (_getopt_internal): Don't translate `#if 0'-ed strings.
3022
3023 1998-05-06  Douglas E. Wegscheid  <wegscd@whirlpool.com>
3024
3025         * mswindows.c (ws_handler): Use fork_to_background().
3026
3027 1998-05-05  Hrvoje Niksic  <hniksic@srce.hr>
3028
3029         * version.c: Wget 1.5.1 is released.
3030
3031 1998-05-05  Hrvoje Niksic  <hniksic@srce.hr>
3032
3033         * http.c (parse_http_status_line): Avoid `minor' and `major'
3034         names.
3035
3036 1998-05-02  Hrvoje Niksic  <hniksic@srce.hr>
3037
3038         * utils.c (mkdirhier): Renamed to make_directory.
3039
3040 1998-05-01  Hrvoje Niksic  <hniksic@srce.hr>
3041
3042         * mswindows.c (fork_to_background): Define under Windows.
3043
3044         * utils.c (fork_to_background): New function.
3045
3046         * html.c (htmlfindurl): Removed rerdundant casts.
3047
3048 1998-05-01  Douglas E. Wegscheid  <wegscd@whirlpool.com>
3049
3050         * mswindows.c (ws_mypath): Cache the path.
3051
3052 1998-04-30  Douglas E. Wegscheid  <wegscd@whirlpool.com>
3053
3054         * ftp.h: Prefix enum ftype members with FT_.
3055
3056         * ftp-ls.c, ftp.c, html.h: Adjust accordingly.
3057
3058         * mswindows.h: Use stat under Borland, _stat under MSVC.
3059
3060 1998-04-28  Hrvoje Niksic  <hniksic@srce.hr>
3061
3062         * http.c (known_authentication_scheme_p): New function.
3063         (gethttp): Handle authorization more correctly.
3064
3065         * ftp-basic.h: Removed.
3066
3067         * cmpt.h: Removed.
3068
3069         * utils.c: Include <unistd.h> before <pwd.h>; needed under SunOS
3070         with gcc 2.8.
3071         (numdigit): Use `while' loop.
3072
3073         * http.c (create_authorization_line): Detect authentication
3074         schemes case-insensitively.
3075
3076         * http.c (extract_header_attr): Use strdupdelim().
3077         (digest_authentication_encode): Move declaration of local
3078         variables to smaller scope.
3079         (digest_authentication_encode): Reset REALM, OPAQUE and NONCE.
3080         (create_authorization_line): Detect authentication schemes
3081         case-insensitively.
3082
3083         * utils.c (touch): Constify.
3084
3085         * http.c (gethttp): Report a nicer error when no data is received.
3086
3087         * rbuf.h (RBUF_READCHAR): Ditto.
3088
3089         * ftp-basic.c (ftp_response): Use sizeof.
3090
3091 1998-04-27  Hrvoje Niksic  <hniksic@srce.hr>
3092
3093         * retr.c (print_percentage): EXPECTED is long, not int.
3094         (print_percentage): Use floating-point arithmetic to avoid
3095         overflow with large files' sizes multiplied with 100.
3096
3097 1998-04-27  Gregor Hoffleit  <flight@mathi.uni-heidelberg.de>
3098
3099         * config.h.in: Added pid_t stub.
3100
3101         * sysdep.h (S_ISREG): Moved here from mswindows.h (NeXT doesn't
3102         define it).
3103
3104 1998-04-20  Hrvoje Niksic  <hniksic@srce.hr>
3105
3106         * version.c: Wget 1.5.0 is released.
3107
3108 1998-04-18  Hrvoje Niksic  <hniksic@srce.hr>
3109
3110         * url.c (str_url): Ditto.
3111
3112         * ftp-basic.c (ftp_rest): Use new name.
3113
3114         * utils.c (long_to_string): Renamed from prnum().
3115
3116 1998-04-16  Hrvoje Niksic  <hniksic@srce.hr>
3117
3118         * version.c: Wget 1.5-b17 is released.
3119
3120 1998-04-08  Hrvoje Niksic  <hniksic@srce.hr>
3121
3122         * headers.c (header_get): New argument FLAGS.
3123
3124         * http.c (gethttp): If request is malformed, bail out of the
3125         header loop.
3126         (gethttp): Check for empty header *after* the status line checks.
3127         (gethttp): Disallow continuations for status line.
3128
3129 1998-04-08  Hrvoje Niksic  <hniksic@srce.hr>
3130
3131         * version.c: Wget 1.5-b16 is released.
3132
3133 1998-04-08  Hrvoje Niksic  <hniksic@srce.hr>
3134
3135         * init.c (commands): Renamed `always_rest' to `continue'.
3136
3137 1998-04-05  Hrvoje Niksic  <hniksic@srce.hr>
3138
3139         * all: Use it.
3140
3141         * log.c (logputs): New argument.
3142         (logvprintf): Ditto.
3143         (logprintf): Ditto.
3144
3145 1998-04-04  Hrvoje Niksic  <hniksic@srce.hr>
3146
3147         * http.c (http_atotm): Update comment.
3148
3149         * main.c (i18n_initialize): Set LC_MESSAGES, not LC_ALL.
3150
3151         * wget.h: Renamed ENABLED_NLS to HAVE_NLS.
3152
3153         * main.c (i18n_initialize): New function.
3154         (main): Use it.
3155
3156         * log.c: Include <unistd.h>.
3157
3158         * retr.c (show_progress): Cast alloca to char *.
3159
3160 1998-04-04  Hrvoje Niksic  <hniksic@srce.hr>
3161
3162         * version.c: Wget 1.5-b15 is released.
3163
3164 1998-04-04  Hrvoje Niksic  <hniksic@srce.hr>
3165
3166         * utils.h: Declare file_non_directory_p().
3167
3168 1998-04-03  Hrvoje Niksic  <hniksic@srce.hr>
3169
3170         * main.c (main): It's `tries', not `numtries' now.
3171
3172 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
3173
3174         * init.c (getperms): Removed.
3175
3176 1998-04-01  Tim Charron  <tcharron@interlog.com>
3177
3178         * log.c (logvprintf): Don't use ARGS twice.
3179
3180 1998-04-01  John  <john@futuresguide.com>
3181
3182         * mswindows.c: Cleaned up.
3183
3184 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
3185
3186         * version.c: Wget 1.5-b14 is released.
3187
3188 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
3189
3190         * ftp-opie.c (STRLEN4): New macro.
3191         (btoe): Use it.
3192
3193 1998-04-01  Junio Hamano  <junio@twinsun.com>
3194
3195         * http.c: Document all the Digest functions.
3196
3197 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
3198
3199         * utils.c (file_non_directory_p): Renamed from isfile().
3200
3201         * mswindows.h (S_ISREG): New macro, suggested by Tim Adam.
3202
3203 1998-03-31  Hrvoje Niksic  <hniksic@srce.hr>
3204
3205         * utils.c (mkdirhier): Use 0777 instead of opt.dirmode.
3206
3207         * init.c (cmd_spec_dotstyle): Use 48 dots per line for binary
3208         style.
3209         (cmd_permissions): Removed.
3210
3211         * config.h.in: Add template for WORDS_BIGENDIAN.
3212
3213 1998-03-31  Junio Hamano  <junio@twinsun.com>
3214
3215         * http.c (HEXD2asc): New macro.
3216         (dump_hash): Use it.
3217
3218 1998-03-31  Hrvoje Niksic  <hniksic@srce.hr>
3219
3220         * version.c: Wget 1.5-b13 is released.
3221
3222 1998-03-31  Hrvoje Niksic  <hniksic@srce.hr>
3223
3224         * main.c (main): Don't try to use `com'.
3225
3226 1998-03-30  Hrvoje Niksic  <hniksic@srce.hr>
3227
3228         * init.c (cmd_permissions): New function.
3229
3230 1998-03-30  Hrvoje Niksic  <hniksic@srce.hr>
3231
3232         * version.c: Wget 1.5-b12 is released.
3233
3234 1998-03-30  Hrvoje Niksic  <hniksic@srce.hr>
3235
3236         * init.c (commands): Renamed `numtries' to `tries'.
3237         (cmd_spec_debug): Removed.
3238         (home_dir): Under Windows, return `C:\' if HOME is undefined.
3239
3240 1998-03-29  Hrvoje Niksic  <hniksic@srce.hr>
3241
3242         * config.h.in: Define _XOPEN_SOURCE.
3243
3244         * init.c (check_user_specified_header): New function.
3245         (cmd_spec_header): Use it.
3246         (cmd_spec_useragent): New function.
3247
3248 1998-03-29  Hrvoje Niksic  <hniksic@srce.hr>
3249
3250         * version.c: Wget 1.5-b11 is released.
3251
3252 1998-03-28  Hrvoje Niksic  <hniksic@srce.hr>
3253
3254         * wget.h: Include <libintl.h> only if NLS is enabled.
3255
3256 1998-03-26  Hrvoje Niksic  <hniksic@srce.hr>
3257
3258         * options.h (struct options): Made `wait' a long.
3259         (struct options): Ditto for `timeout'.
3260
3261 1998-03-19  Hrvoje Niksic  <hniksic@srce.hr>
3262
3263         * utils.c (exists): Renamed to file_exists_p.
3264         (file_exists_p): Use access() if available.
3265
3266 1998-03-17  Hrvoje Niksic  <hniksic@srce.hr>
3267
3268         * utils.c (memfatal): Set save_log_p to 0 to avoid potential
3269         infloop.
3270
3271         * log.c: do_logging -> save_log_p.
3272
3273         * config.h.in: Added template for HAVE_VSNPRINTF.
3274
3275 1998-03-16  Hrvoje Niksic  <hniksic@srce.hr>
3276
3277         * init.c: Ditto.
3278
3279         * http.c: Protect declaration against non-ANSI compiler.
3280
3281         * log.c (logvprintf): Use vsnprintf() if available.
3282
3283         * getopt.c (main): Don't translate test stuff.
3284
3285 1998-03-16  Hrvoje Niksic  <hniksic@srce.hr>
3286
3287         * version.c: Wget 1.5-b10 is released.
3288
3289 1998-03-11  Hrvoje Niksic  <hniksic@srce.hr>
3290
3291         * ftp.c (getftp): Don't translate "CWD %s".
3292
3293         * wget.h (GCC_FORMAT_ATTR): Renamed from FORMAT_ATTR.
3294
3295 1998-03-07  Hrvoje Niksic  <hniksic@srce.hr>
3296
3297         * ftp-opie.c (btoe): Use memcpy() instead of strncat().
3298
3299         * log.c (logputs): New function.
3300         (logvprintf): Renamed from vlogmsg; use logputs().
3301
3302         * retr.c (show_progress): Print `[100%]' when the retrieval is
3303         finished.
3304
3305         * init.c (run_wgetrc): Use FILE, not PATH.
3306         (wgetrc_file_name): Ditto.
3307
3308 1998-03-07  Tim Adam  <tma@osa.com.au>
3309
3310         * recur.c (parse_robots): Correctly reset `entries' on empty
3311         disallow.
3312
3313 1998-03-07  Hrvoje Niksic  <hniksic@srce.hr>
3314
3315         * init.c (cmd_spec_debug): Use cmd_boolean().
3316
3317 1998-02-23  Hrvoje Niksic  <hniksic@srce.hr>
3318
3319         * http.c (gethttp): Create proxy-authorization correctly.
3320
3321 1998-02-22  Hrvoje Niksic  <hniksic@srce.hr>
3322
3323         * md5.c: Ditto.
3324
3325         * getopt.c: Use ANSI function definitions.
3326
3327         * ftp-opie.c: New file.
3328
3329         * options.h: Don't redefine EXTERN.
3330
3331         * init.c: Sort it correctly.
3332
3333 1998-02-22  Hrvoje Niksic  <hniksic@srce.hr>
3334
3335         * version.c: Wget 1.5-b9 is released.
3336
3337 1998-02-22  Hrvoje Niksic  <hniksic@srce.hr>
3338
3339         * recur.c (recursive_retrieve): Reset `first_time'.
3340
3341         * ftp.c (getftp): Added `default' clause to switches of uerr_t.
3342
3343         * rbuf.c (rbuf_peek): Simplified.
3344         (rbuf_flush): Use MINVAL.
3345
3346         * wget.h (MINVAL): Moved from url.h.
3347
3348         * rbuf.h (RBUF_FD): New macro.
3349
3350         * url.c (add_url): Add to the head of the list.
3351
3352         * ftp.c (ftp_retrieve_list): Set the permissions to downloaded
3353         file.
3354         (getftp): Set the default permissions to 0600.
3355
3356 1998-02-21  Hrvoje Niksic  <hniksic@srce.hr>
3357
3358         * url.c (get_urls_html): Ditto.
3359         (convert_links): Ditto.
3360
3361         * recur.c (parse_robots): Ditto.
3362
3363         * html.c (ftp_index): Ditto.
3364
3365         * ftp-ls.c (ftp_parse_unix_ls): Open file as binary.
3366
3367         * init.c (defaults): Initialize `opt' to zero via memset.
3368
3369         * http.c (digest_authentication_encode): goto considered harmful.
3370
3371 1998-02-19  Hrvoje Niksic  <hniksic@srce.hr>
3372
3373         * ftp.c (delelement): Simplify and fix leak.
3374
3375 1998-02-18  Hrvoje Niksic  <hniksic@srce.hr>
3376
3377         * http.c (dump_hash): Use HEXD2ASC instead of home-grown stuff.
3378
3379         * url.h (HEXD2ASC): Removed warning.
3380
3381         * init.c (comind): Use binary search.
3382         (commands): Reorganized.
3383         (setval): Ditto.
3384         (cmd_boolean): New function.
3385         (cmd_number): Ditto.
3386         (cmd_number_inf): Ditto.
3387         (cmd_string): Ditto.
3388         (cmd_vector): Ditto.
3389         (cmd_directory_vector): Ditto.
3390         (cmd_bytes): Ditto.
3391         (cmd_time): Ditto.
3392         (cmd_spec_debug): Ditto.
3393         (cmd_spec_dirmode): Ditto.
3394         (cmd_spec_dirstruct): Ditto.
3395         (cmd_spec_dotstyle): Ditto.
3396         (cmd_spec_header): Ditto.
3397         (cmd_spec_htmlify): Ditto.
3398         (cmd_spec_mirror): Ditto.
3399         (cmd_spec_outputdocument): Ditto.
3400         (cmd_spec_recursive): Ditto.
3401         (settime): Merged with cmd_time().
3402         (setbytes): Merged with cmd_bytes().
3403         (setonoff): Merged with cmd_boolean().
3404         (onoff): Ditto.
3405
3406 1998-02-17  Hrvoje Niksic  <hniksic@srce.hr>
3407
3408         * Makefile.in (distclean): Remove `config.h'.
3409
3410 1998-02-17  Hrvoje Niksic  <hniksic@srce.hr>
3411
3412         * version.c: Wget 1.5-b8 is released.
3413
3414 1998-02-17  Hrvoje Niksic  <hniksic@srce.hr>
3415
3416         * http.c (digest_authentication_encode): New function.
3417         (create_authorization_line): Use it.
3418         (dump_hash): New function.
3419         (digest_authentication_encode): Use it.
3420
3421         * fnmatch.c: Renamed from `mtch.c'.
3422
3423 1998-02-15  Karl Eichwalder  <ke@suse.de>
3424
3425         * main.c (main): Tag "Written by..." string as translatable.
3426
3427 1998-02-15  Hrvoje Niksic  <hniksic@srce.hr>
3428
3429         * wget.h (FREE_MAYBE): New macro.
3430
3431         * http.c (create_authorization_line): Don't use ANSI C string
3432         concatenation feature.
3433         (basic_authentication_encode): Use alloca() for temporary
3434         variables.
3435
3436         * recur.h: Ditto.
3437
3438         * http.c: Ditto.
3439
3440         * headers.h: Ditto.
3441
3442         * ftp-basic.c: Protect declaration against non-ANSI compiler.
3443
3444         * http.c (create_authorization_line): Cast `unsigned char *' to
3445         `char *' for sprintf, to shut up the noisy Digital Unix cc.
3446
3447 1998-02-15  Hrvoje Niksic  <hniksic@srce.hr>
3448
3449         * version.c: Wget 1.5-b7 is released.
3450
3451 1998-02-15  Hrvoje Niksic  <hniksic@srce.hr>
3452
3453         * cmpt.c (strstr): Synched with glibc-2.0.6.
3454
3455         * ftp-basic.c (calculate_skey_response): Ditto.
3456         (calculate_skey_response): Use alloca().
3457
3458         * http.c (create_authorization_line): Work with FSF's version of
3459         md5.c.
3460
3461         * md5.c: New file, from GNU libc.
3462
3463 1998-02-14  Hrvoje Niksic  <hniksic@srce.hr>
3464
3465         * url.h (URL_CLEANSE): Name the temporary variable more carefully.
3466
3467 1998-02-13  Hrvoje Niksic  <hniksic@srce.hr>
3468
3469         * http.c (basic_authentication_encode): New function, instead of
3470         the macro.
3471
3472 1998-02-13  Junio Hamano  <junio@twinsun.com>
3473
3474         * http.c: Add HTTP-DA support.
3475         * ftp-basic.c: Add Opie/S-key support.
3476         * config.h.in, Makefile.in: Add HTTP-DA and Opie/S-key support.
3477         * md5.c, md5.h: New files.
3478
3479 1998-02-13  Hrvoje Niksic  <hniksic@srce.hr>
3480
3481         * http.c (http_process_range): Renamed from hprocrange().
3482         (http_process_range): Parse the whole header.
3483
3484         * headers.c: New file.
3485         (header_process): New function.
3486         (header_get): Renamed from fetch_next_header.
3487
3488         * all: Include utils.h only where necessary.
3489
3490         * wget.h: Declare xmalloc(), xrealloc() and xstrdup() here.
3491
3492         * wget.h: Add provisions for dmalloc.
3493
3494 1998-02-12  Hrvoje Niksic  <hniksic@srce.hr>
3495
3496         * version.c: Wget 1.5-b6 is released.
3497
3498 1998-02-12  Hrvoje Niksic  <hniksic@srce.hr>
3499
3500         * ftp.c (ftp_loop): Determine `filename' more precisely.
3501
3502         * init.c (setval): Don't set `opt.quiet' if output-document is
3503         `-'.
3504
3505         * log.c (log_init): Print to STDERR instead of STDOUT.
3506         (vlogmsg): Use STDERR by default.
3507         (logflush): Ditto.
3508
3509 1998-02-11  Simon Josefsson  <jas@pdc.kth.se>
3510
3511         * host.c: Use addr_in again.
3512
3513 1998-02-08  Karl Eichwalder  <karl@suse.de>
3514
3515         * http.c (gethttp): Fixed typo.
3516
3517 1998-02-08  Hrvoje Niksic  <hniksic@srce.hr>
3518
3519         * version.c: Wget 1.5-b5 is released.
3520
3521 1998-02-08  Hrvoje Niksic  <hniksic@srce.hr>
3522
3523         * retr.c (show_progress): Use it.
3524
3525         * log.c (logflush): New function.
3526
3527         * wget.h: Utilize __attribute__ if on gcc.
3528
3529 1998-02-07  Hrvoje Niksic  <hniksic@srce.hr>
3530
3531         * http.c (base64_encode_line): New argument LENGTH.
3532         (BASIC_AUTHENTICATION_ENCODE): Use it.
3533         (BASIC_AUTHENTICATION_ENCODE): Take length of HEADER into account.
3534
3535         * main.c (main): Fixed fprintf() format mismatch.
3536
3537 1998-02-06  Hrvoje Niksic  <hniksic@srce.hr>
3538
3539         * version.c: Wget 1.5-b4 is released.
3540
3541 1998-02-03  Simon Josefsson  <jas@pdc.kth.se>
3542
3543         * host.c: use sockaddr_in instead of addr_in.
3544
3545 1998-02-04  Hrvoje Niksic  <hniksic@srce.hr>
3546
3547         * init.c (cleanup): Use it.
3548
3549         * recur.c (recursive_cleanup): New function.
3550
3551         * retr.c (retrieve_from_file): Ditto.
3552
3553         * main.c (main): Use it.
3554
3555         * recur.c (recursive_reset): New function.
3556
3557         * retr.c (retrieve_from_file): Ditto.
3558
3559         * main.c (main): Simplify call to recursive_retrieve().
3560
3561         * recur.c (recursive_retrieve): Removed FLAGS argument.
3562
3563         * http.c (gethttp): Changed call to iwrite().
3564
3565 1998-02-03  Hrvoje Niksic  <hniksic@srce.hr>
3566
3567         * url.c (get_urls_html): Ditto.
3568         (free_urlpos): Ditto.
3569         (mkstruct): Ditto.
3570         (construct): Ditto.
3571
3572         * retr.c (retrieve_url): Move declaration of local variables to
3573         smaller scope.
3574
3575         * url.c (urlproto): Use it.
3576         (parseurl): Ditto.
3577         (str_url): Ditto.
3578         (get_urls_html): Ditto.
3579
3580         * utils.h (ARRAY_SIZE): New macro.
3581
3582         * url.c (proto): Moved from url.h.
3583
3584         * url.h (URL_CLEANSE): Reformatted.
3585         (USE_PROXY_P): Renamed from USE_PROXY.
3586
3587         * ftp-basic.c: Adjust to the new interface of iwrite().
3588
3589         * ftp-basic.c (ftp_port): Use alloca().
3590
3591 1998-02-03  Hrvoje Niksic  <hniksic@srce.hr>
3592
3593         * version.c: Wget 1.5-b3 is released.
3594
3595         * host.c (ftp_getaddress): Don't print to stderr directly.
3596
3597         * init.c (setbytes): Support `g' for gigabytes.
3598         (cmdtype): New specification CTIME.
3599         (setval): Use it with settime().
3600         (commands): Use it for WAIT and TIMEOUT.
3601
3602 1998-02-02  Hrvoje Niksic  <hniksic@srce.hr>
3603
3604         * http.c (BASIC_AUTHENTICATION_ENCODE): New macro.
3605         (gethttp): Use it.
3606
3607         * utils.c (unique_name_1): Moved from url.c.
3608         (unique_name): Ditto.
3609
3610         * url.c (url_filename): Ditto.
3611
3612         * log.c (redirect_output): Changed call to unique_name().
3613
3614         * url.c (unique_name_1): Renamed from unique_name().
3615         (unique_name): Changed interface.
3616
3617         * init.c (enum cmdid): Moved from init.h.
3618         (cmdtype): Ditto.
3619         (struct cmd): Ditto.
3620
3621         * main.c (main): Use it.
3622         (main): Moved `--backups' to not have a short option.
3623
3624         * options.h (struct options): New member BACKGROUND.
3625
3626         * main.c (print_help): Rearranged.
3627         (main): New long options for -n* short options: --no-directories,
3628         --no-host-directories, --non-verbose, --no-host-lookup and
3629         --dont-remove-listing.
3630
3631 1998-02-01  Hrvoje Niksic  <hniksic@srce.hr>
3632
3633         * main.c (main): Use log_close().
3634
3635         * log.c: New variable LOGFP.
3636         (vlogmsg): Use it.
3637         (redirect_output): Don't open /dev/null; set LOGFP to stdin
3638         instead.
3639         (log_close): New function.
3640
3641         * options.h (struct options): Removed LFILE.
3642
3643         * log.c (log_enable): Removed.
3644
3645         * main.c (main): Use it.
3646
3647         * log.c (log_init): New function.
3648
3649         * url.c (get_urls_html): Removed needless assignment to BASE.
3650
3651         * host.c (add_hlist): Don't set CMP needlessly.
3652
3653         * utils.c (match_backwards): Ditto.
3654         (in_acclist): Ditto.
3655
3656         * url.c (findurl): Ditto.
3657
3658         * netrc.c (parse_netrc): Ditto.
3659
3660         * log.c (log_dump): Ditto.
3661
3662         * html.c (html_quote_string): Ditto.
3663
3664         * ftp-basic.c (ftp_request): Made static.
3665
3666         * connect.c: Made global variables static.
3667
3668         * url.c (construct): Ditto.
3669
3670         * init.c (init_path): Avoid assignment inside `if'-condition.
3671
3672         * ftp.c: Don't include in.h or winsock.h.
3673
3674         * ftp.c (ftp_loop): Use SZ.
3675
3676         * connect.c (bindport): Cast &addrlen to int *.
3677         (conaddr): Ditto.
3678
3679         * init.c (initialize): Don't use SYSTEM_WGETRC unconditionally.
3680
3681 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
3682
3683         * ftp.c (getftp): Initialize opt.ftp_pass here.
3684         (ftp_retrieve_dirs): Use alloca().
3685
3686         * init.c (defaults): Don't initialize opt.ftp_pass.
3687
3688         * sysdep.h (S_ISLNK): Declare for OS/2; ditto for lstat.
3689         From Ivan F. Martinez <ivanfm@ecodigit.com.br>.
3690
3691 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
3692
3693         * recur.c (parse_robots): Check for comments more correctly.
3694
3695         * host.c (ftp_getaddress): Use STRDUP_ALLOCA.
3696         (ftp_getaddress): Add diagnostics when reverse-lookup yields only
3697         hostname.
3698
3699 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
3700
3701         * version.c: Wget 1.5-b2 is released.
3702
3703         * netrc.c (NETRC_FILE_NAME): Moved from netrc.h.
3704
3705         * utils.c (proclist): Pass FNM_PATHNAME to fnmatch().
3706
3707         * ftp-basic.c (ftp_pasv): Avoid unnecessary casting to unsigned
3708         char.
3709
3710         * log.c: Don't attempt to hide arguments from ansi2knr.
3711
3712         * cmpt.c: Synched strptime() and mktime() with glibc-2.0.6.
3713
3714         * ansi2knr.c: Use a later version, from fileutils-3.16l alpha.
3715
3716         * ftp.c (getftp): Ditto.
3717
3718         * http.c (gethttp): Use it.
3719
3720         * retr.c (get_contents): New argument EXPECTED; pass it to
3721         show_progress().
3722         (show_progress): New argument EXPECTED; use it to display
3723         percentages.
3724
3725         * init.c (setval): Ditto.
3726
3727         * http.c (gethttp): Ditto.
3728         (http_loop): Ditto.
3729
3730         * ftp.c (getftp): Ditto.
3731         (ftp_loop_internal): Ditto.
3732
3733         * ftp-ls.c (ftp_parse_unix_ls): Use abort() instead of assert(0).
3734
3735         * sysdep.h (CLOSE): Simplify; use DEBUGP.
3736
3737         * netrc.c (search_netrc): Use alloca().
3738
3739         * init.c (defaults): Initialize no_flush.
3740
3741         * log.c (vlogmsg): Don't flush if no_flush.
3742
3743         * options.h (struct options): New variable no_flush.
3744
3745         * main.c (main): Don't play games with buffering.
3746
3747         * log.c (vlogmsg): Flush the output after every message.
3748
3749 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
3750
3751         * init.c (parse_line): Ditto.
3752
3753         * url.c (get_urls_html): Ditto.
3754
3755         * main.c (main): Don't cast to unsigned char.
3756
3757         * init.c (run_wgetrc): Don't cast to unsigned char.
3758         (parse_line): Accept char instead of unsigned char.
3759
3760         * html.c (htmlfindurl): Use char instead of unsigned char.
3761
3762         * all: Use them.
3763
3764         * sysdep.h: Add wrappers to ctype macros to make them
3765         eight-bit-clean:
3766
3767 1998-01-30  Hrvoje Niksic  <hniksic@srce.hr>
3768
3769         * html.c (htmlfindurl): Download <img lowsrc=...>
3770
3771         * main.c (main): Ignore SIGPIPE.
3772
3773         * connect.c (select_fd): New argument WRITEP.
3774         (iwrite): Call select_fd().
3775
3776 1997-02-27  Fila Kolodny <fila@ibi.com>
3777
3778         * ftp.c (ftp_retrieve_list): If retrieving symlink and the proper
3779         one already exists, just skip it.
3780
3781 1998-01-30  Hrvoje Niksic  <hniksic@srce.hr>
3782
3783         * http.c (gethttp): Cosmetic changes.
3784
3785         * http.c (check_end): Allow `+D...' instead of `GMT'.
3786         From Fabrizio Pollastri <pollastri@cstv.to.cnr.it>.
3787
3788         * url.c (process_ftp_type): New function.
3789         (parseurl): Use it.
3790
3791         * connect.c (iwrite): Allow writing in a few chunks.
3792         (bindport): Made SRV static, so addr can point to it.
3793         (select_fd): Removed HPUX kludge.
3794
3795         * host.c (free_hlist): Incorporated into clean_hosts().
3796
3797 1998-01-29  Hrvoje Niksic  <hniksic@srce.hr>
3798
3799         * host.c (hlist): Made static.
3800         (search_address): Cosmetic change.
3801
3802 1998-01-29  Hrvoje Niksic  <hniksic@srce.hr>
3803
3804         * version.c: Wget v1.5-b1 is released.
3805
3806         * http.c (hgetlen): Use sizeof() to get the header length.
3807         (hgetrange): Ditto.
3808         (hgettype): Ditto.
3809         (hgetlocation): Ditto.
3810         (hgetmodified): Ditto.
3811         (haccepts_none): Ditto.
3812
3813         * main.c (main): Updated `--version' and `--help' output, as per
3814         Francois Pinard's suggestions.
3815
3816         * main.c: Include locale.h; call setlocale(), bindtextdomain() and
3817         textdomain().
3818
3819         * config.h.in: Define stubs for I18N3.
3820
3821         * wget.h: Include libintl.h.
3822
3823 1998-01-28  Hrvoje Niksic  <hniksic@srce.hr>
3824
3825         * url.c (mkstruct): Check for opt.cut_dirs.
3826         (mkstruct): alloca()-te more, xmalloc() less.
3827
3828         * utils.c (load_file): Check for ferror().
3829
3830         * url.c (get_urls_file): Close only the files we opened.
3831         (get_urls_html): Ditto.
3832         (count_slashes): New function.
3833
3834         * http.h: Removed.
3835
3836         * http.c (gethttp): Respect username and password provided by
3837         proxy URL.
3838         (base64_encode_line): Write into an existing buffer instead of
3839         malloc-ing a new one.
3840         (struct http_stat): Moved from http.h
3841
3842         * retr.c (retrieve_url): Free SUF.
3843
3844         * all: Removed lots of unnecessary .h dependencies.
3845
3846         * html.c (global_state): Made static.
3847
3848         * utils.h (ALLOCA_ARRAY): New macro.
3849
3850         * main.c (main): New option `--cut-dirs'.
3851
3852         * url.c (construct): Use alloca() for T.
3853
3854         * utils.c (mkdirhier): Use STRDUP_ALLOCA.
3855
3856         * host.c (_host_t): Moved from host.h.
3857         (struct host): Renamed from _host_t.
3858         (store_hostaddress): Use STRDUP_ALLOCA for INET_S.
3859         (realhost): Ditto.
3860
3861         * host.h: Don't include url.h.
3862
3863         * ftp.c (LIST_FILENAME): Moved from ftp.h.
3864
3865         * init.c (DEFAULT_FTP_ACCT): Moved from ftp.h.
3866
3867         * main.c (main): Enable log if the output goes to a TTY.
3868
3869         * connect.h: Removed unused constant `BACKLOG'.
3870
3871         * config.h.in: Check for isatty().
3872
3873         * Makefile.in (LINK): Use CFLAGS when linking.
3874
3875 1998-01-27  Hrvoje Niksic  <hniksic@srce.hr>
3876
3877         * mswindows.c (ws_hangup): Use redirect_output().
3878
3879         * main.c (redirect_output_signal): New function; use
3880         redirect_output().
3881
3882         * log.c (redirect_output): New function, based on hangup(), which
3883         is deleted.
3884
3885         * log.c (vlogmsg): New function.
3886
3887         * wget.h (DEBUGP): Use debug_logmsg().
3888
3889         * main.c (hangup): Use it.
3890
3891         * log.c (log_dump): New function.
3892
3893         * utils.h (DO_REALLOC): Use `long' for various sizes.
3894
3895         * http.c (hskip_lws): Use `while', for clarity.
3896         (HTTP_DYNAMIC_LINE_BUFFER): New constant.
3897         (fetch_next_header): Use it instead of DYNAMIC_LINE_BUFFER.
3898
3899         * ftp-basic.c (FTP_DYNAMIC_LINE_BUFFER): New constant.
3900         (ftp_response): Use it instead of DYNAMIC_LINE_BUFFER.
3901
3902         * utils.c (DYNAMIC_LINE_BUFFER): Moved from utils.c.
3903         (LEGIBLE_SEPARATOR): Ditto.
3904         (FILE_BUFFER_SIZE): Ditto.
3905
3906         * retr.c (BUFFER_SIZE): Moved from retr.h.
3907
3908         * log.c: New file.
3909         (logmsg): Moved from utils.c.
3910         (debug_logmsg): New function.
3911
3912         * mswindows.h: Include it here.
3913
3914         * init.c: Ditto.
3915
3916         * utils.c: Don't include <windows.h>.
3917
3918 1998-01-25  Hrvoje Niksic  <hniksic@srce.hr>
3919
3920         * host.c (ftp_getaddress): Ditto.
3921
3922         * main.c (main): Use it.
3923
3924         * utils.h (STRDUP_ALLOCA): New macro.
3925
3926         * init.c: Prepend `wget: ' to error messages printed on stderr.
3927
3928         * utils.c (mkdirhier): Renamed from mymkdir.
3929         (touch): Renamed from my_touch.
3930         (pwd_cuserid): Renamed from my_cuserid().
3931
3932 1998-01-24  Andy Eskilsson  <andy.eskilsson@telelogic.se>
3933
3934         * utils.c (accdir): Process wildcards.
3935         (proclist): New function.
3936         (accdir): Use it to avoid code repetition.
3937
3938 1998-01-24  Hrvoje Niksic  <hniksic@srce.hr>
3939
3940         * recur.c (parse_robots): Respect opt.useragent; use alloca().
3941
3942         * http.c (gethttp): Construct useragent accordingly.
3943
3944         * version.c: Changed version string to numbers-only.
3945
3946         * main.c (print_help): List all the options.
3947
3948         * mswindows.c (windows_main_junk): Initialize argv0 here.
3949
3950 1998-01-24  Karl Heuer  <kwzh@gnu.org>
3951
3952         * netrc.c (search_netrc): Initialize `l' only after processing
3953         netrc.
3954
3955         * main.c (main): Don't trap SIGHUP if it's being ignored.
3956
3957 1998-01-24  Hrvoje Niksic  <hniksic@srce.hr>
3958
3959         * all: Use logmsg().
3960
3961         * utils.c (time_str): Moved from retr.c.
3962         (logmsg): New function.
3963         (logmsg_noflush): Ditto.
3964
3965         * rbuf.c: New file, moved buf_* functions here.
3966
3967         * ftp.c (ftp_expected_bytes): Moved from ftp-basic.c.
3968
3969         * ftp-basic.c (ftp_rest): Use prnum().
3970
3971         * ftp-basic.c: Ditto.
3972
3973         * ftp.c: Use the new reading functions and macros.
3974
3975         * retr.c (buf_initialize): New function.
3976         (buf_initialized_p): Ditto.
3977         (buf_uninitialize): Ditto.
3978         (buf_fd): Ditto.
3979
3980         * http.c (fetch_next_header): Use the BUF_READCHAR macro for
3981         efficiency.
3982         (gethttp): Use alloca() where appropriate.
3983
3984         * retr.c (buf_readchar): Use it.
3985         (buf_peek): Use rstreams.
3986
3987         * retr.h (BUF_READCHAR): New macro.
3988
3989         * init.c (home_dir): Rewritten for clarity.
3990         (init_path): Ditto.
3991
3992         * mswindows.c (ws_backgnd): Made static.
3993         (read_registry): Ditto.
3994         (ws_cleanup): Ditto.
3995         (ws_handler): Ditto.
3996
3997 1998-01-23  Hrvoje Niksic  <hniksic@srce.hr>
3998
3999         * alloca.c: New file.
4000
4001         * Makefile.in (ALLOCA): Define.
4002
4003         * mswindows.c (ws_help): Constify.
4004         (ws_help): Use alloca.
4005
4006         * mswindows.c: Reformat.
4007
4008         * all: Added _(...) annotations for I18N snarfing and translation.
4009
4010         * host.c (ftp_getaddress): Nuke SYSINFO.
4011         (ftp_getaddress): Don't use getdomainname().
4012         (ftp_getaddress): Use uname(), where available.
4013
4014         * http.c (gethttp): Protect a stray fprintf().
4015
4016         * init.c (settime): New function.
4017         (setval): Treat WAIT specially, allowing suffixes like `m' for
4018         minutes, etc.
4019
4020 1998-01-21  Hrvoje Niksic  <hniksic@srce.hr>
4021
4022         * url.c (get_urls_html): Use alloca() for TEMP.
4023
4024 1998-01-21  Jordan Mendelson  <jordy@wserv.com>
4025
4026         * url.c (rotate_backups): New function.
4027
4028         * http.c (gethttp): Ditto.
4029
4030         * ftp.c (getftp): Rotate backups.
4031
4032 1997-12-18  Hrvoje Niksic  <hniksic@srce.hr>
4033
4034         * all: Renamed nmalloc(), nrealloc() and nstrdup() to xmalloc(),
4035         xrealloc() and xstrdup().  Use the new functions.
4036
4037         * url.c (decode_string): Made static.
4038         (has_proto): Ditto.
4039         (parse_dir): Ditto.
4040         (parse_uname): Ditto.
4041         (mkstruct): Ditto.
4042         (construct): Ditto.
4043         (construct_relative): Ditto.
4044
4045         * retr.c (show_progress): Made static.
4046
4047         * recur.c (robots_url): Made static.
4048         (retrieve_robots): Ditto.
4049         (parse_robots): Ditto.
4050         (robots_match): Ditto.
4051
4052         * main.h: Removed.
4053
4054         * main.c (printhelp): Made static.
4055         (hangup): Ditto.
4056
4057         * init.c (comind): Made static.
4058         (defaults): Ditto.
4059         (init_path): Ditto.
4060         (run_wgetrc): Ditto.
4061         (onoff): Ditto.
4062         (setonoff): Ditto.
4063         (setnum): Ditto.
4064         (myatoi): Ditto.
4065         (getperms): Ditto.
4066         (setbytes): Ditto.
4067
4068         * http.c (fetch_next_header): Made static.
4069         (hparsestatline): Ditto.
4070         (hskip_lws): Ditto.
4071         (hgetlen): Ditto.
4072         (hgetrange): Ditto.
4073         (hgettype): Ditto.
4074         (hgetlocation): Ditto.
4075         (hgetmodified): Ditto.
4076         (haccepts_none): Ditto.
4077         (gethttp): Ditto.
4078         (base64_encode_line): Ditto.
4079         (mktime_from_utc): Ditto.
4080         (http_atotm): Ditto.
4081
4082         * html.c (idmatch): Made static.
4083
4084         * host.c (search_host): Made static.
4085         (search_address): Ditto.
4086         (free_hlist): Ditto.
4087
4088         * ftp.c (getftp): Made static.
4089         (ftp_loop_internal): Ditto.
4090         (ftp_get_listing): Ditto.
4091         (ftp_retrieve_list): Ditto.
4092         (ftp_retrieve_dirs): Ditto.
4093         (ftp_retrieve_glob): Ditto.
4094         (freefileinfo): Ditto.
4095         (delelement): Ditto.
4096
4097         * ftp-ls.c (symperms): Made static.
4098         (ftp_parse_unix_ls): Ditto.
4099
4100         * connect.c (select_fd): Made static.
4101
4102         * utils.c (xmalloc): Renamed from nmalloc.
4103         (xrealloc): Renamed from nrealloc.
4104         (xstrdup): Renamed from nstrdup.
4105
4106         * getopt.c (exchange): Use alloca.
4107
4108         * mswindows.c (mycuserid): Use strncpy.
4109
4110         * New files mswindows.c, mswindows.h, sysdep.h.  winjunk.c,
4111         systhings.h, windecl.h and winjunk.h removed.
4112
4113         * mswindows.c (sleep): New function.
4114
4115         * utils.c: Include <windows.h> under Windows.
4116
4117 1997-06-12  Darko Budor  <dbudor@zesoi.fer.hr>
4118
4119         * url.h (URL_UNSAFE): Change default under Windows.
4120
4121         * retr.c (retrieve_from_file): Respect opt.delete_after.
4122
4123         * main.c (main): Call ws_help on Windows.
4124
4125         * winjunk.c (windows_main_junk): New function.
4126
4127         * main.c (main): Junk-process argv[0].
4128
4129         * http.c (mktime_from_utc): Return -1 if mktime failed.
4130
4131         * http.c (http_loop): Ditto.
4132
4133         * ftp.c (ftp_loop_internal): Change title on Windows when using a
4134         new URL.
4135
4136         * winjunk.c (getdomainname): Lots of functions.
4137
4138 1997-06-12  Hrvoje Niksic  <hniksic@srce.hr>
4139
4140         * cmpt.c (strptime_internal): Handle years more correctly for
4141         `%y'.
4142
4143 1997-06-09  Mike Thomas <mthomas@reality.ctron.com>
4144
4145         * http.c (gethttp): Allocate enough space for
4146         `Proxy-Authorization' header.
4147
4148 1997-05-10  Hrvoje Niksic  <hniksic@srce.hr>
4149
4150         * version.c: Wget/1.4.5 is released.
4151
4152 1997-05-10  Hrvoje Niksic  <hniksic@srce.hr>
4153
4154         * retr.c (get_contents): Check return value of fwrite more
4155         carefully.
4156
4157 1997-03-30  Andreas Schwab  <schwab@issan.informatik.uni-dortmund.de>
4158
4159         * cmpt.c (strptime_internal) [case 'Y']: Always subtract 1900 from
4160         year, regardless of century.
4161
4162 1997-03-30  Hrvoje Niksic  <hniksic@srce.hr>
4163
4164         * utils.c (isfile): Use `lstat' instead of `stat'.
4165
4166 1997-03-29  Hrvoje Niksic  <hniksic@srce.hr>
4167
4168         * utils.c (numdigit): Use explicit test.
4169
4170 1997-03-21  Hrvoje Niksic  <hniksic@srce.hr>
4171
4172         * http.c (http_loop): Always use `url_filename' to get u->local.
4173
4174 1997-03-20  Hrvoje Niksic  <hniksic@srce.hr>
4175
4176         * url.c: Recognize https.
4177
4178 1997-03-13  Hrvoje Niksic  <hniksic@srce.hr>
4179
4180         * recur.c (recursive_retrieve): Lowercase just the host name.
4181
4182 1997-03-09  Hrvoje Niksic  <hniksic@srce.hr>
4183
4184         * url.c (get_urls_file): Use the correct test.
4185         (get_urls_html): Ditto.
4186
4187 1997-03-07  Hrvoje Niksic  <hniksic@srce.hr>
4188
4189         * connect.c: Reverted addrlen to int.
4190
4191         * init.c (parse_line): Check for -1 instead of NONE.
4192
4193         * version.c: Changed version to 1.4.5.
4194
4195 1997-02-17  Hrvoje Niksic  <hniksic@srce.hr>
4196
4197         * init.c: New option netrc.
4198         (initialize): Don't parse .netrc.
4199
4200         * cmpt.c (recursive): Return rp.
4201         (strptime_internal): Match the long strings first, the abbreviated
4202         second.
4203
4204 1997-02-16  Hrvoje Niksic  <hniksic@srce.hr>
4205
4206         * http.c (check_end): New function.
4207         (http_atotm): Use it.
4208
4209 1997-02-13  gilles Cedoc  <gilles@cedocar.fr>
4210
4211         * http.c (gethttp): Use them.
4212
4213         * init.c: New options proxy_user and proxy_passwd.
4214
4215 1997-02-14  Hrvoje Niksic  <hniksic@srce.hr>
4216
4217         * ftp.c (ftp_retrieve_list): Create links even if not relative.
4218
4219 1997-02-10  Hrvoje Niksic  <hniksic@srce.hr>
4220
4221         * recur.c (recursive_retrieve): Lowercase the host name, if the
4222         URL is not "optimized".
4223
4224         * host.c (realhost): Return l->hostname, even if it matches with
4225         host.
4226
4227 1997-02-10  Marin Purgar  <pmc@asgard.hr>
4228
4229         * connect.c: Make addrlen size_t instead of int.
4230         (conaddr): Ditto.
4231
4232 1997-02-09  Gregor Hoffleit  <flight@mathi.uni-heidelberg.DE>
4233
4234         * systhings.h: Define S_ISLNK on NeXT too.
4235
4236 1997-02-09  Hrvoje Niksic  <hniksic@srce.hr>
4237
4238         * version.c: Released 1.4.3.
4239
4240         * url.c: Futher update to list of protostrings.
4241         (skip_proto): Skip `//' correctly for FTP and HTTP.
4242
4243         * url.c (get_urls_html): Handle bogus `http:' things a little
4244         different.
4245
4246         * main.c (main): Removed `follow-ftp' from `f'.
4247         (main): Dumped the `prefix-files' and `file-prefix' options and
4248         features; old and bogus.
4249         (main): Exit on failed setval() in `-e'.
4250
4251         * http.c (fetch_next_header): Use it to detect header continuation
4252         correctly.
4253
4254         * retr.c (buf_peek): New function.
4255
4256 1997-02-08  Hrvoje Niksic  <hniksic@srce.hr>
4257
4258         * wget.h: Include time.h and stuff.
4259
4260 1997-02-08  Roger Beeman  <beeman@cisco.com>
4261
4262         * ftp.c: Include <time.h>
4263
4264 1997-02-07  Hrvoje Niksic  <hniksic@srce.hr>
4265
4266         * url.c (findurl): Would read over buffer limits.
4267
4268 1997-02-06  Hrvoje Niksic  <hniksic@srce.hr>
4269
4270         * ftp-ls.c (ftp_parse_unix_ls): Allow spaces in file names.
4271
4272 1997-02-05  Hrvoje Niksic  <hniksic@srce.hr>
4273
4274         * http.c (http_atotm): Initialize tm.is_dst.
4275
4276 1997-02-02  Hrvoje Niksic  <hniksic@srce.hr>
4277
4278         * http.c (gethttp): Don't print the number of retrieved headers.
4279
4280         * main.c (main): New option `--no-clobber', alias for `-nc'.
4281
4282         * url.c: Recognize `https://'.
4283
4284 1997-02-01  Hrvoje Niksic  <hniksic@srce.hr>
4285
4286         * host.c (herrmsg): Don't use h_errno.
4287
4288 1997-01-30  Hrvoje Niksic  <hniksic@srce.hr>
4289
4290         * host.c (accept_domain): Use it.
4291
4292         * main.c (main): New option `--exclude-domains'.
4293
4294         * retr.c (retrieve_url): Use it.
4295         (retrieve_url): Bail out when an URL is redirecting to itself.
4296
4297         * url.c (url_equal): New function.
4298
4299 1997-01-29  Hrvoje Niksic  <hniksic@srce.hr>
4300
4301         * connect.c: Include arpa/inet.h instead of arpa/nameser.h.
4302
4303         * http.c (mk_utc_time): New function.
4304         (http_atotm): Use it; handle time zones correctly.
4305
4306 1997-01-28  Hrvoje Niksic  <hniksic@srce.hr>
4307
4308         * http.c: Ditto.
4309
4310         * ftp-basic.c: Use it instead of WRITE.
4311
4312         * connect.c (iwrite): New function.
4313
4314 1997-01-27  Hrvoje Niksic  <hniksic@srce.hr>
4315
4316         * cmpt.c (mktime): New function.
4317
4318         * netrc.c: Include <sys/types.h>.
4319
4320         * main.c (main): Wouldn't recognize --spider.
4321
4322         * retr.c (rate): Use `B', `KB' and `MB'.
4323         (reset_timer,elapsed_time): Moved from utils.c.
4324
4325         * ftp.c (ftp_retrieve_list): Ditto.
4326
4327         * http.c (http_loop): Don't touch the file if opt.dfp.
4328
4329 1997-01-24  Hrvoje Niksic  <hniksic@srce.hr>
4330
4331         * cmpt.c: New file.
4332
4333         * ftp.c (ftp_retrieve_glob): New argument semantics.
4334         (ftp_retrieve_dirs): Use it.
4335         (ftp_loop): Ditto.
4336
4337         * html.c (htmlfindurl): Recognize `'' as the quote char.
4338
4339 1997-01-23  Hrvoje Niksic  <hniksic@srce.hr>
4340
4341         * ftp.c (ftp_loop_internal): Use it.
4342
4343         * utils.c (remove_link): New function.
4344
4345 1997-01-22  Hrvoje Niksic  <hniksic@srce.hr>
4346
4347         * retr.c (retrieve_url): Require STRICT redirection URL.
4348
4349         * url.c (parseurl): New argument STRICT.
4350
4351         * http.c (hparsestatline): Be a little-bit less strict about
4352         status line format.
4353
4354 1997-01-21  Hrvoje Niksic  <hniksic@srce.hr>
4355
4356         * http.c (gethttp): Use it.
4357
4358         * main.c (main): Don't use '<digit>' as options.
4359
4360         * init.c: New option ignore_length.
4361
4362         * http.c (gethttp): Ditto.
4363         (http_loop): Check for redirection without Location:.
4364         (gethttp): Don't print Length unless RETROKF.
4365
4366         * ftp.c (getftp): Use it.
4367
4368         * url.c (mkalldirs): New function.
4369
4370         * utils.c (mymkdir): Don't check for existing non-directory.
4371
4372         * url.c (mkstruct): Don't create the directory.
4373
4374 1997-01-20  Hrvoje Niksic  <hniksic@srce.hr>
4375
4376         * init.c (setval): Removed NO_RECURSION checks.
4377
4378 1997-01-19  Hrvoje Niksic  <hniksic@srce.hr>
4379
4380         * version.c: "Released" 1.4.3-pre2.
4381
4382         * recur.c (recursive_retrieve): Bypass host checking only if URL
4383         is ftp AND parent URL is not ftp.
4384
4385         * ftp-basic.c (ftp_request): Print out Turtle Power.
4386
4387         * ftp.c (ftp_loop): Call ftp_retrieve_glob with 0 if there's no
4388         wildcard.
4389         (ftp_retrieve_glob): Call ftp_loop_internal even on empty list, if
4390         not glob.
4391
4392         * http.c (gethttp): Be a little bit smarter about status codes.
4393
4394         * recur.c (recursive_retrieve): Always reset opt.recursive when
4395         dealing with FTP.
4396
4397 1997-01-18  Hrvoje Niksic  <hniksic@srce.hr>
4398
4399         * retr.c (retrieve_url): New variable location_changed; use it for
4400         tests instead of mynewloc.
4401         (retrieve_url): Allow heuristic adding of html.
4402
4403         * url.c (url_filename): Don't use the `%' in Windows file names.
4404
4405         * http.c (http_loop): Always time-stamp the local file.
4406
4407         * http.c (http_loop): Ditto.
4408
4409         * ftp.c (ftp_retrieve_list): Use it.
4410
4411         * utils.c (my_touch): New function.
4412
4413         * ftp.c (ftp_retrieve_list): Use #ifdef HAVE_STRUCT_UTIMBUF
4414         instead of #ifndef NeXT.
4415
4416         * utils.c (strptime): New version, by Ulrich Drepper.
4417
4418 1997-01-17  Hrvoje Niksic  <hniksic@srce.hr>
4419
4420         * http.c (haccepts_none): Renamed from `haccepts_bytes'.
4421         (gethttp): If haccepts_none(), disable ACCEPTRANGES.
4422         (http_loop): Would remove ACCEPTRANGES.
4423
4424         * ftp.c (getftp): Call ftp_list with NULL.
4425
4426 1997-01-15  Hrvoje Niksic  <hniksic@srce.hr>
4427
4428         * html.c (ftp_index): Don't print minutes and seconds if we don't
4429         know them; beautify the output.
4430
4431         * ftp.c (getftp): Don't close the socket on FTPNSFOD.
4432
4433 1997-01-14  Hrvoje Niksic  <hniksic@srce.hr>
4434
4435         * utils.c (strptime): New function.
4436         (strptime): Don't use get_alt_number.
4437         (strptime): Don't use locale.
4438         (match_string): Made it a function.
4439
4440 1997-01-12  Hrvoje Niksic  <hniksic@srce.hr>
4441
4442         * http.c (http_atotm): New function.
4443         (http_loop): Use it.
4444
4445         * atotm.c: Removed from the distribution.
4446
4447         * http.c (base64_encode_line): Rewrite.
4448
4449 1997-01-09  Hrvoje Niksic  <hniksic@srce.hr>
4450
4451         * ftp.c (getftp): Use ftp_expected_bytes; print size.
4452
4453         * ftp-basic.c (ftp_response): Use ftp_last_respline.
4454         (ftp_expected_bytes): New function.
4455
4456         * ftp.c (getftp): Print the unauthoritative file length.
4457
4458         * ftp-ls.c: Renamed from ftp-unix.c.
4459         (ftp_parse_ls): Moved from ftp.c.
4460         (ftp_parse_unix_ls): Recognize seconds in time spec.
4461         (ftp_parse_unix_ls): Recognize year-less dates of the previous
4462         year.
4463
4464 1997-01-08  Hrvoje Niksic  <hniksic@srce.hr>
4465
4466         * ftp-basic.c: Don't declare errno if #defined.
4467
4468         * host.c (ftp_getaddress): Check for sysinfo legally.
4469
4470 1997-01-08  Darko Budor  <dbudor@diana.zems.fer.hr>
4471
4472         * connect.c (iread): Use READ.
4473
4474 1996-12-23  Hrvoje Niksic  <hniksic@srce.hr>
4475
4476         * url.c: Recognize finger, rlogin, tn3270, mid and cid as valid
4477         schemes.
4478
4479 1996-12-22  Hrvoje Niksic  <hniksic@srce.hr>
4480
4481         * host.c (ftp_getaddress): Allow `.' in hostname.
4482
4483 1996-12-26  Darko Budor <dbudor@zems.fer.hr>
4484
4485         * wget.h: READ and WRITE macros for use instead of read and write
4486         on sockets, grep READ *.c, grep WRITE *.c
4487
4488         * wsstartup.c: new file - startup for winsock
4489
4490         * wsstartup.h: new file
4491
4492         * win32decl.h: new file - fixup for <errno.h> and winsock trouble
4493
4494         * configure.bat: Configure utility for MSVC
4495
4496         * src/Makefile.ms,config.h.ms: new files for use with MSVC 4.x
4497
4498 1996-12-22  Hrvoje Niksic  <hniksic@srce.hr>
4499
4500         * version.c: Released 1.4.3-pre.
4501
4502         * utils.c (prnum): Accept long.
4503         (legible): Use prnum().
4504
4505         * connect.c (make_connection): Accept port as short.
4506         (bindport): Ditto.
4507
4508         * http.c (gethttp): Use search_netrc.
4509
4510 1996-12-21  Hrvoje Niksic  <hniksic@srce.hr>
4511
4512         * ftp.c (getftp): Use search_netrc.
4513
4514         * netrc.c (free_netrc): New function.
4515
4516         * init.c (home_dir): New function.
4517
4518         * url.c (convert_links): Allow REL2ABS changes.
4519
4520 1996-12-21  Gordon Matzigkeit  <gord@gnu.ai.mit.edu>
4521
4522         * netrc.c: New file.
4523         (parse_netrc, maybe_add_to_list): New functions.
4524
4525 1996-12-17  Hrvoje Niksic  <hniksic@srce.hr>
4526
4527         * retr.c (retrieve_url): Reset opt.recursion before calling
4528         ftp_loop if it is reached through newloc.
4529
4530         * init.c (run_wgetrc): Print the wgetrc path too, when reporting
4531         error; don't use "Syntax error", since we don't know if it is
4532         really a syntax error.
4533
4534 1996-12-16  Hrvoje Niksic  <hniksic@srce.hr>
4535
4536         * utils.c (acceptable): Extract the filename part of the path.
4537
4538         * recur.c (recursive_retrieve): Call acceptable() with the right
4539         argument; would bug out on wildcards.
4540
4541         * init.c (parse_line): Likewise.
4542
4543         * html.c (htmlfindurl): Cast to char * when calling stuff.
4544
4545 1996-12-15  Hrvoje Niksic  <hniksic@srce.hr>
4546
4547         * ftp.c (getftp): Use ftp_pasv.
4548
4549         * ftp-basic.c (ftp_request): Accept NULL value.
4550         (ftp_pasv): New function.
4551
4552         * options.h (struct options): Add passive FTP option.
4553
4554 1996-12-15  Hrvoje Niksic  <hniksic@srce.hr>
4555
4556         * url.c (parseurl): Debug output.
4557
4558         * utils.c (path_simplify): New one, adapted from bash's
4559         canonicalize_pathname().
4560
4561 1996-12-14  Hrvoje Niksic  <hniksic@srce.hr>
4562
4563         * ftp.c (getftp): Don't discard the buffer.
4564
4565         * retr.c (get_contents): New parameter nobuf.
4566
4567 1996-12-13  Shawn McHorse  <riffraff@txdirect.net>
4568
4569         * html.c (htmlfindurl): Recognize <meta contents="d; URL=...".
4570
4571         * init.c (setval): Strip the trailing slashes on CVECDIR.
4572
4573 1996-12-13  Hrvoje Niksic  <hniksic@srce.hr>
4574
4575         * init.c: Make excludes and includes under CVECDIR instead of
4576         CVEC.
4577
4578 1996-12-13  Shawn McHorse  <riffraff@txdirect.net>
4579
4580         * url.c (get_urls_html): Skip "http:".
4581
4582 1996-12-13  Hrvoje Niksic  <hniksic@srce.hr>
4583
4584         * utils.c (strcasecmp): From glibc.
4585         (strncasecmp): Also.
4586         (strstr): Also.
4587
4588         * url.c: Added javascript: to the list of URLs prefixes.
4589
4590 1996-12-12  Shawn McHorse  <riffraff@txdirect.net>
4591
4592         * recur.c (retrieve_robots): Print the warning message only if
4593         verbose.
4594
4595 1996-12-12  Gregor Hoffleit  <flight@mathi.uni-heidelberg.DE>
4596
4597         * ftp.c (ftp_retrieve_list): Use NeXT old utime interface.
4598
4599 1996-12-12  Hrvoje Niksic  <hniksic@srce.hr>
4600
4601         * systhings.h: New file.
4602
4603         * ../configure.in: Check for utime.h
4604
4605         * ftp.c: Check whether we have unistd.h.
4606
4607 1996-11-27  Hrvoje Niksic  <hniksic@srce.hr>
4608
4609         * recur.c (recursive_retrieve): Send the canonical URL as referer.
4610         (recursive_retrieve): Call get_urls_html with the canonical URL.
4611
4612 1996-12-13  Kaveh R. Ghazi  <ghazi@caip.rutgers.edu>
4613
4614         * (configure.in, config.h.in, src/Makefile.in, src/*.[ch]): Add
4615         ansi2knr support for compilers which don't support ANSI style
4616         function prototypes and signatures.
4617
4618         * (aclocal.m4, src/ansi2knr.c, src/ansi2knr.1): New files.
4619
4620 1996-11-26  Hrvoje Niksic  <hniksic@srce.hr>
4621
4622         * url.c: Use it; Recognize paths ending with "." and ".." as
4623         directories.
4624         (url_filename): Append .n whenever file exists and could be a
4625         directory.
4626
4627         * url.h (ISDDOT): New macro.
4628
4629         * init.c (parse_line): Use unsigned char.
4630
4631         * url.c (get_urls_html): Cast to unsigned char * when calling
4632         htmlfindurl.
4633
4634         * html.c (htmlfindurl): Use unsigned char.
4635
4636         * version.c: Changed version to 1.4.3.
4637
4638 1996-11-25  Hrvoje Niksic  <hniksic@srce.hr>
4639
4640         * version.c: Released 1.4.2.
4641
4642         * ftp.c (getftp): Simplified assertion.
4643         (ftp_loop_internal): Remove symlink before downloading.
4644         (ftp_retrieve_list): Unlink the symlink name before attempting to
4645         create a symlink!
4646
4647         * options.h (struct options): Renamed print_server_response to
4648         server_response.
4649
4650         * ftp.c (rel_constr): Removed.
4651         (ftp_retrieve_list): Don't use it.
4652         (ftp_retrieve_list): Use opt.retr_symlinks.
4653
4654 1996-11-24  Hrvoje Niksic  <hniksic@srce.hr>
4655
4656         * main.c (main): New option retr_symlinks.
4657
4658         * url.c (convert_links): Print verbose message.
4659
4660 1996-11-24  Hrvoje Niksic  <hniksic@srce.hr>
4661
4662         * http.c (http_loop): Reset newloc in the beginning of function;
4663         would cause FMR in retrieve_url.
4664
4665 1996-11-23  Hrvoje Niksic  <hniksic@srce.hr>
4666
4667         * recur.c (convert_all_links): Find the URL of each HTML document,
4668         and feed it to get_urls_html; would bug out.
4669         (convert_all_links): Check for l2 instead of dl; removed dl.
4670
4671         * url.c (convert_links): Don't refer to freed newname.
4672
4673         * recur.c (recursive_retrieve): Add this_url to urls_downloaded.
4674
4675         * main.c (main): Print the OS_TYPE in the debug output, too.
4676
4677         * recur.c (recursive_retrieve): Check for opt.delete_after.
4678
4679         * main.c (main): New option delete-after.
4680
4681         * init.c (setval): Cleaned up.
4682
4683 1996-11-21  Hrvoje Niksic  <hniksic@srce.hr>
4684
4685         * Makefile.in (wget): Make `wget' the default target.
4686
4687         * ftp.c (ftp_loop_internal): Move noclobber checking out of the
4688         loop.
4689         (ftp_retrieve_list): Warn about non-matching sizes.
4690
4691         * http.c (http_loop): Made -nc non-dependent on opt.recursive.
4692
4693         * init.c (setnum): Renamed from setnuminf; New argument flags.
4694         (setval): Use it.
4695
4696         * main.c (main): Sorted the options.
4697         (main): New option --wait.
4698
4699 1996-11-21  Shawn McHorse  <riffraff@txdirect.net>
4700
4701         * html.c (htmlfindurl): Reset s->in_quote after getting out of
4702         quotes.
4703
4704 1996-11-20  Hrvoje Niksic  <hniksic@srce.hr>
4705
4706         * version.c: Changed version to 1.4.2.
4707
4708 1996-11-20  Hrvoje Niksic  <hniksic@srce.hr>
4709
4710         * version.c: Released 1.4.1.
4711
4712         * html.c (html_quote_string): New function.
4713         (ftp_index): Use it.
4714         (htmlfindurl): A more gentle ending debug message.
4715
4716         * ftp.c (ftp_loop): Check for opt.htmlify.
4717
4718         * init.c: New command htmlify.
4719
4720         * ftp.c (getftp): Nicer error messages, with `'-encapsulated
4721         strings.
4722         (ftp_loop): Print size of index.html.
4723
4724         * init.c (setval): Implement "styles".
4725
4726         * main.c (main): New option dotstyle.
4727
4728 1996-11-19  Hrvoje Niksic  <hniksic@srce.hr>
4729
4730         * ftp.c (getftp): Close the master socket in case of errors, after
4731         bindport().
4732
4733         * connect.c (bindport): Initialize msock to -1.
4734
4735         * ftp.c (getftp): Initialize dtsock to -1.
4736
4737         * connect.c (closeport): Don't close sock if sock == -1.
4738
4739 1996-11-18  Hrvoje Niksic  <hniksic@srce.hr>
4740
4741         * init.c (setnuminf): Nuked default value -- just leave unchanged.
4742         (setval): Don't send default values.
4743         (defaults): Use DEFAULT_TIMEOUT -- aaargh.
4744
4745         * options.h (struct options): Use long for dot_bytes.
4746
4747         * init.c (setquota): Renamed to setbytes.
4748         (setval): Use setbytes on DOTBYTES.
4749
4750 1996-11-17  Hrvoje Niksic  <hniksic@srce.hr>
4751
4752         * ftp.c (getftp): Initialize con->dltime.
4753
4754         * recur.c (recursive_retrieve): Use same_host instead of
4755         try_robots; simply load robots_txt whenever the host is changed.
4756         (recursive_retrieve): Free forbidden before calling parse_robots.
4757
4758 1996-11-16  Hrvoje Niksic  <hniksic@srce.hr>
4759
4760         * retr.c (show_progress): Use them.
4761
4762         * options.h (struct options): New options dot_bytes, dots_on_line
4763         and dot_spacing.
4764
4765 1996-11-16  Mark Boyns  <boyns@sdsu.edu>
4766
4767         * recur.c (recursive_retrieve): Retrieve directories regardless of
4768         acc/rej rules; check for empty u->file.
4769
4770 1996-11-14  Hrvoje Niksic  <hniksic@srce.hr>
4771
4772         * init.c (setval): Use it.
4773
4774         * utils.c (merge_vecs): New function.
4775
4776         * init.c (setval): Reset the list-type functions when encountering
4777         "".
4778
4779 1996-11-14  Shawn McHorse  <riffraff@txdirect.net>
4780
4781         * recur.c (recursive_retrieve): Use base_url instead of this_url
4782         for no_parent.
4783
4784 1996-11-14  Shawn McHorse  <riffraff@txdirect.net>
4785
4786         * html.c (htmlfindurl): Reset s->in_quote after exiting the quote.
4787
4788 1996-11-13  Hrvoje Niksic  <hniksic@srce.hr>
4789
4790         * utils.c (sepstring): Rewrote; don't use strtok.
4791
4792         * recur.c (recursive_retrieve): Enter assorted this_url to slist
4793         when running the first time.
4794         (retrieve_robots): Warn to ignore errors when robots are loaded.
4795
4796         * utils.c (load_file): Moved from url.c.
4797
4798         * http.c: Made static variables const too in h* functions.
4799
4800         * main.c (main): Renamed --continue-ftp to --continue.
4801
4802         * recur.c (recursive_retrieve): Use it.
4803
4804         * utils.c (frontcmp): New function.
4805
4806         * url.c (accdir): New function.
4807
4808         * html.c (htmlfindurl): Recognize <area href=...>.
4809
4810         * ftp.c (ftp_retrieve_dirs): Implemented opt.includes.
4811
4812         * init.c (setval): Free the existing opt.excludes and
4813         opt.includes, if available.
4814
4815         * main.c (main): New option -I.
4816
4817 1996-11-12  Hrvoje Niksic  <hniksic@srce.hr>
4818
4819         * ftp.c (ftp_retrieve_glob): Do not weed out directories.
4820
4821         * version.c: Changed version to 1.4.1.
4822
4823 1996-11-11  Hrvoje Niksic  <hniksic@srce.hr>
4824
4825         * version.c: Released 1.4.0.
4826
4827 1996-11-10  Hrvoje Niksic  <hniksic@srce.hr>
4828
4829         * main.c (main): Free com and val after parse_line.
4830         (printhelp): Reorder the listing.
4831
4832         * http.c: More robust header parsing.
4833
4834         * http.c: Allow any number of spaces, or no spaces, precede ':'.
4835         (hskip_lws): New function.
4836         (haccepts_bytes): New function.
4837         (gethttp): Use it.
4838
4839         * init.c (setval): Check header sanity.
4840         (setval): Allow resetting of headers.
4841
4842 1996-11-10  Hrvoje Niksic  <hniksic@srce.hr>
4843
4844         * http.c (http_loop): Don't use has_wildcards.
4845
4846         * http.c (gethttp): Free all_headers -- would leak.
4847
4848         * recur.c (recursive_retrieve): Initialize depth to 1 instead of
4849         0 -- this fixes a long-standing bug in -rl.
4850
4851 1996-11-09  Hrvoje Niksic  <hniksic@srce.hr>
4852
4853         * ftp.c: Use -1 as "impossible" value for con->fd.
4854
4855         * url.h (URL_SEPARATOR): Don't treat `*' and `+' as separators.
4856
4857         * init.c (parse_line): Use isalpha.
4858
4859         * ftp-unix.c: Use HAVE_UNISTD_H.
4860
4861         * mtch.c (has_wildcards): Don't match \.
4862
4863         * http.c (http_loop): Warn on HTTP wildcard usage.
4864
4865 1996-11-08  Hrvoje Niksic  <hniksic@srce.hr>
4866
4867         * url.c (url_filename): Do not create numbered suffixes if
4868         opt.noclobber -- would bug out on -nc.
4869
4870 1996-11-07  Hrvoje Niksic  <hniksic@srce.hr>
4871
4872         * recur.c (parse_robots): Don't chuck out the commands without
4873         arguments (`Disallow:<empty>' didn't work).
4874         (parse_robots): Compare versions lowercase.
4875         (parse_robots): Match on base_version, not version_string!
4876         (parse_robots): Handle comments properly.
4877         (parse_robots): Match versions in a sane way.
4878
4879         * init.c: Print nicer error messages.
4880
4881         * version.c: Changed version to 1.4.0.
4882
4883 1996-11-06  Hrvoje Niksic  <hniksic@srce.hr>
4884
4885         * version.c: Released 1.4.0-test2.
4886
4887         * init.c (run_wgetrc): Close fp.
4888
4889         * ftp.c (ftp_retrieve_dirs): Allocate the correct length for
4890         u->dir.
4891
4892 1996-11-06  Hrvoje Niksic  <hniksic@srce.hr>
4893
4894         * init.c (setquota): Allow inf as quota specification.
4895
4896 1996-11-05  Hrvoje Niksic  <hniksic@srce.hr>
4897
4898         * ftp.c (ftp_retrieve_dirs): Return QUOTEXC if quota exceeded.
4899         (ftp_retrieve_glob): Return QUOTEXC on quota exceeded.
4900
4901         * main.c (main): Check for quota by comparison with downloaded
4902         stuff, not from status.
4903
4904         * connect.c (select_fd): Should compile on HPUX without warnings now.
4905
4906         * ftp.c (ftp_get_listing): Check whether ftp_loop_internal
4907         returned RETROK.
4908
4909 1996-11-04  Hrvoje Niksic  <hniksic@srce.hr>
4910
4911         * ftp.c (ftp_retrieve_glob): Print the pattern nicely.
4912         (getftp): Return FTPRETRINT on control connection error.
4913
4914         * html.c (htmlfindurl): Recognize <embed src=...> and
4915         <bgsound src=...>.
4916         (ftp_index): Handle username and password correctly.
4917
4918         * main.c (main): Made `-np' a synonim for --no-parent.
4919
4920 1996-11-02  Hrvoje Niksic  <hniksic@srce.hr>
4921
4922         * ftp.c (ftp_loop): Check for opt.ftp_glob too before calling
4923         ftp_retrieve_glob.
4924
4925         * version.c: Changed version to 1.4.0-test2.
4926
4927 1996-11-02  Hrvoje Niksic  <hniksic@srce.hr>
4928
4929         * version.c: Released 1.4.0-test1.
4930
4931         * url.c (str_url): Don't use sprintf when creating %2F-prefixed
4932         directory.
4933         (convert_links): Removed definition of make_backup.
4934
4935         * http.h: Removed definition of MAX_ERROR_LENGTH.
4936
4937         * host.c (ftp_getaddress): Check for "(none)" domains.
4938
4939         * ftp.c (ftp_retrieve_dirs): Docfix.
4940
4941         * http.c (gethttp): Use ou->referer instead of u->referer.
4942
4943         * retr.c (retrieve_url): Reset u to avoid freeing pointers twice;
4944         this was known to cause coredumps on Linux.
4945
4946         * html.c (ftp_index): Cast the argument to local_time to time_t *.
4947
4948 1996-11-01  Hrvoje Niksic  <hniksic@srce.hr>
4949
4950         * connect.c (select_fd): Use exceptfds -- once and for all.
4951
4952         * retr.c (retrieve_from_file): Free filename after
4953         recursive_retrieve.
4954         (retrieve_from_file): Send RFIRST_TIME to recursive_retrieve on
4955         first-time retrieval.
4956         (retrieve_from_file): Return uerr_t; new argument, count.
4957         (retrieve_from_file): Break on QUOTEXC.
4958
4959         * init.c (setquota): Fixed a bug that caused rejection of
4960         non-postfixed values..
4961
4962 1996-10-30  Hrvoje Niksic  <hniksic@srce.hr>
4963
4964         * version.c: Changed name to wget.
4965
4966         * connect.c (iread): Smarter use of select.
4967         (select_fd): Set errno on timeout.  If not timeout, return 1
4968         instead of 0.
4969
4970 1996-10-29  Hrvoje Niksic  <hniksic@srce.hr>
4971
4972         * ftp.c (ftp_loop_internal): Don't use con->cmd before
4973         establishing it.
4974
4975 1996-10-26  Hrvoje Niksic  <hniksic@srce.hr>
4976
4977         * http.c (gethttp): Send correct referer when using proxy.
4978         (gethttp): Use struct urlinfo ou to access the relevant data; send
4979         correct authorization in all cases.
4980
4981         * host.c (same_host): Use skip_uname to skip username and
4982         password.
4983
4984         * url.c (skip_uname): New function.
4985         (parseurl): Use it.
4986
4987         * host.c (same_host): Do not assume HTTP -- same_host should now
4988         be totally foolproof.
4989
4990         * url.c (skip_proto): New function.
4991         (parse_uname): Use it.
4992
4993         * http.c (gethttp): Create local user and passwd from what is
4994         given.
4995
4996         * url.c (parseurl): Check for HTTP username and password too.
4997
4998 1996-10-25  Hrvoje Niksic  <hniksic@srce.hr>
4999
5000         * config.h.in: Removed #define gethostbyname R...
5001
5002 1996-10-22  Hrvoje Niksic  <hniksic@srce.hr>
5003
5004         * version.c: Changed version to 1.4.0-test1.
5005
5006 1996-10-21  Hrvoje Niksic  <hniksic@srce.hr>
5007
5008         * version.c: "Released" 1.4b29.
5009
5010         * recur.c (recursive_retrieve): Check for no_parent.
5011
5012         * init.c (setval): Option update.
5013
5014         * main.c (main): New option no-parent.
5015
5016         * options.h (struct options): New variable no_parent.
5017
5018         * recur.c (recursive_retrieve): Only files are checked for
5019         opt.accepts and opt.rejects.
5020         (recursive_retrieve): Check directories for opt.excludes.
5021         (recursive_retrieve): Make the dir absolute when checking
5022         opt.excludes.
5023
5024         * html.c (htmlfindurl): Recognize <applet code=...> and <script
5025         src=...>
5026
5027 1996-10-18  Hrvoje Niksic  <hniksic@srce.hr>
5028
5029         * ftp.c (getftp): Do not line-break assert entries at all.
5030         (ftp_retrieve_dirs): docfix.
5031
5032         * connect.c (select_fd): Use fd + 1 as nfds.
5033
5034         * version.c: Changed version to 1.4b29.
5035
5036 1996-10-18  Hrvoje Niksic  <hniksic@srce.hr>
5037
5038         * version.c: "Released" 1.4b28.
5039
5040         * ftp.c (ftp_loop_internal): Check whether f->size == len and
5041         don't continue the loop if it is.
5042         (ftp_get_listing): Remove list_filename on unsuccesful loop.
5043
5044 1996-10-17  Hrvoje Niksic  <hniksic@srce.hr>
5045
5046         * ftp.c (ftp_loop_internal): Use strcpy to initialize tmp.
5047         (getftp): Do not use multiline assert.
5048
5049         * http.c (hparsestatline): Use mjr and mnr instead of major and
5050         minor, which don't compile on Ultrix.
5051         (http_loop): Use strcpy() to initialize tmp.
5052
5053         * all: Geturl -> Fetch
5054
5055 1996-10-17  Hrvoje Niksic  <hniksic@srce.hr>
5056
5057         * recur.c (parse_robots): Fixed an off-by-one bug when looking for
5058         ':'.
5059
5060         * html.c (htmlfindurl): Fixed several possible off-by-one bugs by
5061         moving `bufsize &&' to the beginning of each check in for-loops.
5062
5063         * recur.c (parse_robots): Close fp on exit.
5064
5065         * url.c (mymkdir): Check for each directory before creating.
5066
5067 1996-10-16  Hrvoje Niksic  <hniksic@srce.hr>
5068
5069         * version.c: Changed version to 1.4b28.
5070
5071 1996-10-16  Hrvoje Niksic  <hniksic@srce.hr>
5072
5073         * version.c: "Released" 1.4b27.
5074
5075         * init.c (parse_line): Use isspace.
5076         (parse_line): Free *com on all errors.
5077
5078         * ftp.c (ftp_loop): Change FTPOK to RETROK before exiting.
5079         (delelement): Use next instead of f->next and prev instead of
5080         f->prev.
5081         (delelement): Free the members of the deleted element.
5082
5083         * http.c (http_loop): Do not return RETROK on code != 20x.
5084
5085         * init.c (cleanup): Free opt.user_header.
5086         (cleanup): Free opt.domains.
5087
5088         * url.c (freelists): Moved to cleanup().
5089
5090         * http.c (hparsestatline): Docfix.
5091
5092         * main.c (main): Return with error status on unsuccesful
5093         retrieval.
5094
5095         * init.c (setval): Do not remove listing when mirroring.
5096
5097         * url.c (url_filename): Use opt.fileprefix.
5098
5099         * ftp.c (ftp_get_listing): Use url_filename to get filename for
5100         .listing.
5101
5102         * main.c (main): New option: -rn.
5103
5104 1996-10-15  Hrvoje Niksic  <hniksic@srce.hr>
5105
5106         * Makefile.in (RM): Added RM = rm -f.
5107
5108         * host.c (clean_hosts): New function.
5109         (free_hlist): Just free the list, no reset.
5110
5111         * version.c: Changed version to 1.4b27.
5112
5113 1996-10-13  Hrvoje Niksic  <hniksic@srce.hr>
5114
5115         * version.c: "Released" 1.4b26.
5116
5117         * retr.c (retrieve_from_file): If call get_urls_html with
5118         opt.spider to make it silent in spider mode.
5119
5120         * url.c (str_url): Use CLEANDUP instead of URL_CLEANSE.
5121
5122         * url.h (CLEANDUP): New macro.
5123
5124         * http.c (gethttp): Fixed a bug that freed location only when it
5125         was NULL.
5126
5127         * retr.c (retrieve_url): Free url if it will not be stored,
5128         i.e. newloc is NULL.
5129
5130         * html.c (htmlfindurl): Handle exiting from quotes correctly; the
5131         old version would bug out on <a href="x#a"href="y">.
5132
5133         * html.h (state_t): New member in_quote.
5134
5135         * html.c (htmlfindurl): Free s->attr at the beginning of
5136         attr-loop.
5137
5138         * recur.c (recursive_retrieve): Recognize RCLEANUP.
5139         (tried_robots): Make hosts a global variable.
5140         (recursive_retrieve): Free constr after URL host optimization.
5141         (tried_robots): Free urlinfo before exiting.
5142
5143         * utils.c (free_slist): New function.
5144
5145         * recur.c (recursive_retrieve): Use flags to add cleanup
5146         possibility.
5147
5148         * main.c (main): Free filename after recursive_retrieve.
5149
5150         * http.c (gethttp): Store successful responses too.
5151
5152 1996-10-12  Hrvoje Niksic  <hniksic@srce.hr>
5153
5154         * all: Constified the whole source.  This required some minor
5155         changes in many functions in url.c, possibly introducing bugs -- I
5156         hope not.
5157
5158         * ftp-basic.c: Removed last_respline.
5159
5160         * http.c (gethttp): Free type.
5161
5162         * host.c (same_host): Free real1 and real2.
5163
5164         * main.c (main): New option --spider.
5165
5166         * retr.c (get_contents): Don't reset errno.
5167
5168         * main.c (main): Sorted the options.
5169
5170         * connect.c (iread): Set errno to ETIMEDOUT only if it was left
5171         uninitialized by select().
5172
5173         * http.c (http_loop): Print the time when the connection is
5174         closed.
5175         (gethttp): Debug-print the HTTP request.
5176
5177 1996-10-11  Hrvoje Niksic  <hniksic@srce.hr>
5178
5179         * connect.c (iread): Do not try reading after timeout.
5180
5181         * main.c (main): Would bug out on -T.
5182
5183         * connect.c (select_fd): Do not use exceptfds.
5184         (iread): Set ETIMEDOUT on select_fd <= 0.
5185
5186         * version.c: Changed version to 1.4b26.
5187
5188 1996-10-10  Hrvoje Niksic  <hniksic@srce.hr>
5189
5190         * version.c: "Released" 1.4b25.
5191
5192         * ftp-unix.c (ftp_parse_unix_ls): Ignore lines without file name
5193         or link name.
5194
5195         * http.c (gethttp): Add errcode to struct hstat.
5196         (http_loop): Use it.
5197
5198         * url.c (no_proxy_match): Simplify using char** for no_proxy.
5199
5200         * options.h (struct options): Make opt.no_proxy a vector.
5201
5202         * utils.c (sepstring): Use !*s instead of !strlen(s).
5203
5204         * init.c (setval): Set opt.maxreclevel to 0 on --mirror.
5205         (getperms): Use ISODIGIT instead of isdigit.
5206
5207         * ftp.c (getftp): Print time.
5208
5209         * main.c (main): Use legible output of downloaded quantity.
5210
5211         * ftp.c (getftp): Use elapsed_time().
5212         (ftp_loop_internal): Use rate().
5213
5214         * http.c (http_loop): Add download ratio output; Use rate().
5215
5216         * utils.c (rate): New function.
5217
5218 1996-10-09  Hrvoje Niksic  <hniksic@srce.hr>
5219
5220         * http.c (http_loop): Use timer.
5221
5222         * ftp.c: Split to ftp-basic.c and ftp.c
5223
5224         * utils.c (reset_timer): New function.
5225         (elapsed_time): New function.
5226
5227         * retr.c (show_progress): Make bytes_in_line and offs long; should
5228         work on 16-bit machines.
5229
5230 1996-10-08  Hrvoje Niksic  <hniksic@srce.hr>
5231
5232         * url.c (in_acclist): New argument backward.
5233
5234         * ftp.c (ftp_retrieve_glob): Use acceptable() to determine whether
5235         a file should be retrieved according to suffix.
5236         (ftp_get_listing): Check the return value of unlink; Do not call
5237         ftp_retrieve_dirs if depth reached maxreclevel.
5238         (ftp_retrieve_dirs): Check whether the directory is in
5239         exclude-list.
5240
5241         * main.c (main): Print the version number at the beginning of
5242         DEBUG output.
5243         (main): Use strrchr when creating exec_name.
5244
5245         * ftp.c (ftp_retrieve_glob): Do not close control connection.
5246
5247         * version.c: Changed version to 1.4b25.
5248
5249 1996-10-07  Hrvoje Niksic  <hniksic@srce.hr>
5250
5251         * version.c: "Released" 1.4b24.
5252
5253         * Makefile.in: Rewrite.
5254
5255         * ftp.c (ftp_loop_internal): Likewise.
5256
5257         * retr.c (time_str): Check for failed time().
5258
5259         * html.c (htmlfindurl): Recognize <fig src> and <overlay src> from
5260         HTML3.0.
5261
5262         * retr.c (time_str): Return time_t *.
5263
5264         * connect.c (bindport): Close msock on unsuccesful bind.
5265         (bindport): The same for getsockname and listen.
5266
5267         * retr.c (retrieve_url): Allow any number of retries on
5268         proxy.
5269
5270         * http.c (gethttp): Do not treat errno == 0 as timeout.
5271         (http_loop): Likewise.
5272         (http_loop): Cosmetic changes.
5273
5274         * connect.c (iread): Set errno to ETIMEDOUT in case of timeout.
5275
5276         * retr.c (get_contents): Reset errno.
5277
5278         * ftp.c (getftp): Minor fixes.
5279
5280 1996-10-06  Hrvoje Niksic  <hniksic@srce.hr>
5281
5282         * http.c: Do not use backups.
5283
5284         * geturl.1 (WARNING): Warn that man-page could be obsolete.
5285
5286         * getopt.c (getopt_long): Moved to getopt.c
5287
5288         * geturl.texi: Enhanced.
5289
5290         * main.c (main): Use it.
5291
5292         * recur.c (convert_all_links): New function.
5293
5294         * utils.c (add_slist): New argument flags.
5295
5296         * recur.c (recursive_retrieve): Update a list of downloaded URLs.
5297         (parse_robots): Do not chuck out empty value fields.
5298         (parse_robots): Make yourself welcome on empty Disallow.
5299
5300         * version.c: Changed version to 1.4b24.
5301
5302 1996-10-06  Hrvoje Niksic  <hniksic@srce.hr>
5303
5304         * version.c: "Released" 1.4b23.
5305
5306         * ftp.c (ftp_loop_internal): Get the time after getftp.
5307
5308         * Makefile.in (install.info): New target.
5309         (install): Use it.
5310
5311         * http.c (http_loop): Fix output when doing -O.
5312
5313 1996-10-05  Hrvoje Niksic  <hniksic@srce.hr>
5314
5315         * geturl.texi: New file.
5316
5317         * main.c (main): Do not print the warnings and download summary if
5318         opt.quiet is set.
5319
5320         * version.c: Changed version to 1.4b23.
5321
5322 1996-10-05  Hrvoje Niksic  <hniksic@srce.hr>
5323
5324         * "Released" 1.4b22.
5325
5326         * atotm.c (atotm): Use True and False instead of TRUE and FALSE,
5327         to avoid redefinition warnings.
5328
5329         * host.c (store_hostaddress): Use memcpy() to copy the address
5330         returned by inet_addr.
5331
5332         * version.c: Changed version to 1.4b22.
5333
5334 1996-10-04  Hrvoje Niksic  <hniksic@srce.hr>
5335
5336         * version.c: "Released" 1.4b21.
5337
5338         * ftp-unix.c (ftp_parse_ls): Renamed to ftp_parse_unix_ls.
5339
5340         * ftp.c (ftp_port): Use conaddr.
5341         (getftp): Print the file length.
5342         (ftp_retrieve_list): Check the stamps of plain files only.
5343
5344         * connect.c (closeport): Do not call shutdown().
5345         (conaddr): New function.
5346
5347         * html.c (ftp_index): Made it dfp-aware.
5348
5349         * init.c (cleanup): New name of freemem. Close opt.dfp.
5350
5351         * ftp.c (getftp): Use opt.dfp if it is set.
5352
5353         * ftp-unix.c (ftp_parse_ls): Recognize time in h:mm format.
5354
5355         * ftp.c (ftp_retrieve_dirs): Fixed a bug that caused incorrect
5356         CWDs to be sent with recursive FTP retrievals.
5357
5358 1996-10-03  Hrvoje Niksic  <hniksic@srce.hr>
5359
5360         * recur.c (parse_robots): Made it more compliant with "official"
5361         specifications.
5362
5363         * http.c: New function.
5364
5365         * ftp-unix.c (ftp_parse_ls): Added better debug output.
5366
5367         * ftp.c (getftp): Print out the LIST in case of
5368         opt.print_server_response.
5369
5370         * version.c: Changed version to 1.4b21.
5371
5372 1996-10-01  Hrvoje Niksic  <hniksic@srce.hr>
5373
5374         * version.c: "Released" 1.4b20.
5375
5376         * README: Update.
5377
5378         * http.c (gethttp): Preset lengths of various headers instead of
5379         calculating them dynamically.
5380         (gethttp): Check for 206 partial contents.
5381
5382 1996-09-30  Hrvoje Niksic  <hniksic@srce.hr>
5383
5384         * configure.in: Set SYSTEM_GETURLRC to $libdir/geturlrc
5385
5386         * http.c (gethttp): Send the port number in the Host: header.
5387
5388 1996-09-29  Hrvoje Niksic  <hniksic@srce.hr>
5389
5390         * http.c (gethttp): Send host: header.
5391         (gethttp): Add the possibility of user-defined headers.
5392         (gethttp): Move decision about pragma: no-cache to http_loop,
5393         where it belongs.
5394         (gethttp): Pass a struct instead of enormous argument list.
5395         (http_loop): Use a new, fancier display format.
5396         (ftp_loop): Likewise.
5397
5398         * main.c: (hangup): Turn off buffering of the new log file.
5399
5400         * install-sh: Likewise.
5401
5402         * config.sub: Replace with the one in autoconf-2.10
5403
5404         * geturl.1: Update.
5405
5406         * init.c: New options httpuser and httppasswd.
5407
5408         * http.c: (base64_encode_line): New function.
5409         (gethttp): Send authentication.
5410
5411         * connect.c (make_connection): Use store_hostaddress.
5412
5413 1996-09-28  Hrvoje Niksic  <hniksic@srce.hr>
5414
5415         * host.c (store_hostaddress): New function.
5416
5417         * NEWS: Update.
5418
5419         * http.c (hgetrange): New function.
5420         (gethttp): Use ranges.
5421
5422         * utils.c (numdigit): Accept long instead of int.
5423
5424         * http.c (http_loop): Add restart capabilities.
5425
5426         * ftp.c (ftp_retrieve_glob): Fixed a bug that could cause matchres
5427         being used uninitialized.
5428         (ftp_retrieve_list): Similar fix.
5429
5430         * host.c (add_hlist): Fixed a bug that could cause cmp being used
5431         uninitialized.
5432
5433         * url.c (construct_relative): New function.
5434
5435         * recur.c (recursive_retrieve): Use it.
5436
5437         * retr.c (convert_links): New function.
5438
5439 1996-09-27  Hrvoje Niksic  <hniksic@srce.hr>
5440
5441         * url.c (free_urlpos): New function.
5442
5443         * recur.c (recursive_retrieve): Adapt.
5444
5445         * url.c (get_urls_html): Return a linked list instead of a vector.
5446
5447         * url.c (get_urls_file): Return a linked list instead of a vector.
5448
5449         * geturl.1: Update.
5450
5451         * http.c (gethttp): Implement it.
5452
5453         * init.c (setval): New option: SAVEHEADERS
5454
5455         * ftp.c (ftp_loop_internal): Do not set restval if listing is to
5456         be retrieved. Lack of this test caused bugs when the connection
5457         was lost during listing.
5458
5459         * retr.c (retrieve_url): Fixed a bug that caused
5460         coredumps. *newloc is now reset by default.
5461         (retrieve_url): Lift the twenty-tries limit on proxies.
5462
5463         * version.c: Changed version to 1.4b20.
5464
5465 1996-09-20  Hrvoje Niksic  <hniksic@srce.hr>
5466
5467         * version.c: "Released" 1.4b19.
5468
5469 1996-09-19  Hrvoje Niksic  <hniksic@srce.hr>
5470
5471         * ftp.c (ftp_loop_internal): Renamed from ftp_1fl_loop.
5472         (getftp): Changed prototype to accept ccon *.
5473
5474 1996-09-17  Hrvoje Niksic  <hniksic@srce.hr>
5475
5476         * ftp.c (ftp_retrieve_list): Fixed a bug that caused setting
5477         incorrect values to files pointed to by symbolic links.
5478         (ftp_1fl_loop): Do not count listings among the downloaded URL-s.
5479
5480 1996-09-16  Hrvoje Niksic  <hniksic@srce.hr>
5481
5482         * url.c (mkstruct): Do not prepend "./" in front of a pathname.
5483
5484         * main.c (main): New option: --user-agent.
5485
5486         * geturl.1: Ditto.
5487
5488         * init.h: Ditto.
5489
5490         * init.c (setval): Ditto.
5491
5492         * main.c (main): Rename "server-headers" to "server-response".
5493
5494         * ftp-unix.c (ftp_parse_ls): Check for asterisks at the end of
5495         executables in 'ls -F' listings.
5496
5497 1996-09-15  Hrvoje Niksic  <hniksic@srce.hr>
5498
5499         * url.c (parseurl): Remove realloc() and sprintf().
5500         (str_url): Get rid of sprintf().
5501
5502         * recur.c (recursive_retrieve): Enable FTP recursion through proxy
5503         servers.
5504
5505         * url.h (URL_CLEANSE): Made it else-resistant.
5506         (USE_PROXY): New macro.
5507
5508 1996-09-14  Hrvoje Niksic  <hniksic@srce.hr>
5509
5510         * NEWS: Update.
5511
5512         * version.c: Changed version to 1.4b19.
5513
5514 1996-09-14  Hrvoje Niksic  <hniksic@srce.hr>
5515
5516         * version.c: "Released" 1.4b18.
5517
5518         * url.c: Made it reallocate space exponentially.
5519
5520 1996-09-14  Drazen Kacar  <dave@fly.cc.fer.hr>
5521
5522         * html.c (htmlfindurl): Added <frame src> and <iframe src> among
5523         the list of stuff to fetch.
5524
5525 1996-09-13  Hrvoje Niksic  <hniksic@srce.hr>
5526
5527         * url.c (get_urls_html): Fixed a bug that caused SIGSEGV's with
5528         -Fi.
5529
5530         * html.c (htmlfindurl): Rewrite.
5531
5532         * http.c (gethttp): Use opt.proxy_cache.
5533
5534         * main.c (main): Added --cache option.
5535
5536         * ftp.c (ftp_response): Print server response if opt.print_server
5537         response is set.
5538         (getftp): Print newlines after each request if the server response
5539         is to be printed.
5540         (ftp_response): Copy the last response line to last_respline.
5541
5542         * http.c (gethttp): Add Pragma: nocache for retried
5543         proxy-retrievals.
5544
5545         * ftp.c (getftp): Use it.
5546
5547         * retr.c (buf_discard): New function.
5548
5549         * ftp.c (ftp_response): Use buf_readchar().
5550         (getftp): Flush the control connection buffer before calling
5551         get_contents().
5552
5553         * retr.c (buf_readchar): New function.
5554         (buf_flush): New function.
5555         (get_contents): Use buf_readchar() instead of read(x, x, 1).
5556         (get_contents): Use buf_flush.
5557
5558 1996-09-12  Hrvoje Niksic  <hniksic@srce.hr>
5559
5560         * ftp.c: Incorporate changes to ftp_response.
5561
5562         * ftp.c (ftp_response): Allocate the server response dynamically,
5563         as in read_whole_line and fetch_next_header.
5564
5565         * utils.c (read_whole_line): Fixed a bug that prevented reading
5566         the last line if it is not \n-terminated. Also fixed a possible
5567         memory overflow.
5568
5569         * http.c (fetch_next_header): Return malloc-ed string as large as
5570         needed.
5571         (gethttp): Use new fetch_next_header.
5572
5573 1996-09-12  Hrvoje Niksic  <hniksic@srce.hr>
5574
5575         * http.c (hgetlen): Compute the header length the first time only.
5576         (hgettype): Ditto.
5577         (hgetlocation): Ditto.
5578         (hgetmodified): Ditto.
5579
5580 1996-09-11  Hrvoje Niksic  <hniksic@srce.hr>
5581
5582         * sample.geturlrc: Update.
5583
5584 1996-09-10  Hrvoje Niksic  <hniksic@srce.hr>
5585
5586         * http.c (http_loop): Ditto.
5587
5588         * ftp.c (getftp): Open the output file as binary.
5589
5590         * version.c: Changed version to 1.4b18.
5591
5592 1996-09-10  Hrvoje Niksic  <hniksic@srce.hr>
5593
5594         * version.c: "Released" 1.4b17.
5595
5596         * ftp-unix.c (ftp_parse_ls): If unable to open file, return NULL
5597         instead of failed assertion.
5598
5599 1996-09-09  Hrvoje Niksic  <hniksic@srce.hr>
5600
5601         * ftp.c (ftp_get_listing): Add a numbered suffix to LIST_FILENAME
5602         if a file of that name already exists.
5603
5604 1996-09-05  Hrvoje Niksic  <hniksic@srce.hr>
5605
5606         * ftp.c (ftp_1fl_loop): Handler FTPPORTERR and FOPENERR correctly.
5607
5608         * config.h.in: Define gethostbyname as Rgethostbyname when using
5609         Socks.
5610
5611         * configure.in: Check for -lresolv if using Socks.
5612
5613         * version.c: Changed version to 1.4b17.
5614
5615 1996-07-15  Hrvoje Niksic  <hniksic@srce.hr>
5616
5617         * version.c: "Released" 1.4b16.
5618
5619         * http.c (gethttp): More intelligent check for first line of HTTP
5620         response.
5621         (gethttp): Would bug out on time-stamping.
5622
5623         * version.c: Changed version to 1.4b16.
5624
5625 1996-07-11  Hrvoje Niksic  <hniksic@srce.hr>
5626
5627         * version.c: Released 1.4b15.
5628
5629         * http.c (http_loop): Print \n after the loop entry, not before.
5630
5631         * url.c (url_filename): Use ISDOT.
5632
5633         * url.h (ISDOT): New macro.
5634
5635         * recur.c (recursive_retrieve): Change only opt.recursive for
5636         following FTP.
5637
5638 1996-07-11  Antonio Rosella <antonio.rosella@agip.it>
5639
5640         * socks/geturl.cgi: Fixed version No.
5641
5642         * socks/download-netscape.html: Ditto.
5643
5644         * socks/download.html: Changed socks.html to download.html.
5645
5646 1996-07-11  Hrvoje Niksic  <hniksic@srce.hr>
5647
5648         * url.c (url_filename): Check for opt.dirstruct instead for
5649         opt.recursive && opt.dirstruct.
5650
5651         * init.c (defaults): Ditto.
5652         (defaults): Reset dirstruct by default.
5653         (setval): Set opt.dirstruct whenever setting recursive.
5654
5655         * init.h: Removed FORCEDIRHIER.
5656
5657         * INSTALL: Added -L to socks-description.
5658
5659         * version.c: Changed version to 1.4b15.
5660
5661 1996-07-10  Hrvoje Niksic  <hniksic@srce.hr>
5662
5663         * version.c: "Released" 1.4b14.
5664
5665         * geturl.1: Update AUTHOR to include Rosella as contributor.
5666
5667         * NEWS: Update.
5668
5669         * socks/geturl.cgi: Simplified command creation, nuked <blink>.
5670
5671         * socks/geturl.cgi: Wrap nutscape extensions within if $netscape.
5672         (cal_time): Fix == to eq.
5673
5674         * socks/geturl.cgi: GPL-ized with permission of A. Rosella.
5675
5676         * geturl.1 (hostname): Moved URL CONVENTIONS to the beginning.
5677
5678         * Makefile.in: Use @VERSION@.
5679
5680         * configure.in: Check version from version.c.
5681
5682         * socks/geturl.cgi: Changed /pub/bin/perl to /usr/bin/perl.
5683
5684         * socks/download.html: Created from download-netscape.html, made
5685         HTML-2.0 compliant.
5686
5687         * recur.c (recursive_retrieve): Set opt.force_dir_hier when
5688         following FTP links from recursions.
5689
5690 1996-07-09  Hrvoje Niksic  <hniksic@srce.hr>
5691
5692         * url.c (mymkdir): Fixed a bug that prevented mymkdir() to create
5693         absolute directories correctly.
5694
5695         * version.c: Changed version to 1.4b14.
5696
5697 1996-07-09  Hrvoje Niksic  <hniksic@srce.hr>
5698
5699         * version.c: "Released" 1.4b13.
5700
5701         * url.c (make_backup): New function.
5702
5703         * http.c (http_loop): Make a backup copy of the local file (using
5704         rename(2)) before opening it.
5705
5706         * main.c (main): Added --backups.
5707
5708         * host.c (ftp_getaddress): Bail out on failed mycuserid().
5709         (ftp_getaddress): Check for leading dot on MY_DOMAIN.
5710         (ftp_getaddress): Check for empty, null or (null) domain.
5711
5712         * url.c (get_urls_html): If this_url is NULL, the base must have a
5713         protocol.
5714         (parseurl): Use has_proto.
5715
5716         * retr.c (retrieve_url): Warn when proxy is used with more than 20
5717         retries.
5718
5719         * url.c (mkstruct): Create the directory (calling mymkdir()) only
5720         if it is not already there.
5721         (has_proto): New function.
5722         (get_urls_html): Eliminate the remaining call to findurl -- use
5723         has_proto.
5724
5725         * geturl.1: Ditto.
5726
5727         * main.c: Change -X to -x.
5728
5729         * url.c (url_filename): Simplify creation of filename if
5730         prefix_files is set.
5731         (url_filename): Simplify everything. And I do mean *everything*.
5732         (mkstruct): Add dir_prefix before hostname.
5733         (path_simplify): Fixed a bug that caused writing outside the path
5734         string in case of "." and ".." path strings.
5735
5736 1996-07-06  Hrvoje Niksic  <hniksic@srce.hr>
5737
5738         * init.c: Added --mirror.
5739
5740         * main.c (main): Added -X to force saving of directory hierarchy.
5741
5742         * ftp.c (ftp_retrieve_list): Added recursion depth counter.
5743         (ftp_retrieve_list): Check whether quota is exceeded.
5744
5745         * url.c (get_urls_html): Skip leading blanks for absolute URIs.
5746
5747         * http.c (gethttp): Use referer if present.
5748
5749         * recur.c (recursive_retrieve): Set u->referer before calling
5750         retrieve_url.
5751
5752         * url.c (newurl): Use memset to nullify the struct members.
5753         (freeurl): Free the referer field too.
5754
5755         * url.h: Added referer to urlinfo.
5756
5757         * geturl.1: Updated the manual to document some of the new features.
5758
5759         * utils.c (numdigit): Moved from url.c.
5760
5761         * README: Rewritten.
5762
5763         * config.h.in: Add the support for socks.
5764
5765         * configure.in: Add the support for socks.
5766
5767         * url.c (url_filename): If the dir_prefix is ".", work with just
5768         the file name.
5769         (url_filename): Do not look for .n extensions if timestamping if
5770         turned on.
5771
5772         * retr.c (show_progress): Skip the over-abundant restval data, and
5773         print the rest of it with ',' instead of '.'.
5774
5775 1996-07-05  Hrvoje Niksic  <hniksic@srce.hr>
5776
5777         * retr.c (show_progress): Changed second arg. to long (as it
5778         should be).
5779         (show_progress): Moved to retr.c.
5780         (get_contents): Moved to retr.c.
5781
5782         * version.c: Change version to 1.4b13.
5783
5784 1996-07-05  Hrvoje Lacko <hlacko@fly.cc.fer.hr>
5785
5786         * url.c (in_acclist): Would return after the first suffix.
5787
5788 1996-07-04  Hrvoje Niksic  <hniksic@srce.hr>
5789
5790         * version.c: "Released" 1.4b12.
5791
5792         * url.c (path_simplify): More kludgifications.
5793         (get_urls_html): Use new parameters for htmlfindurl.
5794
5795         * html.c: Removed memorizing "parser states", since the new
5796         organization does not require them.
5797
5798         * init.c (run_geturlrc): Use read_whole_line.
5799
5800         * ftp-unix.c (ftp_parse_ls): Use read_whole_line.
5801
5802         * recur.c (parse_robots): Use read_whole_line.
5803
5804         * utils.c (read_whole_line): New function.
5805
5806         * recur.c (tried_robots): Use add_slist/in_slist, *much* cleaner.
5807
5808         * host.c (ngethostbyname): Call inet_addr just once. Yet to be
5809         tested on OSF and Ultrix.
5810         (add_hlist): New function.
5811         (free_hlist): New function.
5812         (search_host): New function.
5813         (search_address): New function.
5814         (realhost): Use search_host, search_address and add_hlist.
5815         (same_host): Replaced realloc() with strdupdelim(), made
5816         case-insensitive, fixed a memory leak.
5817
5818         * html.c (ftp_index): Fixed tm_min and tm_sec to be tm_hour and
5819         tm_min, like intended.
5820
5821         * version.c: Change user agent information to
5822         Geturl/version.
5823
5824 1996-07-03  Hrvoje Niksic  <hniksic@srce.hr>
5825
5826         * utils.c: Renamed nmalloc.c to utils.c, .h likewise.
5827
5828         * url.c (acceptable): Always accept directories.
5829
5830         * ftp-unix.c (ftp_parse_ls): Support brain-damaged "ls -F"-loving
5831         servers by stripping trailing @ from symlinks and trailing / from
5832         directories.
5833
5834         * ftp.c (ftp_loop): Debugged the "enhanced" heuristics. :-)
5835
5836         * url.c (skip_url): Use toupper instead of UCASE.
5837
5838         * host.c (sufmatch): Made it case-insensitive.
5839
5840         * url.c (match_backwards_or_pattern): Fixed i == -1 to j == -1.
5841         (match_backwards): New function, instead of
5842         match_backwards_or_pattern.
5843
5844         * recur.c (recursive_retrieve): Increased performance by
5845         introducing inl, which reduces number of calls to in_slist to only
5846         one.
5847
5848         * ftp.c (ftp_loop): Enhanced the heuristics that decides which
5849         routine to use.
5850
5851         * main.c (printhelp): Removed the warranty stuff.
5852
5853 1996-07-02  Hrvoje Niksic  <hniksic@srce.hr>
5854
5855         * url.c (add_slist): Simplify.
5856         (match_backwards_or_pattern): New function.
5857         (in_acclist): Use match_backwards_or_pattern.
5858         (matches): Remove.
5859
5860 1996-06-30  Hrvoje Niksic  <hniksic@srce.hr>
5861
5862         * ftp.c (ftp_loop): Call ftp_index on empty file names, if not
5863         recursive.
5864
5865         * html.c (ftp_index): Fixed to work. Beautified the output.
5866
5867         * ftp.c (ftp_retrieve_glob): Another argument to control whether
5868         globbing is to be used.
5869         (ftp_retrieve_list): Compare the time-stamps of local and remote
5870         files to determine whether to download.
5871
5872 1996-06-29  Hrvoje Niksic  <hniksic@srce.hr>
5873
5874         * ftp.c (rel_constr): New function.
5875
5876         * retr.c (retrieve_from_file): Check for text/html before
5877         retrieving recursively.
5878
5879         * main.c (main): Check whether the file is HTML before going into
5880         recursive HTML retrieving.
5881
5882         * ftp.c (ftp_retrieve_list): Manage directories.
5883         (ftp_retrieve_glob): Pass all the file-types to ftp_retrieve_list.
5884         (ftp_1fl_loop): Fixed a bug that caused con->com to be incorrectly
5885         initialized, causing bugchecks in getftp to fail.
5886
5887         * configure.in: Check for symlink.
5888
5889         * ftp.c (ftp_retrieve_list): Added support for symlinks.
5890
5891         * version.c: "Released" 1.4b10.
5892
5893         * atotm.c (atotm): Redeclared as time_t.
5894
5895         * init.c: New variable "timestamping".
5896
5897         * main.c (main): New option 'N'.
5898
5899         * http.c (hgetlocation): Case-insensitive match.
5900         (hgetmodified): New function.
5901         (http_loop): Implement time-stamping.
5902
5903 1996-06-28  Hrvoje Niksic  <hniksic@srce.hr>
5904
5905         * version.c: Changed version to 1.4b10
5906
5907         * atotm.c: New file, from phttpd.
5908
5909         * options.h (struct options): New parameter timestamping.
5910
5911         * version.c: 1.4b9 "released".
5912
5913         * recur.c (recursive_retrieve): Used linked list (ulist) for
5914         faster storing of URLs.
5915
5916         * url.c (get_urls_html): Removed the old kludge with comparing the
5917         outputs of htmlfindurl and findurl.
5918         (get_urls_html): Added better protocol support here.
5919         (create_hash): Removed, as well as add_hash and in_hash.
5920         (addslist): New function.
5921         (in_slist): ditto
5922
5923         * version.c: Released 1.4b8, changed version to b9.
5924
5925 1996-06-27  Hrvoje Niksic  <hniksic@srce.hr>
5926
5927         * ftp.c (freefileinfo): New function.
5928         (delelement): New function.
5929
5930         * everywhere: GPL!
5931
5932         * ftp.c (ftp_loop): Use ccon.
5933         (ftp_retrieve_glob): Likewise.
5934
5935         * ftp.h: Define ccon, to define status of control connection.
5936
5937         * ftp.c (ftp_get_listing): New function.
5938         (ftp_retrieve_more): New function.
5939         (ftp_retrieve_glob): New function.
5940
5941 1996-06-25  Hrvoje Niksic  <hniksic@srce.hr>
5942
5943         * configure.in: Removed the search for cuserid().
5944
5945         * init.c (getmode): Renamed to getperms.
5946
5947 1996-06-24  Hrvoje Niksic  <hniksic@srce.hr>
5948
5949         * version.c: New version.
5950
5951         * main.c (hangup): New function, that handles hangup. Hangup
5952         signal now causes geturl to stop writing on stdout, and to write
5953         to a log file.
5954
5955         * ftp.c (getftp): "Released" 1.4b7.
5956
5957         * html.c (htmlfindurl): Ignore everything inside <head>...</head>.
5958         (ftp_index): Use fileinfo/urlinfo.
5959
5960         * ftp-unix.c (ftp_parse_ls): New function.
5961         (symperms): New function.
5962
5963         * ftp.c (ftp_1fl_loop): New function, to handle 1-file loops.
5964
5965         * retr.c (retrieve_url): Added FTP support.
5966
5967 1996-06-23  Hrvoje Niksic  <hniksic@srce.hr>
5968
5969         * geturl.h: Removed NOTFTP2HTML enum.
5970         Added DO_LOGIN, DO_CWD and DO_LIST. LIST_ONLY is obsolete.
5971
5972         * ftp.c (getftp): Resynched with urlinfo.
5973         (getftp): Removed HMTL-ization of index.html from getftp.
5974
5975         * version.c: 1.4b6 "released".
5976
5977         * options.h (options): New struct, to keep options in.
5978
5979         * http.c (http_loop,gethttp): Synched with proxy.
5980
5981         * retr.c (retrieve_url): Implemented proxy retrieval.
5982
5983         * main.c (main): Use retrieve_from_file.
5984
5985 1996-06-22  Hrvoje Niksic  <hniksic@srce.hr>
5986
5987         * retr.c (retrieve_from_file): New function.
5988
5989         * url.c (parseurl): Modified to return URLOK if all OK. Protocol
5990         can be found in u->proto.
5991
5992         * ftp.c (ftp_response): Fixed to accept multi-line responses as
5993         per RFC 959.
5994
5995         * recr.c (recursive_retrieve): Take newloc from retrieve_url.
5996
5997         * url.c (mymkdir): Removed the file of the same name, if one
5998         exists.
5999         (isfile): New function.
6000         (mkstruct): Fixed the '/' glitches.
6001         (path_simplify): Hacked to treat something/.. correctly.
6002
6003 1996-06-21  Hrvoje Niksic  <hniksic@srce.hr>
6004
6005         * http.c (gethttp): Close the socket after error in headers.
6006         (http_loop): HEOF no longer a fatal header.
6007
6008         * loop.c (retrieve_url): When dt is NULL, do not modify it. This
6009         simplifies the syntax of calling retrieve_url.
6010
6011         * recr.c (recursive_retrieve): Modified to use get_urls_html.
6012
6013         * url.c (get_urls_file): New function.
6014         (get_urls_html): New function.
6015
6016         * recr.c (recursive_retrieve): Patched up to conform to the
6017         standards.
6018
6019         * http.c (gethttp): Synched with the rest...
6020         (gethttp): Treat only CONREFUSED specially, with connection
6021         errors.
6022
6023         * init.c,geturl.1,http.c (http_loop): Removed kill_error.
6024
6025 1996-06-20  Hrvoje Niksic  <hniksic@srce.hr>
6026
6027         * http.c (http_loop): New function.
6028
6029         * loop.c: Removed *lots* of stuff from retrieve_url.
6030
6031         * url.c (parseurl): Changed to work with urlinfo. Integrated
6032         username finding and path parsing.
6033         (newurl): New function.
6034         (freeurl): New function.
6035         (mkstruct): Removed the old bogosities, made it urlinfo-compliant.
6036         (url_filename): Likewise.
6037         (path_simplify): Accept relative paths too.
6038         (opt_url): Made urlinfo-compliant, removed bogosities.
6039         (path_simplify): Expanded to accept relative paths.
6040         (str_url): A replacement for hide_url
6041         (decode_string): Fixed a bug that caused malfunctioning when
6042         encountering an illegal %.. combination.
6043         (opt_url): Removed the argument. Dot-optimizations are now default.
6044
6045         * nmalloc.c (strdupdelim): New function.
6046
6047         * url.h: Added the urlinfo structure
6048
6049 1996-06-19  Hrvoje Niksic  <hniksic@srce.hr>
6050
6051         * url.c (hide_url): Thrown out the protocol assertion. Do not
6052         change the URL if the protocol if not recognized.
6053         (findurl): Put continue instead of break.
6054
6055 1996-06-18  Hrvoje Niksic  <hniksic@srce.hr>
6056
6057         * sample.geturlrc: Changed the defaults to be commented out and
6058         harmless (previous defaults caused pains if copied to
6059         ~/.geturlrc).
6060
6061         * http.c (gethttp): Print the HTTP request in debug mode.
6062
6063         * connect.c (iread): Added EINTR check loop to select-ing
6064         too. EINTR is now correctly handled with select().
6065
6066         * TODO: new file
6067
6068 1996-05-07  Hrvoje Niksic  <hniksic@srce.hr>
6069
6070         * host.c (same_host): Made the function a little bit more
6071         intelligent regarding diversified URL syntaxes.
6072
6073         * url.c (skip_url): Spaces are now skipped after URL:
6074
6075         * Released 1.3.1 with the patch to prevent crashing when sending
6076         NULL to robot* functions and the patch to compile "out of the box"
6077         on AIX.
6078
6079         * recr.c (recursive_retrieve): Added checking whether this_url is
6080         NULL when calling the robot functions.
6081
6082         * ChangeLog: New file.