sjero.net Git - wget/blob - src/ChangeLog

   1 2001-12-10  Hrvoje Niksic  <hniksic@arsdigita.com>
   2
   3         * utils.c (path_simplify): Rewrite, with better comments, and
   4         without the use of strcpy to move overlapping blocks.
   5
   6 2001-12-09  Hrvoje Niksic  <hniksic@arsdigita.com>
   7
   8         * init.c (cmd_spec_progress): Resurrect.  Check whether VAL is a
   9         valid progress type before setting it.
  10
  11 2001-12-09  Hrvoje Niksic  <hniksic@arsdigita.com>
  12
  13         * main.c (main): Remove stray debugging message.
  14
  15 2001-12-09  Hrvoje Niksic  <hniksic@arsdigita.com>
  16
  17         * progress.c (create_image): Fix ETA padding when hours are prined.
  18
  19 2001-12-09  Hrvoje Niksic  <hniksic@arsdigita.com>
  20
  21         * version.c: Wget 1.8 is released.
  22
  23 2001-12-09  Hrvoje Niksic  <hniksic@arsdigita.com>
  24
  25         * url.c (reencode_string): Declare static.
  26
  27         * res.c (registered_specs): Declare static.
  28
  29         * progress.c (current_impl_locked): Declare static.
  30
  31         * log.c (flush_log_p): Declare static.
  32         (needs_flushing): Ditto.
  33
  34         * http.c (digest_authentication_encode): Declare static.
  35
  36         * html-url.c (init_interesting): Declare static.
  37
  38         * host.c (host_name_addresses_map): Declare static.
  39
  40         * cookies.c (find_matching_chains): Declare static.
  41
  42         * ftp-ls.c (ftp_parse_vms_ls): Warn about the memory leak
  43         indicated by lint.
  44
  45         * utils.c (path_simplify): Remove unused variable STUB_CHAR.
  46
  47         * host.c (address_list_set_faulty): Document that INDEX is
  48         currently unused.
  49
  50         * url.c (rewrite_shorthand_url): Remove unused variable PATH.
  51
  52 2001-12-08  Hrvoje Niksic  <hniksic@arsdigita.com>
  53
  54         * version.c: Wget 1.8-pre2 is released.
  55
  56 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
  57
  58         * progress.c (progress_handle_sigwinch): Set up the signal again.
  59
  60         * utils.c: Include <sys/termios.h>, where Solaris defines
  61         TIOCGWINSZ.
  62
  63         * progress.c (bar_create): Don't use the last column on the screen.
  64         (create_image): Pad ETA to constant size.  Pad SIZE to nine digits
  65         only until it exceeded them.
  66
  67 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
  68
  69         * version.c: Wget 1.8-pre1 is released.
  70
  71 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
  72
  73         * progress.c (progress_create): Make sure that, when the output is
  74         redirected, the progress implementation gets changed to the
  75         fallback one.
  76         (bar_set_params): Set current_impl_locked to 1 when "force" is
  77         specified.
  78         (progress_create): Don't change the progress implementation if
  79         current_impl_locked is non-zero.
  80
  81         * main.c (redirect_output_signal): Call
  82         progress_schedule_redirect.
  83
  84         * progress.c (progress_schedule_redirect): New function.
  85
  86 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
  87
  88         * log.c (logvprintf): Restructure to allow being called multiple
  89         times.
  90         (logprintf): Call logvprintf in a loop.
  91         (debug_logprintf): Ditto.
  92
  93 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
  94
  95         * gen_sslfunc.c (ssl_init_prng): Allow the user to disable EGD by
  96         setting egd_file it to empty string.
  97
  98         * main.c (main): Change the option name from --sslegdsock to
  99         --egd-file.
 100
 101 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
 102
 103         * gen_sslfunc.c (ssl_init_prng): Make the printed message
 104         translatable.
 105
 106 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
 107
 108         * url.c (scheme_disable): New function.
 109
 110         * main.c (main): Call ssl_init_prng from here rather than from
 111         init_ssl, so that it has a chance to disable support for https
 112         before a URL has been resolved.
 113
 114         * gen_sslfunc.c (ssl_init_prng): Seed with rand() if all else
 115         failed.
 116         (ssl_init_prng): Disable support for https if seeding the PRNG
 117         fails.
 118
 119 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
 120
 121         * utils.c (read_whole_line): Handle lines beginning with \0.
 122
 123 2001-12-05  Hrvoje Niksic  <hniksic@arsdigita.com>
 124
 125         * recur.c (convert_all_links): Guard against duplicates in
 126         downloaded_html_files.
 127         (register_download): Don't invalidate similar-looking URLs.
 128         (match_except_index): New function.
 129
 130 2001-12-05  Hrvoje Niksic  <hniksic@arsdigita.com>
 131
 132         * utils.c (path_simplify): Document with test cases.
 133
 134 2001-12-04  Hrvoje Niksic  <hniksic@arsdigita.com>
 135
 136         * gen_sslfunc.c: Ditto.
 137
 138         * rbuf.c: Include <string.h>.
 139
 140 2001-12-04  Hrvoje Niksic  <hniksic@arsdigita.com>
 141
 142         * recur.c (retrieve_tree): Check whether the URL was already
 143         downloaded before downloading it again.
 144         (descend_child_p): Renamed to download_child_p.
 145         (register_download): When one URL is downloaded to a file already
 146         "owned" by another URL, delete all references that map any URL to
 147         that file.
 148         (register_delete_file): New function.
 149         (retrieve_tree): Use it after deleting a file.
 150
 151         * url.c (url_parse): Re-canonicalize the URL also if the path is
 152         empty, so that e.g. "http://www.server.com" ->
 153         "http://www.server.com/".
 154         (lowercase_str): Use ISUPPER instead of !ISLOWER.
 155
 156         * retr.c (retrieve_url): Use the canonical URL form when calling
 157         register_download().
 158
 159 2001-12-04  Ian Abbott <abbotti@mev.co.uk>
 160
 161         * snprintf.c (dopr): Use `unsigned int' as the second argument to
 162         va_arg when casting to `unsigned short' is intended.
 163
 164 2001-12-04  Herold Heiko  <Heiko.Herold@previnet.it>
 165
 166         * gen_sslfunc.c: on windows provide ssl crypto random
 167           initialization through RAND_screen(); could possibly
 168           be not enough for strong ssl communication (see the
 169           relevant manual page from the openssl package).
 170
 171 2001-12-04  Hrvoje Niksic  <hniksic@arsdigita.com>
 172
 173         * url.c (local_quote_string): Reenable quoting of question marks,
 174         but only when `--html-extension' is used.
 175
 176 2001-12-03  Hrvoje Niksic  <hniksic@arsdigita.com>
 177
 178         * version.c: Wget 1.8-beta3 is released.
 179
 180 2001-12-03  Hrvoje Niksic  <hniksic@arsdigita.com>
 181
 182         * snprintf.c (dopr): Cast the result of va_arg to short int and
 183         short unsigned int where these types are expected to be used.
 184
 185 2001-12-03  Hrvoje Niksic  <hniksic@arsdigita.com>
 186
 187         * snprintf.c (dopr): Replace `short int' and `unsigned short int'
 188         with `int' when using it as the second argument to `va_arg'.
 189
 190 2001-12-03  Hrvoje Niksic  <hniksic@arsdigita.com>
 191
 192         * host.c (address_list_new_one): New function.
 193         (lookup_host): Use it.
 194
 195 2001-12-03  Andre Majorel  <amajorel@teaser.fr>
 196
 197         * host.c (lookup_host): Don't initialize TMPSTORE directly because
 198         it's not legal C.
 199
 200 2001-12-03  Hrvoje Niksic  <hniksic@arsdigita.com>
 201
 202         * ftp-basic.c (ftp_port): Don't return HOSTERR if we fail getting
 203         the socket data.
 204
 205         * ftp.c: Ditto.
 206
 207         * http.c: No need to declare h_errno.
 208
 209         * host.c: Declare h_errno.
 210
 211 2001-12-02  Hrvoje Niksic  <hniksic@arsdigita.com>
 212
 213         * utils.c (file_merge): If BASE doesn't contain a slash, just
 214         return a copy of FILE.
 215
 216 2001-12-02  Hrvoje Niksic  <hniksic@arsdigita.com>
 217
 218         * version.c: Wget 1.8-beta2 is released.
 219
 220 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
 221
 222         * ftp.c (getftp): When PWD fails, assume "/".
 223
 224         * ftp-basic.c (ftp_syst): Fix indentation.
 225
 226 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
 227
 228         * url.c (get_urls_file): If opt.base_href is specified, merge each
 229         URL with the base.
 230
 231 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
 232
 233         * main.c (print_help): Don't document the removed `-nh'.
 234
 235 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
 236
 237         * url.c (url_full_path): Document better.
 238
 239         * http.c (gethttp): Use the full path when creating digest
 240         authorization.
 241
 242 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
 243
 244         * cookies.c (path_matches): Return 0 if PREFIX doesn't begin with
 245         '/'.
 246
 247 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
 248
 249         * cookies.c (path_matches): FULL_PATH doesn't begin with '/', but
 250         PREFIX does.
 251
 252 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
 253
 254         * cookies.c (check_domain_match): Reimplement to match Netscape's
 255         "preliminary specification" for cookies.
 256
 257 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
 258
 259         * url.c (replace_attr_refresh_hack): New function.
 260         (convert_links): Call replace_attr_refresh_hack for Refresh
 261         links.  It will add the "TMOUT; URL=" junk before the link.
 262
 263         * html-url.c (collect_tags_mapper): Set ID to the ID of the
 264         "content" attribute, not "http-equiv".
 265         (collect_tags_mapper): Don't use OFFSET to hack the raw_* values;
 266         instead, store the information that this entry belongs to a
 267         "refresh" link.
 268
 269 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
 270
 271         * version.c: Wget 1.8-beta1 is released.
 272
 273 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
 274
 275         * recur.c (retrieve_tree): Allow -p retrievals to exceed maximum
 276         depth by more than one.
 277
 278 2001-11-30  Hrvoje Niksic  <hniksic@arsdigita.com>
 279
 280         * retr.c (retrieve_url): Don't allow more than 20 redirections.
 281
 282 2001-11-30  Hrvoje Niksic  <hniksic@arsdigita.com>
 283
 284         * recur.c (retrieve_tree): Skip the non-inline entries when
 285         enqueuing the children of a leaf HTML node in -p mode.
 286         (descend_url_p): Ignore opt.no_parent when in -p mode and UPOS is
 287         "inline".
 288
 289         * html-url.c (get_urls_html): Don't accept dash_p_leaf_HTML.
 290         (collect_tags_mapper): When an entry is "inline", mark it as such.
 291
 292         * recur.c (descend_url_p): Fix test when checking for
 293         acceptance/rejection rules.
 294
 295 2001-10-31 Daniel BODEA <dali@dali-designs.com>
 296
 297         * netrc.c (search_netrc): When slack_default is 0, still look for
 298         an account with matching password, just not the "default account".
 299         HTTP Authorization using .netrc should now work as expected.
 300
 301 2001-11-30  T. Bharath  <TBharath@responsenetworks.com>
 302
 303         * http.c (persistent_available_p): Call SHUTDOWN_SSL if
 304         test_socket_open fails.
 305
 306 2001-11-30  Hrvoje Niksic  <hniksic@arsdigita.com>
 307
 308         * progress.c (display_image): Just print one CR to reset the
 309         cursor position.
 310
 311 2001-11-30  Christian Fraenkel  <c.fraenkel@gmx.net>
 312
 313         * init.c: New command `ssl_egd_sock'.
 314
 315         * main.c (main): New option `--sslegdsock'.
 316
 317         * gen_sslfunc.c (ssl_init_prng): Seed the RNG using EGD.
 318
 319 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
 320
 321         * cmpt.c (memmove): Include a simple memmove implementation.
 322
 323 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
 324
 325         * headers: Guard against header files being included twice.
 326
 327 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
 328
 329         * gen-md5.c: Use unsigned char * as the buffer argument to
 330         gen_md5_update.
 331
 332 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
 333
 334         * connect.h: Declare select_fd.
 335
 336 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
 337
 338         * recur.c (descend_url_p): When resolving no_parent, compare with
 339         start_url, not parent url.  Otherwise link from /a/b/ to /a/c/
 340         wouldn't be followed, although the download started from /a/.
 341
 342 2001-01-23  Herold Heiko  <Heiko.Herold@previnet.it>
 343
 344         * config.h.ms, mswindows.h: defined HAVE_ISATTY, use _isatty for
 345         MS VC; somebody with Borland compiler please check and provide
 346         patch if possible;
 347
 348         * cmpt.c: provided a usleep emulation.
 349
 350 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
 351
 352         * host.c (address_list_new): Initialize al->faulty.
 353
 354 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
 355
 356         * http.c (http_process_range): Accept the broken output of
 357         "JavaWebServer/1.1.1".
 358
 359 2001-11-28  Hrvoje Niksic  <hniksic@arsdigita.com>
 360
 361         * progress.c (dot_set_params): If PARAMS is unspecified, use
 362         dot_style, if available.
 363
 364         * init.c: Ditto.
 365
 366         * main.c (main): Resurect --dot-style.
 367
 368         * progress.c (dot_finish): Print the quantity if we're left at the
 369         beginning of a row.
 370
 371 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
 372
 373         * cmpt.c (random): Removed.
 374
 375         * retr.c (sleep_between_retrievals): Use the more portable rand()
 376         instead of random().
 377
 378 2001-11-27  Ian Abbott <abbotti@mev.co.uk>
 379
 380         * retr.c (retrieve_from_file): Initialize `new_file' to NULL to
 381         prevent seg fault.
 382
 383 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
 384
 385         * connect.c (connect_to_many): Use address_list_set_faulty to
 386         prevent the faulty address from being reused.
 387
 388         * host.c (address_list_set_faulty): New function.
 389         (address_list_get_bounds): New function, instead of
 390         address_list_count.
 391
 392 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
 393
 394         * url.c (convert_links): Don't translate %d-%d.
 395
 396         * main.c (print_help): Remove stray HAVE_RANDOM code.
 397
 398 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
 399
 400         * ftp.c (getftp): Improve output after sending PASV.  Don't
 401         attempt to "look up" the IP address we already know; call
 402         connect_to_one directly.
 403
 404 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
 405
 406         * progress.c: Change the default progress implementation to "bar".
 407
 408 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
 409
 410         * progress.c (bar_create): Print two newlines.
 411
 412 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
 413
 414         * cmpt.c (random): New function, a simple-minded replacement for
 415         random() on systems that don't have it.
 416
 417 2001-11-26  Hrvoje Niksic  <hniksic@arsdigita.com>
 418
 419         * config.h.in: Put a HAVE_USLEEP stub.
 420
 421         * cmpt.c (usleep): Replacement implementation of usleep using
 422         select.
 423
 424         * init.c: New option init_rate.
 425
 426         * main.c (main): New option --limit-rate.
 427
 428         * retr.c (limit_bandwidth): New function.
 429         (get_contents): Call it to limit the bandwidth used when
 430         downloading.
 431
 432         * progress.c (dot_update): Would print the wrong download speed on
 433         rows other than the first one when the download was continued.
 434         (dot_finish): Ditto.
 435
 436 2001-11-26  Ian Abbott <abbotti@mev.co.uk>
 437
 438         * http.c (gethttp): fix undeclared variable 'err' when compiled
 439         with HAVE_SSL.
 440
 441 2001-11-26  Hrvoje Niksic  <hniksic@arsdigita.com>
 442
 443         * progress.c: Don't allocate new timers; use the timing data
 444         propagated from the caller.
 445
 446         * retr.c (get_contents): Allocate and use a timer.
 447
 448 2001-11-26  Hrvoje Niksic  <hniksic@arsdigita.com>
 449
 450         * http.c (last_host_ip): Made into an address_list.
 451         (invalidate_persistent): Release pc_last_host_ip.
 452         (register_persistent): Use lookup_host.
 453         (persistent_available_p): Check for equality of hosts using
 454         address_list_match_all.  Call address_list_release.
 455         (http_cleanup): New function.
 456
 457         * ftp.c (getftp): Use lookup_host and connect_to_many.
 458
 459         * http.c (gethttp): Use lookup_host and connect_to_many.
 460
 461         * connect.c (make_connection): Removed.
 462         (connect_to_one): New function.
 463         (connect_to_many): Ditto.
 464         (set_connection_host_name): Ditto.
 465
 466         * host.c (lookup_host): New function; new return type.
 467         (address_list_new): New function.
 468         (address_list_count): Ditto.
 469         (address_list_copy_one): Ditto.
 470         (address_list_delete): Ditto.
 471         (address_list_release): Ditto.
 472         (pretty_print_address): Ditto.
 473
 474 2001-11-26  Hrvoje Niksic  <hniksic@arsdigita.com>
 475
 476         * recur.c (retrieve_tree): In case of followed redirection,
 477         blacklist the pre-redirection URL.
 478
 479 2001-11-26  Hrvoje Niksic  <hniksic@arsdigita.com>
 480
 481         * recur.c (descend_redirect_p): New function.
 482         (retrieve_tree): Make sure redirections are not blindly followed.
 483
 484 2001-11-04  Alan Eldridge  <alane@geeksrus.net>
 485
 486         * config.h.in: added HAVE_RANDOM.
 487
 488         * options.h: added random_wait to struct options.
 489
 490         * main.c (print_help [HAVE_RANDOM], main): added arg parsing, help
 491         for --random-wait.
 492
 493         * retr.c (sleep_between_retrievals) [HAVE_RANDOM]: added
 494         implementation of random wait times.
 495
 496         * init.c (commands): added "randomwait" keyword.
 497
 498 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
 499
 500         * recur.c (descend_url_p): Be more conservative with blacklisting
 501         URLs.
 502         (convert_all_links): Print how many files have been converted, and
 503         how long it took.
 504
 505         * progress.c (create_image): Place the number of downloaded bytes
 506         right after the progress bar.
 507
 508         * utils.c (suffix): Return a pointer into the string.
 509
 510 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
 511
 512         * url.c (convert_links): Handle CO_NULLIFY_BASE.
 513
 514         * recur.c (retrieve_tree): Ignore download-ignorable children.
 515         (convert_all_links): Specify CO_NULLIFY_BASE when link_base_p.
 516
 517         * html-url.c (handle_link): Return the newly created urlpos.
 518         (collect_tags_mapper): When dealing with BASE, store the base
 519         reference and mark it as download-ignorable.
 520
 521 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
 522
 523         * url.c (convert_links): Attempt to quote '?' as "%3F" when
 524         linking to local files.  Given up on the attempt, as it breaks
 525         local browsing.
 526
 527 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
 528
 529         * main.c (private_initialize): Removed.
 530         (main): Don't call private_initialize.
 531
 532         * http.c: Call lookup_host.
 533
 534         * host.c (host_init): Removed.
 535         (add_host_to_cache): Initialize host_name_address_map here, on
 536         demand.
 537         (ngethostbyname): Commented out.
 538
 539         * connect.c (make_connection): Remove dead code; use lookup_host.
 540
 541         * host.c (store_hostaddress): Renamed to lookup_host and reversed
 542         the args.
 543         Removed host_address_name_map and host_slave_master_map.
 544
 545 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
 546
 547         * progress.c (dot_create): Align the "[ skipping ... ]" string
 548         with the dots.
 549
 550         * retr.c (rate): Split into two functions: calc_rate and
 551         retr_rate.
 552
 553         * progress.c (create_image): Draw a dummy progress bar even when
 554         total size is unknown.
 555         (display_image): Place the text cursor at the end of the "image".
 556
 557 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
 558
 559         * url.c (reencode_string): Use unsigned char, not char --
 560         otherwise the hex digits come out wrong for 8-bit chars such as
 561         nbsp.
 562         (lowercase_str): New function.
 563         (url_parse): Canonicalize u->url if needed.
 564         (get_urls_file): Parse each URL, and return only the valid ones.
 565         (free_urlpos): Call url_free.
 566         (mkstruct): Add :port if the port is non-standard.
 567         (mkstruct): Append the query string to the file name, if any.
 568         (urlpath_length): Use strpbrk_or_eos.
 569         (uri_merge_1): Handle the cases where LINK is an empty string,
 570         where LINK consists only of query, and where LINK consists only of
 571         fragment.
 572         (convert_links): Count and report both kinds of conversion.
 573         (downloaded_file): Use a hash table, not a list.
 574         (downloaded_files_free): Free the hash table.
 575
 576         * retr.c (retrieve_from_file): Ditto.
 577
 578         * main.c (main): Call either retrieve_url or retrieve_tree
 579         for each URL, not both.
 580
 581         * retr.c (register_all_redirections): New function.
 582         (register_redirections_mapper): Ditto.
 583         (retrieve_url): Register the redirections.
 584         (retrieve_url): Make the string "Error parsing proxy ..."
 585         translatable.
 586
 587         * res.c (add_path): Strip leading slash from robots.txt paths so
 588         that the path representations are "compatible".
 589         (free_specs): Free each individual path, too.
 590         (res_cleanup): New function.
 591         (cleanup_hash_table_mapper): Ditto.
 592
 593         * recur.c (url_queue_new): New function.
 594         (url_queue_delete): Ditto.
 595         (url_enqueue): Ditto.
 596         (url_dequeue): Ditto.
 597         (retrieve_tree): New function, replacement for recursive_retrieve.
 598         (descend_url_p): New function.
 599         (register_redirection): New function.
 600
 601         * progress.c (create_image): Cosmetic changes.
 602
 603         * init.c (cleanup): Do all those complex cleanups only if
 604         DEBUG_MALLOC is defined.
 605
 606         * main.c: Removed --simple-check and the corresponding
 607         simple_host_check in init.c.
 608
 609         * html-url.c (handle_link): Parse the URL here, and propagate the
 610         parsed URL to the caller, who would otherwise have to parse it
 611         again.
 612
 613         * host.c (xstrdup_lower): Moved to utils.c.
 614         (realhost): Removed.
 615         (same_host): Ditto.
 616
 617 2001-11-24  Hrvoje Niksic  <hniksic@arsdigita.com>
 618
 619         * utils.c (path_simplify): Preserver the (non-)existence of
 620         leading slash.  Return non-zero if changes were made.
 621
 622 2001-11-24  Hrvoje Niksic  <hniksic@arsdigita.com>
 623
 624         * progress.c (bar_update): Don't modify bp->total_length if it is
 625         zero.
 626
 627 2001-11-24  Hrvoje Niksic  <hniksic@arsdigita.com>
 628
 629         * retr.c (retrieve_url): When the redirection URL doesn't parse,
 630         print the correct error message rather than "UNKNOWN".
 631
 632 2001-11-24  Hrvoje Niksic  <hniksic@arsdigita.com>
 633
 634         * progress.c (bar_finish): If the timer didn't record any time
 635         since the download beginning, fake 1ms.
 636
 637 2001-11-24  Hrvoje Niksic  <hniksic@arsdigita.com>
 638
 639         * recur.c (recursive_retrieve): Fix typo.
 640
 641 2001-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
 642
 643         * progress.c (create_image): Don't translate "%ld ".
 644
 645 2001-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
 646
 647         * progress.c (bar_set_params): Allow the user to force the use of
 648         the bar.
 649
 650 2001-11-23  Lemble Gregory  <gregory.lemble@st.com>
 651
 652         * gen_sslfunc.c (ssl_init_prng): New function; seed the SSL RNG.
 653
 654 2001-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
 655
 656         * progress.c: Renamed dp_* functions to dot_* for greater clarity
 657         and consistency with bar_*.
 658         (print_download_speed): Get rid of the unneeded '@' character.
 659         (create_image): Fix download rate geometry.
 660
 661         * progress.c (print_elapsed): Remove spurious space.
 662         (print_elapsed): Renamed to print_download_speed, since that's
 663         what it does.
 664
 665 2001-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
 666
 667         * progress.c (bar_update): If the downloaded amount becomes larger
 668         than the expected amount, adjust the expected amount accordingly.
 669
 670 2001-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
 671
 672         * utils.c (determine_screen_width): New function.
 673
 674         * main.c (main): New option `--progress=TYPE'.
 675         (main): Implement compatibility with the old option `--dot-style'.
 676
 677         * init.c: Removed cmd_spec_dotstyle -- that logic is now in
 678         dp_set_params.
 679         (cmd_spec_progress): New function.
 680
 681         * retr.c (get_contents): Use the progress_* functions instead of
 682         the old show_progress().
 683         (show_progress): Removed.
 684         (rate): Print "xxxx.xx K/s" instead of "KB/s".  Ditto for MB/s,
 685         etc.
 686
 687         * progress.c (set_progress_implementation): New function.
 688         (valid_progress_implementation_p): Ditto.
 689         (progress_create): Ditto.
 690         (progress_update): Ditto.
 691         (progress_finish): Ditto.
 692         (dp_create): Ditto.
 693         (dp_update): Ditto.
 694         (dp_finish): Ditto.
 695         (dp_set_params): Ditto.
 696         (print_elapsed): Ditto.
 697
 698 2001-11-22  Hrvoje Niksic  <hniksic@arsdigita.com>
 699
 700         * retr.c (show_progress): Use it.
 701
 702         * log.c (log_set_flush): New function.
 703
 704 2001-11-22  Hrvoje Niksic  <hniksic@arsdigita.com>
 705
 706         * utils.c (path_simplify): Don't remove trailing slashes.
 707
 708         * ftp.c (ftp_get_listing): Use it.
 709
 710         * utils.c (file_merge): New function.
 711
 712         * url.c (opt_url): Removed.
 713
 714         * recur.c (recursive_retrieve): Inline "opt_url" logic.
 715
 716         * main.c (main): Use xfree(), not free().
 717
 718         * url.c (rewrite_url_maybe): Renamed to rewrite_shorthand_url.
 719
 720         * ftp.c (ccon): Move `ccon' typedef here, since it's only used
 721         internally.
 722
 723         * config.h.in: Include a stub for HAVE_STRPBRK.
 724
 725         * cmpt.c (strpbrk): Include a replacement for systems without
 726         strpbrk().
 727
 728         * ftp.c: Use url_set_dir and url_set_file when modifying the URL.
 729
 730         * url.c (url_set_dir): New function.
 731         (url_set_file): Ditto.
 732
 733         * ftp-basic.c (ftp_process_type): Process FTP type here; the URL
 734         parser makes the URL "params" available, so we can do that in this
 735         function.
 736
 737         * retr.c: Ditto.
 738
 739         * ftp.c: Ditto; pass the local file information in `ccon'.
 740
 741         * http.c: Get rid of the ugly kludge that had URL being replaced
 742         with the proxy URL when proxy retrieval was requested.  Use a
 743         separate parameter to http_loop and gethttp for the proxy URL.
 744
 745         * http.c: Changed to reflect the fact that local file, proxy, and
 746         referer information are no longer stored in struct url.  The local
 747         file information is passed in `struct hstat' now.
 748
 749         * url.c: Reworked URL parsing to be more regular.  Reencode the
 750         URL using reencode_string.
 751         Removed non-URL-related information from struct url.  This
 752         includes fields `proxy', `local', and `referer'.
 753
 754 2001-11-22  Jochen Hein  <jochen@jochen.org>
 755
 756         * main.c (main): Split the copyright notice for easier
 757         translation.
 758
 759 2001-08-21  Dave Turner <dct25@hermes.cam.ac.uk>
 760
 761         * ftp-basic.c (ftp_size): New function to send non-standard SIZE
 762           command to server to request file size.
 763         * ftp.h (ftp_size): Export it.
 764         * ftp.c (getftp): Use new ftp_size function if restoring
 765           transfer of a file with unknown size.
 766
 767 2001-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
 768
 769         * url.c (parseurl): Don't depend on the now-obsolete TYPE.
 770
 771 2001-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
 772
 773         * url.c (getproxy): Handle URL shorthands.
 774
 775 2001-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
 776
 777         * main.c: Remove --wait / --waitretry backwards compatibility
 778         code.
 779
 780 2001-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
 781
 782         * main.c (main): Use it.
 783
 784         * url.c (rewrite_url_maybe): New function.
 785
 786 2001-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
 787
 788         * url.c: Clean up handling of URL schemes.
 789
 790 2001-05-13  Hrvoje Niksic  <hniksic@arsdigita.com>
 791
 792         * url.c: Get rid of `protostrings'.
 793         (skip_proto): Don't use protostrings.
 794         (has_proto): Ditto.
 795
 796 2001-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
 797
 798         * Makefile.in: Conditionally compile getopt.o.
 799
 800 2001-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
 801
 802         * md5.h: Renamed to gnu-md5.h.
 803
 804         * md5.c: Renamed to gnu-md5.c.
 805
 806         * http.c: Ditto.
 807
 808         * ftp-opie.c: Use the new macros.
 809
 810         * sysdep.h: Define md5-related macros.
 811
 812         * config.h.in: Define HAVE_SOLARIS_MD5 or HAVE_BUILTIN_MD5
 813         depending on which md5 implementation is used.
 814
 815 2001-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
 816
 817         * res.c (res_register_specs): Initialize OLD and HP_OLD to appease
 818         the compiler.
 819
 820 2001-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
 821
 822         * http.c (gethttp): Print the whole response line when printing
 823         headers is requested.
 824
 825 2001-05-12  Hrvoje Niksic  <hniksic@arsdigita.com>
 826
 827         * res.c: New file.  Implement all RES-related code here.
 828
 829 2001-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
 830
 831         * version.c: Wget 1.7.1 is released.
 832
 833 2001-11-16  Hrvoje Niksic  <hniksic@arsdigita.com>
 834
 835         * headers.c (header_extract_number): Ignore trailing whitespace.
 836
 837 2001-08-24  Ian Abbott  <abbotti@mev.co.uk>
 838
 839         * html-url.c (collect_tags_mapper): Fix bug converting links
 840         with -k option for tags with multiple link attributes by
 841         handling links in the order they appear.
 842
 843 2001-08-15  Ian Abbott  <abbotti@mev.co.uk>
 844
 845         * ftp.c (ftp_loop_internal): Avoid a potential buffer overflow in
 846           the call to the 'rate' function by moving it past the error
 847           checking for the 'getftp' function return value.
 848
 849 2001-11-16  Hrvoje Niksic  <hniksic@arsdigita.com>
 850
 851         * html-parse.c (advance_declaration): Use 0x22 instead of '"' or
 852         '\"'.  Different compilers' assert macros are broken in different
 853         ways.
 854
 855 2001-09-29  Christian Fraenkel  <c.fraenkel@gmx.net>
 856
 857         * http.c (gethttp): print debug output for errors occuring during
 858         the ssl handshake.
 859
 860 2001-11-16  Chris Seawood  <cls@seawood.org>
 861
 862         * init.c: Ditto.
 863
 864         * host.c: Ditto.
 865
 866         * connect.c: Ditto.
 867
 868         * sysdep.h: Support compilation under BEOS.
 869
 870 2001-06-08  Edward J. Sabol  <sabol@alderaan.gsfc.nasa.gov>
 871
 872         * url.c (url_equal): Fix a memory leak when parseurl returns an
 873         error on the second URL. Also, since url_equal is not used at the
 874         moment, do not compile it.
 875
 876         * url.h: Ditto for the prototype of url_equal.
 877
 878 2001-11-16  Hrvoje Niksic  <hniksic@arsdigita.com>
 879
 880         * html-parse.c (map_html_tags): Support XML-style empty tags.
 881
 882 2001-06-26  Hrvoje Niksic  <hniksic@arsdigita.com>
 883
 884         * wget.h (DO_REALLOC_FROM_ALLOCA): Check for do_realloc_newsize in
 885         loop condition because we're no longer setting SIZEVAR here.
 886
 887 2001-06-26  Hrvoje Niksic  <hniksic@arsdigita.com>
 888
 889         * wget.h (DO_REALLOC_FROM_ALLOCA): Set SIZEVAR after the memcpy()
 890         call because it needs the old value.
 891
 892 2001-06-18  Hrvoje Niksic  <hniksic@arsdigita.com>
 893
 894         * cookies.c (ATTR_NAME_CHAR): Allow almost any character to be in
 895         an attribute name.
 896
 897 2001-06-18  Hrvoje Niksic  <hniksic@arsdigita.com>
 898
 899         * url.c (url_filename): Make sure that slashes that sneak in to
 900         u->file via query string get protected.
 901         (file_name_protect_query_string): New function.
 902
 903 2001-06-14  Hrvoje Niksic  <hniksic@arsdigita.com>
 904
 905         * recur.c (recursive_retrieve): Also check undesirable_urls with
 906         canonicalized URL.
 907
 908 2001-06-14  Hrvoje Niksic  <hniksic@arsdigita.com>
 909
 910         * http.c (gethttp): Search `.netrc' with real host, not the proxy
 911         one.
 912
 913 2001-06-14  Hrvoje Niksic  <hniksic@arsdigita.com>
 914
 915         * sysdep.h (MAP_FAILED): Provide MAP_FAILED for systems that don't
 916         define it.
 917
 918 2001-06-09  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
 919
 920         * ftp.h: Provide correct prototype for ftp_parse_ls().
 921
 922 2001-06-04  Hrvoje Niksic  <hniksic@arsdigita.com>
 923
 924         * version.c: Wget 1.7 is released.
 925
 926 2001-06-03  Karl Eichwalder  <ke@suse.de>
 927
 928         * ftp-ls.c (ftp_parse_ls): Fix typo.
 929
 930 2001-05-27  Hrvoje Niksic  <hniksic@arsdigita.com>
 931
 932         * all: Update copyright information.
 933
 934 2001-05-26  Hrvoje Niksic  <hniksic@arsdigita.com>
 935
 936         * http.c (gethttp): Indicate that the continued download failed
 937         for *this* file.
 938
 939 2001-05-26  Hrvoje Niksic  <hniksic@arsdigita.com>
 940
 941         * version.c: Wget 1.7-pre1 is released.
 942
 943 2001-05-26  Hrvoje Niksic  <hniksic@arsdigita.com>
 944
 945         * version.c: Updated version to 1.7-pre1.
 946
 947 2001-05-14  Hrvoje Niksic  <hniksic@arsdigita.com>
 948
 949         * gen_sslfunc.c: Don't include <sys/time.h> directly.
 950
 951 2001-05-14  Hrvoje Niksic  <hniksic@arsdigita.com>
 952
 953         * http.c (gethttp): Use real URL data for cookies, not the proxy
 954         stuff.
 955
 956 2001-05-12  Hrvoje Niksic  <hniksic@arsdigita.com>
 957
 958         * main.c (print_help): Document `--no-http-keep-alive'.
 959
 960         * utils.c (numdigit): Handle negative numbers *correctly*.
 961
 962         * hash.c (make_nocase_string_hash_table): Use term "nocase" rather
 963         than the confusing "unsigned".
 964
 965         * utils.c (string_set_contains): Renamed from string_set_exists.
 966
 967         * hash.c (hash_table_contains): Renamed from hash_table_exists.
 968
 969         * cookies.c: Move case-insensitive hash tables to hash.c.
 970
 971 2001-05-09  Hrvoje Niksic  <hniksic@arsdigita.com>
 972
 973         * http.c (gethttp): Before concluding that the file is already
 974         fully retrieved, make sure that the file existed and `Range' was
 975         actually requested.
 976
 977 2001-05-09  Hrvoje Niksic  <hniksic@arsdigita.com>
 978
 979         * cookies.c (eliminate_dups): New function.
 980         (build_cookies_request): Use it.
 981         (build_cookies_request): Set chain_store_size after reallocating
 982         all_chains.
 983         (check_domain_match): Annotated for easier future debugging.
 984         (store_cookie): In the debug message, print whether the cookie is
 985         permanent.
 986
 987 2001-05-08  Hrvoje Niksic  <hniksic@arsdigita.com>
 988
 989         * http.c (http_loop): Reset no_truncate before deciding whether to
 990         set it.
 991         (gethttp): Further clarify "-c conflicts with existing file" error
 992         message, based on input from Herold Heiko.
 993
 994 2001-05-07  Hrvoje Niksic  <hniksic@arsdigita.com>
 995
 996         * http.c (http_loop): If restval is set, set no_truncate to 1
 997         unconditionally.
 998
 999 2001-05-02  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
1000
1001         * ftp-ls.c (ftp_parse_winnt_ls): Assure months are being correctly
1002         converted. Pointed out by <Stefan.Weil@de.heidelberg.com>.
1003         (ftp_parse_vms_ls): Ditto.
1004
1005 2001-04-30  Hrvoje Niksic  <hniksic@arsdigita.com>
1006
1007         * init.c (cmd_address): Zero SIN before using it; apparently
1008         needed on *BSD.
1009
1010 2001-04-29  Hrvoje Niksic  <hniksic@arsdigita.com>
1011
1012         * ftp.c (ftp_loop_internal): Don't set NO_TRUNCATE if the file is
1013         empty.
1014
1015 2001-04-29  Hrvoje Niksic  <hniksic@arsdigita.com>
1016
1017         * main.c (main): Make `--cookies' respect its argument.
1018
1019 2001-04-28  Hrvoje Niksic  <hniksic@arsdigita.com>
1020
1021         * main.c (main): Removed undocumented option `--email-address'.
1022
1023         * netrc.c: Use the latest read_whole_line.
1024
1025         * init.c (defaults): Set opt.ftp_pass to "-wget@".
1026
1027         * mswindows.c (pwd_cuserid): Ditto.
1028
1029         * utils.c (pwd_cuserid): Removed.
1030
1031         * host.c (ftp_getaddress): Removed.
1032
1033 2001-04-28  Hrvoje Niksic  <hniksic@arsdigita.com>
1034
1035         (http_loop): Allocate space for filename_plus_orig_suffix with
1036         alloca; this is more efficient and removes the need to free it
1037         before each and every return.
1038
1039 2001-04-28  Hrvoje Niksic  <hniksic@arsdigita.com>
1040
1041         * http.c (gethttp): Return RETRUNNEEDED when the retrieval is
1042         unneeded because the file is already there and fully downloaded,
1043         and -c is specified.
1044         (http_loop): Handle RETRUNNEEDED.
1045
1046         * wget.h (uerr_t): New value RETRUNNEEDED.
1047
1048         * http.c (http_loop): Set no_truncate for files that both exist
1049         and are non-empty.
1050         (gethttp): Consider the download finished when restval >= contlen,
1051         not only when restval==contlen.
1052         (gethttp): Handle redirection before giving up due to -c.
1053         (gethttp): Clarify error message which explains that -c will not
1054         truncate the file.
1055         (gethttp): When returning CONTNOTSUPPORTED, don't forget to free
1056         the stuff that needs freeing and release the socket.
1057
1058 2001-04-27  Hrvoje Niksic  <hniksic@arsdigita.com>
1059
1060         * main.c (print_help): Wget booleans accept "off", not "no".
1061
1062 2001-04-27  Hrvoje Niksic  <hniksic@arsdigita.com>
1063
1064         * http.c (http_loop): If allow_cache is zero, always disable
1065         caching, not only when retrieving through proxy.
1066
1067         * init.c: Ditto.
1068
1069         * options.h (struct options): Rename proxy_cache to allow_cache.
1070
1071 2001-04-27  Hrvoje Niksic  <hniksic@arsdigita.com>
1072
1073         * http.c (mktime_from_utc): Improve documentation.
1074         (http_atotm): Put format strings into a separate array.
1075
1076 2001-04-27  Hrvoje Niksic  <hniksic@arsdigita.com>
1077
1078         * safe-ctype.h: Instead of throwing #error when isalpha is
1079         defined, redefine it to something that will throw a compile-time
1080         error if actually *used*.  Do the same for the rest of the
1081         standard C macros.
1082
1083 2001-04-26  Hrvoje Niksic  <hniksic@arsdigita.com>
1084
1085         * url.c (getproxy): Ignore empty proxy vars.
1086
1087 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
1088
1089         * http.c (http_loop): Would load cookies every time.
1090
1091         * cookies.c (load_cookies): Handle cookies whose values contain
1092         embedded spaces.
1093
1094 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
1095
1096         * utils.c: Define each DIGITS_* in one line.
1097
1098 2001-04-25  Roger L. Beeman  <beeman@cisco.com>
1099
1100         * http.c (http_atotm): Initialize t.tm_isdst to 0.
1101         (mktime_from_utc): Prevent mktime() from having discontinuities at
1102         DST transition points.
1103
1104 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
1105
1106         * html-url.c (get_urls_html): Fix documentation.
1107
1108 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
1109
1110         * url.c (UNSAFE_CHAR): Reimplement using a static table.
1111         (url_init): Removed.
1112         (init_unsafe_char_table): Removed.
1113
1114 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
1115
1116         * snprintf.c (dopr): Replace ISDIGIT with '0' <= ch && ch <= '9'.
1117
1118 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
1119
1120         * utils.c: Document timer functions.
1121
1122         * retr.c (rate): Use it.
1123         (rate): Print in GB/s if transfer rate exceeds 1 GB/s.
1124
1125         * utils.c (wtimer_granularity): New function.
1126
1127 2001-04-24  Hrvoje Niksic  <hniksic@arsdigita.com>
1128
1129         * retr.c (show_progress): Ditto.
1130
1131         * ftp.c (getftp): Ditto.
1132
1133         * http.c (gethttp): Use new timer functions.
1134
1135         * utils.c (wtimer_allocate): New function.
1136         (wtimer_new): Ditto.
1137         (wtimer_delete): Ditto.
1138         (wtimer_reset): Ditto.
1139         (wtimer_elapsed): Ditto.
1140
1141 2001-04-24  Hrvoje Niksic  <hniksic@arsdigita.com>
1142
1143         * utils.c (long_to_string): New, faster version.  Favors smaller
1144         numbers; much of the calculation is now done at compile-time.
1145
1146 2001-04-24  Hrvoje Niksic  <hniksic@arsdigita.com>
1147
1148         * utils.c (numdigit): Handle negative numbers.
1149
1150 2001-04-23  Hrvoje Niksic  <hniksic@arsdigita.com>
1151
1152         * retr.c (show_progress): Print the download rate even when the
1153         percentages are not available.
1154
1155 2001-04-21  Hrvoje Niksic  <hniksic@arsdigita.com>
1156
1157         * ftp.c (getftp): Adjust expected_bytes if the length is
1158         authoritative.
1159
1160 2001-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
1161
1162         * url.c: Don't declare `construct'.
1163
1164         * hash.c (grow_hash_table): Speed up rehashing; inline storing of
1165         mappings to new locations.
1166         (hash_table_new): Make resize_threshold a field in the hash table,
1167         so we don't have to recalculate it in each hash_table_put.
1168         (grow_hash_table): Update resize_threshold.
1169         (MAX): Remove unused macro.
1170         (prime_size): Made static.
1171
1172 2001-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
1173
1174         * retr.c (retrieve_url): Call uri_merge, not url_concat.
1175
1176         * html-url.c (collect_tags_mapper): Call uri_merge, not
1177         url_concat.
1178
1179         * url.c (mkstruct): Use encode_string instead of xstrdup followed
1180         by URL_CLEANSE.
1181         (path_simplify_with_kludge): Deleted.
1182         (contains_unsafe): Deleted.
1183         (construct): Renamed to uri_merge_1.
1184         (url_concat): Renamed to uri_merge.
1185
1186 2001-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
1187
1188         * url.c (str_url): Use encode_string instead of the unnecessary
1189         CLEANDUP.
1190         (encode_string_maybe): New function, returns input string if no
1191         encoding is needed.
1192         (encode_string): Call encode_string_maybe to do the dirty work,
1193         xstrdup if no work needed.
1194
1195 2001-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
1196
1197         * wget.h (XDIGIT_TO_xchar): Define here.
1198
1199         * url.c (decode_string): Use new name.
1200         (encode_string): Ditto.
1201
1202         * http.c (XDIGIT_TO_xchar): Rename HEXD2asc to XDIGIT_TO_xchar.
1203         (dump_hash): Use new name.
1204
1205         * wget.h: Rename ASC2HEXD and HEXD2ASC to XCHAR_TO_XDIGIT and
1206         XDIGIT_TO_XCHAR respectively.
1207
1208 2001-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
1209
1210         * init.c: Include cookies.h.
1211
1212         * cookies.h: Declare cookies_cleanup.
1213
1214         * cookies.c (check_domain_match): Remove unused variable.
1215         (save_cookies): Remove extraneous argument from debug statement.
1216
1217         * host.c (same_host): Don't call skip_url.
1218
1219         * url.c (skip_url): Removed.  Removed its calls from various
1220         functions in url.c.
1221
1222 2001-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
1223
1224         * cookies.c (unsigned_string_hash): Use the new code in
1225         string_hash as reference.
1226
1227         * hash.c (hash_table_map): Allow deletion and change of the
1228         element processed by MAPFUN.
1229         (string_hash): Use the function from glib.
1230
1231 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
1232
1233         * config.h.in: Include #undef stub.
1234
1235         * hash.c (hash_table_remove): Rewrite to actually clear deleted
1236         entries instead of just marking them as deleted.
1237
1238 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
1239
1240         * hash.h: Declare hash_table_get_pair and hash_table_count.
1241
1242 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
1243
1244         * cookies.c: Declare http_atotm.
1245
1246 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
1247
1248         * ftp-ls.c (ftp_parse_unix_ls): Use octal constants for
1249         permissions.  A compiler that doesn't accept octal constants is
1250         seriously broken and shouldn't be used -- octal constants were
1251         present in K&R C!
1252
1253 2001-01-20  Karl Eichwalder  <ke@suse.de>
1254
1255         * Makefile.in: Provide and use DESTDIR according to the Coding
1256         Standards.
1257
1258 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
1259
1260         * ftp-ls.c (ftp_parse_vms_ls): Make seconds optional in time
1261         specification.
1262
1263 2001-04-11  Hrvoje Niksic  <hniksic@arsdigita.com>
1264
1265         * url.c (parseurl): Don't strip trailing slash when u->dir is "/"
1266         because that strips the *leading* slash, thus forcing relative
1267         FTP retrieval.
1268
1269 2001-04-10  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
1270
1271         * ftp.c (getftp): Convert initial FTP directory from VMS to UNIX
1272         notation for VMS servers.
1273         (ftp_retrieve_dirs): Do not prepend '/' to f->name when
1274         odir is an empty string.
1275
1276 2001-04-10  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
1277
1278         * ftp-ls.c (ftp_parse_winnt_ls): Made the fix for AM/PM more
1279         effective. Suggested by Edward J. Sabol.
1280
1281 2001-04-10  Hrvoje Niksic  <hniksic@arsdigita.com>
1282
1283         * cookies.c (build_cookies_request): Use and sort cookies from all
1284         matching domains.
1285         (build_cookies_request): Check for duplicates before generating
1286         the `Cookies' header.
1287
1288         * main.c (main): Don't load cookies here.
1289         (main): Make loadcookies and savecookies call the correct command.
1290
1291         * http.c (http_loop): Load cookies on-demand.
1292
1293 2001-04-09  Hrvoje Niksic  <hniksic@arsdigita.com>
1294
1295         * http.c (gethttp): Fix indentation of SSL ifdef.
1296
1297 2001-04-09  Hrvoje Niksic  <hniksic@arsdigita.com>
1298
1299         * ftp.c (ftp_retrieve_dirs): Don't forcibly prepend "/" to u->dir;
1300         that hack is no longer necessary.
1301         (getftp): Prepend initial directory to *non*-absolute u->dir's.
1302
1303 2001-04-09  Hrvoje Niksic  <hniksic@arsdigita.com>
1304
1305         * init.c (cmd_file): New function.
1306         (enable_tilde_expansion): New variable.
1307         (run_wgetrc): Use it.
1308         (cmd_file): Use it.
1309
1310 2001-04-08  Hrvoje Niksic  <hniksic@arsdigita.com>
1311
1312         * init.c: Include cookie-related options.
1313
1314         * main.c (main): Include cookie-specific options.
1315         (main): Load cookies before download is finished.
1316         (main): Save cookies when done.
1317
1318         * http.c (gethttp): Process the `Set-Cookie' header.
1319         (gethttp): Include cookies in the response.
1320
1321         * cookies.c: New file.
1322
1323 2001-04-08  Hrvoje Niksic  <hniksic@arsdigita.com>
1324
1325         * utils.c (datetime_str): New function.
1326
1327 2001-04-08  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
1328
1329         * ftp-ls.c (ftp_parse_winnt_ls): The AM/PM change did assume
1330         12:01PM == 00:01, which was obviously wrong. Taken care of this
1331         anomaly.
1332
1333         * ChangeLog: Removed an excess conflict marker. Reformatted the
1334         entry by Philipp Thomas from 2001-03-09.
1335
1336         * ftp-ls.c (ftp_parse_winnt_ls): Ensure that adjusted PM hours lay
1337         between 0 and 23. Elminate unused variable `sec'.
1338
1339 2001-04-08  Hrvoje Niksic  <hniksic@arsdigita.com>
1340
1341         * hash.c (hash_table_count): New function.
1342
1343 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
1344
1345         * utils.c (read_file): Cast MAP_FAILED to char *.  Enforced by
1346         Digital Unix cc.
1347
1348 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
1349
1350         * config.h.in: Oops, do the namespace tweaks only on systems we
1351         know about.
1352
1353 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
1354
1355         * hash.c: Include <string.h>.
1356
1357 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
1358
1359         * config.h.in: Define "compilation environment" options that work
1360         under Linux and Solaris.  To be reviewed on other OS'es.
1361
1362 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
1363
1364         * http.c (gethttp): Prepend literal newline with `\n\'.
1365
1366 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
1367
1368         * sysdep.h: Don't define VERY_LONG_FORMAT.
1369
1370         * utils.c (very_long_to_string): New function.
1371         (legible_very_long): Use it; don't use VERY_LONG_FORMAT.
1372
1373 2001-04-04  Christian Fraenkel  <christian.fraenkel@gmx.net>
1374
1375         * url.c (parse_uname): Would run past the end of the string if the
1376         username was present, but the URL did not contain a slash, e.g.
1377         http://foo:bar@myhost.
1378
1379 2001-04-03  KOJIMA Hajime  <kjm@rins.ryukoku.ac.jp>
1380
1381         * http.c (http_atotm): Use %A instead of %a to match full
1382         weekday.  (On most systems there is no difference.)
1383
1384 2001-04-03  Paul Bludov  <paul@ozero.net>
1385
1386         * mswindows.c (sleep): Use SleepEx() instead of Sleep().
1387         (ws_changetitle): Use alloca() instead of malloc() to avoid memory
1388         leak.
1389         (ws_mypath): Use GetModuleFileName instead of argv[0].
1390         (ws_startup): Use data.wVersion for comparison.
1391
1392 2001-04-02  Hrvoje Niksic  <hniksic@arsdigita.com>
1393
1394         * http.c (http_loop): Ditto.
1395
1396         * ftp.c (ftp_loop_internal): Made the check whether to continue
1397         retrieval `-O'-friendly.
1398
1399 2001-04-02  Hrvoje Niksic  <hniksic@arsdigita.com>
1400
1401         * netrc.c (parse_netrc): Don't trim the line endings explicitly;
1402         they will be handled as whitespace.
1403         (parse_netrc): Correctly handle lines that end with whitespace.
1404
1405 2001-04-02  Hrvoje Niksic  <hniksic@arsdigita.com>
1406
1407         * retr.c (retrieve_url): New variable global_download_count used
1408         to identify first retrieval.
1409
1410         * ftp.c (getftp): Ditto.
1411
1412         * http.c (gethttp): Rewind opt.dfp only on first retrieval.
1413
1414 2001-04-02  Hrvoje Niksic  <hniksic@arsdigita.com>
1415
1416         * init.c (cmd_address): Heap-allocate the address that gets stored
1417         to CLOSURE.  Old code would simply assign an address on the stack.
1418
1419 2001-04-01  Nicolas Lichtmaier <nick@debian.org>
1420
1421         * ftp.c (ftp_get_listing): Propagate error status.
1422         (ftp_retrieve_glob): Use it.
1423         (ftp_loop): Ditto.
1424
1425 2001-04-01  Nicolas Lichtmaier <nick@debian.org>
1426
1427         * main.c (main): Add -C to the string that is the third arg to
1428         getopt_long().
1429
1430 2001-04-01  Hrvoje Niksic  <hniksic@arsdigita.com>
1431
1432         * ftp.c (getftp): Don't start the download from scratch if `-c'
1433         was specified, but the file is already fully downloaded.
1434
1435         * http.c (gethttp): Don't truncate a pre-existing file if `-c' was
1436         specified and the server doesn't support continued download.
1437         (gethttp): Don't start the download from scratch if `-c' was
1438         specified, but the file is already fully downloaded.
1439
1440 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
1441
1442         (recursive_retrieve): Don't clear the hash tables at this point at
1443         all; it interferes with the normal operation of register_download.
1444
1445 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
1446
1447         * recur.c (recursive_retrieve): Clear the hash tables only when
1448         they are defined.
1449
1450 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
1451
1452         * http.c (gethttp): Make sure the socket is closed with
1453         CLOSE_INVALIDATE before we have drained the body.
1454
1455 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
1456
1457         * retr.c (retrieve_url): Call register_download() for downloaded
1458         files and register_html() for downloaded HTML files.
1459
1460         * recur.c (register_download): New function; register here that a
1461         file has been downloaded, rather than in recursive_retrieve().
1462         (register_html): New function; enqueue the location of HTML files
1463         here rather than in recursive_retrieve().
1464
1465 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
1466
1467         * main.c (print_help): Use multiple fputs instead of a single ugly
1468         printf().
1469         (main): Consistently assign numbers >128 to options without a
1470         corresponding character.
1471
1472 2001-03-09  Philipp Thomas  <pthomas@suse.de>
1473
1474         * safe-ctype.h: New file. Locale independent ctype.h replacement
1475         taken from libiberty.
1476
1477         * safe-ctype.c: New file. Tables for above.
1478
1479         * Makefile.in: Add safe-ctype$o to OBJS.  Add dependencies for
1480         safe-ctype$o.
1481
1482         * cmpt.c: Remove include of ctype.h. Use ISSPACE instead of
1483         isspace.
1484
1485         * ftp-basic.c: Don't include ctype.h.
1486
1487         * ftp-ls.c: Likewise.
1488
1489         * ftp.c: Likewise.
1490
1491         * headers.c: Likewise.
1492
1493         * host.c: Likewise.
1494
1495         * html-parse.c: Likewise.
1496
1497         * html-url.c: Likewise.
1498
1499         * http.c: Likewise.
1500
1501         * init.c: Likewise.
1502
1503         * main.c: Likewise. Set LC_CTYPE along with LC_MESSAGES.
1504
1505         * netrc.c: Likewise.
1506
1507         * recur.c: Likewise.
1508
1509         * retr.c: Likewise.
1510
1511         * snprintf.c: Replace ctype.h with safe-ctype.h. Use ISDIGIT
1512         instead of isdigit.
1513
1514         * sysdep.h: Remove defines of ctype macros as they aren't needed
1515         for safe-ctype-h.
1516
1517         * url.c: Don't include ctype.h.
1518
1519         * utils.c: Likewise.
1520
1521         * wget.h: Include safe-ctype.h.
1522
1523 2001-03-27  Dan Harkless  <wget@harkless.org>
1524
1525         * Makefile.in: Moved top_builddir out of "User configuration
1526         section" of top Makefile and analogous spot in this one.
1527
1528 2001-03-17  Dan Harkless  <wget@harkless.org>
1529
1530         * Makefile.in: Include @SSL_INCLUDES@ substition in INCLUDES.
1531         Define top_builddir.  Link wget with libtool so the user doesn't
1532         have to supply a bunch of custom environment variables to
1533         correctly link with the OpenSSL shared libraries.
1534
1535 2001-03-06  Hack Kampbjorn  <hack@hackdata.com>
1536
1537         * http.c (gethttp): skip :port in host header if it is the
1538         DEFAULT_HTTPS_PORT when using SSL.
1539
1540         * url.c: move the #define of DEFAULT_HTTP_PORT, DEFAULT_FTP_PORT
1541         and DEFAULT_HTTPS_PORT to the header file so it can be use in the
1542         rest of the code.
1543         * url.h: Ditto
1544
1545 2001-03-01  Jonas Jensen  <bones@huleboer.dk>
1546
1547         * retr.c (show_progress): Correctly calculate the number of bytes
1548         in the first line of the download that have been actually
1549         downloaded in this run.
1550
1551 2001-02-23  Dan Harkless  <wget@harkless.org>
1552
1553         * main.c (print_help): --help documentation for -N said it would
1554         re-download files if they had the _same_ timestamp on server.
1555         (print_help): -nr belongs in "FTP options" section of --help
1556         output, not "Recursive retrieval" section.  Alphabetized FTP
1557         options by long option name.
1558
1559 2001-02-16  Dan Harkless  <wget@harkless.org>
1560
1561         * init.c (commands): Hack Kampbjørn <hack@hackdata.com> discovered
1562         that "httpsproxy" had been inserted into commands[] out of
1563         alphabetical order, causing "BUG: unknown command `httpuser'".
1564
1565 2001-02-13  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
1566
1567         * ftp-ls.c (ftp_parse_ls): Added support of ST_MACOS (Unix-like
1568         listing without correct permissons).
1569
1570         * ftp.h (stype): Added ST_MACOS to identify the NetPresenz MacOS
1571         FTP server.
1572
1573         * ftp.c (ftp_retrieve_list): New mirroring logic: A remote file
1574         shall be donwloaded only when it's newer than the local copy or
1575         when it has the same timeestamp but its size is different. ST_VMS
1576         and ST_MACOS as special cases that lie about file size.
1577
1578         * ftp-ls.c (ftp_parse_ls): Support for ST_MACOS.
1579
1580         * Makefile.in: Removed dependency on ftpparse library due to unclear
1581         copyright issues and absence of any feedback to our queries.
1582
1583         * ftp-ls.c: Removed dependency on ftpparse library due to unclear
1584         copyright issues and absence of any feedback to our queries.
1585         (ftp_parse_ls): Added a warning message when remote server system
1586         does not seem to be suported by wget.
1587         (ftp_parse_vms_ls): New function for parsing VMS ftp
1588         server listing output.
1589         (clean_line): New function responsible for removing
1590         end-of-line characters from FTP listing texts.
1591
1592         * ftp.c (getftp): Global variables pwd and host_type are now
1593         member of the ccon structure under names ccon.id and ccon.rs.
1594
1595         * ftp.h (struct ccon): Added formed global variables from ftp.c,
1596         enum stype rs (remote system identification) and char *id (initial
1597         working directory), as suggested by Hrvoje.
1598
1599         * url.c (parse_uname): Added support for passwords containing '@'
1600         characters.
1601         (skip_uname): Ditto.
1602
1603 2001-02-11  Hrvoje Niksic  <hniksic@arsdigita.com>
1604
1605         * ftp.c (ftp_loop): Reset con.
1606
1607 2001-01-06  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
1608
1609         * url.c (parse_uname): Added support for passwords containing '@'
1610         characters.
1611         (skip_uname): Ditto.
1612
1613 2001-02-11  Hack Kampbjørn  <hack@hackdata.com>
1614
1615         * url.c (parseurl): Debug-print u->ftp_type.
1616
1617 2001-02-11  Hrvoje Niksic  <hniksic@arsdigita.com>
1618
1619         * ftp.c (ftp_loop_internal): Disable padding.
1620         (getftp): Ditto.
1621
1622         * http.c (http_loop): Disable padding.
1623
1624         * retr.c (show_progress): Use it to enable padding.
1625
1626         * retr.c (rate): Optional parameter PAD for padding the rate.
1627
1628 2001-02-10  Hrvoje Niksic  <hniksic@arsdigita.com>
1629
1630         * retr.c (show_progress): Make sure that the last output line
1631         includes progress.
1632
1633 2001-02-10  Jonas Jensen  <bones@huleboer.dk>
1634
1635         * retr.c (show_progress): Print the download rate along with the
1636         percentages.
1637         Along with Anders Thorsby <anders@thorsby.dk>.
1638
1639 2001-02-10  Tim Mooney  <mooney@dogbert.cc.ndsu.NoDak.edu>
1640
1641         * ftp.h: Rename enums `command' to `wget_ftp_command' and
1642         `fstatus' to `wget_ftp_status' because old names clash with Tru64
1643         net/if.h.
1644
1645 2001-02-08  Christian Fraenkel <christian.fraenkel@gmx.net>
1646
1647         * gen_sslfunc.c: verify_callback is now static
1648
1649         * gen_sslfunc.c (init_ssl): load certificate if specified
1650
1651         * gen_sslfunc.c (ssl_printerr): new function
1652
1653         * init.c: added new --sslcertfile and --sslcertkey switches
1654
1655         * main.c: ditto
1656
1657         * options.h: ditto
1658
1659         * http.c (gethttp): abort when init_ssl fails
1660
1661 2001-01-23  Herold Heiko  <Heiko.Herold@previnet.it>
1662
1663         * mswindows.h: Include <malloc.h>; it's needed for alloca().
1664
1665 2001-01-10  Dan Harkless  <wget@harkless.org>
1666
1667         * url.c (str_url): Clarified this function's comment header after
1668         Hrvoje answered my question on the list as to when hide != 1.
1669         Also Hrvoje pointed out I need to use xstrdup() on the string literal.
1670
1671 2001-01-06  Hrvoje Niksic  <hniksic@arsdigita.com>
1672
1673         * connect.c (bindport): Declare addrlen as int.  Diagnosed by
1674         Drazen Kacar <dave@arsdigita.com>.
1675         (conaddr): Ditto.
1676
1677 2001-01-09  Dan Harkless  <wget@harkless.org>
1678
1679         * html-url.c: A bunch of fixup of `--page-requisites'-related
1680         comments to reflect Hrvoje's changes to my code when transplanting
1681         it into this new file, to fix spelling mistakes, to clarify, etc.
1682
1683         * url.c (write_backup_file): Clarified a comment.
1684         (str_url): Henrik van Ginhoven pointed out on the list that we
1685         shouldn't give away the number of characters in the password by
1686         replacing each character with a 'x'.  Use "<password>" instead.
1687
1688         * ftp.c (ftp_retrieve_dirs): The bug where recursion into FTP
1689         directories didn't work if logging in put you in a directory other
1690         than "/" is fixed now.  Removed the comment here warning of the bug.
1691
1692         * main.c (print_help): --continue's description was misleading.
1693         We don't "restart", we "resume".  Also, better to say
1694         "partially-downloaded file" rather than just "existing file".
1695
1696 2001-01-06  Dan Harkless  <wget@harkless.org>
1697
1698         * ChangeLog: The '[Not in 1.6 branch.]'s were decided not to be
1699         the best way to go about my aim.  Removed them in favor of:
1700
1701         * ChangeLog-branches/1.6_branch.ChangeLog: New file.
1702
1703 2001-01-04  Hrvoje Niksic  <hniksic@arsdigita.com>
1704
1705         * url.c (replace_attr): New function, to be used by both
1706         TO_COMPLETE and TO_RELATIVE case in convert_links.
1707         (find_fragment): New function for finding URL fragments.
1708         (replace_attr): Better handle the case where the original string
1709         is not quoted.  Use find_fragment.
1710         (convert_links): Use replace_attr().
1711
1712 2000-12-31  Dan Harkless  <wget@harkless.org>
1713
1714         * ChangeLog: Since this flat file doesn't have multiple branches,
1715         looking at the dates would make you think that things went into
1716         1.6 that actually just went into the 1.7-dev branch.  Added "[Not
1717         in 1.6 branch.]" where appropriate to clarify.
1718
1719 2000-12-30  Dan Harkless  <wget@harkless.org>
1720
1721         * ftp.c, http.c:  Applied Hack Kampbjørn <hack@hackdata.com>'s
1722         patch to deal with h_errno not being defined in netdb.h under Cygwin.
1723
1724 2000-12-18  Csaba Raduly  <csaba.raduly@sophos.com>
1725
1726         * sysdep.h: Include <malloc.h> and <io.h> under Watcom.
1727
1728 2000-12-17  Igor Khristophorov  <igor@atdot.org>
1729
1730         * http.c (check_end): Fix test for '+' or '-'.
1731
1732 2000-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
1733
1734         * url.c (parseurl): Rename inner loop var from i to ind to avoid
1735         clash with the function top-level-declared variable i.
1736         (str_url): Likewise, rename inner-loop i to j.
1737
1738         * recur.c (parse_robots): Don't declare LEN at top of function.
1739         (robots_match): Renamed parameter FORBIDDEN to avoid hiding of
1740         global variable.
1741
1742         * main.c (main): Change erroneous use of bitwise and to logical.
1743
1744         * init.c (cmd_address): Don't heap-allocate `sin'; it can be on
1745         the stack because it will be copied to closure.
1746
1747         Thanks to Csaba Raduly's run of PC-LINT over the sources.
1748
1749 2000-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
1750
1751         * http.c (basic_authentication_encode): Use xmalloc(), not
1752         malloc().  Thanks to Csaba Raduly's run of PC-LINT over the
1753         sources.
1754
1755 2000-12-17  Csaba Raduly  <csaba.raduly@sophos.com>
1756
1757         * sysdep.h: Test for __EMX__ rather than for EMXOS2 for OS/2
1758         compilation.
1759
1760 2000-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
1761
1762         * mswindows.c: Include <errno.h>.
1763
1764         * gen_sslfunc.c: Include <errno.h>.
1765
1766         * ftp-basic.c: Don't attempt to declare errno or h_errno because
1767         they're not used.
1768
1769         * main.c: Include <errno.h> because errno is used.
1770
1771         * ftp.c: Ditto.
1772
1773         * http.c: Include <netdb.h> for h_errno.
1774
1775 2000-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
1776
1777         * html-parse.c (advance_declaration): MSVC assert() chokes on
1778         '\"'.  Use '"' instead.
1779
1780 2000-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
1781
1782         * utils.c (xfree_real): Removed.
1783         (xfree_debug): Just call free().
1784
1785         * wget.h (xfree): Make it an alias for free.
1786
1787 2000-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
1788
1789         * http.c (http_loop): Furthermore, touch output_document only if
1790         it is known to be an existing regular file.
1791
1792 2000-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
1793
1794         * ftp.c (ftp_retrieve_list): Ditto.
1795
1796         * http.c (http_loop): Touch output_document if that is used for
1797         output.
1798
1799 2000-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
1800
1801         * http.c: Include gen_sslfunc.h after including Wget's headers.
1802         (persistent_available_p): Needed coma before `int ssl'.
1803
1804 2000-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
1805
1806         * ftp.c (ftp_loop_internal): Ditto.
1807
1808         * http.c (http_loop): Use it.
1809
1810         * retr.c (sleep_between_retrievals): New function that handles the
1811         logic of opt.wait and opt.waitretry.
1812
1813 2000-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
1814
1815         * rbuf.h: Implement only a single version of RBUF_READCHAR, using
1816         rbuf_read_bufferful when the buffer is depleted.
1817
1818         * rbuf.c (rbuf_read_bufferful): New function.
1819
1820 2000-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
1821
1822         * gen_sslfunc.h: Use ansi2knr style function declarations.
1823
1824         * gen_sslfunc.c: Reformat according to the GNU coding standards.
1825         More should be done.
1826
1827         * http.c (persistent_available_p): Place the cheap SSL test nearer
1828         the top of the function.
1829         (CLOSE_FINISH, CLOSE_INVALIDATE): Define only one version of each.
1830
1831 2000-12-05  Hrvoje Niksic  <hniksic@arsdigita.com>
1832
1833         * url.c (init_unsafe_char_table): Reinstate space as an unsafe
1834         char.
1835
1836 2000-12-03  Christian Fraenkel <christian.fraenkel@gmx.net>
1837
1838         * Makefile.in: added gen_sslfunc object
1839         * config.h.in: added HAVE_SSL define
1840         * connect.c: changed select_fd from static int to int
1841         * connect.h: ditto
1842         * gen_sslfunc.h: New file
1843         * gen_sslfunc.c: ditto
1844         * http.c: added HTTPS fuctionality
1845         * retrc.c: ditto
1846         * url.c: ditto
1847         * init.c: added opt.httpsproxy
1848         * options.h: ditto
1849         * rbuf.h: added alternate rbuf struct
1850         * wget.h: added CONSSLERR
1851         * rbuf.c: ditto
1852
1853         * http.c: Added HTTPS fuctionality.
1854
1855         * retrc.c: Ditto.
1856
1857         * url.c: Ditto.
1858
1859         * init.c: Added opt.httpsproxy.
1860
1861         * options.h: Ditto.
1862
1863         * rbuf.h: Added alternate rbuf struct.
1864
1865         * wget.h: Added CONSSLERR.
1866
1867         * rbuf.c: Ditto.
1868
1869 2000-11-30  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
1870
1871         * ftp-ls.c (ftp_parse_unix_ls): Added second parameter
1872         "ignore_perms" to ignore file and directory permissions for
1873         Windows NT FTP server listings.
1874         (ftp_parse_winnt_ls): New function.
1875         (ftp_parse_ls): Parses UNIX and Windows NT listings
1876         separately. Simple heuristics for distinguishing between UNIX and
1877         MS-DOS-like FTP listing provided by Windows NT FTP service.
1878
1879 2000-11-18  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
1880
1881         * ftpparse.c, ftpparse.h: New files.
1882
1883         * ftp-ls.c (ftp_parse_ls): Use ftp_parse_unix_ls for UNIX servers
1884         only. Use ftp_parse_nonunix_ls otherwise.
1885         (ftp_parse_nonunix_ls): Stub to the ftpparse library handling all
1886         exotic FTP servers.
1887
1888         * ftp.h (stype): New enum, distinguishes UNIX, VMS, and "other"
1889         FTP servers.
1890
1891         * ftp.c: New static wariables host_type, pwd, and pwd_len.
1892         (getftp): Support for VMS. Support for FTP servers that do not
1893         place you in the root directory after login.
1894         (ftp_retrieve_list): VMS is silent about the real file size, issue
1895         a more appropriate message.
1896         (ftp_get_listing): Pass host_type to ftp_parse_ls.
1897
1898         * ftp-basic.c (ftp_pwd, ftp_syst): New functions.
1899
1900 2000-11-30  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
1901
1902         * ftp-ls.c (ftp_parse_unix_ls): Added second parameter
1903         "ignore_perms" to ignore file and directory permissions for
1904         Windows NT FTP server listings.
1905         (ftp_parse_winnt_ls): New function.
1906         (ftp_parse_ls): Parses UNIX and Windows NT listings
1907         separately. Simple heuristics for distinguishing between UNIX
1908         and MS-DOS-like FTP listing provided by Windows NT FTP service.
1909
1910 2000-11-29  John Summerfield  <summer@OS2.ami.com.au>
1911
1912         * netrc.c (parse_netrc): Get rid of line ending.
1913
1914 2000-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
1915
1916         * ftp.c (ftp_retrieve_list): Undo typo "fix" until resolution by
1917         Dan.
1918
1919 2000-11-24  Karl Eichwalder  <ke@suse.de>
1920
1921         * main.c (print_help): Untabify.
1922
1923 2000-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
1924
1925         * utils.c (xrealloc_debug): Do the unregister/register thing only
1926         if the pointer has actually changed.
1927         (xmalloc_real): Declare `static' in DEBUG_MALLOC builds.
1928         (xfree_real): Ditto.
1929         (xrealloc_real): Ditto.
1930         (xstrdup_real): Ditto.
1931
1932 2000-11-22  Hrvoje Niksic  <hniksic@arsdigita.com>
1933
1934         * ftp.c (getftp): ftp_getaddress() returns a malloc'ed copy of the
1935         string; no need to strdup() it.
1936         (getftp): Make pwd_len a local variable.
1937         (ftp_loop): Free PWD before returning.
1938
1939         * init.c (cleanup): Free opt.ftp_pass only if it's non-NULL.
1940
1941 2000-11-22  Hrvoje Niksic  <hniksic@arsdigita.com>
1942
1943         * all: Use xfree() instead of free.
1944
1945         * utils.c (xfree): New function.
1946
1947 2000-11-21  Hrvoje Niksic  <hniksic@arsdigita.com>
1948
1949         * url.c (convert_links): HTML-quote the converted string.
1950
1951         * utils.c (html_quote_string): Move here from ftp-ls.c
1952         (html_quote_string): Make non-static; declare in utils.h.
1953         (html_quote_string): Convert SP to &#32;.
1954
1955 2000-11-21  Hrvoje Niksic  <hniksic@arsdigita.com>
1956
1957         * ftp.c (getftp): Reformat Jan's code according to GNU coding
1958         standards; remove (debugging?) printf's; use '\0' for the ASCII
1959         zero character.  Use alloca() instead of malloc() for
1960         inter-function temporary allocations.
1961
1962 2000-11-18  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
1963
1964         * ftpparse.c, ftpparse.h: New files.
1965
1966         * ftp-ls.c (ftp_parse_ls): Use ftp_parse_unix_ls for UNIX servers
1967         only. Use ftp_parse_nonunix_ls otherwise.
1968         (ftp_parse_nonunix_ls): Stub to the ftpparse library handling all
1969         exotic FTP servers.
1970
1971         * ftp.h (stype): New enum, distinguishes UNIX, VMS, and "other"
1972         FTP servers.
1973
1974         * ftp.c: New static wariables host_type, pwd, and pwd_len.
1975         (getftp): Support for VMS. Support for FTP servers that do not
1976         place you in the root directory after login.
1977         (ftp_retrieve_list): VMS is silent about the real file size, issue
1978         a more appropriate message.
1979         (ftp_get_listing): Pass host_type to ftp_parse_ls.
1980
1981         * ftp-basic.c (ftp_pwd, ftp_syst): New functions.
1982
1983 2000-11-21  Hrvoje Niksic  <hniksic@arsdigita.com>
1984
1985         * hash.c (hash_table_put): Don't overwrite deleted mappings.
1986
1987 2000-11-21  Hrvoje Niksic  <hniksic@arsdigita.com>
1988
1989         * hash.c (find_mapping): New function.
1990         (hash_table_get): Use it.
1991         (hash_table_get_pair): Ditto.
1992         (hash_table_exists): Ditto.
1993         (hash_table_remove): Ditto.
1994         (hash_table_remove): Really delete the entry if the mapping
1995         following LOCATION is empty.
1996
1997         * utils.c (string_set_add): Check whether the element has existed
1998         before.
1999
2000         * hash.c (hash_table_get_pair): New function.
2001
2002 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
2003
2004         * http.c (http_process_type): Ignore trailing whitespace; use
2005         strdupdelim().
2006
2007         * recur.c (recursive_retrieve): Use the new `convert' field.
2008         (convert_all_links): Ditto.
2009         (convert_all_links): Don't respect meta_disallow_follow.
2010
2011         * html-url.c (handle_link): Fill out link_relative_p and
2012         link_complete_p.
2013
2014         * url.h (struct _urlpos): Make elements more readable.
2015
2016         * recur.c (recursive_retrieve): Call slist_prepend instead of
2017         slist_append.
2018         (convert_all_links): Call slist_nreverse before iterating through
2019         urls_html.
2020
2021         * utils.c (slist_prepend): New function.
2022         (slist_nreverse): Ditto.
2023
2024 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
2025
2026         * http.c (check_end): Constify.
2027
2028 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
2029
2030         * http.c (http_loop): If username and password are known, try the
2031         `Basic' authentication scheme by default.
2032
2033         * connect.h: Declare test_socket_open.
2034
2035 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
2036
2037         * version.c: Bump version from 1.5.3+dev to 1.7-dev.
2038
2039 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
2040
2041         * http.c (gethttp): Don't use the return value of sprintf().
2042         (gethttp): Inhibit keep-alive if opt.http_keep_alive is 0.
2043
2044 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
2045
2046         * recur.c (recursive_retrieve): Print the "so we don't load"
2047         debugging message only if we really don't load.
2048
2049         * http.c (gethttp): Inhibit keep-alive if proxy is being used.
2050         (gethttp): Don't request keep-alive if keep-alive is inhibited.
2051
2052 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
2053
2054         * http.c (gethttp): Make the HTTP persistent connections more
2055         robust.
2056
2057 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
2058
2059         * retr.c (get_contents): If use_expected, make sure that the
2060         appropriate amount of data is being read.
2061
2062         * http.c (gethttp): Check for both `Keep-Alive: ...' and
2063         `Connection: Keep-Alive'.
2064
2065         * wget.h (DEBUGP): Call debug_logprintf only if opt.debug is
2066         turned on.
2067
2068 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
2069
2070         * http.c (connection_available_p): Use it.
2071
2072         * connect.c (test_socket_open): New function.
2073
2074         * http.c (gethttp): Support persistent connections.  Based on the
2075         ideas, and partly on code, by Sam Horrocks <sam@daemoninc.com>.
2076         (register_persistent): New function.
2077         (connection_available_p): Ditto.
2078         (invalidate_connection): Ditto.
2079
2080 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
2081
2082         * url.c (convert_links): Handle UREL2ABS case.
2083
2084         * recur.c (recursive_retrieve): Instead of the list
2085         urls_downloaded, use hash tables dl_file_url_map and
2086         dl_url_file_map.
2087         (convert_all_links): Use them to retrieve data.
2088
2089         * host.c (clean_hosts): Free the hash tables.
2090
2091         * main.c (private_initialize): Call host_init().
2092
2093         * host.c (store_hostaddress): Use a saner, hash table-based data
2094         model.
2095         (realhost): Ditto.
2096         (host_init): Initialize the hash tables.
2097
2098 2000-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
2099
2100         * utils.c (slist_append): Eviscerate NOSORT.  Hash tables are now
2101         used for what the sorted slists used to be used for.
2102         (slist_contains): Don't rely on the list being sorted.
2103         (slist_append): Simplify the code.
2104
2105         * recur.c (recursive_cleanup): Use free_string_set.
2106
2107         * utils.c (string_set_add, string_set_exists, string_set_free):
2108         New functions for easier freeing of hash tables whose keys are
2109         strdup'ed strings.
2110
2111         * recur.c (recursive_retrieve): Use the hash table functions for
2112         storing undesirable URLs.
2113
2114         * hash.c: New file.
2115
2116 2000-11-17  Hrvoje Niksic  <hniksic@arsdigita.com>
2117
2118         * main.c (private_initialize): Call url_init.
2119         (main): Call private_initialize.
2120
2121         * url.c (unsafe_char_table): New table.
2122         (UNSAFE_CHAR): Use it.
2123         (init_unsafe_char_table): New function.
2124         (url_init): New function; call init_unsafe_char_table.
2125
2126 2000-11-16  Hrvoje Niksic  <hniksic@arsdigita.com>
2127
2128         * mswindows.h: Define snprintf and vsnprintf to _snprintf and
2129         _vsnprintf respectively.
2130
2131 2000-11-15  Hrvoje Niksic  <hniksic@arsdigita.com>
2132
2133         * config.h.in: Do the _XOPEN_SOURCE and _SVID_SOURCE things only
2134         on Linux.
2135
2136 2000-11-15  Hrvoje Niksic  <hniksic@arsdigita.com>
2137
2138         * html-url.c (handle_link): Handle HTML fragment identifiers.
2139
2140         * recur.c (recursive_retrieve): If norobot info is respected and
2141         the file is specified not to be followed by robots, respect that.
2142
2143         * html-url.c (collect_tags_mapper): Handle <meta name=robots
2144         content=X>.  For us the important cases are where X is NONE or
2145         where X contains NOFOLLOW.
2146         (get_urls_html): Propagate that information to the caller.
2147
2148 2000-11-13  Hrvoje Niksic  <hniksic@arsdigita.com>
2149
2150         * url.c (convert_links): Unlink the file we might be reading from
2151         before writing to it.
2152         (convert_links): Use alloca instead of malloc for
2153         filename_plus_orig_suffix.
2154
2155 2000-11-12  Hrvoje Niksic  <hniksic@arsdigita.com>
2156
2157         * host.c (realhost): Add HOST to the list with quality==0 only if
2158         it wasn't already there.
2159         Based on analysis by Lu Guohan <feng@public.bjnet.edu.cn>.
2160
2161 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
2162
2163         * url.c (get_urls_file): Ditto.
2164         (convert_links): Ditto.
2165
2166         * html-url.c (get_urls_html): Use read_file() instead of
2167         load_file().
2168
2169         * utils.c (read_file): New function, instead of the old
2170         load_file().
2171         (read_file_free): Ditto.
2172
2173         * url.c (findurl): Search only for the supported protocols.
2174         (convert_links): Use fwrite() when writing out a region of
2175         characters.
2176
2177 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
2178
2179         * ftp-ls.c: Move html_quote_string and ftp_index here.
2180
2181         * url.c: Remove get_urls_html, since that's now in html-url.c.
2182
2183         * html-url.c: New file.
2184
2185         * html-parse.c: New file.
2186
2187 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
2188
2189         * init.c (run_wgetrc): Don't bother killing off '\r' since
2190         pars_line() skips whitespace at end of line anyway.
2191         (parse_line): Oops, it didn't.  Now it does.
2192
2193         * recur.c (parse_robots): Ditto here.
2194
2195         * ftp-ls.c (ftp_parse_unix_ls): Kill off the newline character
2196         manually because read_whole_line no longer does.
2197
2198         * utils.c (read_whole_line): Rewrite to: a) use less memory
2199         (reallocates to needed size after work), b) work faster -->
2200         fgets() instead of getc, c) be more correct --> doesn't kill the
2201         newline character at the end of line.
2202
2203 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
2204
2205         * init.c (comind): Initialize MAX to array size - 1.
2206
2207 2000-11-08  Hrvoje Niksic  <hniksic@arsdigita.com>
2208
2209         * url.c (construct): Changed last_slash[-1] to *(last_slash - 1).
2210         Suggested by Edward J. Sabol.
2211
2212 2000-11-08  Hrvoje Niksic  <hniksic@arsdigita.com>
2213
2214         * url.c (construct): Handle the case where host name is not
2215         followed by a slash.
2216
2217 2000-11-06  Hrvoje Niksic  <hniksic@arsdigita.com>
2218
2219         * init.c: commands[] need to be sorted!  ("base" wasn't.)
2220
2221 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
2222
2223         * wget.h (DO_REALLOC_FROM_ALLOCA): Use braces to disambiguate
2224         `if'.
2225
2226 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
2227
2228         * url.c (construct): Insert unneeded initialization for the
2229         compiler to shut up.
2230
2231         * config.h.in: Define _XOPEN_SOURCE to 500 to get the prototype
2232         for strptime() (*duh*).  Define _SVID_SOURCE to get S_IFLNK which
2233         otherwise gets lost when you define _XOPEN_SOURCE.
2234
2235         * utils.c (touch): Include the file name in the error message.
2236         From Debian.
2237
2238 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
2239
2240         * log.c (logvprintf): Use vsnprintf() in all cases.  If necessary,
2241         resize the buffer to fit the formated message.  That way, messages
2242         of arbitrary size may be printed.
2243         (logvprintf): Use saved_append() to optionally log the last
2244         several lines of output.
2245         (logputs): Ditto.
2246         (log_close): Adapt to new data structures.
2247         (log_dump): Ditto.
2248         (redirect_output): Print messages to stderr, not to stdout.
2249
2250         * log.c (saved_append_1): New function.  Replaces the old logging
2251         system ("log all output until 10M characters") with a new, much
2252         more reasonable one ("log last screenful of text").
2253         (saved_append): New function; call saved_append_1.
2254         (free_log_line): New function.
2255
2256 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
2257
2258         * url.c (construct): Fix comment.
2259         (find_last_char): Document.
2260
2261 2000-11-04  Hrvoje Niksic  <hniksic@arsdigita.com>
2262
2263         * snprintf.c: New file.
2264
2265 2000-11-03  Hrvoje Niksic  <hniksic@arsdigita.com>
2266
2267         * wget.h: If HAVE_STDARG_H is not defined, don't declare argument
2268         types to logprintf() and debug_logprintf().
2269
2270 2000-11-02  Hrvoje Niksic  <hniksic@arsdigita.com>
2271
2272         * ftp.c (ftp_loop_internal): Hide the password from the URL when
2273         printing non-verbose.  Problem spotted by Dariusz Mlynarczyk
2274         <darekm@bydg.lomac.com.pl>.
2275
2276 2000-11-02  Junio Hamano  <junio@twinsun.com>
2277
2278         * ftp-basic.c (ftp_login): Make comparison case-insensitive.
2279
2280 2000-11-02  Tyler Riddle  <triddle@liquidmarket.com>
2281
2282         * http.c (known_authentication_scheme_p): Recognize NTML
2283         authentication.
2284         (create_authorization_line): Treat NTML the same as `Basic'.
2285
2286 2000-11-02  Hrvoje Niksic  <hniksic@arsdigita.com>
2287
2288         * retr.c (retrieve_url): Free url before returning.
2289         (retrieve_url): Free mynewloc before returning.
2290         Spotted by Mark A. Mankins <Mankins_Mark@prc.com>.
2291
2292 2000-11-02  Hrvoje Niksic  <hniksic@arsdigita.com>
2293
2294         * url.c (parseurl): Remove possible reading past the end of
2295         sup_protos[].  Spotted by Mark A. Mankins <Mankins_Mark@prc.com>.
2296
2297 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
2298
2299         * main.c (main): In case of opt.downloaded overflowing, print
2300         <overflow> instead of a totally bogus random value.
2301
2302         * retr.c (retrieve_from_file): Ditto.
2303
2304         * recur.c (recursive_retrieve): Ditto.
2305
2306         * main.c (main): Ditto.
2307
2308         * http.c (http_loop): Ditto.
2309
2310         * ftp.c (ftp_loop_internal): Use downloaded_increase() instead of
2311         `+=', and downloaded_exceeds_quota() instead of the simple-minded
2312         check.
2313         (ftp_retrieve_list): Ditto.
2314         (ftp_retrieve_dirs): Ditto.
2315         (ftp_retrieve_glob): Ditto.
2316
2317         * retr.c (downloaded_increase): New function.  Notice overflows of
2318         opt.downloaded.
2319         (downloaded_exceeds_quota): Make sure that opt.downloaded is not
2320         used if it overflowed.
2321
2322         * options.h (struct options): New member downloaded_overflow.
2323
2324 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
2325
2326         * wget.h (enum): Remove extra space after last enumeration.
2327
2328 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
2329
2330         * main.c (main): Use legible_very_long() for printing
2331         opt.downloaded.
2332
2333         * utils.c (legible_1): New function that operates on strings and
2334         does the brunt of legible()'s work.
2335         (legible): Use legible_1().
2336         (legible_very_long): New function; dump the argument with
2337         sprintf(), and call legible_1().
2338
2339         * options.h (struct options): Use VERY_LONG_TYPE for
2340         opt.downloaded.
2341
2342         * sysdep.h (VERY_LONG_TYPE): Define it to have a 64-bit or greater
2343         type.
2344
2345         * config.h.in: Make sure that SIZEOF_LONG and SIZEOF_LONG_LONG get
2346         defined.  Define HAVE_LONG_LONG if long long is available.
2347
2348 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
2349
2350         * utils.c (long_to_string): Update with a later, better version.
2351
2352 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
2353
2354         * url.c (path_simplify_with_kludge): New function.
2355         (path_simplify_with_kludge): Disable it.  Instead...
2356         (parse_dir): ...make sure that at this point the right thing is
2357         done, i.e. that "query" part of the URL (?...) is always assigned
2358         to the file, never to the directory portion of the path.
2359
2360 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
2361
2362         * retr.c (retrieve_url): Detect redirection cycles.
2363
2364 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
2365
2366         * url.c (get_urls_html): Decode HTML entities using
2367         html_decode_entities.
2368
2369         * html.c (htmlfindurl): Don't count the `#' in numeric entities
2370         (&#NNN;) as an HTML fragemnt.
2371         (html_decode_entities): New function.
2372
2373 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
2374
2375         * html.c (htmlfindurl): Fix recognition of # HTML fragments.
2376
2377 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
2378
2379         * url.c (construct): Rewritten for clarity.  Avoids the
2380         unnecessary copying and stack-allocation the old version
2381         performed.
2382
2383 2000-10-31  Hrvoje Niksic  <hniksic@arsdigita.com>
2384
2385         * ftp.c (getftp): Ditto.
2386
2387         * http.c (gethttp): Rewind the stream when retrying from scratch.
2388
2389 2000-10-31  Hrvoje Niksic  <hniksic@arsdigita.com>
2390
2391         * retr.c (retrieve_url): Use url_concat() to handle relative
2392         redirections instead of /ad hoc/ code.
2393
2394         * url.c (url_concat): New function encapsulating weird
2395         construct().
2396         (urllen_http_hack): New function.
2397         (construct): When constructing new URLs, recognize that `?' does
2398         not form part of the file name in HTTP.
2399
2400 2000-10-13  Adrian Aichner  <adrian@xemacs.org>
2401
2402         * retr.c: Add msec timing support for WINDOWS.
2403         * retr.c (reset_timer): GetSystemTime() on WINDOWS.
2404         * retr.c (elapsed_time): Calculate delta time to msec on WINDOWS.
2405
2406 2000-10-27  Dan Harkless  <wget@harkless.org>
2407
2408         * retr.c (retrieve_url): Manually applied T. Bharath
2409         <TBharath@responsenetworks.com>'s patch to get wget to grok
2410         illegal relative URL redirects.  Reformatted and re-commented it.
2411
2412 2000-10-23  Dan Harkless  <wget@harkless.org>
2413
2414         * connect.c (make_connection and bindport): Manually applied Rob
2415         Mayoff <mayoff@dqd.com>'s 1.5.3 patch to add --bind-address,
2416         changing coding style to GNU's.
2417
2418         * ftp.c (ftp_loop_internal): --delete-after wasn't implemented for
2419         files downloaded via FTP.  Per a comment, .listing files were not
2420         counted towards number of bytes and files downloaded because they're
2421         deleted anyway.  Well, they aren't under -nr, so count them then.
2422
2423         * init.c: Manually applied Rob Mayoff's 1.5.3 patch to add
2424         --bind-address, alphabetizing, changing coding style to GNU's,
2425         commenting, and renaming cmd_ip_address() to cmd_address() to
2426         imply hostnames also okay.
2427
2428         * main.c (main): --delete-after didn't delete the root of the
2429         tree.  Ignore --convert-links if --delete-after was specified.
2430         Manually applied Rob Mayoff's 1.5.3 patch to add --bind-address,
2431         fixing duplicate use of added-since-1.5.3 case value.
2432         (print_help): Clarified that --delete-after deletes local files.
2433         Rob forgot to add a line for his new --bind-address option.
2434
2435         * options.h (struct options): Manually applied Rob Mayoff's patch
2436         to add --bind-address (bind_address structure member).
2437
2438         * recur.c (recursive_retrieve): Improved comment; added DEBUGP().
2439         Ignore --convert-links if --delete-after was specified.
2440
2441         * retr.c (retrieve_from_file): Just added a DEBUGP().
2442
2443 2000-10-19  Dan Harkless  <wget@harkless.org>
2444
2445         * ftp.c (ftp_loop_internal): downloaded_file() enumerators changed.
2446         (getftp): Applied Piotr Sulecki <Piotr.Sulecki@ios.krakow.pl>'s
2447         patch to work around FTP servers that incorrectly respond to the
2448         "REST" command with the remaining size rather than the total file size.
2449
2450         * http.c (gethttp): Improved a comment and added code to tack on
2451         ".html" to text/html files without that extension when -E specified.
2452         (http_loop): Use new downloaded_file() enumerators and deal with
2453         the case of gethttp() called xrealloc() on u->local.
2454
2455         * init.c (commands): Added new "htmlextension" command.
2456         Also renamed John Daily's cmd_quad() to the more descriptive
2457         cmd_lockable_boolean(), alpha-sorted the CMD_DECLARE()s and
2458         removed duplicate cmd_boolean() declaration.
2459
2460         * main.c (print_help): Added my new -E / --html-extension option.
2461         (main): Undocumented --email-address option previously used -E synonym.
2462         Stole it away for the much more deserving --html-extension's use.
2463
2464         * options.h (struct options): Added html_extension field.
2465
2466         * url.c (convert_links): URL X that we saved as X.html locally due
2467         to -E needs to be backed up as X.orig, not X.html.orig.  Added comments.
2468         (downloaded_file): Now remembers if we added .html extension to a file.
2469
2470         * url.h (downloaded_file_t): Added extra enumerators to support above.
2471         (downloaded_file): Now takes and returns a downloaded_file_t.
2472
2473         * wget.h (unnamed "dt" enum): Added ADDED_HTML_EXTENSION enumerator.
2474
2475 2000-10-09  Dan Harkless  <wget@harkless.org>
2476
2477         * html.c (htmlfindurl): Added unneeded initialization to quiet warning.
2478
2479         * main.c (print_help): Clarified what --retr-symlinks does.
2480
2481 2000-09-15  John Daily  <jdaily@cyberdude.com>
2482
2483         * init.c: Add support for "always" and "never" values to allow
2484         .wgetrc to override commandline (useful e.g. with .pm files
2485         calling `wget --passive-ftp' when your firewall doesn't allow that).
2486
2487         * ftp.c (getftp): passive_ftp is first option to support always/never.
2488
2489 2000-08-30  Dan Harkless  <wget@harkless.org>
2490
2491         * ftp.c (ftp_retrieve_list): Use new INFINITE_RECURSION #define.
2492
2493         * html.c: htmlfindurl() now takes final `dash_p_leaf_HTML' parameter.
2494         Wrapped some > 80-column lines.  When -p is specified and we're at a
2495         leaf node, do not traverse <A>, <AREA>, or <LINK> tags other than
2496         <LINK REL="stylesheet">.
2497
2498         * html.h (htmlfindurl): Now takes final `dash_p_leaf_HTML' parameter.
2499
2500         * init.c: Added new -p / --page-requisites / page_requisites option.
2501
2502         * main.c (print_help): Clarified that -l inf and -l 0 both allow
2503         infinite recursion.  Changed the unhelpful --mirrior description
2504         to simply give the options it's equivalent to.  Added new -p option.
2505         (main): Added some comments; handle new -p / --page-requisites.
2506
2507         * options.h (struct options): Added new page_requisites field.
2508
2509         * recur.c: Changed "URL-s" to "URLs" and "HTML-s" to "HTMLs".
2510         Calculate and pass down new `dash_p_leaf_HTML' parameter to
2511         get_urls_html().  Use new INFINITE_RECURSION #define.
2512
2513         * retr.c: Changed "URL-s" to "URLs".  get_urls_html() now takes
2514         final `dash_p_leaf_HTML' parameter.
2515
2516         * url.c: get_urls_html() and htmlfindurl() now take final
2517         `dash_p_leaf_HTML' parameter.
2518
2519         * url.h (get_urls_html): Now takes final `dash_p_leaf_HTML' parameter.
2520
2521         * wget.h: Added some comments and new INFINITE_RECURSION #define.
2522
2523 2000-08-23  Dan Harkless  <wget@harkless.org>
2524
2525         * main.c (print_help): -B / --base was not mentioned.
2526
2527 2000-08-22  Dan Harkless  <wget@harkless.org>
2528
2529         * main.c (print_help): Modified -nc description to mention that it
2530         also prevents the creation of multiple versions of the same file
2531         with ".<number>" suffixes.
2532
2533 2000-07-14  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
2534
2535         * retr.c (retrieve_url): Consistently strdup opt.referer when
2536         setting u->referer.
2537
2538 2000-06-09  Dan Harkless  <wget@harkless.org>
2539
2540         * main.c (print_help): --help output for --waitretry was over 80 cols.
2541
2542 2000-06-09  Hrvoje Niksic  <hniksic@iskon.hr>
2543
2544         * url.c (encode_string): Fix comment.
2545         Suggested by Herold Heiko <Heiko.Herold@previnet.it>.
2546
2547 2000-06-01  Const Kaplinsky  <const@ce.cctpu.edu.ru>
2548
2549         * ftp.c (ftp_retrieve_list): Change permissions only on plain
2550         files.
2551
2552 2000-06-01  Hrvoje Niksic  <hniksic@iskon.hr>
2553
2554         * url.c (str_url): Print the port number only if it's different
2555         from the default port number for that protocol.
2556
2557 2000-05-22  Dan Harkless  <wget@harkless.org>
2558
2559         * main.c (print_help): Added --help line for Damir Dzeko
2560         <ddzeko@zesoi.fer.hr>'s until-now-undocumented --referer option.
2561         Removed comments that --referer and --waitretry were undocumented.
2562         Changed "`.wgetrc' command" to "`.wgetrc'-style command" on --help
2563         line for --execute.
2564
2565 2000-05-18  Hrvoje Niksic  <hniksic@iskon.hr>
2566
2567         * ftp.c (getftp): Ditto.
2568
2569         * http.c (gethttp): Check for return value of fclose/fflush.
2570
2571 2000-04-12  Hrvoje Niksic  <hniksic@iskon.hr>
2572
2573         * host.c (store_hostaddress): Instead of shifting ADDR, start
2574         copying from the correct address.
2575
2576 2000-04-12  Hrvoje Niksic  <hniksic@iskon.hr>
2577
2578         * http.c (gethttp): Don't free REQUEST -- it was allocated with
2579         alloca().
2580         Pointed out by Gisle Vanem <gvanem@eunet.no>.
2581
2582 2000-04-04  Dan Harkless  <wget@harkless.org>
2583
2584         * host.c (store_hostaddress): R. K. Owen's patch introduces a
2585         "left shift count >= width of type" warning on 32-bit
2586         architectures.  Got rid of it by tricking the compiler w/ a variable.
2587
2588         * url.c (UNSAFE_CHAR): The macro didn't include all the illegal
2589         characters per RFC1738, namely everything above '~'.  It also
2590         generated a warning on OSes where char =~ unsigned char.  Fixed.
2591
2592 1998-10-17  Hrvoje Niksic  <hniksic@srce.hr>
2593
2594         * http.c (http_process_type): Removed needless strdup(), a memory
2595         leak.
2596
2597 1998-09-25  Hrvoje Niksic  <hniksic@srce.hr>
2598
2599         * html.c (htmlfindurl): Set PH to the first occurrence of `#'.
2600
2601 1998-09-25  Simon Munton  <simonm@m4data.co.uk>
2602
2603         * init.c (wgetrc_file_name): Don't free HOME under Windows.
2604
2605 1998-12-01  "R. K. Owen"  <rkowen@Nersc.GOV>
2606
2607         * host.c (store_hostaddress): Fix for big endian 64-bit machines.
2608
2609 1998-12-01  Hrvoje Niksic  <hniksic@srce.hr>
2610
2611         * url.c (UNSAFE_CHAR): New macro.
2612         (contains_unsafe): Use it.
2613         (encode_string): Ditto.
2614
2615 1998-12-01  Hrvoje Niksic  <hniksic@srce.hr>
2616
2617         * main.c (i18n_initialize): Use LC_MESSAGES only if available.
2618
2619 2000-03-31  Hrvoje Niksic  <hniksic@srce.hr>
2620
2621         * Use TOUPPER/TOLOWER.
2622
2623 1998-12-22  Alexander V. Lukyanov  <lav@yars.free.net>
2624
2625         * ftp-opie.c (btoe): Zero-terminate OSTORE.
2626
2627 2000-03-21  Hrvoje Niksic  <hniksic@iskon.hr>
2628
2629         * wget.h (DO_REALLOC_FROM_ALLOCA): Ditto.
2630
2631         * sysdep.h (ISALNUM): New macro.
2632         (TOLOWER): Ditto.
2633         (TOUPPER): Ditto.
2634
2635 2000-03-10  Dan Harkless  <wget@harkless.org>
2636
2637         * html.c (idmatch): Implemented checking of my new --follow-tags
2638         and --ignore-tags options.
2639
2640         * init.c (commands): Added comment reminding people adding new
2641         entries doing allocation to add corresponding freeing in cleanup().
2642         (commands): Added new followtags and ignoretags commands.
2643         (cleanup): Free storage for new followtags and ignoretags.
2644
2645         * main.c: Use of "comma-separated list" was random -- normalized
2646         it.  Did some alphabetization.  Added comments pointing out
2647         "Options without arguments" and "Options accepting an argument"
2648         sections of long_options[].  Added new options --follow-tags and
2649         -G / --ignore-tags.  Added comment that Damir's --referer is
2650         currently undocumented.  Added comment that Heiko's --waitretry is
2651         partially undocumented (mentioned in --help but not in
2652         wget.texi).  Moved improperly sorted 24, 129, and 'G' cases.
2653
2654         * options.h (struct options): Added new fields follow_tags and
2655         ignore_tags.
2656
2657         * wget.h: Added "#define EQ 0" so we can say "strcmp(a, b) == EQ".
2658
2659 2000-03-02  Dan Harkless  <wget@harkless.org>
2660
2661         * ftp.c (ftp_loop_internal): Heiko introduced "suggest explicit
2662         braces to avoid ambiguous `else'" warnings.  Eliminated them.
2663
2664         * http.c (gethttp): Dan Berger's query string patch is totally
2665         bogus.  If you have two different URLs, gen_page.cgi?page1 and
2666         get_page.cgi?page2, they'll both be saved as get_page.cgi and the
2667         second will overwrite the first.  Also, parameters to implicit
2668         CGIs, like "http://www.host.com/db/?2000-03-02" cause the URLs to
2669         be printed with trailing garbage characters, and could seg fault.
2670         Backing out the patch, which Dan B. informed me by email was just
2671         a kludge to download StarOffice from Sun made necessary due to
2672         wget's unconditional escaping of certain characters (room for an
2673         option there?).
2674         (http_loop): Heiko introduced "suggest explicit braces to avoid
2675         ambiguous `else'" warnings.  Eliminated them.
2676
2677         * main.c: Heiko's --wait / --waitretry backwards compatibility
2678         code looks to have been totally untested -- automatic variable
2679         'wr' was used without being initialized, and a long int was passed
2680         into setval()'s char* val parameter.
2681
2682         * recur.c (parse_robots): Applied Edward J. Sabol
2683         <sabol@alderaan.gsfc.nasa.gov>'s patch for Guan Yang's reported
2684         problem with "User-agent:<space>*<space>" lines in robots.txt.
2685
2686         * url.c (parseurl, str_url): Removing Dan Berger's code (see
2687         http.c above for explanation).
2688
2689 1999-08-25  Heiko Herold  <Heiko.Herold@previnet.it>
2690
2691         * ftp.c: Respect new option waitretry.
2692
2693 2000-01-30  Damir Dzeko  <ddzeko@zesoi.fer.hr>
2694
2695         * http.c (gethttp): Send custom Referer, if required.
2696
2697 1999-09-24  Charles G Waldman  <cgw@fnal.gov>
2698
2699         * netrc.c (parse_netrc): Allow passwords to contain spaces.
2700
2701         * netrc.c (parse_netrc): New function.
2702
2703 1999-09-17  Dan Berger  <dberger@ix.netcom.com>
2704
2705         * http.c (gethttp): Send it.
2706
2707         * url.c (parseurl): Detect query string in HTTP URL-s.
2708         (str_url): Print it.
2709
2710 2000-03-02  HIROSE Masaaki  <hirose31@t3.rim.or.jp>
2711
2712         * html.c (html_allow): Add <link href=...> and <script src=...>.
2713
2714 1999-05-02  andrew deryabin  <djsf@softhome.net>
2715
2716         * http.c (gethttp): Specify port in `Host' header only if it's
2717         different from 80.
2718
2719 1998-11-03  Edward J. Sabol  <sabol@alderaan.gsfc.nasa.gov>
2720
2721         * recur.c (recursive_retrieve): If a finite maximum depth is
2722         specified, and we're are already at that depth, don't download the
2723         HTML file for parsing.
2724
2725 2000-03-01  Dan Harkless  <wget@harkless.org>
2726
2727         * ftp.c (ftp_loop_internal): Call new downloaded_file() function,
2728         even though we don't do conversion on HTML files retrieved via
2729         FTP, so _current_ usage of downloaded_file() makes this call unneeded.
2730         (ftp_retrieve_list): Added a comment saying where we need to
2731         stat() a .orig file if FTP'd HTML file conversion is ever implemented.
2732         (ftp_retrieve_list): "Local file '%s' is more recent," is sometimes
2733         a lie -- reworded as "Server file no newer than local file '%s' --".
2734
2735         * http.c (http_loop): Fixed a typo and clarified a comment.
2736         (http_loop): When -K and -N are specified together, compare size
2737         and timestamp of server file X against local file X.orig (if
2738         extant) rather than converted local file X.
2739         (http_loop): "Local file '%s' is more recent," is sometimes a lie
2740         -- reworded as "Server file no newer than local file '%s' --".
2741         (http_loop): Call new downloaded_file() function to prevent
2742         wrongful overwriting of .orig file when -N is specified.
2743
2744         * url.c (convert_links): When -K specified, only rename X to
2745         X.orig if downloaded_file() returns TRUE.  Otherwise when we skip
2746         file X due to -N, we clobber an X.orig from a previous invocation.
2747         (convert_links): Call the failsafe xstrdup(), not the real strdup().
2748         (convert_links): Added a note asking anyone who understands how
2749         multiple URLs can correspond to a single file to comment it.
2750         (downloaded_file): Added this new function.
2751
2752         * url.h (downloaded_file): Added prototype for this new function
2753         as well as its downloaded_file_t enum type.
2754
2755         * wget.h (boolean): Added this new typedef and TRUE and FALSE #defines.
2756
2757 2000-02-29  Dan Harkless  <wget@harkless.org>
2758
2759         * version.c: Upped version to developer-only "1.5.3+dev".
2760
2761 2000-02-18  Dan Harkless  <wget@harkless.org>
2762
2763         * init.c (backup_converted): Added this new option.
2764
2765         * main.c (-K / --backup-converted): Added this new option.
2766
2767         * options.h (backup_converted): Added this new option.
2768
2769         * url.c (convert_links): When backup_converted is specified, save
2770         file X as X.orig before converting.
2771
2772         * url.h (urlpos): Fixed typo -- said "Rekative" instead of "Relative".
2773
2774 1998-09-21  Hrvoje Niksic  <hniksic@srce.hr>
2775
2776         * version.c: Wget 1.5.3 is released.
2777
2778 1998-09-21  Hrvoje Niksic  <hniksic@srce.hr>
2779
2780         * host.c (ftp_getaddress): Don't warn when reverse-lookup of local
2781         address doesn't yield FQDN.
2782
2783 1998-09-21  Andreas Schwab  <schwab@issan.informatik.uni-dortmund.de>
2784
2785         * cmpt.c (strerror): Fix declaration of sys_errlist.
2786
2787 1998-09-11  Hrvoje Niksic  <hniksic@srce.hr>
2788
2789         * main.c (main): Don't use an array subscript as the first
2790         argument to STRDUP_ALLOCA.
2791         From Kaveh R. Ghazi.
2792
2793 1998-09-11  Szakacsits Szabolcs  <szaka@sienet.hu>
2794
2795         * html.c (htmlfindurl): Download table background.
2796
2797 1998-09-11  Hans Grobler  <grobh@conde.ee.sun.ac.za>
2798
2799         * init.c (parse_line): Would free *com before allocating it.
2800         (parse_line): Would free com instead of *com.
2801
2802 1998-09-10  Howard Gayle  <howard@fjst.com>
2803
2804         * url.c (get_urls_html): Would drop the last character of the
2805         link.
2806
2807 1998-09-10  Hrvoje Niksic  <hniksic@srce.hr>
2808
2809         * http.c (http_loop): Don't print status code if quiet.
2810
2811 1998-09-10  Kaveh R. Ghazi  <ghazi@caip.rutgers.edu>
2812
2813         * log.c: Use <stdarg.h> only when __STDC__.
2814
2815 1998-09-10  Adam D. Moss  <adam@foxbox.org>
2816
2817         * html.c (htmlfindurl): Download <layer src=...>.
2818
2819 1998-09-10  Howard Gayle  <howard@fjst.com>
2820
2821         * ftp.c (ftp_retrieve_list): Don't update the time stamp of a file
2822         not retrieved.
2823
2824 1998-06-27  Hrvoje Niksic  <hniksic@srce.hr>
2825
2826         * utils.c: Include <libc.h> on NeXT.
2827
2828 1998-06-26  Heinz Salzmann  <heinz.salzmann@intermetall.de>
2829
2830         * url.c (get_urls_html): Fix calculation of URL position.
2831
2832 1998-06-23  Hrvoje Niksic  <hniksic@srce.hr>
2833
2834         * version.c: Wget 1.5.2 is released.
2835
2836 1998-06-23  Dave Love  <d.love@dl.ac.uk>
2837
2838         * ftp.c, init.c, netrc.c: Include errno.h.
2839
2840         * http.c: Include errno.h and time header.
2841
2842         * Makefile.in (exext): Define.
2843         (install.bin, uninstall.bin): Use it.
2844
2845 1998-06-21  Hrvoje Niksic  <hniksic@srce.hr>
2846
2847         * http.c (http_loop): Don't attempt to compare local and remote
2848         sizes if the remote size is unknown.
2849
2850 1998-06-16  Hrvoje Niksic  <hniksic@srce.hr>
2851
2852         * url.c (get_urls_html): Use malloc() instead of alloca in the
2853         loop.
2854
2855 1998-06-13  Hrvoje Niksic  <hniksic@srce.hr>
2856
2857         * version.c: Wget 1.5.2-b4 is released.
2858
2859 1998-06-13  Hrvoje Niksic  <hniksic@srce.hr>
2860
2861         * url.c (get_urls_html): Ignore spaces before and after the URI.
2862
2863 1998-06-08  Wanderlei Antonio Cavassin  <cavassin@conectiva.com.br>
2864
2865         * ftp.c (getftp): Translate `done'.
2866
2867 1998-06-06  Hrvoje Niksic  <hniksic@srce.hr>
2868
2869         * version.c: Wget 1.5.2-b3 is released.
2870
2871 1998-06-06  Alexander Kourakos  <awk@bnt.com>
2872
2873         * init.c (cleanup): Close dfp, don't free it.
2874
2875 1998-06-06  Hrvoje Niksic  <hniksic@srce.hr>
2876
2877         * utils.c (make_directory): Twiddle.
2878
2879         * config.h.in: Added template for access().
2880
2881 1998-06-05  Mathieu Guillaume  <mat@cythere.com>
2882
2883         * html.c (htmlfindurl): Download <input src=...>
2884
2885 1998-06-03  Hrvoje Niksic  <hniksic@srce.hr>
2886
2887         * utils.c (file_exists_p): Use access() with two arguments.
2888
2889 1998-05-27  Martin Kraemer  <Martin.Kraemer@mch.sni.de>
2890
2891         * netrc.c (parse_netrc): Correct logic.
2892
2893 1998-05-27  Hrvoje Niksic  <hniksic@srce.hr>
2894
2895         * ftp.c (getftp): Added `break'; suggested by Lin Zhe Min
2896         <ljm@ljm.wownet.net>.
2897
2898 1998-05-24  Hrvoje Niksic  <hniksic@srce.hr>
2899
2900         * version.c: Wget 1.5.2-b2 is released.
2901
2902 1998-05-18  Juan Jose Rodriguez  <jcnsoft@jal1.telmex.net.mx>
2903
2904         * mswindows.h: Don't translate mkdir to _mkdir under Borland.
2905
2906 1998-05-17  Hrvoje Niksic  <hniksic@srce.hr>
2907
2908         * retr.c (elapsed_time): Return correct value when
2909         HAVE_GETTIMEOFDAY is undefined.
2910
2911 1998-05-13  Hrvoje Niksic  <hniksic@srce.hr>
2912
2913         * version.c: Wget 1.5.2-b1 is released.
2914
2915 1998-05-08  Hrvoje Niksic  <hniksic@srce.hr>
2916
2917         * getopt.c (_getopt_internal): Use exec_name instead of argv[0].
2918         (_getopt_internal): Don't translate `#if 0'-ed strings.
2919
2920 1998-05-06  Douglas E. Wegscheid  <wegscd@whirlpool.com>
2921
2922         * mswindows.c (ws_handler): Use fork_to_background().
2923
2924 1998-05-05  Hrvoje Niksic  <hniksic@srce.hr>
2925
2926         * version.c: Wget 1.5.1 is released.
2927
2928 1998-05-05  Hrvoje Niksic  <hniksic@srce.hr>
2929
2930         * http.c (parse_http_status_line): Avoid `minor' and `major'
2931         names.
2932
2933 1998-05-02  Hrvoje Niksic  <hniksic@srce.hr>
2934
2935         * utils.c (mkdirhier): Renamed to make_directory.
2936
2937 1998-05-01  Hrvoje Niksic  <hniksic@srce.hr>
2938
2939         * mswindows.c (fork_to_background): Define under Windows.
2940
2941         * utils.c (fork_to_background): New function.
2942
2943         * html.c (htmlfindurl): Removed rerdundant casts.
2944
2945 1998-05-01  Douglas E. Wegscheid  <wegscd@whirlpool.com>
2946
2947         * mswindows.c (ws_mypath): Cache the path.
2948
2949 1998-04-30  Douglas E. Wegscheid  <wegscd@whirlpool.com>
2950
2951         * ftp.h: Prefix enum ftype members with FT_.
2952
2953         * ftp-ls.c, ftp.c, html.h: Adjust accordingly.
2954
2955         * mswindows.h: Use stat under Borland, _stat under MSVC.
2956
2957 1998-04-28  Hrvoje Niksic  <hniksic@srce.hr>
2958
2959         * http.c (known_authentication_scheme_p): New function.
2960         (gethttp): Handle authorization more correctly.
2961
2962         * ftp-basic.h: Removed.
2963
2964         * cmpt.h: Removed.
2965
2966         * utils.c: Include <unistd.h> before <pwd.h>; needed under SunOS
2967         with gcc 2.8.
2968         (numdigit): Use `while' loop.
2969
2970         * http.c (create_authorization_line): Detect authentication
2971         schemes case-insensitively.
2972
2973         * http.c (extract_header_attr): Use strdupdelim().
2974         (digest_authentication_encode): Move declaration of local
2975         variables to smaller scope.
2976         (digest_authentication_encode): Reset REALM, OPAQUE and NONCE.
2977         (create_authorization_line): Detect authentication schemes
2978         case-insensitively.
2979
2980         * utils.c (touch): Constify.
2981
2982         * http.c (gethttp): Report a nicer error when no data is received.
2983
2984         * rbuf.h (RBUF_READCHAR): Ditto.
2985
2986         * ftp-basic.c (ftp_response): Use sizeof.
2987
2988 1998-04-27  Hrvoje Niksic  <hniksic@srce.hr>
2989
2990         * retr.c (print_percentage): EXPECTED is long, not int.
2991         (print_percentage): Use floating-point arithmetic to avoid
2992         overflow with large files' sizes multiplied with 100.
2993
2994 1998-04-27  Gregor Hoffleit  <flight@mathi.uni-heidelberg.de>
2995
2996         * config.h.in: Added pid_t stub.
2997
2998         * sysdep.h (S_ISREG): Moved here from mswindows.h (NeXT doesn't
2999         define it).
3000
3001 1998-04-20  Hrvoje Niksic  <hniksic@srce.hr>
3002
3003         * version.c: Wget 1.5.0 is released.
3004
3005 1998-04-18  Hrvoje Niksic  <hniksic@srce.hr>
3006
3007         * url.c (str_url): Ditto.
3008
3009         * ftp-basic.c (ftp_rest): Use new name.
3010
3011         * utils.c (long_to_string): Renamed from prnum().
3012
3013 1998-04-16  Hrvoje Niksic  <hniksic@srce.hr>
3014
3015         * version.c: Wget 1.5-b17 is released.
3016
3017 1998-04-08  Hrvoje Niksic  <hniksic@srce.hr>
3018
3019         * headers.c (header_get): New argument FLAGS.
3020
3021         * http.c (gethttp): If request is malformed, bail out of the
3022         header loop.
3023         (gethttp): Check for empty header *after* the status line checks.
3024         (gethttp): Disallow continuations for status line.
3025
3026 1998-04-08  Hrvoje Niksic  <hniksic@srce.hr>
3027
3028         * version.c: Wget 1.5-b16 is released.
3029
3030 1998-04-08  Hrvoje Niksic  <hniksic@srce.hr>
3031
3032         * init.c (commands): Renamed `always_rest' to `continue'.
3033
3034 1998-04-05  Hrvoje Niksic  <hniksic@srce.hr>
3035
3036         * all: Use it.
3037
3038         * log.c (logputs): New argument.
3039         (logvprintf): Ditto.
3040         (logprintf): Ditto.
3041
3042 1998-04-04  Hrvoje Niksic  <hniksic@srce.hr>
3043
3044         * http.c (http_atotm): Update comment.
3045
3046         * main.c (i18n_initialize): Set LC_MESSAGES, not LC_ALL.
3047
3048         * wget.h: Renamed ENABLED_NLS to HAVE_NLS.
3049
3050         * main.c (i18n_initialize): New function.
3051         (main): Use it.
3052
3053         * log.c: Include <unistd.h>.
3054
3055         * retr.c (show_progress): Cast alloca to char *.
3056
3057 1998-04-04  Hrvoje Niksic  <hniksic@srce.hr>
3058
3059         * version.c: Wget 1.5-b15 is released.
3060
3061 1998-04-04  Hrvoje Niksic  <hniksic@srce.hr>
3062
3063         * utils.h: Declare file_non_directory_p().
3064
3065 1998-04-03  Hrvoje Niksic  <hniksic@srce.hr>
3066
3067         * main.c (main): It's `tries', not `numtries' now.
3068
3069 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
3070
3071         * init.c (getperms): Removed.
3072
3073 1998-04-01  Tim Charron  <tcharron@interlog.com>
3074
3075         * log.c (logvprintf): Don't use ARGS twice.
3076
3077 1998-04-01  John  <john@futuresguide.com>
3078
3079         * mswindows.c: Cleaned up.
3080
3081 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
3082
3083         * version.c: Wget 1.5-b14 is released.
3084
3085 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
3086
3087         * ftp-opie.c (STRLEN4): New macro.
3088         (btoe): Use it.
3089
3090 1998-04-01  Junio Hamano  <junio@twinsun.com>
3091
3092         * http.c: Document all the Digest functions.
3093
3094 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
3095
3096         * utils.c (file_non_directory_p): Renamed from isfile().
3097
3098         * mswindows.h (S_ISREG): New macro, suggested by Tim Adam.
3099
3100 1998-03-31  Hrvoje Niksic  <hniksic@srce.hr>
3101
3102         * utils.c (mkdirhier): Use 0777 instead of opt.dirmode.
3103
3104         * init.c (cmd_spec_dotstyle): Use 48 dots per line for binary
3105         style.
3106         (cmd_permissions): Removed.
3107
3108         * config.h.in: Add template for WORDS_BIGENDIAN.
3109
3110 1998-03-31  Junio Hamano  <junio@twinsun.com>
3111
3112         * http.c (HEXD2asc): New macro.
3113         (dump_hash): Use it.
3114
3115 1998-03-31  Hrvoje Niksic  <hniksic@srce.hr>
3116
3117         * version.c: Wget 1.5-b13 is released.
3118
3119 1998-03-31  Hrvoje Niksic  <hniksic@srce.hr>
3120
3121         * main.c (main): Don't try to use `com'.
3122
3123 1998-03-30  Hrvoje Niksic  <hniksic@srce.hr>
3124
3125         * init.c (cmd_permissions): New function.
3126
3127 1998-03-30  Hrvoje Niksic  <hniksic@srce.hr>
3128
3129         * version.c: Wget 1.5-b12 is released.
3130
3131 1998-03-30  Hrvoje Niksic  <hniksic@srce.hr>
3132
3133         * init.c (commands): Renamed `numtries' to `tries'.
3134         (cmd_spec_debug): Removed.
3135         (home_dir): Under Windows, return `C:\' if HOME is undefined.
3136
3137 1998-03-29  Hrvoje Niksic  <hniksic@srce.hr>
3138
3139         * config.h.in: Define _XOPEN_SOURCE.
3140
3141         * init.c (check_user_specified_header): New function.
3142         (cmd_spec_header): Use it.
3143         (cmd_spec_useragent): New function.
3144
3145 1998-03-29  Hrvoje Niksic  <hniksic@srce.hr>
3146
3147         * version.c: Wget 1.5-b11 is released.
3148
3149 1998-03-28  Hrvoje Niksic  <hniksic@srce.hr>
3150
3151         * wget.h: Include <libintl.h> only if NLS is enabled.
3152
3153 1998-03-26  Hrvoje Niksic  <hniksic@srce.hr>
3154
3155         * options.h (struct options): Made `wait' a long.
3156         (struct options): Ditto for `timeout'.
3157
3158 1998-03-19  Hrvoje Niksic  <hniksic@srce.hr>
3159
3160         * utils.c (exists): Renamed to file_exists_p.
3161         (file_exists_p): Use access() if available.
3162
3163 1998-03-17  Hrvoje Niksic  <hniksic@srce.hr>
3164
3165         * utils.c (memfatal): Set save_log_p to 0 to avoid potential
3166         infloop.
3167
3168         * log.c: do_logging -> save_log_p.
3169
3170         * config.h.in: Added template for HAVE_VSNPRINTF.
3171
3172 1998-03-16  Hrvoje Niksic  <hniksic@srce.hr>
3173
3174         * init.c: Ditto.
3175
3176         * http.c: Protect declaration against non-ANSI compiler.
3177
3178         * log.c (logvprintf): Use vsnprintf() if available.
3179
3180         * getopt.c (main): Don't translate test stuff.
3181
3182 1998-03-16  Hrvoje Niksic  <hniksic@srce.hr>
3183
3184         * version.c: Wget 1.5-b10 is released.
3185
3186 1998-03-11  Hrvoje Niksic  <hniksic@srce.hr>
3187
3188         * ftp.c (getftp): Don't translate "CWD %s".
3189
3190         * wget.h (GCC_FORMAT_ATTR): Renamed from FORMAT_ATTR.
3191
3192 1998-03-07  Hrvoje Niksic  <hniksic@srce.hr>
3193
3194         * ftp-opie.c (btoe): Use memcpy() instead of strncat().
3195
3196         * log.c (logputs): New function.
3197         (logvprintf): Renamed from vlogmsg; use logputs().
3198
3199         * retr.c (show_progress): Print `[100%]' when the retrieval is
3200         finished.
3201
3202         * init.c (run_wgetrc): Use FILE, not PATH.
3203         (wgetrc_file_name): Ditto.
3204
3205 1998-03-07  Tim Adam  <tma@osa.com.au>
3206
3207         * recur.c (parse_robots): Correctly reset `entries' on empty
3208         disallow.
3209
3210 1998-03-07  Hrvoje Niksic  <hniksic@srce.hr>
3211
3212         * init.c (cmd_spec_debug): Use cmd_boolean().
3213
3214 1998-02-23  Hrvoje Niksic  <hniksic@srce.hr>
3215
3216         * http.c (gethttp): Create proxy-authorization correctly.
3217
3218 1998-02-22  Hrvoje Niksic  <hniksic@srce.hr>
3219
3220         * md5.c: Ditto.
3221
3222         * getopt.c: Use ANSI function definitions.
3223
3224         * ftp-opie.c: New file.
3225
3226         * options.h: Don't redefine EXTERN.
3227
3228         * init.c: Sort it correctly.
3229
3230 1998-02-22  Hrvoje Niksic  <hniksic@srce.hr>
3231
3232         * version.c: Wget 1.5-b9 is released.
3233
3234 1998-02-22  Hrvoje Niksic  <hniksic@srce.hr>
3235
3236         * recur.c (recursive_retrieve): Reset `first_time'.
3237
3238         * ftp.c (getftp): Added `default' clause to switches of uerr_t.
3239
3240         * rbuf.c (rbuf_peek): Simplified.
3241         (rbuf_flush): Use MINVAL.
3242
3243         * wget.h (MINVAL): Moved from url.h.
3244
3245         * rbuf.h (RBUF_FD): New macro.
3246
3247         * url.c (add_url): Add to the head of the list.
3248
3249         * ftp.c (ftp_retrieve_list): Set the permissions to downloaded
3250         file.
3251         (getftp): Set the default permissions to 0600.
3252
3253 1998-02-21  Hrvoje Niksic  <hniksic@srce.hr>
3254
3255         * url.c (get_urls_html): Ditto.
3256         (convert_links): Ditto.
3257
3258         * recur.c (parse_robots): Ditto.
3259
3260         * html.c (ftp_index): Ditto.
3261
3262         * ftp-ls.c (ftp_parse_unix_ls): Open file as binary.
3263
3264         * init.c (defaults): Initialize `opt' to zero via memset.
3265
3266         * http.c (digest_authentication_encode): goto considered harmful.
3267
3268 1998-02-19  Hrvoje Niksic  <hniksic@srce.hr>
3269
3270         * ftp.c (delelement): Simplify and fix leak.
3271
3272 1998-02-18  Hrvoje Niksic  <hniksic@srce.hr>
3273
3274         * http.c (dump_hash): Use HEXD2ASC instead of home-grown stuff.
3275
3276         * url.h (HEXD2ASC): Removed warning.
3277
3278         * init.c (comind): Use binary search.
3279         (commands): Reorganized.
3280         (setval): Ditto.
3281         (cmd_boolean): New function.
3282         (cmd_number): Ditto.
3283         (cmd_number_inf): Ditto.
3284         (cmd_string): Ditto.
3285         (cmd_vector): Ditto.
3286         (cmd_directory_vector): Ditto.
3287         (cmd_bytes): Ditto.
3288         (cmd_time): Ditto.
3289         (cmd_spec_debug): Ditto.
3290         (cmd_spec_dirmode): Ditto.
3291         (cmd_spec_dirstruct): Ditto.
3292         (cmd_spec_dotstyle): Ditto.
3293         (cmd_spec_header): Ditto.
3294         (cmd_spec_htmlify): Ditto.
3295         (cmd_spec_mirror): Ditto.
3296         (cmd_spec_outputdocument): Ditto.
3297         (cmd_spec_recursive): Ditto.
3298         (settime): Merged with cmd_time().
3299         (setbytes): Merged with cmd_bytes().
3300         (setonoff): Merged with cmd_boolean().
3301         (onoff): Ditto.
3302
3303 1998-02-17  Hrvoje Niksic  <hniksic@srce.hr>
3304
3305         * Makefile.in (distclean): Remove `config.h'.
3306
3307 1998-02-17  Hrvoje Niksic  <hniksic@srce.hr>
3308
3309         * version.c: Wget 1.5-b8 is released.
3310
3311 1998-02-17  Hrvoje Niksic  <hniksic@srce.hr>
3312
3313         * http.c (digest_authentication_encode): New function.
3314         (create_authorization_line): Use it.
3315         (dump_hash): New function.
3316         (digest_authentication_encode): Use it.
3317
3318         * fnmatch.c: Renamed from `mtch.c'.
3319
3320 1998-02-15  Karl Eichwalder  <ke@suse.de>
3321
3322         * main.c (main): Tag "Written by..." string as translatable.
3323
3324 1998-02-15  Hrvoje Niksic  <hniksic@srce.hr>
3325
3326         * wget.h (FREE_MAYBE): New macro.
3327
3328         * http.c (create_authorization_line): Don't use ANSI C string
3329         concatenation feature.
3330         (basic_authentication_encode): Use alloca() for temporary
3331         variables.
3332
3333         * recur.h: Ditto.
3334
3335         * http.c: Ditto.
3336
3337         * headers.h: Ditto.
3338
3339         * ftp-basic.c: Protect declaration against non-ANSI compiler.
3340
3341         * http.c (create_authorization_line): Cast `unsigned char *' to
3342         `char *' for sprintf, to shut up the noisy Digital Unix cc.
3343
3344 1998-02-15  Hrvoje Niksic  <hniksic@srce.hr>
3345
3346         * version.c: Wget 1.5-b7 is released.
3347
3348 1998-02-15  Hrvoje Niksic  <hniksic@srce.hr>
3349
3350         * cmpt.c (strstr): Synched with glibc-2.0.6.
3351
3352         * ftp-basic.c (calculate_skey_response): Ditto.
3353         (calculate_skey_response): Use alloca().
3354
3355         * http.c (create_authorization_line): Work with FSF's version of
3356         md5.c.
3357
3358         * md5.c: New file, from GNU libc.
3359
3360 1998-02-14  Hrvoje Niksic  <hniksic@srce.hr>
3361
3362         * url.h (URL_CLEANSE): Name the temporary variable more carefully.
3363
3364 1998-02-13  Hrvoje Niksic  <hniksic@srce.hr>
3365
3366         * http.c (basic_authentication_encode): New function, instead of
3367         the macro.
3368
3369 1998-02-13  Junio Hamano  <junio@twinsun.com>
3370
3371         * http.c: Add HTTP-DA support.
3372         * ftp-basic.c: Add Opie/S-key support.
3373         * config.h.in, Makefile.in: Add HTTP-DA and Opie/S-key support.
3374         * md5.c, md5.h: New files.
3375
3376 1998-02-13  Hrvoje Niksic  <hniksic@srce.hr>
3377
3378         * http.c (http_process_range): Renamed from hprocrange().
3379         (http_process_range): Parse the whole header.
3380
3381         * headers.c: New file.
3382         (header_process): New function.
3383         (header_get): Renamed from fetch_next_header.
3384
3385         * all: Include utils.h only where necessary.
3386
3387         * wget.h: Declare xmalloc(), xrealloc() and xstrdup() here.
3388
3389         * wget.h: Add provisions for dmalloc.
3390
3391 1998-02-12  Hrvoje Niksic  <hniksic@srce.hr>
3392
3393         * version.c: Wget 1.5-b6 is released.
3394
3395 1998-02-12  Hrvoje Niksic  <hniksic@srce.hr>
3396
3397         * ftp.c (ftp_loop): Determine `filename' more precisely.
3398
3399         * init.c (setval): Don't set `opt.quiet' if output-document is
3400         `-'.
3401
3402         * log.c (log_init): Print to STDERR instead of STDOUT.
3403         (vlogmsg): Use STDERR by default.
3404         (logflush): Ditto.
3405
3406 1998-02-11  Simon Josefsson  <jas@pdc.kth.se>
3407
3408         * host.c: Use addr_in again.
3409
3410 1998-02-08  Karl Eichwalder  <karl@suse.de>
3411
3412         * http.c (gethttp): Fixed typo.
3413
3414 1998-02-08  Hrvoje Niksic  <hniksic@srce.hr>
3415
3416         * version.c: Wget 1.5-b5 is released.
3417
3418 1998-02-08  Hrvoje Niksic  <hniksic@srce.hr>
3419
3420         * retr.c (show_progress): Use it.
3421
3422         * log.c (logflush): New function.
3423
3424         * wget.h: Utilize __attribute__ if on gcc.
3425
3426 1998-02-07  Hrvoje Niksic  <hniksic@srce.hr>
3427
3428         * http.c (base64_encode_line): New argument LENGTH.
3429         (BASIC_AUTHENTICATION_ENCODE): Use it.
3430         (BASIC_AUTHENTICATION_ENCODE): Take length of HEADER into account.
3431
3432         * main.c (main): Fixed fprintf() format mismatch.
3433
3434 1998-02-06  Hrvoje Niksic  <hniksic@srce.hr>
3435
3436         * version.c: Wget 1.5-b4 is released.
3437
3438 1998-02-03  Simon Josefsson  <jas@pdc.kth.se>
3439
3440         * host.c: use sockaddr_in instead of addr_in.
3441
3442 1998-02-04  Hrvoje Niksic  <hniksic@srce.hr>
3443
3444         * init.c (cleanup): Use it.
3445
3446         * recur.c (recursive_cleanup): New function.
3447
3448         * retr.c (retrieve_from_file): Ditto.
3449
3450         * main.c (main): Use it.
3451
3452         * recur.c (recursive_reset): New function.
3453
3454         * retr.c (retrieve_from_file): Ditto.
3455
3456         * main.c (main): Simplify call to recursive_retrieve().
3457
3458         * recur.c (recursive_retrieve): Removed FLAGS argument.
3459
3460         * http.c (gethttp): Changed call to iwrite().
3461
3462 1998-02-03  Hrvoje Niksic  <hniksic@srce.hr>
3463
3464         * url.c (get_urls_html): Ditto.
3465         (free_urlpos): Ditto.
3466         (mkstruct): Ditto.
3467         (construct): Ditto.
3468
3469         * retr.c (retrieve_url): Move declaration of local variables to
3470         smaller scope.
3471
3472         * url.c (urlproto): Use it.
3473         (parseurl): Ditto.
3474         (str_url): Ditto.
3475         (get_urls_html): Ditto.
3476
3477         * utils.h (ARRAY_SIZE): New macro.
3478
3479         * url.c (proto): Moved from url.h.
3480
3481         * url.h (URL_CLEANSE): Reformatted.
3482         (USE_PROXY_P): Renamed from USE_PROXY.
3483
3484         * ftp-basic.c: Adjust to the new interface of iwrite().
3485
3486         * ftp-basic.c (ftp_port): Use alloca().
3487
3488 1998-02-03  Hrvoje Niksic  <hniksic@srce.hr>
3489
3490         * version.c: Wget 1.5-b3 is released.
3491
3492         * host.c (ftp_getaddress): Don't print to stderr directly.
3493
3494         * init.c (setbytes): Support `g' for gigabytes.
3495         (cmdtype): New specification CTIME.
3496         (setval): Use it with settime().
3497         (commands): Use it for WAIT and TIMEOUT.
3498
3499 1998-02-02  Hrvoje Niksic  <hniksic@srce.hr>
3500
3501         * http.c (BASIC_AUTHENTICATION_ENCODE): New macro.
3502         (gethttp): Use it.
3503
3504         * utils.c (unique_name_1): Moved from url.c.
3505         (unique_name): Ditto.
3506
3507         * url.c (url_filename): Ditto.
3508
3509         * log.c (redirect_output): Changed call to unique_name().
3510
3511         * url.c (unique_name_1): Renamed from unique_name().
3512         (unique_name): Changed interface.
3513
3514         * init.c (enum cmdid): Moved from init.h.
3515         (cmdtype): Ditto.
3516         (struct cmd): Ditto.
3517
3518         * main.c (main): Use it.
3519         (main): Moved `--backups' to not have a short option.
3520
3521         * options.h (struct options): New member BACKGROUND.
3522
3523         * main.c (print_help): Rearranged.
3524         (main): New long options for -n* short options: --no-directories,
3525         --no-host-directories, --non-verbose, --no-host-lookup and
3526         --dont-remove-listing.
3527
3528 1998-02-01  Hrvoje Niksic  <hniksic@srce.hr>
3529
3530         * main.c (main): Use log_close().
3531
3532         * log.c: New variable LOGFP.
3533         (vlogmsg): Use it.
3534         (redirect_output): Don't open /dev/null; set LOGFP to stdin
3535         instead.
3536         (log_close): New function.
3537
3538         * options.h (struct options): Removed LFILE.
3539
3540         * log.c (log_enable): Removed.
3541
3542         * main.c (main): Use it.
3543
3544         * log.c (log_init): New function.
3545
3546         * url.c (get_urls_html): Removed needless assignment to BASE.
3547
3548         * host.c (add_hlist): Don't set CMP needlessly.
3549
3550         * utils.c (match_backwards): Ditto.
3551         (in_acclist): Ditto.
3552
3553         * url.c (findurl): Ditto.
3554
3555         * netrc.c (parse_netrc): Ditto.
3556
3557         * log.c (log_dump): Ditto.
3558
3559         * html.c (html_quote_string): Ditto.
3560
3561         * ftp-basic.c (ftp_request): Made static.
3562
3563         * connect.c: Made global variables static.
3564
3565         * url.c (construct): Ditto.
3566
3567         * init.c (init_path): Avoid assignment inside `if'-condition.
3568
3569         * ftp.c: Don't include in.h or winsock.h.
3570
3571         * ftp.c (ftp_loop): Use SZ.
3572
3573         * connect.c (bindport): Cast &addrlen to int *.
3574         (conaddr): Ditto.
3575
3576         * init.c (initialize): Don't use SYSTEM_WGETRC unconditionally.
3577
3578 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
3579
3580         * ftp.c (getftp): Initialize opt.ftp_pass here.
3581         (ftp_retrieve_dirs): Use alloca().
3582
3583         * init.c (defaults): Don't initialize opt.ftp_pass.
3584
3585         * sysdep.h (S_ISLNK): Declare for OS/2; ditto for lstat.
3586         From Ivan F. Martinez <ivanfm@ecodigit.com.br>.
3587
3588 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
3589
3590         * recur.c (parse_robots): Check for comments more correctly.
3591
3592         * host.c (ftp_getaddress): Use STRDUP_ALLOCA.
3593         (ftp_getaddress): Add diagnostics when reverse-lookup yields only
3594         hostname.
3595
3596 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
3597
3598         * version.c: Wget 1.5-b2 is released.
3599
3600         * netrc.c (NETRC_FILE_NAME): Moved from netrc.h.
3601
3602         * utils.c (proclist): Pass FNM_PATHNAME to fnmatch().
3603
3604         * ftp-basic.c (ftp_pasv): Avoid unnecessary casting to unsigned
3605         char.
3606
3607         * log.c: Don't attempt to hide arguments from ansi2knr.
3608
3609         * cmpt.c: Synched strptime() and mktime() with glibc-2.0.6.
3610
3611         * ansi2knr.c: Use a later version, from fileutils-3.16l alpha.
3612
3613         * ftp.c (getftp): Ditto.
3614
3615         * http.c (gethttp): Use it.
3616
3617         * retr.c (get_contents): New argument EXPECTED; pass it to
3618         show_progress().
3619         (show_progress): New argument EXPECTED; use it to display
3620         percentages.
3621
3622         * init.c (setval): Ditto.
3623
3624         * http.c (gethttp): Ditto.
3625         (http_loop): Ditto.
3626
3627         * ftp.c (getftp): Ditto.
3628         (ftp_loop_internal): Ditto.
3629
3630         * ftp-ls.c (ftp_parse_unix_ls): Use abort() instead of assert(0).
3631
3632         * sysdep.h (CLOSE): Simplify; use DEBUGP.
3633
3634         * netrc.c (search_netrc): Use alloca().
3635
3636         * init.c (defaults): Initialize no_flush.
3637
3638         * log.c (vlogmsg): Don't flush if no_flush.
3639
3640         * options.h (struct options): New variable no_flush.
3641
3642         * main.c (main): Don't play games with buffering.
3643
3644         * log.c (vlogmsg): Flush the output after every message.
3645
3646 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
3647
3648         * init.c (parse_line): Ditto.
3649
3650         * url.c (get_urls_html): Ditto.
3651
3652         * main.c (main): Don't cast to unsigned char.
3653
3654         * init.c (run_wgetrc): Don't cast to unsigned char.
3655         (parse_line): Accept char instead of unsigned char.
3656
3657         * html.c (htmlfindurl): Use char instead of unsigned char.
3658
3659         * all: Use them.
3660
3661         * sysdep.h: Add wrappers to ctype macros to make them
3662         eight-bit-clean:
3663
3664 1998-01-30  Hrvoje Niksic  <hniksic@srce.hr>
3665
3666         * html.c (htmlfindurl): Download <img lowsrc=...>
3667
3668         * main.c (main): Ignore SIGPIPE.
3669
3670         * connect.c (select_fd): New argument WRITEP.
3671         (iwrite): Call select_fd().
3672
3673 1997-02-27  Fila Kolodny <fila@ibi.com>
3674
3675         * ftp.c (ftp_retrieve_list): If retrieving symlink and the proper
3676         one already exists, just skip it.
3677
3678 1998-01-30  Hrvoje Niksic  <hniksic@srce.hr>
3679
3680         * http.c (gethttp): Cosmetic changes.
3681
3682         * http.c (check_end): Allow `+D...' instead of `GMT'.
3683         From Fabrizio Pollastri <pollastri@cstv.to.cnr.it>.
3684
3685         * url.c (process_ftp_type): New function.
3686         (parseurl): Use it.
3687
3688         * connect.c (iwrite): Allow writing in a few chunks.
3689         (bindport): Made SRV static, so addr can point to it.
3690         (select_fd): Removed HPUX kludge.
3691
3692         * host.c (free_hlist): Incorporated into clean_hosts().
3693
3694 1998-01-29  Hrvoje Niksic  <hniksic@srce.hr>
3695
3696         * host.c (hlist): Made static.
3697         (search_address): Cosmetic change.
3698
3699 1998-01-29  Hrvoje Niksic  <hniksic@srce.hr>
3700
3701         * version.c: Wget v1.5-b1 is released.
3702
3703         * http.c (hgetlen): Use sizeof() to get the header length.
3704         (hgetrange): Ditto.
3705         (hgettype): Ditto.
3706         (hgetlocation): Ditto.
3707         (hgetmodified): Ditto.
3708         (haccepts_none): Ditto.
3709
3710         * main.c (main): Updated `--version' and `--help' output, as per
3711         Francois Pinard's suggestions.
3712
3713         * main.c: Include locale.h; call setlocale(), bindtextdomain() and
3714         textdomain().
3715
3716         * config.h.in: Define stubs for I18N3.
3717
3718         * wget.h: Include libintl.h.
3719
3720 1998-01-28  Hrvoje Niksic  <hniksic@srce.hr>
3721
3722         * url.c (mkstruct): Check for opt.cut_dirs.
3723         (mkstruct): alloca()-te more, xmalloc() less.
3724
3725         * utils.c (load_file): Check for ferror().
3726
3727         * url.c (get_urls_file): Close only the files we opened.
3728         (get_urls_html): Ditto.
3729         (count_slashes): New function.
3730
3731         * http.h: Removed.
3732
3733         * http.c (gethttp): Respect username and password provided by
3734         proxy URL.
3735         (base64_encode_line): Write into an existing buffer instead of
3736         malloc-ing a new one.
3737         (struct http_stat): Moved from http.h
3738
3739         * retr.c (retrieve_url): Free SUF.
3740
3741         * all: Removed lots of unnecessary .h dependencies.
3742
3743         * html.c (global_state): Made static.
3744
3745         * utils.h (ALLOCA_ARRAY): New macro.
3746
3747         * main.c (main): New option `--cut-dirs'.
3748
3749         * url.c (construct): Use alloca() for T.
3750
3751         * utils.c (mkdirhier): Use STRDUP_ALLOCA.
3752
3753         * host.c (_host_t): Moved from host.h.
3754         (struct host): Renamed from _host_t.
3755         (store_hostaddress): Use STRDUP_ALLOCA for INET_S.
3756         (realhost): Ditto.
3757
3758         * host.h: Don't include url.h.
3759
3760         * ftp.c (LIST_FILENAME): Moved from ftp.h.
3761
3762         * init.c (DEFAULT_FTP_ACCT): Moved from ftp.h.
3763
3764         * main.c (main): Enable log if the output goes to a TTY.
3765
3766         * connect.h: Removed unused constant `BACKLOG'.
3767
3768         * config.h.in: Check for isatty().
3769
3770         * Makefile.in (LINK): Use CFLAGS when linking.
3771
3772 1998-01-27  Hrvoje Niksic  <hniksic@srce.hr>
3773
3774         * mswindows.c (ws_hangup): Use redirect_output().
3775
3776         * main.c (redirect_output_signal): New function; use
3777         redirect_output().
3778
3779         * log.c (redirect_output): New function, based on hangup(), which
3780         is deleted.
3781
3782         * log.c (vlogmsg): New function.
3783
3784         * wget.h (DEBUGP): Use debug_logmsg().
3785
3786         * main.c (hangup): Use it.
3787
3788         * log.c (log_dump): New function.
3789
3790         * utils.h (DO_REALLOC): Use `long' for various sizes.
3791
3792         * http.c (hskip_lws): Use `while', for clarity.
3793         (HTTP_DYNAMIC_LINE_BUFFER): New constant.
3794         (fetch_next_header): Use it instead of DYNAMIC_LINE_BUFFER.
3795
3796         * ftp-basic.c (FTP_DYNAMIC_LINE_BUFFER): New constant.
3797         (ftp_response): Use it instead of DYNAMIC_LINE_BUFFER.
3798
3799         * utils.c (DYNAMIC_LINE_BUFFER): Moved from utils.c.
3800         (LEGIBLE_SEPARATOR): Ditto.
3801         (FILE_BUFFER_SIZE): Ditto.
3802
3803         * retr.c (BUFFER_SIZE): Moved from retr.h.
3804
3805         * log.c: New file.
3806         (logmsg): Moved from utils.c.
3807         (debug_logmsg): New function.
3808
3809         * mswindows.h: Include it here.
3810
3811         * init.c: Ditto.
3812
3813         * utils.c: Don't include <windows.h>.
3814
3815 1998-01-25  Hrvoje Niksic  <hniksic@srce.hr>
3816
3817         * host.c (ftp_getaddress): Ditto.
3818
3819         * main.c (main): Use it.
3820
3821         * utils.h (STRDUP_ALLOCA): New macro.
3822
3823         * init.c: Prepend `wget: ' to error messages printed on stderr.
3824
3825         * utils.c (mkdirhier): Renamed from mymkdir.
3826         (touch): Renamed from my_touch.
3827         (pwd_cuserid): Renamed from my_cuserid().
3828
3829 1998-01-24  Andy Eskilsson  <andy.eskilsson@telelogic.se>
3830
3831         * utils.c (accdir): Process wildcards.
3832         (proclist): New function.
3833         (accdir): Use it to avoid code repetition.
3834
3835 1998-01-24  Hrvoje Niksic  <hniksic@srce.hr>
3836
3837         * recur.c (parse_robots): Respect opt.useragent; use alloca().
3838
3839         * http.c (gethttp): Construct useragent accordingly.
3840
3841         * version.c: Changed version string to numbers-only.
3842
3843         * main.c (print_help): List all the options.
3844
3845         * mswindows.c (windows_main_junk): Initialize argv0 here.
3846
3847 1998-01-24  Karl Heuer  <kwzh@gnu.org>
3848
3849         * netrc.c (search_netrc): Initialize `l' only after processing
3850         netrc.
3851
3852         * main.c (main): Don't trap SIGHUP if it's being ignored.
3853
3854 1998-01-24  Hrvoje Niksic  <hniksic@srce.hr>
3855
3856         * all: Use logmsg().
3857
3858         * utils.c (time_str): Moved from retr.c.
3859         (logmsg): New function.
3860         (logmsg_noflush): Ditto.
3861
3862         * rbuf.c: New file, moved buf_* functions here.
3863
3864         * ftp.c (ftp_expected_bytes): Moved from ftp-basic.c.
3865
3866         * ftp-basic.c (ftp_rest): Use prnum().
3867
3868         * ftp-basic.c: Ditto.
3869
3870         * ftp.c: Use the new reading functions and macros.
3871
3872         * retr.c (buf_initialize): New function.
3873         (buf_initialized_p): Ditto.
3874         (buf_uninitialize): Ditto.
3875         (buf_fd): Ditto.
3876
3877         * http.c (fetch_next_header): Use the BUF_READCHAR macro for
3878         efficiency.
3879         (gethttp): Use alloca() where appropriate.
3880
3881         * retr.c (buf_readchar): Use it.
3882         (buf_peek): Use rstreams.
3883
3884         * retr.h (BUF_READCHAR): New macro.
3885
3886         * init.c (home_dir): Rewritten for clarity.
3887         (init_path): Ditto.
3888
3889         * mswindows.c (ws_backgnd): Made static.
3890         (read_registry): Ditto.
3891         (ws_cleanup): Ditto.
3892         (ws_handler): Ditto.
3893
3894 1998-01-23  Hrvoje Niksic  <hniksic@srce.hr>
3895
3896         * alloca.c: New file.
3897
3898         * Makefile.in (ALLOCA): Define.
3899
3900         * mswindows.c (ws_help): Constify.
3901         (ws_help): Use alloca.
3902
3903         * mswindows.c: Reformat.
3904
3905         * all: Added _(...) annotations for I18N snarfing and translation.
3906
3907         * host.c (ftp_getaddress): Nuke SYSINFO.
3908         (ftp_getaddress): Don't use getdomainname().
3909         (ftp_getaddress): Use uname(), where available.
3910
3911         * http.c (gethttp): Protect a stray fprintf().
3912
3913         * init.c (settime): New function.
3914         (setval): Treat WAIT specially, allowing suffixes like `m' for
3915         minutes, etc.
3916
3917 1998-01-21  Hrvoje Niksic  <hniksic@srce.hr>
3918
3919         * url.c (get_urls_html): Use alloca() for TEMP.
3920
3921 1998-01-21  Jordan Mendelson  <jordy@wserv.com>
3922
3923         * url.c (rotate_backups): New function.
3924
3925         * http.c (gethttp): Ditto.
3926
3927         * ftp.c (getftp): Rotate backups.
3928
3929 1997-12-18  Hrvoje Niksic  <hniksic@srce.hr>
3930
3931         * all: Renamed nmalloc(), nrealloc() and nstrdup() to xmalloc(),
3932         xrealloc() and xstrdup().  Use the new functions.
3933
3934         * url.c (decode_string): Made static.
3935         (has_proto): Ditto.
3936         (parse_dir): Ditto.
3937         (parse_uname): Ditto.
3938         (mkstruct): Ditto.
3939         (construct): Ditto.
3940         (construct_relative): Ditto.
3941
3942         * retr.c (show_progress): Made static.
3943
3944         * recur.c (robots_url): Made static.
3945         (retrieve_robots): Ditto.
3946         (parse_robots): Ditto.
3947         (robots_match): Ditto.
3948
3949         * main.h: Removed.
3950
3951         * main.c (printhelp): Made static.
3952         (hangup): Ditto.
3953
3954         * init.c (comind): Made static.
3955         (defaults): Ditto.
3956         (init_path): Ditto.
3957         (run_wgetrc): Ditto.
3958         (onoff): Ditto.
3959         (setonoff): Ditto.
3960         (setnum): Ditto.
3961         (myatoi): Ditto.
3962         (getperms): Ditto.
3963         (setbytes): Ditto.
3964
3965         * http.c (fetch_next_header): Made static.
3966         (hparsestatline): Ditto.
3967         (hskip_lws): Ditto.
3968         (hgetlen): Ditto.
3969         (hgetrange): Ditto.
3970         (hgettype): Ditto.
3971         (hgetlocation): Ditto.
3972         (hgetmodified): Ditto.
3973         (haccepts_none): Ditto.
3974         (gethttp): Ditto.
3975         (base64_encode_line): Ditto.
3976         (mktime_from_utc): Ditto.
3977         (http_atotm): Ditto.
3978
3979         * html.c (idmatch): Made static.
3980
3981         * host.c (search_host): Made static.
3982         (search_address): Ditto.
3983         (free_hlist): Ditto.
3984
3985         * ftp.c (getftp): Made static.
3986         (ftp_loop_internal): Ditto.
3987         (ftp_get_listing): Ditto.
3988         (ftp_retrieve_list): Ditto.
3989         (ftp_retrieve_dirs): Ditto.
3990         (ftp_retrieve_glob): Ditto.
3991         (freefileinfo): Ditto.
3992         (delelement): Ditto.
3993
3994         * ftp-ls.c (symperms): Made static.
3995         (ftp_parse_unix_ls): Ditto.
3996
3997         * connect.c (select_fd): Made static.
3998
3999         * utils.c (xmalloc): Renamed from nmalloc.
4000         (xrealloc): Renamed from nrealloc.
4001         (xstrdup): Renamed from nstrdup.
4002
4003         * getopt.c (exchange): Use alloca.
4004
4005         * mswindows.c (mycuserid): Use strncpy.
4006
4007         * New files mswindows.c, mswindows.h, sysdep.h.  winjunk.c,
4008         systhings.h, windecl.h and winjunk.h removed.
4009
4010         * mswindows.c (sleep): New function.
4011
4012         * utils.c: Include <windows.h> under Windows.
4013
4014 1997-06-12  Darko Budor  <dbudor@zesoi.fer.hr>
4015
4016         * url.h (URL_UNSAFE): Change default under Windows.
4017
4018         * retr.c (retrieve_from_file): Respect opt.delete_after.
4019
4020         * main.c (main): Call ws_help on Windows.
4021
4022         * winjunk.c (windows_main_junk): New function.
4023
4024         * main.c (main): Junk-process argv[0].
4025
4026         * http.c (mktime_from_utc): Return -1 if mktime failed.
4027
4028         * http.c (http_loop): Ditto.
4029
4030         * ftp.c (ftp_loop_internal): Change title on Windows when using a
4031         new URL.
4032
4033         * winjunk.c (getdomainname): Lots of functions.
4034
4035 1997-06-12  Hrvoje Niksic  <hniksic@srce.hr>
4036
4037         * cmpt.c (strptime_internal): Handle years more correctly for
4038         `%y'.
4039
4040 1997-06-09  Mike Thomas <mthomas@reality.ctron.com>
4041
4042         * http.c (gethttp): Allocate enough space for
4043         `Proxy-Authorization' header.
4044
4045 1997-05-10  Hrvoje Niksic  <hniksic@srce.hr>
4046
4047         * version.c: Wget/1.4.5 is released.
4048
4049 1997-05-10  Hrvoje Niksic  <hniksic@srce.hr>
4050
4051         * retr.c (get_contents): Check return value of fwrite more
4052         carefully.
4053
4054 1997-03-30  Andreas Schwab  <schwab@issan.informatik.uni-dortmund.de>
4055
4056         * cmpt.c (strptime_internal) [case 'Y']: Always subtract 1900 from
4057         year, regardless of century.
4058
4059 1997-03-30  Hrvoje Niksic  <hniksic@srce.hr>
4060
4061         * utils.c (isfile): Use `lstat' instead of `stat'.
4062
4063 1997-03-29  Hrvoje Niksic  <hniksic@srce.hr>
4064
4065         * utils.c (numdigit): Use explicit test.
4066
4067 1997-03-21  Hrvoje Niksic  <hniksic@srce.hr>
4068
4069         * http.c (http_loop): Always use `url_filename' to get u->local.
4070
4071 1997-03-20  Hrvoje Niksic  <hniksic@srce.hr>
4072
4073         * url.c: Recognize https.
4074
4075 1997-03-13  Hrvoje Niksic  <hniksic@srce.hr>
4076
4077         * recur.c (recursive_retrieve): Lowercase just the host name.
4078
4079 1997-03-09  Hrvoje Niksic  <hniksic@srce.hr>
4080
4081         * url.c (get_urls_file): Use the correct test.
4082         (get_urls_html): Ditto.
4083
4084 1997-03-07  Hrvoje Niksic  <hniksic@srce.hr>
4085
4086         * connect.c: Reverted addrlen to int.
4087
4088         * init.c (parse_line): Check for -1 instead of NONE.
4089
4090         * version.c: Changed version to 1.4.5.
4091
4092 1997-02-17  Hrvoje Niksic  <hniksic@srce.hr>
4093
4094         * init.c: New option netrc.
4095         (initialize): Don't parse .netrc.
4096
4097         * cmpt.c (recursive): Return rp.
4098         (strptime_internal): Match the long strings first, the abbreviated
4099         second.
4100
4101 1997-02-16  Hrvoje Niksic  <hniksic@srce.hr>
4102
4103         * http.c (check_end): New function.
4104         (http_atotm): Use it.
4105
4106 1997-02-13  gilles Cedoc  <gilles@cedocar.fr>
4107
4108         * http.c (gethttp): Use them.
4109
4110         * init.c: New options proxy_user and proxy_passwd.
4111
4112 1997-02-14  Hrvoje Niksic  <hniksic@srce.hr>
4113
4114         * ftp.c (ftp_retrieve_list): Create links even if not relative.
4115
4116 1997-02-10  Hrvoje Niksic  <hniksic@srce.hr>
4117
4118         * recur.c (recursive_retrieve): Lowercase the host name, if the
4119         URL is not "optimized".
4120
4121         * host.c (realhost): Return l->hostname, even if it matches with
4122         host.
4123
4124 1997-02-10  Marin Purgar  <pmc@asgard.hr>
4125
4126         * connect.c: Make addrlen size_t instead of int.
4127         (conaddr): Ditto.
4128
4129 1997-02-09  Gregor Hoffleit  <flight@mathi.uni-heidelberg.DE>
4130
4131         * systhings.h: Define S_ISLNK on NeXT too.
4132
4133 1997-02-09  Hrvoje Niksic  <hniksic@srce.hr>
4134
4135         * version.c: Released 1.4.3.
4136
4137         * url.c: Futher update to list of protostrings.
4138         (skip_proto): Skip `//' correctly for FTP and HTTP.
4139
4140         * url.c (get_urls_html): Handle bogus `http:' things a little
4141         different.
4142
4143         * main.c (main): Removed `follow-ftp' from `f'.
4144         (main): Dumped the `prefix-files' and `file-prefix' options and
4145         features; old and bogus.
4146         (main): Exit on failed setval() in `-e'.
4147
4148         * http.c (fetch_next_header): Use it to detect header continuation
4149         correctly.
4150
4151         * retr.c (buf_peek): New function.
4152
4153 1997-02-08  Hrvoje Niksic  <hniksic@srce.hr>
4154
4155         * wget.h: Include time.h and stuff.
4156
4157 1997-02-08  Roger Beeman  <beeman@cisco.com>
4158
4159         * ftp.c: Include <time.h>
4160
4161 1997-02-07  Hrvoje Niksic  <hniksic@srce.hr>
4162
4163         * url.c (findurl): Would read over buffer limits.
4164
4165 1997-02-06  Hrvoje Niksic  <hniksic@srce.hr>
4166
4167         * ftp-ls.c (ftp_parse_unix_ls): Allow spaces in file names.
4168
4169 1997-02-05  Hrvoje Niksic  <hniksic@srce.hr>
4170
4171         * http.c (http_atotm): Initialize tm.is_dst.
4172
4173 1997-02-02  Hrvoje Niksic  <hniksic@srce.hr>
4174
4175         * http.c (gethttp): Don't print the number of retrieved headers.
4176
4177         * main.c (main): New option `--no-clobber', alias for `-nc'.
4178
4179         * url.c: Recognize `https://'.
4180
4181 1997-02-01  Hrvoje Niksic  <hniksic@srce.hr>
4182
4183         * host.c (herrmsg): Don't use h_errno.
4184
4185 1997-01-30  Hrvoje Niksic  <hniksic@srce.hr>
4186
4187         * host.c (accept_domain): Use it.
4188
4189         * main.c (main): New option `--exclude-domains'.
4190
4191         * retr.c (retrieve_url): Use it.
4192         (retrieve_url): Bail out when an URL is redirecting to itself.
4193
4194         * url.c (url_equal): New function.
4195
4196 1997-01-29  Hrvoje Niksic  <hniksic@srce.hr>
4197
4198         * connect.c: Include arpa/inet.h instead of arpa/nameser.h.
4199
4200         * http.c (mk_utc_time): New function.
4201         (http_atotm): Use it; handle time zones correctly.
4202
4203 1997-01-28  Hrvoje Niksic  <hniksic@srce.hr>
4204
4205         * http.c: Ditto.
4206
4207         * ftp-basic.c: Use it instead of WRITE.
4208
4209         * connect.c (iwrite): New function.
4210
4211 1997-01-27  Hrvoje Niksic  <hniksic@srce.hr>
4212
4213         * cmpt.c (mktime): New function.
4214
4215         * netrc.c: Include <sys/types.h>.
4216
4217         * main.c (main): Wouldn't recognize --spider.
4218
4219         * retr.c (rate): Use `B', `KB' and `MB'.
4220         (reset_timer,elapsed_time): Moved from utils.c.
4221
4222         * ftp.c (ftp_retrieve_list): Ditto.
4223
4224         * http.c (http_loop): Don't touch the file if opt.dfp.
4225
4226 1997-01-24  Hrvoje Niksic  <hniksic@srce.hr>
4227
4228         * cmpt.c: New file.
4229
4230         * ftp.c (ftp_retrieve_glob): New argument semantics.
4231         (ftp_retrieve_dirs): Use it.
4232         (ftp_loop): Ditto.
4233
4234         * html.c (htmlfindurl): Recognize `'' as the quote char.
4235
4236 1997-01-23  Hrvoje Niksic  <hniksic@srce.hr>
4237
4238         * ftp.c (ftp_loop_internal): Use it.
4239
4240         * utils.c (remove_link): New function.
4241
4242 1997-01-22  Hrvoje Niksic  <hniksic@srce.hr>
4243
4244         * retr.c (retrieve_url): Require STRICT redirection URL.
4245
4246         * url.c (parseurl): New argument STRICT.
4247
4248         * http.c (hparsestatline): Be a little-bit less strict about
4249         status line format.
4250
4251 1997-01-21  Hrvoje Niksic  <hniksic@srce.hr>
4252
4253         * http.c (gethttp): Use it.
4254
4255         * main.c (main): Don't use '<digit>' as options.
4256
4257         * init.c: New option ignore_length.
4258
4259         * http.c (gethttp): Ditto.
4260         (http_loop): Check for redirection without Location:.
4261         (gethttp): Don't print Length unless RETROKF.
4262
4263         * ftp.c (getftp): Use it.
4264
4265         * url.c (mkalldirs): New function.
4266
4267         * utils.c (mymkdir): Don't check for existing non-directory.
4268
4269         * url.c (mkstruct): Don't create the directory.
4270
4271 1997-01-20  Hrvoje Niksic  <hniksic@srce.hr>
4272
4273         * init.c (setval): Removed NO_RECURSION checks.
4274
4275 1997-01-19  Hrvoje Niksic  <hniksic@srce.hr>
4276
4277         * version.c: "Released" 1.4.3-pre2.
4278
4279         * recur.c (recursive_retrieve): Bypass host checking only if URL
4280         is ftp AND parent URL is not ftp.
4281
4282         * ftp-basic.c (ftp_request): Print out Turtle Power.
4283
4284         * ftp.c (ftp_loop): Call ftp_retrieve_glob with 0 if there's no
4285         wildcard.
4286         (ftp_retrieve_glob): Call ftp_loop_internal even on empty list, if
4287         not glob.
4288
4289         * http.c (gethttp): Be a little bit smarter about status codes.
4290
4291         * recur.c (recursive_retrieve): Always reset opt.recursive when
4292         dealing with FTP.
4293
4294 1997-01-18  Hrvoje Niksic  <hniksic@srce.hr>
4295
4296         * retr.c (retrieve_url): New variable location_changed; use it for
4297         tests instead of mynewloc.
4298         (retrieve_url): Allow heuristic adding of html.
4299
4300         * url.c (url_filename): Don't use the `%' in Windows file names.
4301
4302         * http.c (http_loop): Always time-stamp the local file.
4303
4304         * http.c (http_loop): Ditto.
4305
4306         * ftp.c (ftp_retrieve_list): Use it.
4307
4308         * utils.c (my_touch): New function.
4309
4310         * ftp.c (ftp_retrieve_list): Use #ifdef HAVE_STRUCT_UTIMBUF
4311         instead of #ifndef NeXT.
4312
4313         * utils.c (strptime): New version, by Ulrich Drepper.
4314
4315 1997-01-17  Hrvoje Niksic  <hniksic@srce.hr>
4316
4317         * http.c (haccepts_none): Renamed from `haccepts_bytes'.
4318         (gethttp): If haccepts_none(), disable ACCEPTRANGES.
4319         (http_loop): Would remove ACCEPTRANGES.
4320
4321         * ftp.c (getftp): Call ftp_list with NULL.
4322
4323 1997-01-15  Hrvoje Niksic  <hniksic@srce.hr>
4324
4325         * html.c (ftp_index): Don't print minutes and seconds if we don't
4326         know them; beautify the output.
4327
4328         * ftp.c (getftp): Don't close the socket on FTPNSFOD.
4329
4330 1997-01-14  Hrvoje Niksic  <hniksic@srce.hr>
4331
4332         * utils.c (strptime): New function.
4333         (strptime): Don't use get_alt_number.
4334         (strptime): Don't use locale.
4335         (match_string): Made it a function.
4336
4337 1997-01-12  Hrvoje Niksic  <hniksic@srce.hr>
4338
4339         * http.c (http_atotm): New function.
4340         (http_loop): Use it.
4341
4342         * atotm.c: Removed from the distribution.
4343
4344         * http.c (base64_encode_line): Rewrite.
4345
4346 1997-01-09  Hrvoje Niksic  <hniksic@srce.hr>
4347
4348         * ftp.c (getftp): Use ftp_expected_bytes; print size.
4349
4350         * ftp-basic.c (ftp_response): Use ftp_last_respline.
4351         (ftp_expected_bytes): New function.
4352
4353         * ftp.c (getftp): Print the unauthoritative file length.
4354
4355         * ftp-ls.c: Renamed from ftp-unix.c.
4356         (ftp_parse_ls): Moved from ftp.c.
4357         (ftp_parse_unix_ls): Recognize seconds in time spec.
4358         (ftp_parse_unix_ls): Recognize year-less dates of the previous
4359         year.
4360
4361 1997-01-08  Hrvoje Niksic  <hniksic@srce.hr>
4362
4363         * ftp-basic.c: Don't declare errno if #defined.
4364
4365         * host.c (ftp_getaddress): Check for sysinfo legally.
4366
4367 1997-01-08  Darko Budor  <dbudor@diana.zems.fer.hr>
4368
4369         * connect.c (iread): Use READ.
4370
4371 1996-12-23  Hrvoje Niksic  <hniksic@srce.hr>
4372
4373         * url.c: Recognize finger, rlogin, tn3270, mid and cid as valid
4374         schemes.
4375
4376 1996-12-22  Hrvoje Niksic  <hniksic@srce.hr>
4377
4378         * host.c (ftp_getaddress): Allow `.' in hostname.
4379
4380 1996-12-26  Darko Budor <dbudor@zems.fer.hr>
4381
4382         * wget.h: READ and WRITE macros for use instead of read and write
4383         on sockets, grep READ *.c, grep WRITE *.c
4384
4385         * wsstartup.c: new file - startup for winsock
4386
4387         * wsstartup.h: new file
4388
4389         * win32decl.h: new file - fixup for <errno.h> and winsock trouble
4390
4391         * configure.bat: Configure utility for MSVC
4392
4393         * src/Makefile.ms,config.h.ms: new files for use with MSVC 4.x
4394
4395 1996-12-22  Hrvoje Niksic  <hniksic@srce.hr>
4396
4397         * version.c: Released 1.4.3-pre.
4398
4399         * utils.c (prnum): Accept long.
4400         (legible): Use prnum().
4401
4402         * connect.c (make_connection): Accept port as short.
4403         (bindport): Ditto.
4404
4405         * http.c (gethttp): Use search_netrc.
4406
4407 1996-12-21  Hrvoje Niksic  <hniksic@srce.hr>
4408
4409         * ftp.c (getftp): Use search_netrc.
4410
4411         * netrc.c (free_netrc): New function.
4412
4413         * init.c (home_dir): New function.
4414
4415         * url.c (convert_links): Allow REL2ABS changes.
4416
4417 1996-12-21  Gordon Matzigkeit  <gord@gnu.ai.mit.edu>
4418
4419         * netrc.c: New file.
4420         (parse_netrc, maybe_add_to_list): New functions.
4421
4422 1996-12-17  Hrvoje Niksic  <hniksic@srce.hr>
4423
4424         * retr.c (retrieve_url): Reset opt.recursion before calling
4425         ftp_loop if it is reached through newloc.
4426
4427         * init.c (run_wgetrc): Print the wgetrc path too, when reporting
4428         error; don't use "Syntax error", since we don't know if it is
4429         really a syntax error.
4430
4431 1996-12-16  Hrvoje Niksic  <hniksic@srce.hr>
4432
4433         * utils.c (acceptable): Extract the filename part of the path.
4434
4435         * recur.c (recursive_retrieve): Call acceptable() with the right
4436         argument; would bug out on wildcards.
4437
4438         * init.c (parse_line): Likewise.
4439
4440         * html.c (htmlfindurl): Cast to char * when calling stuff.
4441
4442 1996-12-15  Hrvoje Niksic  <hniksic@srce.hr>
4443
4444         * ftp.c (getftp): Use ftp_pasv.
4445
4446         * ftp-basic.c (ftp_request): Accept NULL value.
4447         (ftp_pasv): New function.
4448
4449         * options.h (struct options): Add passive FTP option.
4450
4451 1996-12-15  Hrvoje Niksic  <hniksic@srce.hr>
4452
4453         * url.c (parseurl): Debug output.
4454
4455         * utils.c (path_simplify): New one, adapted from bash's
4456         canonicalize_pathname().
4457
4458 1996-12-14  Hrvoje Niksic  <hniksic@srce.hr>
4459
4460         * ftp.c (getftp): Don't discard the buffer.
4461
4462         * retr.c (get_contents): New parameter nobuf.
4463
4464 1996-12-13  Shawn McHorse  <riffraff@txdirect.net>
4465
4466         * html.c (htmlfindurl): Recognize <meta contents="d; URL=...".
4467
4468         * init.c (setval): Strip the trailing slashes on CVECDIR.
4469
4470 1996-12-13  Hrvoje Niksic  <hniksic@srce.hr>
4471
4472         * init.c: Make excludes and includes under CVECDIR instead of
4473         CVEC.
4474
4475 1996-12-13  Shawn McHorse  <riffraff@txdirect.net>
4476
4477         * url.c (get_urls_html): Skip "http:".
4478
4479 1996-12-13  Hrvoje Niksic  <hniksic@srce.hr>
4480
4481         * utils.c (strcasecmp): From glibc.
4482         (strncasecmp): Also.
4483         (strstr): Also.
4484
4485         * url.c: Added javascript: to the list of URLs prefixes.
4486
4487 1996-12-12  Shawn McHorse  <riffraff@txdirect.net>
4488
4489         * recur.c (retrieve_robots): Print the warning message only if
4490         verbose.
4491
4492 1996-12-12  Gregor Hoffleit  <flight@mathi.uni-heidelberg.DE>
4493
4494         * ftp.c (ftp_retrieve_list): Use NeXT old utime interface.
4495
4496 1996-12-12  Hrvoje Niksic  <hniksic@srce.hr>
4497
4498         * systhings.h: New file.
4499
4500         * ../configure.in: Check for utime.h
4501
4502         * ftp.c: Check whether we have unistd.h.
4503
4504 1996-11-27  Hrvoje Niksic  <hniksic@srce.hr>
4505
4506         * recur.c (recursive_retrieve): Send the canonical URL as referer.
4507         (recursive_retrieve): Call get_urls_html with the canonical URL.
4508
4509 1996-12-13  Kaveh R. Ghazi  <ghazi@caip.rutgers.edu>
4510
4511         * (configure.in, config.h.in, src/Makefile.in, src/*.[ch]): Add
4512         ansi2knr support for compilers which don't support ANSI style
4513         function prototypes and signatures.
4514
4515         * (aclocal.m4, src/ansi2knr.c, src/ansi2knr.1): New files.
4516
4517 1996-11-26  Hrvoje Niksic  <hniksic@srce.hr>
4518
4519         * url.c: Use it; Recognize paths ending with "." and ".." as
4520         directories.
4521         (url_filename): Append .n whenever file exists and could be a
4522         directory.
4523
4524         * url.h (ISDDOT): New macro.
4525
4526         * init.c (parse_line): Use unsigned char.
4527
4528         * url.c (get_urls_html): Cast to unsigned char * when calling
4529         htmlfindurl.
4530
4531         * html.c (htmlfindurl): Use unsigned char.
4532
4533         * version.c: Changed version to 1.4.3.
4534
4535 1996-11-25  Hrvoje Niksic  <hniksic@srce.hr>
4536
4537         * version.c: Released 1.4.2.
4538
4539         * ftp.c (getftp): Simplified assertion.
4540         (ftp_loop_internal): Remove symlink before downloading.
4541         (ftp_retrieve_list): Unlink the symlink name before attempting to
4542         create a symlink!
4543
4544         * options.h (struct options): Renamed print_server_response to
4545         server_response.
4546
4547         * ftp.c (rel_constr): Removed.
4548         (ftp_retrieve_list): Don't use it.
4549         (ftp_retrieve_list): Use opt.retr_symlinks.
4550
4551 1996-11-24  Hrvoje Niksic  <hniksic@srce.hr>
4552
4553         * main.c (main): New option retr_symlinks.
4554
4555         * url.c (convert_links): Print verbose message.
4556
4557 1996-11-24  Hrvoje Niksic  <hniksic@srce.hr>
4558
4559         * http.c (http_loop): Reset newloc in the beginning of function;
4560         would cause FMR in retrieve_url.
4561
4562 1996-11-23  Hrvoje Niksic  <hniksic@srce.hr>
4563
4564         * recur.c (convert_all_links): Find the URL of each HTML document,
4565         and feed it to get_urls_html; would bug out.
4566         (convert_all_links): Check for l2 instead of dl; removed dl.
4567
4568         * url.c (convert_links): Don't refer to freed newname.
4569
4570         * recur.c (recursive_retrieve): Add this_url to urls_downloaded.
4571
4572         * main.c (main): Print the OS_TYPE in the debug output, too.
4573
4574         * recur.c (recursive_retrieve): Check for opt.delete_after.
4575
4576         * main.c (main): New option delete-after.
4577
4578         * init.c (setval): Cleaned up.
4579
4580 1996-11-21  Hrvoje Niksic  <hniksic@srce.hr>
4581
4582         * Makefile.in (wget): Make `wget' the default target.
4583
4584         * ftp.c (ftp_loop_internal): Move noclobber checking out of the
4585         loop.
4586         (ftp_retrieve_list): Warn about non-matching sizes.
4587
4588         * http.c (http_loop): Made -nc non-dependent on opt.recursive.
4589
4590         * init.c (setnum): Renamed from setnuminf; New argument flags.
4591         (setval): Use it.
4592
4593         * main.c (main): Sorted the options.
4594         (main): New option --wait.
4595
4596 1996-11-21  Shawn McHorse  <riffraff@txdirect.net>
4597
4598         * html.c (htmlfindurl): Reset s->in_quote after getting out of
4599         quotes.
4600
4601 1996-11-20  Hrvoje Niksic  <hniksic@srce.hr>
4602
4603         * version.c: Changed version to 1.4.2.
4604
4605 1996-11-20  Hrvoje Niksic  <hniksic@srce.hr>
4606
4607         * version.c: Released 1.4.1.
4608
4609         * html.c (html_quote_string): New function.
4610         (ftp_index): Use it.
4611         (htmlfindurl): A more gentle ending debug message.
4612
4613         * ftp.c (ftp_loop): Check for opt.htmlify.
4614
4615         * init.c: New command htmlify.
4616
4617         * ftp.c (getftp): Nicer error messages, with `'-encapsulated
4618         strings.
4619         (ftp_loop): Print size of index.html.
4620
4621         * init.c (setval): Implement "styles".
4622
4623         * main.c (main): New option dotstyle.
4624
4625 1996-11-19  Hrvoje Niksic  <hniksic@srce.hr>
4626
4627         * ftp.c (getftp): Close the master socket in case of errors, after
4628         bindport().
4629
4630         * connect.c (bindport): Initialize msock to -1.
4631
4632         * ftp.c (getftp): Initialize dtsock to -1.
4633
4634         * connect.c (closeport): Don't close sock if sock == -1.
4635
4636 1996-11-18  Hrvoje Niksic  <hniksic@srce.hr>
4637
4638         * init.c (setnuminf): Nuked default value -- just leave unchanged.
4639         (setval): Don't send default values.
4640         (defaults): Use DEFAULT_TIMEOUT -- aaargh.
4641
4642         * options.h (struct options): Use long for dot_bytes.
4643
4644         * init.c (setquota): Renamed to setbytes.
4645         (setval): Use setbytes on DOTBYTES.
4646
4647 1996-11-17  Hrvoje Niksic  <hniksic@srce.hr>
4648
4649         * ftp.c (getftp): Initialize con->dltime.
4650
4651         * recur.c (recursive_retrieve): Use same_host instead of
4652         try_robots; simply load robots_txt whenever the host is changed.
4653         (recursive_retrieve): Free forbidden before calling parse_robots.
4654
4655 1996-11-16  Hrvoje Niksic  <hniksic@srce.hr>
4656
4657         * retr.c (show_progress): Use them.
4658
4659         * options.h (struct options): New options dot_bytes, dots_on_line
4660         and dot_spacing.
4661
4662 1996-11-16  Mark Boyns  <boyns@sdsu.edu>
4663
4664         * recur.c (recursive_retrieve): Retrieve directories regardless of
4665         acc/rej rules; check for empty u->file.
4666
4667 1996-11-14  Hrvoje Niksic  <hniksic@srce.hr>
4668
4669         * init.c (setval): Use it.
4670
4671         * utils.c (merge_vecs): New function.
4672
4673         * init.c (setval): Reset the list-type functions when encountering
4674         "".
4675
4676 1996-11-14  Shawn McHorse  <riffraff@txdirect.net>
4677
4678         * recur.c (recursive_retrieve): Use base_url instead of this_url
4679         for no_parent.
4680
4681 1996-11-14  Shawn McHorse  <riffraff@txdirect.net>
4682
4683         * html.c (htmlfindurl): Reset s->in_quote after exiting the quote.
4684
4685 1996-11-13  Hrvoje Niksic  <hniksic@srce.hr>
4686
4687         * utils.c (sepstring): Rewrote; don't use strtok.
4688
4689         * recur.c (recursive_retrieve): Enter assorted this_url to slist
4690         when running the first time.
4691         (retrieve_robots): Warn to ignore errors when robots are loaded.
4692
4693         * utils.c (load_file): Moved from url.c.
4694
4695         * http.c: Made static variables const too in h* functions.
4696
4697         * main.c (main): Renamed --continue-ftp to --continue.
4698
4699         * recur.c (recursive_retrieve): Use it.
4700
4701         * utils.c (frontcmp): New function.
4702
4703         * url.c (accdir): New function.
4704
4705         * html.c (htmlfindurl): Recognize <area href=...>.
4706
4707         * ftp.c (ftp_retrieve_dirs): Implemented opt.includes.
4708
4709         * init.c (setval): Free the existing opt.excludes and
4710         opt.includes, if available.
4711
4712         * main.c (main): New option -I.
4713
4714 1996-11-12  Hrvoje Niksic  <hniksic@srce.hr>
4715
4716         * ftp.c (ftp_retrieve_glob): Do not weed out directories.
4717
4718         * version.c: Changed version to 1.4.1.
4719
4720 1996-11-11  Hrvoje Niksic  <hniksic@srce.hr>
4721
4722         * version.c: Released 1.4.0.
4723
4724 1996-11-10  Hrvoje Niksic  <hniksic@srce.hr>
4725
4726         * main.c (main): Free com and val after parse_line.
4727         (printhelp): Reorder the listing.
4728
4729         * http.c: More robust header parsing.
4730
4731         * http.c: Allow any number of spaces, or no spaces, precede ':'.
4732         (hskip_lws): New function.
4733         (haccepts_bytes): New function.
4734         (gethttp): Use it.
4735
4736         * init.c (setval): Check header sanity.
4737         (setval): Allow resetting of headers.
4738
4739 1996-11-10  Hrvoje Niksic  <hniksic@srce.hr>
4740
4741         * http.c (http_loop): Don't use has_wildcards.
4742
4743         * http.c (gethttp): Free all_headers -- would leak.
4744
4745         * recur.c (recursive_retrieve): Initialize depth to 1 instead of
4746         0 -- this fixes a long-standing bug in -rl.
4747
4748 1996-11-09  Hrvoje Niksic  <hniksic@srce.hr>
4749
4750         * ftp.c: Use -1 as "impossible" value for con->fd.
4751
4752         * url.h (URL_SEPARATOR): Don't treat `*' and `+' as separators.
4753
4754         * init.c (parse_line): Use isalpha.
4755
4756         * ftp-unix.c: Use HAVE_UNISTD_H.
4757
4758         * mtch.c (has_wildcards): Don't match \.
4759
4760         * http.c (http_loop): Warn on HTTP wildcard usage.
4761
4762 1996-11-08  Hrvoje Niksic  <hniksic@srce.hr>
4763
4764         * url.c (url_filename): Do not create numbered suffixes if
4765         opt.noclobber -- would bug out on -nc.
4766
4767 1996-11-07  Hrvoje Niksic  <hniksic@srce.hr>
4768
4769         * recur.c (parse_robots): Don't chuck out the commands without
4770         arguments (`Disallow:<empty>' didn't work).
4771         (parse_robots): Compare versions lowercase.
4772         (parse_robots): Match on base_version, not version_string!
4773         (parse_robots): Handle comments properly.
4774         (parse_robots): Match versions in a sane way.
4775
4776         * init.c: Print nicer error messages.
4777
4778         * version.c: Changed version to 1.4.0.
4779
4780 1996-11-06  Hrvoje Niksic  <hniksic@srce.hr>
4781
4782         * version.c: Released 1.4.0-test2.
4783
4784         * init.c (run_wgetrc): Close fp.
4785
4786         * ftp.c (ftp_retrieve_dirs): Allocate the correct length for
4787         u->dir.
4788
4789 1996-11-06  Hrvoje Niksic  <hniksic@srce.hr>
4790
4791         * init.c (setquota): Allow inf as quota specification.
4792
4793 1996-11-05  Hrvoje Niksic  <hniksic@srce.hr>
4794
4795         * ftp.c (ftp_retrieve_dirs): Return QUOTEXC if quota exceeded.
4796         (ftp_retrieve_glob): Return QUOTEXC on quota exceeded.
4797
4798         * main.c (main): Check for quota by comparison with downloaded
4799         stuff, not from status.
4800
4801         * connect.c (select_fd): Should compile on HPUX without warnings now.
4802
4803         * ftp.c (ftp_get_listing): Check whether ftp_loop_internal
4804         returned RETROK.
4805
4806 1996-11-04  Hrvoje Niksic  <hniksic@srce.hr>
4807
4808         * ftp.c (ftp_retrieve_glob): Print the pattern nicely.
4809         (getftp): Return FTPRETRINT on control connection error.
4810
4811         * html.c (htmlfindurl): Recognize <embed src=...> and
4812         <bgsound src=...>.
4813         (ftp_index): Handle username and password correctly.
4814
4815         * main.c (main): Made `-np' a synonim for --no-parent.
4816
4817 1996-11-02  Hrvoje Niksic  <hniksic@srce.hr>
4818
4819         * ftp.c (ftp_loop): Check for opt.ftp_glob too before calling
4820         ftp_retrieve_glob.
4821
4822         * version.c: Changed version to 1.4.0-test2.
4823
4824 1996-11-02  Hrvoje Niksic  <hniksic@srce.hr>
4825
4826         * version.c: Released 1.4.0-test1.
4827
4828         * url.c (str_url): Don't use sprintf when creating %2F-prefixed
4829         directory.
4830         (convert_links): Removed definition of make_backup.
4831
4832         * http.h: Removed definition of MAX_ERROR_LENGTH.
4833
4834         * host.c (ftp_getaddress): Check for "(none)" domains.
4835
4836         * ftp.c (ftp_retrieve_dirs): Docfix.
4837
4838         * http.c (gethttp): Use ou->referer instead of u->referer.
4839
4840         * retr.c (retrieve_url): Reset u to avoid freeing pointers twice;
4841         this was known to cause coredumps on Linux.
4842
4843         * html.c (ftp_index): Cast the argument to local_time to time_t *.
4844
4845 1996-11-01  Hrvoje Niksic  <hniksic@srce.hr>
4846
4847         * connect.c (select_fd): Use exceptfds -- once and for all.
4848
4849         * retr.c (retrieve_from_file): Free filename after
4850         recursive_retrieve.
4851         (retrieve_from_file): Send RFIRST_TIME to recursive_retrieve on
4852         first-time retrieval.
4853         (retrieve_from_file): Return uerr_t; new argument, count.
4854         (retrieve_from_file): Break on QUOTEXC.
4855
4856         * init.c (setquota): Fixed a bug that caused rejection of
4857         non-postfixed values..
4858
4859 1996-10-30  Hrvoje Niksic  <hniksic@srce.hr>
4860
4861         * version.c: Changed name to wget.
4862
4863         * connect.c (iread): Smarter use of select.
4864         (select_fd): Set errno on timeout.  If not timeout, return 1
4865         instead of 0.
4866
4867 1996-10-29  Hrvoje Niksic  <hniksic@srce.hr>
4868
4869         * ftp.c (ftp_loop_internal): Don't use con->cmd before
4870         establishing it.
4871
4872 1996-10-26  Hrvoje Niksic  <hniksic@srce.hr>
4873
4874         * http.c (gethttp): Send correct referer when using proxy.
4875         (gethttp): Use struct urlinfo ou to access the relevant data; send
4876         correct authorization in all cases.
4877
4878         * host.c (same_host): Use skip_uname to skip username and
4879         password.
4880
4881         * url.c (skip_uname): New function.
4882         (parseurl): Use it.
4883
4884         * host.c (same_host): Do not assume HTTP -- same_host should now
4885         be totally foolproof.
4886
4887         * url.c (skip_proto): New function.
4888         (parse_uname): Use it.
4889
4890         * http.c (gethttp): Create local user and passwd from what is
4891         given.
4892
4893         * url.c (parseurl): Check for HTTP username and password too.
4894
4895 1996-10-25  Hrvoje Niksic  <hniksic@srce.hr>
4896
4897         * config.h.in: Removed #define gethostbyname R...
4898
4899 1996-10-22  Hrvoje Niksic  <hniksic@srce.hr>
4900
4901         * version.c: Changed version to 1.4.0-test1.
4902
4903 1996-10-21  Hrvoje Niksic  <hniksic@srce.hr>
4904
4905         * version.c: "Released" 1.4b29.
4906
4907         * recur.c (recursive_retrieve): Check for no_parent.
4908
4909         * init.c (setval): Option update.
4910
4911         * main.c (main): New option no-parent.
4912
4913         * options.h (struct options): New variable no_parent.
4914
4915         * recur.c (recursive_retrieve): Only files are checked for
4916         opt.accepts and opt.rejects.
4917         (recursive_retrieve): Check directories for opt.excludes.
4918         (recursive_retrieve): Make the dir absolute when checking
4919         opt.excludes.
4920
4921         * html.c (htmlfindurl): Recognize <applet code=...> and <script
4922         src=...>
4923
4924 1996-10-18  Hrvoje Niksic  <hniksic@srce.hr>
4925
4926         * ftp.c (getftp): Do not line-break assert entries at all.
4927         (ftp_retrieve_dirs): docfix.
4928
4929         * connect.c (select_fd): Use fd + 1 as nfds.
4930
4931         * version.c: Changed version to 1.4b29.
4932
4933 1996-10-18  Hrvoje Niksic  <hniksic@srce.hr>
4934
4935         * version.c: "Released" 1.4b28.
4936
4937         * ftp.c (ftp_loop_internal): Check whether f->size == len and
4938         don't continue the loop if it is.
4939         (ftp_get_listing): Remove list_filename on unsuccesful loop.
4940
4941 1996-10-17  Hrvoje Niksic  <hniksic@srce.hr>
4942
4943         * ftp.c (ftp_loop_internal): Use strcpy to initialize tmp.
4944         (getftp): Do not use multiline assert.
4945
4946         * http.c (hparsestatline): Use mjr and mnr instead of major and
4947         minor, which don't compile on Ultrix.
4948         (http_loop): Use strcpy() to initialize tmp.
4949
4950         * all: Geturl -> Fetch
4951
4952 1996-10-17  Hrvoje Niksic  <hniksic@srce.hr>
4953
4954         * recur.c (parse_robots): Fixed an off-by-one bug when looking for
4955         ':'.
4956
4957         * html.c (htmlfindurl): Fixed several possible off-by-one bugs by
4958         moving `bufsize &&' to the beginning of each check in for-loops.
4959
4960         * recur.c (parse_robots): Close fp on exit.
4961
4962         * url.c (mymkdir): Check for each directory before creating.
4963
4964 1996-10-16  Hrvoje Niksic  <hniksic@srce.hr>
4965
4966         * version.c: Changed version to 1.4b28.
4967
4968 1996-10-16  Hrvoje Niksic  <hniksic@srce.hr>
4969
4970         * version.c: "Released" 1.4b27.
4971
4972         * init.c (parse_line): Use isspace.
4973         (parse_line): Free *com on all errors.
4974
4975         * ftp.c (ftp_loop): Change FTPOK to RETROK before exiting.
4976         (delelement): Use next instead of f->next and prev instead of
4977         f->prev.
4978         (delelement): Free the members of the deleted element.
4979
4980         * http.c (http_loop): Do not return RETROK on code != 20x.
4981
4982         * init.c (cleanup): Free opt.user_header.
4983         (cleanup): Free opt.domains.
4984
4985         * url.c (freelists): Moved to cleanup().
4986
4987         * http.c (hparsestatline): Docfix.
4988
4989         * main.c (main): Return with error status on unsuccesful
4990         retrieval.
4991
4992         * init.c (setval): Do not remove listing when mirroring.
4993
4994         * url.c (url_filename): Use opt.fileprefix.
4995
4996         * ftp.c (ftp_get_listing): Use url_filename to get filename for
4997         .listing.
4998
4999         * main.c (main): New option: -rn.
5000
5001 1996-10-15  Hrvoje Niksic  <hniksic@srce.hr>
5002
5003         * Makefile.in (RM): Added RM = rm -f.
5004
5005         * host.c (clean_hosts): New function.
5006         (free_hlist): Just free the list, no reset.
5007
5008         * version.c: Changed version to 1.4b27.
5009
5010 1996-10-13  Hrvoje Niksic  <hniksic@srce.hr>
5011
5012         * version.c: "Released" 1.4b26.
5013
5014         * retr.c (retrieve_from_file): If call get_urls_html with
5015         opt.spider to make it silent in spider mode.
5016
5017         * url.c (str_url): Use CLEANDUP instead of URL_CLEANSE.
5018
5019         * url.h (CLEANDUP): New macro.
5020
5021         * http.c (gethttp): Fixed a bug that freed location only when it
5022         was NULL.
5023
5024         * retr.c (retrieve_url): Free url if it will not be stored,
5025         i.e. newloc is NULL.
5026
5027         * html.c (htmlfindurl): Handle exiting from quotes correctly; the
5028         old version would bug out on <a href="x#a"href="y">.
5029
5030         * html.h (state_t): New member in_quote.
5031
5032         * html.c (htmlfindurl): Free s->attr at the beginning of
5033         attr-loop.
5034
5035         * recur.c (recursive_retrieve): Recognize RCLEANUP.
5036         (tried_robots): Make hosts a global variable.
5037         (recursive_retrieve): Free constr after URL host optimization.
5038         (tried_robots): Free urlinfo before exiting.
5039
5040         * utils.c (free_slist): New function.
5041
5042         * recur.c (recursive_retrieve): Use flags to add cleanup
5043         possibility.
5044
5045         * main.c (main): Free filename after recursive_retrieve.
5046
5047         * http.c (gethttp): Store successful responses too.
5048
5049 1996-10-12  Hrvoje Niksic  <hniksic@srce.hr>
5050
5051         * all: Constified the whole source.  This required some minor
5052         changes in many functions in url.c, possibly introducing bugs -- I
5053         hope not.
5054
5055         * ftp-basic.c: Removed last_respline.
5056
5057         * http.c (gethttp): Free type.
5058
5059         * host.c (same_host): Free real1 and real2.
5060
5061         * main.c (main): New option --spider.
5062
5063         * retr.c (get_contents): Don't reset errno.
5064
5065         * main.c (main): Sorted the options.
5066
5067         * connect.c (iread): Set errno to ETIMEDOUT only if it was left
5068         uninitialized by select().
5069
5070         * http.c (http_loop): Print the time when the connection is
5071         closed.
5072         (gethttp): Debug-print the HTTP request.
5073
5074 1996-10-11  Hrvoje Niksic  <hniksic@srce.hr>
5075
5076         * connect.c (iread): Do not try reading after timeout.
5077
5078         * main.c (main): Would bug out on -T.
5079
5080         * connect.c (select_fd): Do not use exceptfds.
5081         (iread): Set ETIMEDOUT on select_fd <= 0.
5082
5083         * version.c: Changed version to 1.4b26.
5084
5085 1996-10-10  Hrvoje Niksic  <hniksic@srce.hr>
5086
5087         * version.c: "Released" 1.4b25.
5088
5089         * ftp-unix.c (ftp_parse_unix_ls): Ignore lines without file name
5090         or link name.
5091
5092         * http.c (gethttp): Add errcode to struct hstat.
5093         (http_loop): Use it.
5094
5095         * url.c (no_proxy_match): Simplify using char** for no_proxy.
5096
5097         * options.h (struct options): Make opt.no_proxy a vector.
5098
5099         * utils.c (sepstring): Use !*s instead of !strlen(s).
5100
5101         * init.c (setval): Set opt.maxreclevel to 0 on --mirror.
5102         (getperms): Use ISODIGIT instead of isdigit.
5103
5104         * ftp.c (getftp): Print time.
5105
5106         * main.c (main): Use legible output of downloaded quantity.
5107
5108         * ftp.c (getftp): Use elapsed_time().
5109         (ftp_loop_internal): Use rate().
5110
5111         * http.c (http_loop): Add download ratio output; Use rate().
5112
5113         * utils.c (rate): New function.
5114
5115 1996-10-09  Hrvoje Niksic  <hniksic@srce.hr>
5116
5117         * http.c (http_loop): Use timer.
5118
5119         * ftp.c: Split to ftp-basic.c and ftp.c
5120
5121         * utils.c (reset_timer): New function.
5122         (elapsed_time): New function.
5123
5124         * retr.c (show_progress): Make bytes_in_line and offs long; should
5125         work on 16-bit machines.
5126
5127 1996-10-08  Hrvoje Niksic  <hniksic@srce.hr>
5128
5129         * url.c (in_acclist): New argument backward.
5130
5131         * ftp.c (ftp_retrieve_glob): Use acceptable() to determine whether
5132         a file should be retrieved according to suffix.
5133         (ftp_get_listing): Check the return value of unlink; Do not call
5134         ftp_retrieve_dirs if depth reached maxreclevel.
5135         (ftp_retrieve_dirs): Check whether the directory is in
5136         exclude-list.
5137
5138         * main.c (main): Print the version number at the beginning of
5139         DEBUG output.
5140         (main): Use strrchr when creating exec_name.
5141
5142         * ftp.c (ftp_retrieve_glob): Do not close control connection.
5143
5144         * version.c: Changed version to 1.4b25.
5145
5146 1996-10-07  Hrvoje Niksic  <hniksic@srce.hr>
5147
5148         * version.c: "Released" 1.4b24.
5149
5150         * Makefile.in: Rewrite.
5151
5152         * ftp.c (ftp_loop_internal): Likewise.
5153
5154         * retr.c (time_str): Check for failed time().
5155
5156         * html.c (htmlfindurl): Recognize <fig src> and <overlay src> from
5157         HTML3.0.
5158
5159         * retr.c (time_str): Return time_t *.
5160
5161         * connect.c (bindport): Close msock on unsuccesful bind.
5162         (bindport): The same for getsockname and listen.
5163
5164         * retr.c (retrieve_url): Allow any number of retries on
5165         proxy.
5166
5167         * http.c (gethttp): Do not treat errno == 0 as timeout.
5168         (http_loop): Likewise.
5169         (http_loop): Cosmetic changes.
5170
5171         * connect.c (iread): Set errno to ETIMEDOUT in case of timeout.
5172
5173         * retr.c (get_contents): Reset errno.
5174
5175         * ftp.c (getftp): Minor fixes.
5176
5177 1996-10-06  Hrvoje Niksic  <hniksic@srce.hr>
5178
5179         * http.c: Do not use backups.
5180
5181         * geturl.1 (WARNING): Warn that man-page could be obsolete.
5182
5183         * getopt.c (getopt_long): Moved to getopt.c
5184
5185         * geturl.texi: Enhanced.
5186
5187         * main.c (main): Use it.
5188
5189         * recur.c (convert_all_links): New function.
5190
5191         * utils.c (add_slist): New argument flags.
5192
5193         * recur.c (recursive_retrieve): Update a list of downloaded URLs.
5194         (parse_robots): Do not chuck out empty value fields.
5195         (parse_robots): Make yourself welcome on empty Disallow.
5196
5197         * version.c: Changed version to 1.4b24.
5198
5199 1996-10-06  Hrvoje Niksic  <hniksic@srce.hr>
5200
5201         * version.c: "Released" 1.4b23.
5202
5203         * ftp.c (ftp_loop_internal): Get the time after getftp.
5204
5205         * Makefile.in (install.info): New target.
5206         (install): Use it.
5207
5208         * http.c (http_loop): Fix output when doing -O.
5209
5210 1996-10-05  Hrvoje Niksic  <hniksic@srce.hr>
5211
5212         * geturl.texi: New file.
5213
5214         * main.c (main): Do not print the warnings and download summary if
5215         opt.quiet is set.
5216
5217         * version.c: Changed version to 1.4b23.
5218
5219 1996-10-05  Hrvoje Niksic  <hniksic@srce.hr>
5220
5221         * "Released" 1.4b22.
5222
5223         * atotm.c (atotm): Use True and False instead of TRUE and FALSE,
5224         to avoid redefinition warnings.
5225
5226         * host.c (store_hostaddress): Use memcpy() to copy the address
5227         returned by inet_addr.
5228
5229         * version.c: Changed version to 1.4b22.
5230
5231 1996-10-04  Hrvoje Niksic  <hniksic@srce.hr>
5232
5233         * version.c: "Released" 1.4b21.
5234
5235         * ftp-unix.c (ftp_parse_ls): Renamed to ftp_parse_unix_ls.
5236
5237         * ftp.c (ftp_port): Use conaddr.
5238         (getftp): Print the file length.
5239         (ftp_retrieve_list): Check the stamps of plain files only.
5240
5241         * connect.c (closeport): Do not call shutdown().
5242         (conaddr): New function.
5243
5244         * html.c (ftp_index): Made it dfp-aware.
5245
5246         * init.c (cleanup): New name of freemem. Close opt.dfp.
5247
5248         * ftp.c (getftp): Use opt.dfp if it is set.
5249
5250         * ftp-unix.c (ftp_parse_ls): Recognize time in h:mm format.
5251
5252         * ftp.c (ftp_retrieve_dirs): Fixed a bug that caused incorrect
5253         CWDs to be sent with recursive FTP retrievals.
5254
5255 1996-10-03  Hrvoje Niksic  <hniksic@srce.hr>
5256
5257         * recur.c (parse_robots): Made it more compliant with "official"
5258         specifications.
5259
5260         * http.c: New function.
5261
5262         * ftp-unix.c (ftp_parse_ls): Added better debug output.
5263
5264         * ftp.c (getftp): Print out the LIST in case of
5265         opt.print_server_response.
5266
5267         * version.c: Changed version to 1.4b21.
5268
5269 1996-10-01  Hrvoje Niksic  <hniksic@srce.hr>
5270
5271         * version.c: "Released" 1.4b20.
5272
5273         * README: Update.
5274
5275         * http.c (gethttp): Preset lengths of various headers instead of
5276         calculating them dynamically.
5277         (gethttp): Check for 206 partial contents.
5278
5279 1996-09-30  Hrvoje Niksic  <hniksic@srce.hr>
5280
5281         * configure.in: Set SYSTEM_GETURLRC to $libdir/geturlrc
5282
5283         * http.c (gethttp): Send the port number in the Host: header.
5284
5285 1996-09-29  Hrvoje Niksic  <hniksic@srce.hr>
5286
5287         * http.c (gethttp): Send host: header.
5288         (gethttp): Add the possibility of user-defined headers.
5289         (gethttp): Move decision about pragma: no-cache to http_loop,
5290         where it belongs.
5291         (gethttp): Pass a struct instead of enormous argument list.
5292         (http_loop): Use a new, fancier display format.
5293         (ftp_loop): Likewise.
5294
5295         * main.c: (hangup): Turn off buffering of the new log file.
5296
5297         * install-sh: Likewise.
5298
5299         * config.sub: Replace with the one in autoconf-2.10
5300
5301         * geturl.1: Update.
5302
5303         * init.c: New options httpuser and httppasswd.
5304
5305         * http.c: (base64_encode_line): New function.
5306         (gethttp): Send authentication.
5307
5308         * connect.c (make_connection): Use store_hostaddress.
5309
5310 1996-09-28  Hrvoje Niksic  <hniksic@srce.hr>
5311
5312         * host.c (store_hostaddress): New function.
5313
5314         * NEWS: Update.
5315
5316         * http.c (hgetrange): New function.
5317         (gethttp): Use ranges.
5318
5319         * utils.c (numdigit): Accept long instead of int.
5320
5321         * http.c (http_loop): Add restart capabilities.
5322
5323         * ftp.c (ftp_retrieve_glob): Fixed a bug that could cause matchres
5324         being used uninitialized.
5325         (ftp_retrieve_list): Similar fix.
5326
5327         * host.c (add_hlist): Fixed a bug that could cause cmp being used
5328         uninitialized.
5329
5330         * url.c (construct_relative): New function.
5331
5332         * recur.c (recursive_retrieve): Use it.
5333
5334         * retr.c (convert_links): New function.
5335
5336 1996-09-27  Hrvoje Niksic  <hniksic@srce.hr>
5337
5338         * url.c (free_urlpos): New function.
5339
5340         * recur.c (recursive_retrieve): Adapt.
5341
5342         * url.c (get_urls_html): Return a linked list instead of a vector.
5343
5344         * url.c (get_urls_file): Return a linked list instead of a vector.
5345
5346         * geturl.1: Update.
5347
5348         * http.c (gethttp): Implement it.
5349
5350         * init.c (setval): New option: SAVEHEADERS
5351
5352         * ftp.c (ftp_loop_internal): Do not set restval if listing is to
5353         be retrieved. Lack of this test caused bugs when the connection
5354         was lost during listing.
5355
5356         * retr.c (retrieve_url): Fixed a bug that caused
5357         coredumps. *newloc is now reset by default.
5358         (retrieve_url): Lift the twenty-tries limit on proxies.
5359
5360         * version.c: Changed version to 1.4b20.
5361
5362 1996-09-20  Hrvoje Niksic  <hniksic@srce.hr>
5363
5364         * version.c: "Released" 1.4b19.
5365
5366 1996-09-19  Hrvoje Niksic  <hniksic@srce.hr>
5367
5368         * ftp.c (ftp_loop_internal): Renamed from ftp_1fl_loop.
5369         (getftp): Changed prototype to accept ccon *.
5370
5371 1996-09-17  Hrvoje Niksic  <hniksic@srce.hr>
5372
5373         * ftp.c (ftp_retrieve_list): Fixed a bug that caused setting
5374         incorrect values to files pointed to by symbolic links.
5375         (ftp_1fl_loop): Do not count listings among the downloaded URL-s.
5376
5377 1996-09-16  Hrvoje Niksic  <hniksic@srce.hr>
5378
5379         * url.c (mkstruct): Do not prepend "./" in front of a pathname.
5380
5381         * main.c (main): New option: --user-agent.
5382
5383         * geturl.1: Ditto.
5384
5385         * init.h: Ditto.
5386
5387         * init.c (setval): Ditto.
5388
5389         * main.c (main): Rename "server-headers" to "server-response".
5390
5391         * ftp-unix.c (ftp_parse_ls): Check for asterisks at the end of
5392         executables in 'ls -F' listings.
5393
5394 1996-09-15  Hrvoje Niksic  <hniksic@srce.hr>
5395
5396         * url.c (parseurl): Remove realloc() and sprintf().
5397         (str_url): Get rid of sprintf().
5398
5399         * recur.c (recursive_retrieve): Enable FTP recursion through proxy
5400         servers.
5401
5402         * url.h (URL_CLEANSE): Made it else-resistant.
5403         (USE_PROXY): New macro.
5404
5405 1996-09-14  Hrvoje Niksic  <hniksic@srce.hr>
5406
5407         * NEWS: Update.
5408
5409         * version.c: Changed version to 1.4b19.
5410
5411 1996-09-14  Hrvoje Niksic  <hniksic@srce.hr>
5412
5413         * version.c: "Released" 1.4b18.
5414
5415         * url.c: Made it reallocate space exponentially.
5416
5417 1996-09-14  Drazen Kacar  <dave@fly.cc.fer.hr>
5418
5419         * html.c (htmlfindurl): Added <frame src> and <iframe src> among
5420         the list of stuff to fetch.
5421
5422 1996-09-13  Hrvoje Niksic  <hniksic@srce.hr>
5423
5424         * url.c (get_urls_html): Fixed a bug that caused SIGSEGV's with
5425         -Fi.
5426
5427         * html.c (htmlfindurl): Rewrite.
5428
5429         * http.c (gethttp): Use opt.proxy_cache.
5430
5431         * main.c (main): Added --cache option.
5432
5433         * ftp.c (ftp_response): Print server response if opt.print_server
5434         response is set.
5435         (getftp): Print newlines after each request if the server response
5436         is to be printed.
5437         (ftp_response): Copy the last response line to last_respline.
5438
5439         * http.c (gethttp): Add Pragma: nocache for retried
5440         proxy-retrievals.
5441
5442         * ftp.c (getftp): Use it.
5443
5444         * retr.c (buf_discard): New function.
5445
5446         * ftp.c (ftp_response): Use buf_readchar().
5447         (getftp): Flush the control connection buffer before calling
5448         get_contents().
5449
5450         * retr.c (buf_readchar): New function.
5451         (buf_flush): New function.
5452         (get_contents): Use buf_readchar() instead of read(x, x, 1).
5453         (get_contents): Use buf_flush.
5454
5455 1996-09-12  Hrvoje Niksic  <hniksic@srce.hr>
5456
5457         * ftp.c: Incorporate changes to ftp_response.
5458
5459         * ftp.c (ftp_response): Allocate the server response dynamically,
5460         as in read_whole_line and fetch_next_header.
5461
5462         * utils.c (read_whole_line): Fixed a bug that prevented reading
5463         the last line if it is not \n-terminated. Also fixed a possible
5464         memory overflow.
5465
5466         * http.c (fetch_next_header): Return malloc-ed string as large as
5467         needed.
5468         (gethttp): Use new fetch_next_header.
5469
5470 1996-09-12  Hrvoje Niksic  <hniksic@srce.hr>
5471
5472         * http.c (hgetlen): Compute the header length the first time only.
5473         (hgettype): Ditto.
5474         (hgetlocation): Ditto.
5475         (hgetmodified): Ditto.
5476
5477 1996-09-11  Hrvoje Niksic  <hniksic@srce.hr>
5478
5479         * sample.geturlrc: Update.
5480
5481 1996-09-10  Hrvoje Niksic  <hniksic@srce.hr>
5482
5483         * http.c (http_loop): Ditto.
5484
5485         * ftp.c (getftp): Open the output file as binary.
5486
5487         * version.c: Changed version to 1.4b18.
5488
5489 1996-09-10  Hrvoje Niksic  <hniksic@srce.hr>
5490
5491         * version.c: "Released" 1.4b17.
5492
5493         * ftp-unix.c (ftp_parse_ls): If unable to open file, return NULL
5494         instead of failed assertion.
5495
5496 1996-09-09  Hrvoje Niksic  <hniksic@srce.hr>
5497
5498         * ftp.c (ftp_get_listing): Add a numbered suffix to LIST_FILENAME
5499         if a file of that name already exists.
5500
5501 1996-09-05  Hrvoje Niksic  <hniksic@srce.hr>
5502
5503         * ftp.c (ftp_1fl_loop): Handler FTPPORTERR and FOPENERR correctly.
5504
5505         * config.h.in: Define gethostbyname as Rgethostbyname when using
5506         Socks.
5507
5508         * configure.in: Check for -lresolv if using Socks.
5509
5510         * version.c: Changed version to 1.4b17.
5511
5512 1996-07-15  Hrvoje Niksic  <hniksic@srce.hr>
5513
5514         * version.c: "Released" 1.4b16.
5515
5516         * http.c (gethttp): More intelligent check for first line of HTTP
5517         response.
5518         (gethttp): Would bug out on time-stamping.
5519
5520         * version.c: Changed version to 1.4b16.
5521
5522 1996-07-11  Hrvoje Niksic  <hniksic@srce.hr>
5523
5524         * version.c: Released 1.4b15.
5525
5526         * http.c (http_loop): Print \n after the loop entry, not before.
5527
5528         * url.c (url_filename): Use ISDOT.
5529
5530         * url.h (ISDOT): New macro.
5531
5532         * recur.c (recursive_retrieve): Change only opt.recursive for
5533         following FTP.
5534
5535 1996-07-11  Antonio Rosella <antonio.rosella@agip.it>
5536
5537         * socks/geturl.cgi: Fixed version No.
5538
5539         * socks/download-netscape.html: Ditto.
5540
5541         * socks/download.html: Changed socks.html to download.html.
5542
5543 1996-07-11  Hrvoje Niksic  <hniksic@srce.hr>
5544
5545         * url.c (url_filename): Check for opt.dirstruct instead for
5546         opt.recursive && opt.dirstruct.
5547
5548         * init.c (defaults): Ditto.
5549         (defaults): Reset dirstruct by default.
5550         (setval): Set opt.dirstruct whenever setting recursive.
5551
5552         * init.h: Removed FORCEDIRHIER.
5553
5554         * INSTALL: Added -L to socks-description.
5555
5556         * version.c: Changed version to 1.4b15.
5557
5558 1996-07-10  Hrvoje Niksic  <hniksic@srce.hr>
5559
5560         * version.c: "Released" 1.4b14.
5561
5562         * geturl.1: Update AUTHOR to include Rosella as contributor.
5563
5564         * NEWS: Update.
5565
5566         * socks/geturl.cgi: Simplified command creation, nuked <blink>.
5567
5568         * socks/geturl.cgi: Wrap nutscape extensions within if $netscape.
5569         (cal_time): Fix == to eq.
5570
5571         * socks/geturl.cgi: GPL-ized with permission of A. Rosella.
5572
5573         * geturl.1 (hostname): Moved URL CONVENTIONS to the beginning.
5574
5575         * Makefile.in: Use @VERSION@.
5576
5577         * configure.in: Check version from version.c.
5578
5579         * socks/geturl.cgi: Changed /pub/bin/perl to /usr/bin/perl.
5580
5581         * socks/download.html: Created from download-netscape.html, made
5582         HTML-2.0 compliant.
5583
5584         * recur.c (recursive_retrieve): Set opt.force_dir_hier when
5585         following FTP links from recursions.
5586
5587 1996-07-09  Hrvoje Niksic  <hniksic@srce.hr>
5588
5589         * url.c (mymkdir): Fixed a bug that prevented mymkdir() to create
5590         absolute directories correctly.
5591
5592         * version.c: Changed version to 1.4b14.
5593
5594 1996-07-09  Hrvoje Niksic  <hniksic@srce.hr>
5595
5596         * version.c: "Released" 1.4b13.
5597
5598         * url.c (make_backup): New function.
5599
5600         * http.c (http_loop): Make a backup copy of the local file (using
5601         rename(2)) before opening it.
5602
5603         * main.c (main): Added --backups.
5604
5605         * host.c (ftp_getaddress): Bail out on failed mycuserid().
5606         (ftp_getaddress): Check for leading dot on MY_DOMAIN.
5607         (ftp_getaddress): Check for empty, null or (null) domain.
5608
5609         * url.c (get_urls_html): If this_url is NULL, the base must have a
5610         protocol.
5611         (parseurl): Use has_proto.
5612
5613         * retr.c (retrieve_url): Warn when proxy is used with more than 20
5614         retries.
5615
5616         * url.c (mkstruct): Create the directory (calling mymkdir()) only
5617         if it is not already there.
5618         (has_proto): New function.
5619         (get_urls_html): Eliminate the remaining call to findurl -- use
5620         has_proto.
5621
5622         * geturl.1: Ditto.
5623
5624         * main.c: Change -X to -x.
5625
5626         * url.c (url_filename): Simplify creation of filename if
5627         prefix_files is set.
5628         (url_filename): Simplify everything. And I do mean *everything*.
5629         (mkstruct): Add dir_prefix before hostname.
5630         (path_simplify): Fixed a bug that caused writing outside the path
5631         string in case of "." and ".." path strings.
5632
5633 1996-07-06  Hrvoje Niksic  <hniksic@srce.hr>
5634
5635         * init.c: Added --mirror.
5636
5637         * main.c (main): Added -X to force saving of directory hierarchy.
5638
5639         * ftp.c (ftp_retrieve_list): Added recursion depth counter.
5640         (ftp_retrieve_list): Check whether quota is exceeded.
5641
5642         * url.c (get_urls_html): Skip leading blanks for absolute URIs.
5643
5644         * http.c (gethttp): Use referer if present.
5645
5646         * recur.c (recursive_retrieve): Set u->referer before calling
5647         retrieve_url.
5648
5649         * url.c (newurl): Use memset to nullify the struct members.
5650         (freeurl): Free the referer field too.
5651
5652         * url.h: Added referer to urlinfo.
5653
5654         * geturl.1: Updated the manual to document some of the new features.
5655
5656         * utils.c (numdigit): Moved from url.c.
5657
5658         * README: Rewritten.
5659
5660         * config.h.in: Add the support for socks.
5661
5662         * configure.in: Add the support for socks.
5663
5664         * url.c (url_filename): If the dir_prefix is ".", work with just
5665         the file name.
5666         (url_filename): Do not look for .n extensions if timestamping if
5667         turned on.
5668
5669         * retr.c (show_progress): Skip the over-abundant restval data, and
5670         print the rest of it with ',' instead of '.'.
5671
5672 1996-07-05  Hrvoje Niksic  <hniksic@srce.hr>
5673
5674         * retr.c (show_progress): Changed second arg. to long (as it
5675         should be).
5676         (show_progress): Moved to retr.c.
5677         (get_contents): Moved to retr.c.
5678
5679         * version.c: Change version to 1.4b13.
5680
5681 1996-07-05  Hrvoje Lacko <hlacko@fly.cc.fer.hr>
5682
5683         * url.c (in_acclist): Would return after the first suffix.
5684
5685 1996-07-04  Hrvoje Niksic  <hniksic@srce.hr>
5686
5687         * version.c: "Released" 1.4b12.
5688
5689         * url.c (path_simplify): More kludgifications.
5690         (get_urls_html): Use new parameters for htmlfindurl.
5691
5692         * html.c: Removed memorizing "parser states", since the new
5693         organization does not require them.
5694
5695         * init.c (run_geturlrc): Use read_whole_line.
5696
5697         * ftp-unix.c (ftp_parse_ls): Use read_whole_line.
5698
5699         * recur.c (parse_robots): Use read_whole_line.
5700
5701         * utils.c (read_whole_line): New function.
5702
5703         * recur.c (tried_robots): Use add_slist/in_slist, *much* cleaner.
5704
5705         * host.c (ngethostbyname): Call inet_addr just once. Yet to be
5706         tested on OSF and Ultrix.
5707         (add_hlist): New function.
5708         (free_hlist): New function.
5709         (search_host): New function.
5710         (search_address): New function.
5711         (realhost): Use search_host, search_address and add_hlist.
5712         (same_host): Replaced realloc() with strdupdelim(), made
5713         case-insensitive, fixed a memory leak.
5714
5715         * html.c (ftp_index): Fixed tm_min and tm_sec to be tm_hour and
5716         tm_min, like intended.
5717
5718         * version.c: Change user agent information to
5719         Geturl/version.
5720
5721 1996-07-03  Hrvoje Niksic  <hniksic@srce.hr>
5722
5723         * utils.c: Renamed nmalloc.c to utils.c, .h likewise.
5724
5725         * url.c (acceptable): Always accept directories.
5726
5727         * ftp-unix.c (ftp_parse_ls): Support brain-damaged "ls -F"-loving
5728         servers by stripping trailing @ from symlinks and trailing / from
5729         directories.
5730
5731         * ftp.c (ftp_loop): Debugged the "enhanced" heuristics. :-)
5732
5733         * url.c (skip_url): Use toupper instead of UCASE.
5734
5735         * host.c (sufmatch): Made it case-insensitive.
5736
5737         * url.c (match_backwards_or_pattern): Fixed i == -1 to j == -1.
5738         (match_backwards): New function, instead of
5739         match_backwards_or_pattern.
5740
5741         * recur.c (recursive_retrieve): Increased performance by
5742         introducing inl, which reduces number of calls to in_slist to only
5743         one.
5744
5745         * ftp.c (ftp_loop): Enhanced the heuristics that decides which
5746         routine to use.
5747
5748         * main.c (printhelp): Removed the warranty stuff.
5749
5750 1996-07-02  Hrvoje Niksic  <hniksic@srce.hr>
5751
5752         * url.c (add_slist): Simplify.
5753         (match_backwards_or_pattern): New function.
5754         (in_acclist): Use match_backwards_or_pattern.
5755         (matches): Remove.
5756
5757 1996-06-30  Hrvoje Niksic  <hniksic@srce.hr>
5758
5759         * ftp.c (ftp_loop): Call ftp_index on empty file names, if not
5760         recursive.
5761
5762         * html.c (ftp_index): Fixed to work. Beautified the output.
5763
5764         * ftp.c (ftp_retrieve_glob): Another argument to control whether
5765         globbing is to be used.
5766         (ftp_retrieve_list): Compare the time-stamps of local and remote
5767         files to determine whether to download.
5768
5769 1996-06-29  Hrvoje Niksic  <hniksic@srce.hr>
5770
5771         * ftp.c (rel_constr): New function.
5772
5773         * retr.c (retrieve_from_file): Check for text/html before
5774         retrieving recursively.
5775
5776         * main.c (main): Check whether the file is HTML before going into
5777         recursive HTML retrieving.
5778
5779         * ftp.c (ftp_retrieve_list): Manage directories.
5780         (ftp_retrieve_glob): Pass all the file-types to ftp_retrieve_list.
5781         (ftp_1fl_loop): Fixed a bug that caused con->com to be incorrectly
5782         initialized, causing bugchecks in getftp to fail.
5783
5784         * configure.in: Check for symlink.
5785
5786         * ftp.c (ftp_retrieve_list): Added support for symlinks.
5787
5788         * version.c: "Released" 1.4b10.
5789
5790         * atotm.c (atotm): Redeclared as time_t.
5791
5792         * init.c: New variable "timestamping".
5793
5794         * main.c (main): New option 'N'.
5795
5796         * http.c (hgetlocation): Case-insensitive match.
5797         (hgetmodified): New function.
5798         (http_loop): Implement time-stamping.
5799
5800 1996-06-28  Hrvoje Niksic  <hniksic@srce.hr>
5801
5802         * version.c: Changed version to 1.4b10
5803
5804         * atotm.c: New file, from phttpd.
5805
5806         * options.h (struct options): New parameter timestamping.
5807
5808         * version.c: 1.4b9 "released".
5809
5810         * recur.c (recursive_retrieve): Used linked list (ulist) for
5811         faster storing of URLs.
5812
5813         * url.c (get_urls_html): Removed the old kludge with comparing the
5814         outputs of htmlfindurl and findurl.
5815         (get_urls_html): Added better protocol support here.
5816         (create_hash): Removed, as well as add_hash and in_hash.
5817         (addslist): New function.
5818         (in_slist): ditto
5819
5820         * version.c: Released 1.4b8, changed version to b9.
5821
5822 1996-06-27  Hrvoje Niksic  <hniksic@srce.hr>
5823
5824         * ftp.c (freefileinfo): New function.
5825         (delelement): New function.
5826
5827         * everywhere: GPL!
5828
5829         * ftp.c (ftp_loop): Use ccon.
5830         (ftp_retrieve_glob): Likewise.
5831
5832         * ftp.h: Define ccon, to define status of control connection.
5833
5834         * ftp.c (ftp_get_listing): New function.
5835         (ftp_retrieve_more): New function.
5836         (ftp_retrieve_glob): New function.
5837
5838 1996-06-25  Hrvoje Niksic  <hniksic@srce.hr>
5839
5840         * configure.in: Removed the search for cuserid().
5841
5842         * init.c (getmode): Renamed to getperms.
5843
5844 1996-06-24  Hrvoje Niksic  <hniksic@srce.hr>
5845
5846         * version.c: New version.
5847
5848         * main.c (hangup): New function, that handles hangup. Hangup
5849         signal now causes geturl to stop writing on stdout, and to write
5850         to a log file.
5851
5852         * ftp.c (getftp): "Released" 1.4b7.
5853
5854         * html.c (htmlfindurl): Ignore everything inside <head>...</head>.
5855         (ftp_index): Use fileinfo/urlinfo.
5856
5857         * ftp-unix.c (ftp_parse_ls): New function.
5858         (symperms): New function.
5859
5860         * ftp.c (ftp_1fl_loop): New function, to handle 1-file loops.
5861
5862         * retr.c (retrieve_url): Added FTP support.
5863
5864 1996-06-23  Hrvoje Niksic  <hniksic@srce.hr>
5865
5866         * geturl.h: Removed NOTFTP2HTML enum.
5867         Added DO_LOGIN, DO_CWD and DO_LIST. LIST_ONLY is obsolete.
5868
5869         * ftp.c (getftp): Resynched with urlinfo.
5870         (getftp): Removed HMTL-ization of index.html from getftp.
5871
5872         * version.c: 1.4b6 "released".
5873
5874         * options.h (options): New struct, to keep options in.
5875
5876         * http.c (http_loop,gethttp): Synched with proxy.
5877
5878         * retr.c (retrieve_url): Implemented proxy retrieval.
5879
5880         * main.c (main): Use retrieve_from_file.
5881
5882 1996-06-22  Hrvoje Niksic  <hniksic@srce.hr>
5883
5884         * retr.c (retrieve_from_file): New function.
5885
5886         * url.c (parseurl): Modified to return URLOK if all OK. Protocol
5887         can be found in u->proto.
5888
5889         * ftp.c (ftp_response): Fixed to accept multi-line responses as
5890         per RFC 959.
5891
5892         * recr.c (recursive_retrieve): Take newloc from retrieve_url.
5893
5894         * url.c (mymkdir): Removed the file of the same name, if one
5895         exists.
5896         (isfile): New function.
5897         (mkstruct): Fixed the '/' glitches.
5898         (path_simplify): Hacked to treat something/.. correctly.
5899
5900 1996-06-21  Hrvoje Niksic  <hniksic@srce.hr>
5901
5902         * http.c (gethttp): Close the socket after error in headers.
5903         (http_loop): HEOF no longer a fatal header.
5904
5905         * loop.c (retrieve_url): When dt is NULL, do not modify it. This
5906         simplifies the syntax of calling retrieve_url.
5907
5908         * recr.c (recursive_retrieve): Modified to use get_urls_html.
5909
5910         * url.c (get_urls_file): New function.
5911         (get_urls_html): New function.
5912
5913         * recr.c (recursive_retrieve): Patched up to conform to the
5914         standards.
5915
5916         * http.c (gethttp): Synched with the rest...
5917         (gethttp): Treat only CONREFUSED specially, with connection
5918         errors.
5919
5920         * init.c,geturl.1,http.c (http_loop): Removed kill_error.
5921
5922 1996-06-20  Hrvoje Niksic  <hniksic@srce.hr>
5923
5924         * http.c (http_loop): New function.
5925
5926         * loop.c: Removed *lots* of stuff from retrieve_url.
5927
5928         * url.c (parseurl): Changed to work with urlinfo. Integrated
5929         username finding and path parsing.
5930         (newurl): New function.
5931         (freeurl): New function.
5932         (mkstruct): Removed the old bogosities, made it urlinfo-compliant.
5933         (url_filename): Likewise.
5934         (path_simplify): Accept relative paths too.
5935         (opt_url): Made urlinfo-compliant, removed bogosities.
5936         (path_simplify): Expanded to accept relative paths.
5937         (str_url): A replacement for hide_url
5938         (decode_string): Fixed a bug that caused malfunctioning when
5939         encountering an illegal %.. combination.
5940         (opt_url): Removed the argument. Dot-optimizations are now default.
5941
5942         * nmalloc.c (strdupdelim): New function.
5943
5944         * url.h: Added the urlinfo structure
5945
5946 1996-06-19  Hrvoje Niksic  <hniksic@srce.hr>
5947
5948         * url.c (hide_url): Thrown out the protocol assertion. Do not
5949         change the URL if the protocol if not recognized.
5950         (findurl): Put continue instead of break.
5951
5952 1996-06-18  Hrvoje Niksic  <hniksic@srce.hr>
5953
5954         * sample.geturlrc: Changed the defaults to be commented out and
5955         harmless (previous defaults caused pains if copied to
5956         ~/.geturlrc).
5957
5958         * http.c (gethttp): Print the HTTP request in debug mode.
5959
5960         * connect.c (iread): Added EINTR check loop to select-ing
5961         too. EINTR is now correctly handled with select().
5962
5963         * TODO: new file
5964
5965 1996-05-07  Hrvoje Niksic  <hniksic@srce.hr>
5966
5967         * host.c (same_host): Made the function a little bit more
5968         intelligent regarding diversified URL syntaxes.
5969
5970         * url.c (skip_url): Spaces are now skipped after URL:
5971
5972         * Released 1.3.1 with the patch to prevent crashing when sending
5973         NULL to robot* functions and the patch to compile "out of the box"
5974         on AIX.
5975
5976         * recr.c (recursive_retrieve): Added checking whether this_url is
5977         NULL when calling the robot functions.
5978
5979         * ChangeLog: New file.