sjero.net Git - wget/blob - src/ChangeLog

   1 2003-11-20  Hrvoje Niksic  <hniksic@xemacs.org>
   2
   3         * connect.c (sock_write): It's not necessary to initialize RES.
   4
   5 2003-11-19  Hrvoje Niksic  <hniksic@xemacs.org>
   6
   7         * main.c (main): Don't reference opt.ipv4_only and opt.ipv6_only
   8         if IPv6 is disabled.
   9
  10 2003-11-19  Hrvoje Niksic  <hniksic@xemacs.org>
  11
  12         * connect.c (socket_has_inet6): Only compile it if IPv6 is enabled
  13         and AI_ADDRCONFIG is missing.
  14
  15 2003-11-18  Hrvoje Niksic  <hniksic@xemacs.org>
  16
  17         * gen_sslfunc.c (ssl_init_prng): Warn the user when using a weak
  18         random seed.
  19
  20 2003-11-18  Hrvoje Niksic  <hniksic@xemacs.org>
  21
  22         * host.c (address_list_contains): Renamed address_list_find to
  23         address_list_contains because its result is boolean.
  24
  25 2003-11-18  Hrvoje Niksic  <hniksic@xemacs.org>
  26
  27         * connect.c (select_fd): Return 1 if select is not available.
  28
  29 2003-11-17  Hrvoje Niksic  <hniksic@xemacs.org>
  30
  31         * connect.c (connect_to_host): Don't reference address list after
  32         releasing it.
  33
  34 2003-11-17  Hrvoje Niksic  <hniksic@xemacs.org>
  35
  36         * main.c (print_help): Fix alignment of FTP options output.
  37
  38 2003-11-17  Hrvoje Niksic  <hniksic@xemacs.org>
  39
  40         * host.c (lookup_host): Check for the ability to create IPv6
  41         sockets here.
  42
  43         * init.c (defaults): Don't auto-set --inet4-only on IPv6-less
  44         systems.
  45
  46 2003-11-16  Hrvoje Niksic  <hniksic@xemacs.org>
  47
  48         * main.c (print_help): Fix typo in `-O' help message.  Fix docs of
  49         -Y/--proxy.  Fix docs of `--cookies' and `--glob'.  Improve docs
  50         of --convert-links.  Fix docs of SSL options.
  51
  52 2003-11-16  Hrvoje Niksic  <hniksic@xemacs.org>
  53
  54         * ftp-basic.c: Don't include <arpa/inet.h> and others because
  55         they're no longer needed.
  56
  57 2003-11-16  Hrvoje Niksic  <hniksic@xemacs.org>
  58
  59         * main.c (main): Don't allow setting of both opt.ipv4_only and
  60         opt.ipv6_only.
  61
  62         * init.c (defaults): Mark opt.ipv4_only specially when set
  63         automatically.
  64
  65 2003-11-15  Hrvoje Niksic  <hniksic@xemacs.org>
  66
  67         * host.c (lookup_host): Use AI_ADDRCONFIG only if the family is
  68         unspecified.  This ensures that specifying `--no-inet4' on systems
  69         where IPv6 resolves, but doesn't work behaves the same regardless
  70         of the availability of AI_ADDRCONFIG.
  71
  72 2003-11-15  Hrvoje Niksic  <hniksic@xemacs.org>
  73
  74         * host.c: Don't refer to the now-removed function
  75         forget_host_lookup in the documentation of lookup_host.
  76
  77 2003-11-15  Hrvoje Niksic  <hniksic@xemacs.org>
  78
  79         * http.c (persistent_available_p): Correctly specify the endpoint
  80         argument to socket_ip_address.
  81         (gethttp): When printing the "reusing connection to..." message,
  82         specify the host name of the reused connection, not the current
  83         host name.  That makes more sense because it provides a useful
  84         piece of information -- we know to which host we're supposed to
  85         connect anyway!
  86
  87 2003-11-15  Hrvoje Niksic  <hniksic@xemacs.org>
  88
  89         * init.c: Make sure the options are in alphabetic order!
  90
  91         * host.c (lookup_host): Merge lookup_host_passive and lookup_host
  92         after all -- having both would result in some code duplication.
  93         (lookup_host): Set hints.ai_family to AF_INET if ipv4_only is
  94         requested.  Likewise, set it to AF_INET6 for ipv6_only.  Specify
  95         AI_ADDRCONFIG where available.
  96         (lookup_host): New flag LH_REFRESH that specifies that a cached
  97         entry for HOST should be refreshed.
  98         (cache_query): New function.
  99         (cache_store): Ditto.
 100         (cache_remove): Ditto.
 101         (forget_host_lookup): No longer necessary, replaced with static
 102         function cache_remove.
 103
 104 2003-11-14  Hrvoje Niksic  <hniksic@xemacs.org>
 105
 106         * main.c: Enable -4 and -6 only if IPv6 is enabled.
 107
 108 2003-11-14  Hrvoje Niksic  <hniksic@xemacs.org>
 109
 110         * connect.c (register_transport): Renamed from register_extended.
 111         Explain the intended usage.
 112
 113 2003-11-14  Hrvoje Niksic  <hniksic@xemacs.org>
 114
 115         * url.c (uri_merge): Merging "foo" and "bar" should result in
 116         "bar", not in "foo/bar".
 117         (path_simplify): Don't remove empty path elements; don't
 118         special-case leading slash.
 119         (path_simplify): Don't swallow ".."'s at the beginning of string.
 120         E.g. simplify "foo/../../bar" as "../bar", not as "bar".
 121         (append_uri_pathel): Defang ".." path element upon encountering
 122         it.
 123
 124 2003-11-13  Hrvoje Niksic  <hniksic@xemacs.org>
 125
 126         * http.c (persistent_available_p): Don't attempt to talk to two
 127         different SSL sites over the same secure connection.
 128
 129 2003-11-13  Hrvoje Niksic  <hniksic@xemacs.org>
 130
 131         * http.c (gethttp): Ditto.
 132
 133         * ftp.c (getftp): Use retryable_socket_connect_error instead of
 134         CONNECT_ERROR.
 135
 136         * wget.h (CONNECT_ERROR): Removed.
 137
 138         * connect.c (retryable_socket_connect_error): New function instead
 139         of unsupported_socket_family_error.
 140
 141 2003-11-13  Hrvoje Niksic  <hniksic@xemacs.org>
 142
 143         * wget.h (CONNECT_ERROR): Use it.
 144
 145         * connect.c (unsupported_socket_family_error): New function.
 146
 147 2003-11-13  Hrvoje Niksic  <hniksic@xemacs.org>
 148
 149         * connect.c (bind_local): Renamed bindport to bind_local; return
 150         the socket directly.  Updated callers.
 151         (accept_connection): Renamed acceptport to accept_connection;
 152         return the created socket directly.  Updated callers.
 153
 154 2003-11-13  Hrvoje Niksic  <hniksic@xemacs.org>
 155
 156         * init.c (defaults): Turn on opt.ipv4_only if we're compiling with
 157         IPv6, and AI_ADDRINFO is not available, and AF_INET6 sockets can't
 158         be created.
 159
 160 2003-11-13  Hrvoje Niksic  <hniksic@xemacs.org>
 161
 162         * host.c (lookup_host): Document the fact that the addresses are
 163         returned in order.
 164
 165 2003-11-12  Hrvoje Niksic  <hniksic@xemacs.org>
 166
 167         * utils.c: Use limits.h only where available.
 168
 169         * hash.c: Use INVALID_PTR and INVALID_PTR_BYTE.  Include limits.h.
 170
 171 2003-11-11  Hrvoje Niksic  <hniksic@xemacs.org>
 172
 173         * main.c: Added options --inet4-only and --inet6-only.
 174
 175 2003-11-11  Hrvoje Niksic  <hniksic@xemacs.org>
 176
 177         * host.c (host_errstr): Use the more standard message "Unknown
 178         host".
 179
 180 2003-11-10  Hrvoje Niksic  <hniksic@xemacs.org>
 181
 182         * connect.c (connect_to_host): Use that flag to decide whether to
 183         re-resolve the host name.
 184
 185         * host.c (struct address_list): Added a flag that maintains
 186         whether the connection worked at some point.
 187
 188 2003-11-10  Hrvoje Niksic  <hniksic@xemacs.org>
 189
 190         * host.c (lookup_host): Special-case the numeric addresses only in
 191         the non-IPv6 case.
 192
 193 2003-11-10  Hrvoje Niksic  <hniksic@xemacs.org>
 194
 195         * connect.c (resolve_bind_address): Call lookup_host_passive.
 196         Make sure that opt.bind_address is resolved only once.
 197
 198         * host.c (lookup_host_passive): New function, handles "passive"
 199         lookups.
 200         (lookup_host): Remove the passive flags.  Remove the
 201         family-related flags -- use ip_default_family instead.
 202
 203 2003-11-09  Hrvoje Niksic  <hniksic@xemacs.org>
 204
 205         * html-url.c: Get URLs from <object data="...">.
 206
 207 2003-11-09  Hrvoje Niksic  <hniksic@xemacs.org>
 208
 209         * main.c (option_data): Specify the command to use for --mirror.
 210
 211 2003-11-08  Hrvoje Niksic  <hniksic@xemacs.org>
 212
 213         * cookies.c (cookie_handle_set_cookie): Specify exact match for
 214         unspecified domains.
 215
 216 2003-11-08  Hrvoje Niksic  <hniksic@xemacs.org>
 217
 218         * main.c (main): Removed one-letter options `-C', `-g', `-G', and
 219         `-s'.
 220
 221 2003-11-08  Hrvoje Niksic  <hniksic@xemacs.org>
 222
 223         * main.c (main): Add --dont-remove-listing for backward
 224         compatibility with previous versions.
 225         (print_help): Fix typo, spotted by Dennis Smit.
 226
 227 2003-11-08  Gisle Vanem  <giva@bgnett.no>
 228
 229         * ftp-basic.c: Support Windows-2000 ftp servers. Win-2000 *is*
 230         Win-NT 5.0 so calling it ST_WINNT is okay I guess.
 231
 232 2003-11-08  Hrvoje Niksic  <hniksic@xemacs.org>
 233
 234         * progress.c (update_speed_ring): Clear the speed ring when the
 235         download stalls.
 236
 237         * retr.c (get_contents): Specify 0.95s read timeout, so that the
 238         progress gauge can be updated even when data arrives very slowly
 239         or stalls.
 240
 241 2003-11-08  Hrvoje Niksic  <hniksic@xemacs.org>
 242
 243         * utils.c (wtimer_allocate): Bless the use of wtimer_read on a
 244         timer that has merely been allocated because get_contents() does
 245         that.
 246         (wtimer_update): Abort if the timer is not initialized.
 247
 248 2003-11-08  Hrvoje Niksic  <hniksic@xemacs.org>
 249
 250         * retr.c (get_contents): Pass the timer to limit_bandwidth().
 251
 252         * utils.c (wtimer_update): New function instead of wget_elapsed;
 253         just update the timer, but don't return anything.
 254         (wtimer_read): Read and return the last known value of the timer.
 255
 256 2003-11-08  Hrvoje Niksic  <hniksic@xemacs.org>
 257
 258         * http.c (persistent_available_p): Instead of matching all the
 259         addresses of HOST and last host, determine the peer's IP address
 260         with socket_ip_address and see if that address is one of those
 261         HOST resolves to.
 262
 263         * host.c (address_list_match_all): Removed.
 264         (address_list_find): New function, finds an IP address in the
 265         address list.
 266
 267         * ftp.c (ftp_do_pasv): Get the peer's address here, and pass it to
 268         ftp_epsv so it doesn't need to call getpeername.
 269
 270         * ftp-basic.c (ftp_port): Use socket_ip_address instead of
 271         getpeername.
 272         (ftp_lprt): Ditto.
 273
 274         * connect.c (socket_ip_address): Replaces conaddr, generalized to
 275         either get peer's or local address.
 276         (sockaddr_get_data): Made local to this file.
 277
 278 2003-11-08  Hrvoje Niksic  <hniksic@xemacs.org>
 279
 280         * hash.c (HASH_POSITION): Explicitly accept the hash function.
 281         (grow_hash_table): Extract ht->hash_function outside the loop.
 282         (hash_table_remove): Ditto.
 283         (hash_table_clear): Fill entries with 0xff to clear them.
 284         (hash_table_remove): Mark entries as deleted with the correct
 285         marker.
 286
 287 2003-11-08  Hrvoje Niksic  <hniksic@xemacs.org>
 288
 289         * http.c (persistent_available_p): No reason for the host lookup
 290         to be silent -- it's a lookup like any other.
 291
 292 2003-11-08  Hrvoje Niksic  <hniksic@xemacs.org>
 293
 294         * connect.c (register_extended): Check that fd >= 0.
 295
 296 2003-11-07  Hrvoje Niksic  <hniksic@xemacs.org>
 297
 298         * connect.c (LAZY_RETRIEVE_INFO): Set LAST_INFO.
 299
 300 2003-11-07  Hrvoje Niksic  <hniksic@xemacs.org>
 301
 302         * hash.c (NON_EMPTY): Use the all-bit-set value as the marker that
 303         the field is empty.  This allows NULL pointer and 0 value to be
 304         used as keys, which is necessary for the connect.c code to work
 305         when fd==0.
 306         (hash_table_new): Fill mappings with 0xff.
 307         (grow_hash_table): Ditto.
 308
 309 2003-11-07  Hrvoje Niksic  <hniksic@xemacs.org>
 310
 311         * url.c (url_parse): Allow empty ports.
 312
 313 2003-11-07  Hrvoje Niksic  <hniksic@xemacs.org>
 314
 315         * main.c (print_help): Break the help string into multiple chunks.
 316         (cmdline_option): New option handler OPT_FUNCALL.  Generalized
 317         HANDLE_CMD to generic DATA.
 318         (option_data): Use the new OPT_FUNCALL feature.
 319
 320 2003-11-06  Hrvoje Niksic  <hniksic@xemacs.org>
 321
 322         * log.h: Declare log_init, log_close, and
 323         log_request_redirect_output here.
 324
 325 2003-11-05  Dennis Smit  <ds@nerds-incorporated.org>
 326
 327         * main.c: (main): added --preserve-permissions option.
 328
 329         * ftp.c (ftp_retrieve_list): added support for
 330         --preserve-permissions option.
 331
 332         * init.c: added support for --preserve-permission option.
 333
 334         * option.h: added support for --preserve-permission option.
 335
 336 2003-11-06  Hrvoje Niksic  <hniksic@xemacs.org>
 337
 338         * main.c (init_switches): New function.  Convert option_data to
 339         long_options and short_options, which can be fed to getopt_long.
 340         (main): Execute command-line options by consulting option_data.
 341
 342 2003-11-06  Hrvoje Niksic  <hniksic@xemacs.org>
 343
 344         * gen_sslfunc.c (ssl_read): Implement a more correct check for
 345         EINTR.
 346         (ssl_write): Ditto.
 347         (init_ssl): Use a global SSL context.
 348
 349 2003-11-06  Hrvoje Niksic  <hniksic@xemacs.org>
 350
 351         * connect.c (xclose): Free INFO even if it doesn't provide a
 352         closer.
 353
 354 2003-11-06  Hrvoje Niksic  <hniksic@xemacs.org>
 355
 356         * connect.c: Updated all callers of
 357         iread/ssl_iread/iwrite/ssl_iwrite to use xread and xwrite instead.
 358
 359         * rbuf.h (struct rbuf): Removed the SSL member because SSL is
 360         handled automatically by xread.
 361
 362         * hash.c (ptrhash): Made private.
 363         (ptrcmp): Ditto.
 364         (inthash): Removed.
 365
 366         * connect.c (select_fd): Don't set errno, leave it to the caller.
 367
 368         * gen_sslfunc.c (connect_ssl): Use register_extended to register
 369         SSL callbacks for communication with SSL-enabled endpoints.
 370         (ssl_read): New function.
 371         (ssl_write): Ditto.
 372         (ssl_poll): Ditto.
 373         (ssl_close): Ditto.
 374
 375         * connect.c (register_extended): New function -- register
 376         callbacks for basic socket operations.
 377         (xread): Ditto.
 378         (xwrite): Ditto.
 379         (xclose): Ditto.
 380         (sock_read): New function, default implementation for reading.
 381         (sock_write): Ditto for writing.
 382         (sock_poll): Ditto for polling.
 383         (sock_close): Ditto for closing.
 384
 385 2003-11-05  Hrvoje Niksic  <hniksic@xemacs.org>
 386
 387         * connect.c (bindport): Fix compilation under pre-C99 compilers.
 388
 389 2003-11-05  Hrvoje Niksic  <hniksic@xemacs.org>
 390
 391         * connect.c (connect_to_ip): More compact error checking.
 392         (bindport): Don't treat failed setsockopt as a fatal error.
 393
 394 2003-11-05  Hrvoje Niksic  <hniksic@xemacs.org>
 395
 396         * connect.c (resolve_bind_address): Use a more accurate error
 397         message -- we're not binding to ANY, we're disabling bind
 398         altogether.
 399
 400 2003-11-05  Hrvoje Niksic  <hniksic@xemacs.org>
 401
 402         * cookies.c (save_cookies_mapper): Respect the setting of
 403         keep-session-cookies.
 404         (cookie_jar_load): Import session cookies.
 405         Based on code submitted by Nicolas Schodet.
 406
 407         * utils.c (datetime_str): Use information in TM when it's
 408         non-NULL.
 409
 410         * main.c (main): New option `--keep-session-cookies'.
 411
 412 2003-11-04  Hrvoje Niksic  <hniksic@xemacs.org>
 413
 414         * Makefile.in (realclean): Delete config.h.in.
 415
 416 2003-11-04  Hrvoje Niksic  <hniksic@xemacs.org>
 417
 418         * config-post.h: New file, included from now autogenerated
 419         config.h.in.
 420
 421 2003-11-04  Hrvoje Niksic  <hniksic@xemacs.org>
 422
 423         * progress.c (progress_handle_sigwinch): Don't call
 424         determine_screen_width() from the signal handler.  Instead, just
 425         set a volatile variable.
 426         (bar_create): Check whether SIGWINCH was received.
 427         (bar_update): Ditto.
 428
 429         * sysdep.h: Define SYSTEM_FNMATCH only if HAVE_FNMATCH_H is true.
 430
 431 2003-11-03  Hrvoje Niksic  <hniksic@xemacs.org>
 432
 433         * utils.c (xsleep): New function.  Uses nanosleep where available,
 434         resuming sleeps interrupted by signals.  Updated callers of sleep
 435         and usleep to use xsleep.
 436
 437 2003-11-03  Hrvoje Niksic  <hniksic@xemacs.org>
 438
 439         * ftp-basic.c (ftp_login): Remove shadowing (and bogus)
 440         declaration of SEED.
 441
 442 2003-11-03  Hrvoje Niksic  <hniksic@xemacs.org>
 443
 444         * log.c (logvprintf): Documented better.  Renamed to
 445         log_vprintf_internal to avoid confusion with the public API
 446         functions logprintf and logputs.
 447
 448 2003-11-03  Hrvoje Niksic  <hniksic@xemacs.org>
 449
 450         * wget.h (N_): Don't parenthesize argument.
 451
 452 2003-11-03  Hrvoje Niksic  <hniksic@xemacs.org>
 453
 454         * host.h (ADDRESS_IPV4_DATA): Don't take the address of in.s_addr
 455         because that doesn't work on machines that define it as bitfield.
 456
 457 2003-11-03  Hrvoje Niksic  <hniksic@xemacs.org>
 458
 459         * connect.c (select_fd): Generalize the third argument into WAIT,
 460         so that the caller can request waiting for both read and write.
 461         Updated callers.
 462
 463 2003-11-02  Hrvoje Niksic  <hniksic@xemacs.org>
 464
 465         * html-url.c (cleanup_html_url): Destroy the hash tables, don't
 466         just call free on them.
 467         (init_interesting): Use hash_table_put instead of string_set_add
 468         because we don't need the strdup that the latter function
 469         performs.
 470
 471         * init.c (cleanup): Don't pass NULL to cookie_jar_delete.
 472
 473         * xmalloc.c (xfree_real): Abort when passed a NULL pointer.
 474         (xfree_debug): Print at the file and line of the offending call to
 475         free.
 476
 477 2003-11-02  Hrvoje Niksic  <hniksic@xemacs.org>
 478
 479         * wget.h: Retired the `boolean' type.  Moved the DEFAULT_LOGFILE
 480         define to log.h.  Moved the INFINITE_RECURSION define to recur.h.
 481
 482         * xmalloc.h: Renamed FREE_MAYBE to xfree_null and moved the
 483         definition from wget.h to xmalloc.h.
 484
 485 2003-11-02  Hrvoje Niksic  <hniksic@xemacs.org>
 486
 487         * html-parse.c (decode_entity): New function; split the decoding
 488         of entities here.
 489         (convert_and_copy): Use it to decode entities.
 490         (decode_entity): Handle the &apos entity.
 491         (decode_entity): Don't decode Latin 1 numeric entities.  Don't
 492         decode &#0.
 493
 494 2003-11-01  Hrvoje Niksic  <hniksic@xemacs.org>
 495
 496         * ftp-opie.c (calculate_skey_response): Use uint32_t instead of
 497         `unsigned long' for the cheksum array.  Document the function.
 498
 499 2003-11-01  Hrvoje Niksic  <hniksic@xemacs.org>
 500
 501         * connect.c (acceptport): Don't call select_fd when timeout is not
 502         requested.
 503
 504 2003-11-01  Hrvoje Niksic  <hniksic@xemacs.org>
 505
 506         * host.c: Removed the ip_default_family global variable.
 507
 508         * host.c (lookup_host): Document the function.  Fixed declaration
 509         of VEC.
 510
 511 2003-10-31  Hrvoje Niksic  <hniksic@xemacs.org>
 512
 513         * various: Use new macros xnew, xnew0, xnew_array, and xnew0_array
 514         in various places.
 515
 516 2003-10-31  Hrvoje Niksic  <hniksic@xemacs.org>
 517
 518         * wget.h: Move declarations of malloc and logging code to
 519         xmalloc.h and log.h respectively to unclutter this file.
 520         (STRDUP_ALLOCA): Made it side-effect free.
 521
 522         * xmalloc.h: New files.  Define macros xnew, xnew0, xnew_array,
 523         and xnew0_array.
 524
 525         * xmalloc.c: New file.  Move the xmalloc routines here.
 526
 527 2003-10-31  Hrvoje Niksic  <hniksic@xemacs.org>
 528
 529         * connect.c (sockaddr_set_data): Remove the broken code that
 530         checked for NULL address.
 531
 532 2003-10-31  Hrvoje Niksic  <hniksic@xemacs.org>
 533
 534         * host.c (address_list_from_single): Removed.
 535         (address_list_from_ipv4_addresses): Renamed from
 536         address_list_from_vector.
 537
 538 2003-10-31  Hrvoje Niksic  <hniksic@xemacs.org>
 539
 540         * sysdep.h (CLOSE): Don't call close on file descriptors less than
 541         0, i.e. on uncreated sockets.
 542
 543         * connect.c (resolve_bind_address): Work on struct sockaddr
 544         directly.
 545         (connect_to_host): Replacement for connect_to_many.  Resolve HOST
 546         and connect to any of its addresses.  If we can't connect and the
 547         host name lookup was cached, try to resolve it again.  This should
 548         fix problems with hosts behind dynamic DNS.  Updated all callers.
 549         (connect_to_ip): Replacement for connect_to_one.  Removed SILENT;
 550         added the argument PRINT instead.  Updated all callers.
 551         (set_connection_host_name): Removed.
 552
 553         * host.c (address_list_address_at): New function instead of
 554         address_list_copy_one. It returns a pointer to ip_address *, so
 555         it's not necessary to copy the data.
 556         (address_list_cached_p): New function.
 557         (forget_host_lookup): Ditto.
 558
 559         * connect.c: Got rid of the MSOCK global variable.  Made bindport
 560         return the local socket it creates.  Added a new argument to
 561         acceptport, the socket to call accept on.  Updated callers.
 562         (closeport): Removed.
 563
 564         * connect.c: Moved the sockaddr code from host.c to this file,
 565         because most of that stuff is used for connecting, and has nothing
 566         to do with host names anyway.
 567         (sockaddr_set_data, sockaddr_get_data): New functions, replace the
 568         old sockaddr_set_address, sockaddr_set_port, sockaddr_get_address,
 569         and sockaddr_get_port.
 570
 571 2003-10-30  Hrvoje Niksic  <hniksic@xemacs.org>
 572
 573         * sysdep.h: Use `S >= 8' rather than `S == 8' when looking for
 574         large integers.
 575
 576 2003-10-30  Hrvoje Niksic  <hniksic@xemacs.org>
 577
 578         * url.c (append_uri_pathel): New argument ESCAPED_P that says
 579         whether [B, E) is to be treated as URL-escaped or not.  If
 580         ESCAPED_P is false, don't unescape the region.
 581         (url_file_name): u->file is not URL-escaped.
 582
 583 2003-10-30  Hrvoje Niksic  <hniksic@xemacs.org>
 584
 585         * retr.c (retrieve_from_file): Use retrieve_tree for
 586         page-requisites.
 587
 588         * main.c (main): Don't define opt.recursive when -p is used.
 589         Instead, make sure that recursion is used for HTTP in that case.
 590
 591 2003-10-29  Hrvoje Niksic  <hniksic@xemacs.org>
 592
 593         * host.h: Defined accessors for elements of ip_address.  Updated
 594         all callers.
 595         (address_list_match_all): Use memcmp in the non-IPv6 case.
 596
 597         * wget.h (CONNECT_ERROR): Don't retry connecting if connect()
 598         returned EAFNOSUPPORT.
 599
 600 2003-10-27  Mauro Tortonesi <mauro@deepspace6.net>
 601
 602         * connect.h: changed bindport prototype and added the related
 603         BIND_ON_IPV4_ONLY and BIND_ON_IPV6_ONLY flags.
 604
 605         * connect.c: changed bindport and resolve_bind_address to allow
 606         protocol-version specific DNS resolution. modified conaddr,
 607         acceptport and connect_to_one to make use of struct
 608         sockaddr_storage and of the new ip_address structure.
 609
 610         * ftp-basic.c: added LPRT/LPSV (RFC1639) support, refactored
 611         PORT/PASV (RFC959) and EPRT/EPSV (RFC2428) support code.
 612
 613         * ftp.c: added the ftp_do_port and ftp_do_pasv functions to
 614         handle FTP over IPv6.
 615
 616         * ftp.h: changed prototype of ftp_epsv and added prototypes for
 617         ftp_lpsv, ftp_lprt and ftp_eprt.
 618
 619         * host.c: renamed the
 620         wget_sockaddr_set_address and wget_sockaddr_get_addr, and
 621         wget_sockaddr_{s,g}et_port couples to sockaddr_{s,g}et_address and
 622         sockaddr_{g,s}et_port respectively.  changed
 623         address_list_match_all, address_list_from_addrinfo sockaddr_len,
 624         pretty_print_address, lookup_host, sockaddr_{s,g}et_address and
 625         sockaddr_{g,s}et_port to make use of struct sockaddr_storage and
 626         of the new ip_address structure.  removed map_ipv4_to_ip and
 627         map_ip_to_ipv4.
 628
 629         * host.h: redefined structure ip_address and removed structure
 630         wget_sockaddr.
 631
 632 2003-10-26  Hrvoje Niksic  <hniksic@xemacs.org>
 633
 634         * sysdep.h: Include inttypes.h where available.
 635
 636         * host.c: Switch from u_int32_t to uint32_t.
 637
 638 2003-10-26  Hrvoje Niksic  <hniksic@xemacs.org>
 639
 640         * netrc.c (parse_netrc): Reset the QUOTE flag after the closing
 641         quote.
 642
 643 2003-10-25  Hrvoje Niksic  <hniksic@xemacs.org>
 644
 645         * url.c (is_valid_ipv6_address): Reformat to GNU coding style.
 646         Use enums for NS_IN* constants.  Use ISXDIGIT.
 647
 648         * convert.c (construct_relative): Document better how the function
 649         works.
 650
 651 2003-10-23  Hrvoje Niksic  <hniksic@xemacs.org>
 652
 653         * config.h.in: Deploy preprocessor magic to avoid Ultrix's
 654         <netdb.h> include <bitypes.h> which defines its own u_int32_t.
 655         Reported by Bernhard Simon.
 656
 657 2003-10-23  Hrvoje Niksic  <hniksic@xemacs.org>
 658
 659         * version.c: Bump version.
 660
 661 2003-10-23  Hrvoje Niksic  <hniksic@xemacs.org>
 662
 663         * url.c: Ditto.
 664
 665         * html-parse.c (advance_declaration): Don't use trailing comma in
 666         enum because older compilers don't support it.
 667
 668         * utils.c: Don't redefine HAVE_SIGSETJMP.
 669
 670 2003-10-16  Hrvoje Niksic  <hniksic@xemacs.org>
 671
 672         * convert.c (construct_relative): Don't handle absolute files
 673         specially -- for example, -P/tmp/foo shouldn't imply that
 674         converted files must refer to "/tmp/foo/..."!
 675
 676 2003-10-15  Hrvoje Niksic  <hniksic@xemacs.org>
 677
 678         * http.c: Consider status 307 a valid redirect.
 679
 680 2003-10-15  Philip Stadermann  <philip.stadermann@credativ.de>
 681
 682         * ftp.c (ftp_retrieve_glob): Correctly loop through the list whose
 683         elements might have been deleted.
 684
 685 2003-10-13  Hrvoje Niksic  <hniksic@xemacs.org>
 686
 687         * html-url.c (tag_handle_meta): Set the Refresh link to expect
 688         HTML.
 689         (append_one_url): Renamed to append_url.
 690
 691 2003-10-13  Hrvoje Niksic  <hniksic@xemacs.org>
 692
 693         * sysdep.h: Only define u_int32_t.
 694
 695 2003-10-11  Hrvoje Niksic  <hniksic@xemacs.org>
 696
 697         * utils.c (large_int_to_string): Use snprintf() to print the
 698         number.  This will work even on systems where libc doesn't
 699         understand %lld, but the compiler does, because it will use our
 700         snprintf replacement.
 701
 702         * init.c (parse_bytes_helper): New function.
 703         (cmd_bytes): Use it to parse bytes, but cast the result to long.
 704         (cmd_bytes_large): Ditto, but store the result to LARGE_INT.  Used
 705         for --quota so that --quota=10G works even on machines without
 706         long long.
 707
 708         * options.h (struct options): Declare quota as LARGE_INT.
 709
 710         * retr.c (downloaded_exceeds_quota): Removed.
 711         (downloaded_increase): Ditto.
 712         (total_downloaded_bytes): New variable, replaces opt.downloaded,
 713         which was the wrong place for it anyway.  Updated callers of
 714         downloaded_exceeds_quota and downloaded_increase to check this
 715         variable directly.
 716
 717         * sysdep.h: Get rid of VERY_LONG_TYPE.  Use LARGE_INT for the same
 718         purpose, defined as `long', `long long' or `double', depending on
 719         size of long and whether long long is available.
 720
 721 2003-10-11  Hrvoje Niksic  <hniksic@xemacs.org>
 722
 723         * sysdep.h: Also check size of short for int32_t.
 724
 725 2003-10-11  Hrvoje Niksic  <hniksic@xemacs.org>
 726
 727         * host.c (lookup_host): Use u_int32_t to store the result of
 728         inet_addr().  That removes the need for offset fiddling, caring
 729         about endian-ness, etc.
 730
 731         * sysdep.h: Define int32_t and u_int32_t if not available.
 732
 733 2003-10-11  Hrvoje Niksic  <hniksic@xemacs.org>
 734
 735         * ftp-basic.c (ftp_epsv): Use socklen_t * as the third argument to
 736         getpeername.
 737
 738         * config.h.in: Define socklen_t stub.
 739
 740         * host.c (sockaddr_len): Return socklen_t.
 741
 742         * connect.c (conaddr): Use socklen_t as the third argument to
 743         accept, getsockname, and connect.
 744
 745 2003-10-10  Hrvoje Niksic  <hniksic@xemacs.org>
 746
 747         * recur.c (retrieve_tree): Don't descend into documents that are
 748         not expected to contain HTML, regardless of their content-type.
 749
 750         * html-url.c (tag_url_attributes): Record which attributes are
 751         supposed to yield HTML links that can be followed.
 752         (tag_find_urls): Propagate that information to the caller through
 753         struct urlpos.
 754
 755 2003-10-10  Hrvoje Niksic  <hniksic@xemacs.org>
 756
 757         * hash.c (find_mapping): Return the next available mapping when
 758         the key is not found, not NULL.
 759         (hash_table_put): Use find_mapping to find the storage for the new
 760         data.
 761         (hash_table_put): Grow the table before exceeding maximum
 762         fullness, not afterwards.
 763
 764 2003-10-10  Hrvoje Niksic  <hniksic@xemacs.org>
 765
 766         * hash.c (hash_table_new): Slightly change the meaning of the
 767         first parameter.  Instead of being the minimum initial size, it is
 768         now the minimum number of items that the hash table can take
 769         without needing to resize.
 770
 771 2003-10-09  Hrvoje Niksic  <hniksic@xemacs.org>
 772
 773         * html-url.c (init_interesting): Initialize interesting_tags and
 774         interesting_attributes as hash tables.  This simplifies the code
 775         immensely because hash tables handle allocation and remove
 776         duplicates automatically.
 777         (find_tag): Removed.
 778         (collect_tags_mapper): Instead of calling find_tag, simply get the
 779         entry from interesting_tags hash table, which is both simpler and
 780         faster.
 781
 782 2003-10-09  Hrvoje Niksic  <hniksic@xemacs.org>
 783
 784         * hash.c (hash_table_get): Declare hash-table argument as const.
 785         (find_mapping): Ditto.
 786         (hash_table_get_pair): Ditto.
 787         (hash_table_contains): Ditto.
 788         (hash_table_count): Ditto.
 789
 790 2003-10-08  Hrvoje Niksic  <hniksic@xemacs.org>
 791
 792         * html-url.c (get_urls_html): Parse the appropriate flags to
 793         html-parse.c.
 794
 795         * html-parse.c (map_html_tags): Accept FLAGS from the caller
 796         instead of examining OPT.
 797
 798 2003-10-08  Hrvoje Niksic  <hniksic@xemacs.org>
 799
 800         * html-url.c (find_tag): Switch to binary search.
 801
 802 2003-10-08  Hrvoje Niksic  <hniksic@xemacs.org>
 803
 804         * main.c (print_help): Fix typo; stured -> stored.
 805
 806 2003-10-08  Hrvoje Niksic  <hniksic@xemacs.org>
 807
 808         * getopt.c: Add definitions of getopt_long and getopt_long_only.
 809
 810 2003-10-08  Hrvoje Niksic  <hniksic@xemacs.org>
 811
 812         * config.h.in: Renamed DEBUG to ENABLE_DEBUG.  ENABLE_DEBUG is, I
 813         think, a better name, because it implies that debugging output is
 814         merely possible, not "on by default", as might be construed from
 815         just DEBUG.
 816
 817 2003-10-08  Hrvoje Niksic  <hniksic@xemacs.org>
 818
 819         * ftp.c (has_insecure_name_p): Define it here.
 820
 821         * utils.c (has_wildcards_p): Define it here.
 822
 823         * sysdep.h: Declare fnmatch-related macros here, if not using
 824         system fnmatch().  Update .c files to not declare fnmatch.h
 825         directly.
 826
 827         * cmpt.c (fnmatch): Moved here.  Use it only under non-GNU libc.
 828
 829 2003-10-08  Hrvoje Niksic  <hniksic@xemacs.org>
 830
 831         * getopt.c: Newer version, imported from Free libit.
 832
 833 2003-10-07  Hrvoje Niksic  <hniksic@xemacs.org>
 834
 835         * cookies.c (struct cookie): Remove unused backpointer to cookie
 836         jar.
 837
 838 2003-10-07  Hrvoje Niksic  <hniksic@xemacs.org>
 839
 840         * cmpt.c (memmove): Comment out, since it's no longer used.
 841
 842         * cookies.c (cookie_jar_generate_cookie_header): Allocate room for
 843         chains in one pass.
 844         (find_chains_of_host): Assume that the caller has allocated DEST
 845         to be sufficiently large to take all the data.
 846         (eliminate_dups): Run through the array and eliminate dups on the
 847         fly instead of using memmove.
 848         (cookie_jar_process_set_cookie): Free cookie->domain before
 849         re-setting it.
 850
 851 2003-10-05  Gisle Vanem  <giva@bgnett.no>
 852
 853         * mswindows.c (set_sleep_mode): Fix type of
 854         _SetThreadExecutionState.
 855
 856 2003-10-05  Hrvoje Niksic  <hniksic@xemacs.org>
 857
 858         * utils.c (file_size): Return -1 if fopen() returns NULL.  Prior
 859         to this patch, wget --post-file=nosuchfile dumped core.
 860
 861 2003-10-04  Gisle Vanem  <giva@bgnett.no>
 862
 863         * mswindows.c (run_with_timeout): Use WaitForSingleObject to wait
 864         for thread termination.
 865
 866 2003-10-04  Hrvoje Niksic  <hniksic@xemacs.org>
 867
 868         * log.c: Use `...' in function definitions; ansi2knr will convert
 869         them to va_dcl.  This allowed removal of the ugly VA_START_1 and
 870         VA_START_2 macros.
 871
 872 2003-10-03  Gisle Vanem  <giva@bgnett.no>
 873
 874         * connect.c: And don't include them here.
 875
 876         * mswindows.h: Include winsock headers here.
 877
 878 2003-10-03  Hrvoje Niksic  <hniksic@xemacs.org>
 879
 880         * html-parse.c (convert_and_copy): Move variable declarations
 881         before statements.
 882
 883 2003-10-02  Gisle Vanem  <giva@bgnett.no>
 884
 885         * mswindows.c (run_with_timeout): For Windows: Run the 'fun' in a
 886         thread via a helper function. Continually query the thread's
 887         exit-code until finished or timed out.
 888
 889 2003-10-02  Hrvoje Niksic  <hniksic@xemacs.org>
 890
 891         * wget.h (XMALLOC_ARRAY): Removed.
 892         (ALLOCA_ARRAY): Ditto.
 893
 894         * html-parse.c: Renamed alloca_p to resized.
 895         (GROW_ARRAY): Renamed DO_REALLOC_FROM_ALLOCA to GROW_ARRAY and
 896         returned it to html-parse.c, since nothing else was using it.
 897
 898 2003-10-02  Hrvoje Niksic  <hniksic@xemacs.org>
 899
 900         * retr.c (retrieve_url): Initialize DUMMY storage for DT.  Caught
 901         by valgrind.
 902
 903 2003-10-02  Hrvoje Niksic  <hniksic@xemacs.org>
 904
 905         * html-parse.c (convert_and_copy): Handle numeric entities in
 906         hexadecimal, &#xHH.
 907         (convert_and_copy): Copy the contents directly to the pool without
 908         a stack-allocated intermediary.
 909
 910 2003-10-02  Hrvoje Niksic  <hniksic@xemacs.org>
 911
 912         * utils.c (alarm_set): New function; use either setitimer or alarm
 913         to set up the alarm.
 914         (alarm_cancel): New function; cancel the alarm set up by
 915         alarm_set.
 916         (run_with_timeout): Use them.
 917
 918 2003-10-01  Hrvoje Niksic  <hniksic@xemacs.org>
 919
 920         * url.c (url_parse): Don't leak memory when a reencoded URL turns
 921         out to be invalid.
 922
 923         * url.c (parse_errors): Mark error messages for translation.
 924         (url_error): Translate error messages returned to the caller.
 925
 926 2003-10-01  Hrvoje Niksic  <hniksic@xemacs.org>
 927
 928         * ftp.c (ftp_loop_internal): Initialize TMRATE to NULL to shut up
 929         the compiler.
 930
 931 2003-09-26  Gisle Vanem  <giva@bgnett.no>
 932
 933         * src/mswindows.c: Added ws_percenttitle() showing progress in the
 934         window titlebar. Called from retr.c. Secured ws_mypath().
 935
 936         * windows/config.h.ms: alloca() prototype not needed.  Removed
 937         "#undef ENABLE_NLS"; should be in Makefile IMHO. Moved
 938         WGET_USE_STDARG from mswindows.h to config.ms.h because of #ifdef
 939         in log.c. (MSVC's vararg.h and stdarg.h are incompatible).
 940
 941 2003-09-29  Aaron Hawley <Aaron.Hawley@uvm.edu>
 942
 943         * ftp.c (getftp): --spider option should now work with FTP
 944         downloads.
 945         (ftp_loop_internal): quiet reports and calculations of downloads
 946         when --spider option set, nor try deleting when --delete-after
 947         also set.
 948         (ftp_loop): --spider will skip HTML-ification of .listing file.
 949
 950 2003-09-26  Gisle Vanem  <giva@bgnett.no>
 951
 952         * mswindows.c (read_registry): Removed.
 953         (set_sleep_mode): New function.
 954         (windows_main_junk): Call it.
 955
 956 2003-09-26  Gisle Vanem  <giva@bgnett.no>
 957
 958         * mswindows.c (read_registry): Fix invocation of registry
 959         functions.
 960
 961         * mswindows.c (read_registry): Condition definitions of sleep and
 962         usleep with not HAVE_SLEEP and HAVE_USLEEP respectively.  Define
 963         HAVE_SLEEP and HAVE_USLEEP under __DMC__.
 964
 965 2003-09-24  Hrvoje Niksic  <hniksic@xemacs.org>
 966
 967         * url.c (url_escape_1): Revert unintentional change to lowercase
 968         xdigit escapes.
 969         (url_escape_dir): Document that this function depends on the
 970         output of url_escape_1.
 971
 972 2003-09-23  Hrvoje Niksic  <hniksic@xemacs.org>
 973
 974         * progress.c (create_image): Print the current ETA if we're done
 975         with the download.
 976         (create_image): Change '-' display char to '+' in the progress bar.
 977
 978         * Makefile.in (clean): Remove .libs.
 979
 980 2003-09-23  Hrvoje Niksic  <hniksic@xemacs.org>
 981
 982         * cookies.c (struct cookie): New flag domain_exact.
 983         (update_cookie_field): Skip leading dot in domain.
 984         (find_matching_chains): Match numeric addresses exactly; don't
 985         needlessly copy HOST to the stack.
 986         (matching_cookie): Added argument HOST.  If cookie->domain_exact
 987         is set, check that HOST is equal to cookie->domain.
 988         (cookie_jar_load): Only use TAB as delimiter.  Document the
 989         meaning of DOMAIN-FLAG.  Skip leading dot in domain.
 990         (cookie_jar_load): Don't ignore DOMAIN-FLAG -- instead, set
 991         domain_exact to true if DOMAIN-FLAG is false.
 992         (save_cookies_mapper): If domain_exact is false, prepend the
 993         domain with dot, like Mozilla does.
 994
 995 2003-09-22  Hrvoje Niksic  <hniksic@xemacs.org>
 996
 997         * progress.c (create_image): Print the initial part of the
 998         download with '-' characters, analogous to how dot progress prints
 999         the initial part with ','.
1000
1001         * hash.c (ptrhash): New function.
1002         (ptrcmp): Ditto.
1003         (hash_table_new): Default to identity hash table.
1004
1005 2003-09-22  Hrvoje Niksic  <hniksic@xemacs.org>
1006
1007         * safe-ctype.h (_sch_test): The cast of BIT to unsigned char was
1008         broken -- _sch_istable bitmasks are 16-bit, not 8-bit!  Cast BIT
1009         to unsigned short instead.
1010
1011 2003-09-22  Hrvoje Niksic  <hniksic@xemacs.org>
1012
1013         * url.c (path_simplify): Instead of calls to memmove, handle "./"
1014         and "../" by advancing pointers.
1015
1016 2003-09-22  Hrvoje Niksic  <hniksic@xemacs.org>
1017
1018         * retr.c (getproxy): Moved from url.c.
1019
1020         * convert.c: Split off link conversion from url.c into separate
1021         file.  Also included the book-keeping stuff from recur.c.
1022
1023 2003-09-21  Hrvoje Niksic  <hniksic@xemacs.org>
1024
1025         * init.c: Improved documentation of functions.
1026         (cmd_boolean): Attempt to make code that tries to avoid calling
1027         strcmp for "speed" a bit more readable.
1028
1029         * init.c (simple_atof): Report error on encountering non-digit,
1030         non-"." character.
1031         (simple_atoi): Replacement for myatoi(), calling interface
1032         compatible with simple_atof.  Updated myatoi's callers.
1033
1034 2003-09-21  Bertrand Demiddelaer  <bert@b3rt.org>
1035
1036         * url.c (path_simplify): Would read two bytes past the end of the
1037         string in the "./" case.
1038
1039 2003-09-21  Matthew J. Mellon  <mellon@tymenet.com>
1040
1041         * http.c (gethttp): Recognize content-type "application/xhtml+xml"
1042         as what Wget considers "text/html".
1043
1044 2003-09-21  Hrvoje Niksic  <hniksic@xemacs.org>
1045
1046         * connect.c (connect_with_timeout): Made timeout type double.
1047
1048         * options.h (struct options): New members read_timeout,
1049         dns_timeout, and connect_timeout.
1050         Use them.
1051
1052 2003-09-21  Hrvoje Niksic  <hniksic@xemacs.org>
1053
1054         * init.c (simple_atof): New function.
1055         (cmd_time): Use it.
1056         (cmd_bytes): Accept things like "1.5k" and such.  Use simple_atof
1057         to parse decimals.
1058
1059         * retr.c (limit_bandwidth): Adjust each sleep by the error of the
1060         previous one.
1061
1062 2003-09-21  Hrvoje Niksic  <hniksic@xemacs.org>
1063
1064         * main.c (main): Use setoptval() for setting the options.  Use
1065         run_command for `-e'.
1066
1067         * init.c (parse_line): Rewritten to return COMIND right away.
1068         Changed linkage to static.
1069         (run_wgetrc): Use the available comind when calling setval, so it
1070         doesn't have to be computed twice.
1071         (setval_internal): New function, runs the command's action without
1072         any error checking.
1073         (setoptval): New function, does what setval used to do, but exits
1074         in case of error.
1075         (run_command): New function.
1076
1077 2003-09-21  Hrvoje Niksic  <hniksic@xemacs.org>
1078
1079         * connect.c (select_fd): Change MAXTIME's type to double.  Handle
1080         its decimal part.
1081
1082         * retr.c (sleep_between_retrievals): In the random-wait case, use
1083         random_float() to wait between 0 and 2*opt.wait seconds.
1084
1085         * utils.c (run_with_timeout): Accept `double' timeouts.  Correctly
1086         handle timeout values in (0, 1) range.
1087         (random_float): New function.
1088
1089         * options.h (struct options): Change the types of wait, waitretry,
1090         and timeout to double.
1091
1092         * init.c (cmd_time): Accept floating point time.
1093
1094 2003-09-20  Hrvoje Niksic  <hniksic@xemacs.org>
1095
1096         * retr.c (get_contents): Cosmetic fixes.
1097
1098 2003-09-20  Hrvoje Niksic  <hniksic@xemacs.org>
1099
1100         * url.c (uri_merge): Get rid of uri_merge_1.
1101         (uri_merge): Merge "foo//", "bar" as "foo//bar", not "foo///bar",
1102         i.e. don't add an extra slash merely because BASE ends with two
1103         slashes.
1104         (parse_credentials): Renamed from parse_uname.  Rewrittern in
1105         standard [beg, end) calling style.
1106         (url_skip_credentials): Renamed from url_skip_uname.  Made static.
1107         (url_skip_credentials): Include # and ; as terminators.  Old code
1108         would mistakenly consider "http://foo.com#hniksic@iskon.hr" to
1109         contain a username.
1110         (url_skip_scheme): Removed because it was unused.
1111         (url_has_scheme): Require "scheme" to be at least one char long.
1112
1113 2003-09-19  Hrvoje Niksic  <hniksic@xemacs.org>
1114
1115         * url.c (url_file_name): Expect NULL dir_prefix.
1116
1117         * init.c (cmd_file): Use a macro to prevent multiple #ifdef
1118         WINDOWS.
1119         (defaults): Set dir_prefix to NULL by default.
1120
1121 2003-09-19  Hrvoje Niksic  <hniksic@xemacs.org>
1122
1123         * safe-ctype.h (_sch_test): Cast BIT to unsigned char, like latest
1124         gcc does.
1125
1126 2003-09-19  Hrvoje Niksic  <hniksic@xemacs.org>
1127
1128         * wget.h (BOUNDED_TO_ALLOCA): Evaluate PLACE only once.
1129         (ARRAY_SIZE): Renamed to countof.  All callers updated.
1130
1131 2003-09-19  Hrvoje Niksic  <hniksic@xemacs.org>
1132
1133         * main.c (main): New option --strict-comments.
1134
1135         * html-parse.c (find_comment_end): New function: simple BM search
1136         for "-->".
1137         (map_html_tags): Use it if looking at a comment and not in strict
1138         comments mode.
1139
1140 2003-09-17  Aurelien Marchand  <artaxerxes@users.sf.net>
1141
1142         * ftp.h: Added OS400 system in enum
1143         * ftp-basic.c: recognize OS400 systems
1144         * ftp.c: don't prepend the CWD if talking to OS400, since it
1145         breaks the change in library
1146
1147 2003-09-18  Hrvoje Niksic  <hniksic@xemacs.org>
1148
1149         * retr.c (get_contents): Pass the correct argument to ssl_iread.
1150
1151 2003-09-18  Hrvoje Niksic  <hniksic@xemacs.org>
1152
1153         * safe-ctype.h: Don't #define ctype.h macros to errors because
1154         that loses when someone #include's ctype.h after safe-ctype.h.
1155
1156 2003-09-17  Hrvoje Niksic  <hniksic@xemacs.org>
1157
1158         * url.c: Undef U, W, C after use.
1159
1160 2003-09-17  Hrvoje Niksic  <hniksic@xemacs.org>
1161
1162         * init.c (cmd_spec_restrict_file_names): Allow the OS setting to
1163         be augmented by ",nocontrol" which means don't escape the control
1164         characters, but otherwise keep OS settings.
1165
1166         * url.c (file_unsafe_char): Deleted.
1167         (append_uri_pathel): Query filechr_table directly.
1168         (filechr_table): Separated Unix, Windows, and control-unsafe
1169         characters.
1170
1171 2003-09-17  Hrvoje Niksic  <hniksic@xemacs.org>
1172
1173         * url.c (url_escape_1): New function.
1174         (url_escape): Use it.
1175         (sync_path): Handle pathological cases where u->file and u->dir
1176         contain really strange characters.
1177         (ENCODE): Deleted.
1178         (REENCODE): Deleted.
1179
1180 2003-09-16  Hrvoje Niksic  <hniksic@xemacs.org>
1181
1182         * url.c (url_file_name): Don't reallocate FNAME if the file
1183         doesn't exist, as is usually the case.
1184
1185         * utils.c (unique_name): New flag allow_passthrough.
1186
1187 2003-09-16  Hrvoje Niksic  <hniksic@xemacs.org>
1188
1189         * utils.c (wtimer_sys_diff): Convert the time difference to signed
1190         __int64, then to double.  This works around MS VC++ 6 which can't
1191         convert unsigned __int64 to double directly.
1192
1193 2003-09-16  Hrvoje Niksic  <hniksic@xemacs.org>
1194
1195         * Makefile.in (clean): Also remove the core.<number> files
1196         produced by recent Linux systems.
1197
1198 2003-09-16  Hrvoje Niksic  <hniksic@xemacs.org>
1199
1200         * http.c (post_file): Don't pad the file if it's not large
1201         enough.  Bail out instead.
1202
1203 2003-09-15  Hrvoje Niksic  <hniksic@xemacs.org>
1204
1205         * retr.c (get_contents): Reduce the buffer size to the amount of
1206         data that may pass through for one second.  This prevents long
1207         sleeps when limiting bandwidth.
1208
1209         * connect.c (connect_to_one): Reduce the socket's RCVBUF when
1210         bandwidth limitation to small values is requested.
1211
1212 2003-09-15  Hrvoje Niksic  <hniksic@xemacs.org>
1213
1214         * progress.c (update_speed_ring): Moved the speed ring update to a
1215         separate function and documented it better.
1216
1217         * progress.c: Use `double' for most timers to support granularity
1218         smaller than 1ms.
1219
1220 2003-09-15  Hrvoje Niksic  <hniksic@xemacs.org>
1221
1222         * wget.h (XDIGIT_TO_XCHAR): Implement as index into a literal
1223         string.
1224         (XDIGIT_TO_xchar): Ditto.
1225
1226 2003-09-15  Hrvoje Niksic  <hniksic@xemacs.org>
1227
1228         * utils.c: Change the type of timer-related functions from long to
1229         double, for better precision.  On machines supporting gettimeofday
1230         the timers now work with granularity of less than one millisecond.
1231
1232 2003-09-15  Hrvoje Niksic  <hniksic@xemacs.org>
1233
1234         * cookies.c (parse_set_cookies): Fixed the parser to handle more
1235         edge conditions.
1236         (test_cookies): New function, contains a test suite for
1237         parse_set_cookies.
1238
1239 2003-09-15  Hrvoje Niksic  <hniksic@xemacs.org>
1240
1241         * url.c (strpbrk_or_eos): Implement as a macro under Gcc.
1242
1243 2003-09-15  Hrvoje Niksic  <hniksic@xemacs.org>
1244
1245         * cookies.c (parse_set_cookies): Allow trailing space in
1246         set-cookies header.  Also, allow any amount of whitespace, not
1247         only one character.  Allow empty set-cookies header without
1248         spewing an error.
1249
1250 2003-09-14  Hrvoje Niksic  <hniksic@xemacs.org>
1251
1252         * url.c (append_uri_pathel): Use opt.restrict_file_names when
1253         calling file_unsafe_char.
1254
1255         * init.c: New command restrict_file_names.
1256
1257         * main.c (main): New option --restrict-file-names[=windows,unix].
1258
1259         * url.c (url_file_name): Renamed from url_filename.
1260         (url_file_name): Add directory and hostdir prefix here, not in
1261         mkstruct.
1262         (append_dir_structure): New function, does part of the work that
1263         used to be in mkstruct.  Iterates over path elements in u->path,
1264         calling append_uri_pathel on each one to append it to the file
1265         name.
1266         (append_uri_pathel): URL-unescape a path element and reencode it
1267         with a different set of rules, more appropriate for handling of
1268         files.
1269         (file_unsafe_char): New function, uses a lookup table to decide
1270         whether a character should be escaped for use in file name.
1271         (append_string): New utility function.
1272         (append_char): Ditto.
1273         (file_unsafe_char): New argument restrict_for_windows, decide
1274         whether Windows file names should be escaped in run-time.
1275
1276         * connect.c: Include <stdlib.h> to get prototype for abort().
1277
1278 2003-09-14  Hrvoje Niksic  <hniksic@xemacs.org>
1279
1280         * utils.c (wtimer_sys_set): Extracted the code that sets the
1281         current time here.
1282         (wtimer_reset): Call it.
1283         (wtimer_sys_diff): Extracted the code that calculates the
1284         difference between two system times here.
1285         (wtimer_elapsed): Call it.
1286         (wtimer_elapsed): Don't return a value smaller than the previous
1287         one, which could previously happen when system time is set back.
1288         Instead, reset start time to current time and note the elapsed
1289         offset for future calculations.  The returned times are now
1290         guaranteed to be monotonically nondecreasing.
1291
1292 2003-09-10  Hrvoje Niksic  <hniksic@xemacs.org>
1293
1294         * host.c (lookup_host): Print the result of the DNS lookup.
1295
1296 2003-09-10  Hrvoje Niksic  <hniksic@xemacs.org>
1297
1298         * init.c (cmd_boolean): Accept yes/no along with on/off.
1299         (cmd_lockable_boolean): Ditto.
1300
1301 2003-09-10  Hrvoje Niksic  <hniksic@xemacs.org>
1302
1303         * init.c: New command dns_cache.
1304
1305         * main.c (main): New option --dns-cache[=off].
1306
1307 2003-09-09  Hrvoje Niksic  <hniksic@xemacs.org>
1308
1309         * config.h.in: Initialize HAVE_GETADDRINFO and ENABLE_IPV6.
1310
1311         * all: Use #ifdef ENABLE_IPV6 instead of the older INET6.  Use
1312         HAVE_GETADDRINFO for getaddrinfo-related stuff.
1313
1314 2003-09-09  Hrvoje Niksic  <hniksic@xemacs.org>
1315
1316         * url.c (url_parse): Return an error if the URL contains a [...]
1317         IPv6 numeric address and we don't support IPv6.
1318
1319 2003-09-05  Hrvoje Niksic  <hniksic@xemacs.org>
1320
1321         * url.c (is_valid_ipv6_address): Modified to not require
1322         zero-terminated strings.
1323         (is_valid_ipv4_address): Ditto.
1324
1325 2003-09-05  Mauro Tortonesi <mauro@deepspace6.net>
1326
1327         src/url.c: added RFC 2732 compliance for URL parsing. The
1328         functions is_*_address valid are a modified version of
1329         glibc 2.3.2 inet_pton's code.
1330
1331 2003-09-03  Ahmon Dancy  <dancy@dancysoft.com>
1332
1333         * main.c init.c options.h: Added --retry-connrefused option so
1334         that Connection Refused failures are treated as non-fatal (when
1335         trying to retrieve from busy servers).
1336
1337         * wget.h: New CONNECT_ERROR macro for encapsulating this
1338         modification.
1339
1340         * ftp.c http.c : Use CONNECT_ERROR macro in places where
1341         ECONNREFUSED was checked.
1342
1343 2003-01-11  Ian Abbott  <abbotti@mev.co.uk>
1344
1345         * ftp.c (ftp_retrieve_glob): Reject insecure filenames as determined
1346         by calling new function has_insecure_name_p.  This is based on a
1347         patch by Red Hat.
1348
1349         * fnmatch.c (has_insecure_name_p): New function: returns non-zero
1350         if filename starts with `/' or contains `../' and is therefore
1351         considered insecure.
1352
1353         * fnmatch.h: Declare has_insecure_name_p().
1354
1355 2002-08-03  Hrvoje Niksic  <hniksic@xemacs.org>
1356
1357         * init.c (cmd_file): Allocate RESULT correctly.
1358
1359 2002-07-24  Hrvoje Niksic  <hniksic@xemacs.org>
1360
1361         * recur.c (retrieve_tree): Check whether downloaded_html_set is
1362         non-NULL before using it.
1363
1364 2002-05-27  Hrvoje Niksic  <hniksic@arsdigita.com>
1365
1366         * html-parse.c (NAME_CHAR_P): Allow almost any character here.
1367
1368 2002-05-24  Hrvoje Niksic  <hniksic@arsdigita.com>
1369
1370         * progress.c (bar_set_params): Fall back to dot progress if the
1371         terminal type is "emacs".
1372
1373 2002-05-20  Hrvoje Niksic  <hniksic@arsdigita.com>
1374
1375         * log.c: Don't #undef WGET_USE_STDARG.
1376
1377 2002-05-16  Hrvoje Niksic  <hniksic@arsdigita.com>
1378
1379         * hash.c (prime_size): Store the offset of the prime number in the
1380         prime table.  When searching, start with the given offset.
1381         (hash_table_new): Pass the pointer to ht->prime_offset to
1382         prime_size.
1383         (grow_hash_table): Ditto.
1384         (prime_size): Make 13 the first prime to make empty hash tables
1385         slightly smaller.
1386
1387 2002-05-16  Ian Abbott  <abbotti@mev.co.uk>
1388
1389         * recur.c (download_child_p): Minor optimization to avoid an
1390         unnecessary additional call to schemes_are_similar_p function.
1391
1392 2002-05-16  Ian Abbott  <abbotti@mev.co.uk>
1393
1394         * url.c (schemes_are_similar_p): New function to test enumerated
1395         scheme codes for similarity.
1396
1397         * url.h: Declare it.
1398
1399         * recur.c (download_child_p): Use it to compare schemes.  This
1400         also fixes a bug that allows hosts to be spanned (without the
1401         -H option) when the parent scheme is https and the child's is
1402         http or vice versa.
1403
1404 2002-05-14  Bill Richardson  <bill@riverstonenet.com>
1405
1406         * ftp.c (getftp): Don't ftruncate stdout.
1407
1408         * http.c (gethttp): Don't ftruncate stdout.
1409
1410 2002-05-09  Ian Abbott  <abbotti@mev.co.uk>
1411
1412         * cmpt.c (strptime_internal): Synched with glibc-2.1.3.
1413         (get_number): Ditto.
1414         (get_alt_number): Ditto.
1415         (__isleap): New function-like macro used by strptime.
1416         (day_of_the_week): New function used by strptime.
1417         (day_of_the_year): Ditto.
1418         (__mon_yday): Now shared by mktime and strptime implementations.
1419
1420 2002-05-08  Hrvoje Niksic  <hniksic@arsdigita.com>
1421
1422         * cookies.c (check_domain_match): Use match_tail in case
1423         insensitive mode.
1424
1425         * utils.c (match_tail): Allow the caller to specify case
1426         insensitive mode.
1427
1428         * cookies.c (store_cookie): When expiry_time is 0, print it as
1429         undefined, not indefinite.
1430
1431 2002-05-07  Ian Abbott  <abbotti@mev.co.uk>
1432
1433         * cookies.c (cookie_jar_process_set_cookie): Do not store
1434         discarded cookie.
1435
1436 2002-04-21  Hrvoje Niksic  <hniksic@arsdigita.com>
1437
1438         * cookies.c (check_domain_match): Allow cookies to be set for
1439         subdomains of unknown top-level domains under some circumstances.
1440
1441 2002-04-21  Thomas Lussnig  <thomas.lussnig@bewegungsmelder.de>
1442
1443         * gen_ssl.c:
1444         - allow checking of server cert
1445         - allow defining client cert type
1446         - allow limit of ssl protocol
1447         - check more return values
1448         - added debug message on break
1449
1450 2002-04-21  Hrvoje Niksic  <hniksic@arsdigita.com>
1451
1452         * recur.c (download_child_p): Revert order of items in check
1453         number 6 for clarity.
1454
1455 2002-04-20  Hrvoje Niksic  <hniksic@arsdigita.com>
1456
1457         * init.c: Ditto.
1458
1459         * main.c: Ditto.
1460
1461         * http.c: Use the new interface.
1462
1463         * cookies.c: Provide an OO-style "cookie jar" interface to enable
1464         separate cookie jars.
1465
1466         * http.c (http_atotm): Declare argument as const.
1467
1468 2002-04-20  Hrvoje Niksic  <hniksic@arsdigita.com>
1469
1470         * cookies.c (cookie_new): Default to PORT_ANY.
1471         (find_cookie_chain_exact): Only search by DOMAIN.
1472         (find_matching_cookie): Also check that PORT matches.
1473         (store_cookie): Only match the domain.
1474         (set_cookie_header_cb): When a cookie "fakes" a domain, assume it
1475         is valid for that host rather than discarding it completely.
1476         (find_matching_chains): Don't search by PORT.
1477         (matching_cookie): Also match PORT.
1478         (load_cookies): Set the port if specified, otherwise leave it as
1479         ANY.
1480         (save_cookies_mapper): Save the port if specified, otherwise leave
1481         it empty.
1482
1483 2002-04-19  Thomas Lussnig  <thomas.lussnig@bewegungsmelder.de>
1484
1485         * init.c: The option `egdfile' was not in sort order.
1486
1487 2002-04-16  Hrvoje Niksic  <hniksic@arsdigita.com>
1488
1489         * ftp.c (getftp): Treat directories that begin with <letter>: as
1490         absolute.
1491         (getftp): Strip trailing slashes from con->id before merging it
1492         with TARGET.
1493
1494 2002-04-16  Hrvoje Niksic  <hniksic@arsdigita.com>
1495
1496         * http.c (gethttp): If Content-Type is not given, assume
1497         text/html.
1498
1499 2002-04-15  Hrvoje Niksic  <hniksic@arsdigita.com>
1500
1501         * recur.c (download_child_p): Don't ignore rejection of HTML
1502         documents that are themselves leaves of recursion.
1503
1504 2002-04-15  Ian Abbott  <abbotti@mev.co.uk>
1505
1506         Makefile.in: Updated several dependencies for object files to take
1507         account of nested include files.
1508
1509 2002-04-15  Ian Abbott  <abbotti@mev.co.uk>
1510
1511         Makefile.in: The target `connect$o' (connect.o) now depends on
1512         `utils.h'
1513
1514 2002-04-15  Ian Abbott  <abbotti@mev.co.uk>
1515
1516         * host.c (SET_H_ERRNO): New function-like macro to set `h_errno'.
1517         (gethostbyname_with_timeout): Use it.
1518
1519         * utils.c: Don't define `SETJMP()', `run_with_timeout_env' or
1520         `abort_run_with_timeout()' when `USE_SIGNAL_TIMEOUT' is undefined.
1521
1522 2002-04-15  Hrvoje Niksic  <hniksic@arsdigita.com>
1523
1524         * host.c (getaddrinfo_with_timeout): New function.
1525         (gethostbyname_with_timeout): Ditto.
1526         (lookup_host): Use them.
1527
1528 2002-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
1529
1530         * utils.c (number_to_string): Handle the case when n < -INT_MAX.
1531
1532 2002-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
1533
1534         * init.c (comind): Use a marginally faster implementation of
1535         binary search.  To quote Martin Buchholz, "a nanosecond saved is a
1536         nanosecond earned."
1537
1538 2002-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
1539
1540         * main.c (print_help): Document `--post-data' and `--post-file'.
1541
1542 2002-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
1543
1544         * http.c (gethttp): Ditto.
1545
1546         * retr.c (retrieve_url): Initialize variables to appease the
1547         compiler.
1548
1549         * gen_sslfunc.c (ssl_iread): Don't handle EINTR when calling
1550         select_fd.
1551         (ssl_iwrite): Ditto.
1552
1553         * connect.c (select_fd): Rewrite to handle EINTR.  Set errno to
1554         ETIMEDOUT in case of timeout.
1555         (iread): No need to handle EINTR when calling select_fd.
1556         (iwrite): Ditto.
1557
1558 2002-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
1559
1560         * retr.c (retrieve_url): Make sure that POST is not honored for
1561         redirections.
1562
1563         * http.c (gethttp): Send the POST data when requested.
1564         (post_file): New function.
1565         (gethttp): Use it.
1566
1567         * main.c (main): Ditto.
1568
1569         * init.c: Add new options.
1570
1571         * options.h (struct options): New options post_data and
1572         post_file_name.
1573
1574 2002-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
1575
1576         * connect.c (connect_with_timeout): Firing SIGALRM can result in
1577         connect() exiting with EINTR.  Treat EINTR the same as ETIMEDOUT.
1578
1579 2002-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
1580
1581         * connect.c (connect_with_timeout): Use it.
1582
1583         * utils.c (run_with_timeout): New function.
1584
1585 2002-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
1586
1587         * url.c (getproxy): Accept a struct url argument.  This obviates
1588         the need for USE_PROXY_P.
1589
1590         * retr.c (retrieve_url): Allow proxy to be a non-FTP URL.
1591
1592         * ftp.c (getftp): Recognize FWTK-style proxy.
1593
1594 2002-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
1595
1596         * config.h.in: Only define _VA_LIST when compiled with gcc.
1597
1598 2002-04012  Ian Abbott  <abbotti@mev.co.uk>
1599
1600         * http.c (http_loop): Compensate for MS Windows two-second
1601         granularity of file modification time when comparing timestamps.
1602
1603         * ftp.c (ftp_retrieve_list): Ditto.
1604
1605 2002-04-12  Ian Abbott  <abbotti@mev.co.uk>
1606
1607         * utils.c (has_html_suffix_p): New function to test filename for
1608         common html extensions.
1609
1610         * utils.h: Declare it.
1611
1612         * http.c (http_loop): Use it instead of previous test.
1613
1614         * retr.c (retrieve_url): Ditto.
1615
1616         * recur.c (download_child_p): Ditto.
1617
1618 2002-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
1619
1620         * config.h.in: Define _VA_LIST on Solaris to prevent stdio.h from
1621         declaring va_list.
1622         From Kevin Rodgers <kevinr@ihs.com>.
1623
1624 2002-04-12  Ian Abbott  <abbotti@mev.co.uk>
1625
1626         * Makefile.in: Specify libtool mode explicitly when linking.
1627
1628 2002-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
1629
1630         * connect.c (connect_with_timeout): New function.
1631         (connect_to_one): Use it.
1632
1633         * config.h.in: Add stubs for HAVE_SIGSETJMP, HAVE_SIGBLOCK, and
1634         HAVE_SETJMP_H.
1635
1636 2002-04-11  Hrvoje Niksic  <hniksic@arsdigita.com>
1637
1638         * log.c: Set WGET_USE_STDARG if __STDC__ is defined and stdarg.h
1639         is present.
1640
1641 2002-04-11  Hrvoje Niksic  <hniksic@arsdigita.com>
1642
1643         * progress.c (bar_create): If INITIAL is larger than TOTAL, fix
1644         TOTAL.
1645         (bar_finish): Likewise.
1646
1647 2002-04-11  Hrvoje Niksic  <hniksic@arsdigita.com>
1648
1649         * html-url.c (tag_handle_form): New function.  Pick up form
1650         actions and mark them for conversion only.
1651
1652 2002-04-11  Hrvoje Niksic  <hniksic@arsdigita.com>
1653
1654         * progress.c (struct progress_implementation): Use PARAMS when
1655         declaring the parameters of *create, *update, *finish, and
1656         *set_params.
1657
1658         * netrc.c: Ditto.
1659
1660         * http.c: Reformat some function definitions so that ansi2knr can
1661         read them.
1662
1663         * hash.c (struct hash_table): Use the PARAMS macro around
1664         parameters in the declaration of hash_function and test_function.
1665         (prime_size): Spell 2580823717UL and 3355070839UL as (unsigned
1666         long)0x99d43ea5 and (unsigned long)0xc7fa5177 respectively, so
1667         that pre-ANSI compilers can read them.
1668         (find_mapping): Use PARAMS when declaring EQUALS.
1669         (hash_table_put): Ditto.
1670
1671         * ftp.h: Wrap the parameters of ftp_index declaration in PARAMS.
1672
1673         * cookies.c (cookie_new): Use (unsigned long)0 instead of 0UL,
1674         which was unsupported by pre-ANSI compilers.
1675
1676         From Nelson H. F. Beebe <beebe@math.utah.edu>, for the most part.
1677
1678 2002-04-11  Hrvoje Niksic  <hniksic@arsdigita.com>
1679
1680         * url.c (url_filename): Use compose_file_name regardless of
1681         whether opt.dirstruct is set.
1682         (mkstruct): Don't handle the query and the reencoding of DIR; that
1683         is done in compose_file_name.
1684
1685 2002-04-10  Hrvoje Niksic  <hniksic@arsdigita.com>
1686
1687         * wget.h: Ditto for extern char *exec_name.
1688
1689         * options.h: Don't guard against OPTIONS_DEFINED_HERE -- it is
1690         perfectly legal to follow an `extern' with a non-`extern' ones,
1691         provided the types match.
1692
1693         * main.c: Don't define OPTIONS_DEFINED_HERE.
1694
1695 2002-04-10  Hrvoje Niksic  <hniksic@arsdigita.com>
1696
1697         * progress.c (create_image): Revert to calculating ETA based on
1698         average download speed.
1699         (create_image): Don't print ETA until the download has been active
1700         for at least 3 seconds.
1701         (create_image): When ETA is not available, don't print anything.
1702         The previous version would print --:--.
1703
1704 2002-04-10  Hrvoje Niksic  <hniksic@arsdigita.com>
1705
1706         * progress.c (bar_update): Keep updating a subinterval until it
1707         reaches or exceeds a watermark.  That way the measurement will be
1708         guaranteed to span a configurable minimum of time.  The current
1709         default is 3s in 30 100ms intervals.
1710
1711 2002-04-09  Hrvoje Niksic  <hniksic@arsdigita.com>
1712
1713         * progress.c (bar_update): Maintain an array of the time it took
1714         to perform previous 30 network reads.
1715         (create_image): Calculate the download speed and ETA based on the
1716         last 30 reads, not the entire download.
1717         (create_image): Make sure that the ETA is not changed more than
1718         once per second.
1719
1720 2002-04-09  Ian Abbott  <abbotti@mev.co.uk>
1721
1722         * mswindows.c (borland_utime): New function conditionally defined
1723         when `HACK_BCC_UTIME_BUG' is defined.  A reimplementation of
1724         `utime()' as Borland's `utime()' function is broken on Windows 9x
1725         systems.  (Original patch by Chin-yuan Kuo <sr1111111@yahoo.com.tw>.)
1726
1727 2002-04-08  Hrvoje Niksic  <hniksic@arsdigita.com>
1728
1729         * ftp.c (ftp_loop): Propagate the result of ftp_retrieve_glob.
1730
1731 2002-03-26  Ian Abbott  <abbotti@mev.co.uk>
1732
1733         * Makefile.in: Updated several dependencies for object files.
1734
1735 2002-03-20  Ian Abbott  <abbotti@mev.co.uk>
1736
1737         * mswindows.c: Include "utils.h".
1738
1739 2002-03-18  Ian Abbott  <abbotti@mev.co.uk>
1740
1741         * host.h: Don't include netdb.h on windows.
1742
1743 2002-02-19  Hrvoje Niksic  <hniksic@arsdigita.com>
1744
1745         * recur.c (retrieve_tree): Handle the case when start_url doesn't
1746         parse.
1747
1748 2002-02-19  Andreas Damm  <andreas-sourceforge@radab.org>
1749
1750         * wget.h (DO_REALLOC_FROM_ALLOCA): Multiply with sizeof(type) when
1751         calling xmalloc and memcpy.
1752
1753 2002-02-19  Hrvoje Niksic  <hniksic@arsdigita.com>
1754
1755         * host.h: Include Unix-specific includes #ifndef WINDOWS.
1756         Patch originally provided by Christian Lackas.
1757
1758 2002-02-11  Christian Lackas  <delta@lackas.net>
1759
1760         * recur.c: recurive downloading for https fixed.
1761
1762 2002-02-19  Alan Eldridge  <alane@geeksrus.net>
1763
1764         * host.h: Also include <netinet/in.h> and <sys/socket.h>.
1765
1766         * ftp-basic.c: Also include <netinet/in.h>.
1767
1768 2002-02-05  Ian Abbott  <abbotti@mev.co.uk>
1769
1770         * http.c (gethttp): when -c used, mark already fully retrieved
1771         file as successfully retrieved.
1772
1773 2002-02-19  Hrvoje Niksic  <hniksic@arsdigita.com>
1774
1775         * url.c (url_parse): Don't treat '?' as query string separator
1776         when parsing FTP URLs.
1777
1778 2002-02-01  Hrvoje Niksic  <hniksic@arsdigita.com>
1779
1780         * html-url.c (tag_handle_meta): Don't crash on <meta
1781         http-equiv=refresh> where content is missing.
1782
1783 2002-01-31  Herold Heiko  <Heiko.Herold@previnet.it>
1784
1785         * ftp-basic.c, host.c: don't include sys/socket.h, arpa/inet.h,
1786         netdb.h on windows.
1787
1788 2002-01-30  Hrvoje Niksic  <hniksic@arsdigita.com>
1789
1790         * retr.c (retrieve_url): Remove redirection cycle detection.  This
1791         is because some sites legitimately redirect the user back to the
1792         same location, e.g. after an authorization check performed by
1793         another page.  MAX_REDIRECTIONS is still used to prevent infinite
1794         redirection loops.
1795
1796 2002-01-26  Hrvoje Niksic  <hniksic@arsdigita.com>
1797
1798         * http.c (gethttp): Wrap host name in square brackets if it
1799         contains a colon.
1800
1801 2002-01-26  Hrvoje Niksic  <hniksic@arsdigita.com>
1802
1803         * url.c (url_parse): Allow all hex digits, not only decimal ones,
1804         to form an IP address.
1805
1806 2002-01-26  Hrvoje Niksic  <hniksic@arsdigita.com>
1807
1808         * url.c (urlchr_table): Make square braces reserved, so we can
1809         parse http://[::1]/.
1810         (url_parse): Handle host in braces.
1811         (url_string): If url->host contains colons, wrap it in braces.
1812
1813 2002-01-24  Hrvoje Niksic  <hniksic@arsdigita.com>
1814
1815         * connect.c (resolve_bind_address): New function.
1816         (connect_to_one): Use it.
1817         (bindport): Ditto.
1818
1819         * init.c: Don't resolve bind-address here.
1820
1821         * host.c (wget_sockaddr_set_address): Would bug out with ADDR == NULL.
1822
1823 2002-01-24  Hrvoje Niksic  <hniksic@arsdigita.com>
1824
1825         * host.c (lookup_host): Use sizeof(ip4_address) to calculate the
1826         offset.
1827         (address_list_new): Use map_ipv4_to_ip.
1828         (wget_sockaddr_set_address): Convert ADDR to IPv4 before using it
1829         in IPv4 context.
1830
1831 2002-01-24  Hrvoje Niksic  <hniksic@arsdigita.com>
1832
1833         * source: Integrated IPv6 support.
1834         Written by Thomas Lussnig <thomas.lussnig@bewegungsmelder.de>.
1835
1836 2002-01-15  Ian Abbott  <abbotti@mev.co.uk>
1837
1838         * init.c (cmd_file): Change `\' to `/' for Windows (yes, really!)
1839         (cmd_directory): New function. Like cmd_file(), but strips
1840         trailing directory separators.
1841         (commands): Change action for "dirprefix" from `cmd_file' to
1842         `cmd_directory'.
1843
1844         * utils.c (make_directory): Allow intermediate `mkdir' calls to
1845         fail, as not all path components that do not exist should be
1846         directory components, especially under Windows.
1847
1848 2002-01-17  Hrvoje Niksic  <hniksic@arsdigita.com>
1849
1850         * netrc.c (parse_netrc): Skip leading whitespace before testing
1851         whether the line is empty.  Empty lines still contain the line
1852         terminator.
1853
1854 2002-01-15  Hrvoje Niksic  <hniksic@arsdigita.com>
1855
1856         * gen_sslfunc.c (ssl_iread): Call select on the file descriptor
1857         only if no data is pending in SSL buffers.
1858         From tony@bluetail.com.
1859
1860 2002-01-14  Hrvoje Niksic  <hniksic@arsdigita.com>
1861
1862         * headers.c (header_get): Strip trailing whitespace from the
1863         header.
1864
1865 2002-01-14  Hrvoje Niksic  <hniksic@arsdigita.com>
1866
1867         * url.c (parse_uname): URL-decode *USER and *PASSWD.
1868
1869 2002-01-07  Ian Abbott <abbotti@mev.co.uk>
1870
1871         * url.c (uri_merge_1): Deal with "net path" relative URL (one that
1872         starts with "//").
1873
1874 2002-01-14  Hrvoje Niksic  <hniksic@arsdigita.com>
1875
1876         * http.c (gethttp): Invalidate SOCK if get_contents encountered an
1877         error.
1878
1879 2001-12-24  Hrvoje Niksic  <hniksic@arsdigita.com>
1880
1881         * version.c: Wget 1.8.1 is released.
1882
1883 2001-12-19  Hrvoje Niksic  <hniksic@arsdigita.com>
1884
1885         * version.c: Wget 1.8.1-pre3 is released.
1886
1887 2001-12-19  Hrvoje Niksic  <hniksic@arsdigita.com>
1888
1889         * recur.c (retrieve_tree): Enqueue the canonical representation of
1890         start_url, so that the test against dl_url_file_map works.
1891
1892 2001-12-19  Hrvoje Niksic  <hniksic@arsdigita.com>
1893
1894         * log.c (logputs): Check for requested verbosity before printing
1895         anything.
1896
1897 2001-12-19  Hrvoje Niksic  <hniksic@arsdigita.com>
1898
1899         * html-url.c (tag_handle_link): Treat the "shortcut icon" link as
1900         inline.
1901
1902 2001-12-18  Hrvoje Niksic  <hniksic@arsdigita.com>
1903
1904         * recur.c (retrieve_tree): Make a copy of file obtained from
1905         dl_url_file_map because the code calls xfree(file) later.
1906
1907 2001-12-18  Hrvoje Niksic  <hniksic@arsdigita.com>
1908
1909         * recur.c (register_html): Maintain a hash table of HTML files
1910         along with the list.  Disallow duplicates.
1911         (retrieve_tree): Use downloaded_html_set to check whether the file
1912         found in dl_url_file_map is an HTML file, and descend into it if
1913         so.
1914         (convert_all_links): Don't guard against duplicates in
1915         downloaded_html_list, since they are no longer possible.
1916
1917 2001-12-18  Ian Abbott  <abbotti@mev.co.uk>
1918
1919         * recur.c (retrieve_tree): Pass on referring URL when retrieving
1920         recursed URL.
1921
1922 2001-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
1923
1924         * version.c: Wget 1.8.1-pre2 is released.
1925
1926 2001-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
1927
1928         * retr.c (sleep_between_retrievals): Simplify indentation.
1929
1930 2001-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
1931
1932         * gen_sslfunc.c (ssl_init_prng): Use random_number to get a byte
1933         of "randomness" at a time.
1934         (ssl_init_prng): Don't seed the PRNG; random_number will do that.
1935
1936         * retr.c (sleep_between_retrievals): Use it.  Make sure that the
1937         random amount averages in opt.wait.
1938         (sleep_between_retrievals): Don't seed the PRNG; random_number
1939         will do that.
1940
1941         * utils.c (random_number): New function.
1942
1943 2001-12-14  Hrvoje Niksic  <hniksic@arsdigita.com>
1944
1945         * url.c (path_simplify): Move here from utils.c, and make static.
1946
1947 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
1948
1949         * init.c (wgetrc_file_name): Print correct message when loading
1950         getenv("WGETRC") fails.
1951
1952 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
1953
1954         * recur.c (register_download): Don't abort when one URL references
1955         two different files.
1956
1957 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
1958
1959         * http.c (gethttp): Check for conn->scheme, not u->scheme, before
1960         calling ssl_iwrite.
1961
1962 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
1963
1964         * version.c: Wget 1.8.1-pre1 is released.
1965
1966 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
1967
1968         * res.c (matches): Fix broken URL in the docstring.
1969
1970 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
1971
1972         * html-url.c (tag_url_attributes): Mark <embed href=...> as
1973         external.
1974
1975 2001-12-12  Hrvoje Niksic  <hniksic@arsdigita.com>
1976
1977         * url.c (get_urls_file): Cosmetic changes.
1978
1979 2001-12-12  Hrvoje Niksic  <hniksic@arsdigita.com>
1980
1981         * html-url.c (append_one_url): Resurrect warning when unable to
1982         resolve a relative link.
1983
1984 2001-12-12  Hrvoje Niksic  <hniksic@arsdigita.com>
1985
1986         * html-url.c (collect_tags_mapper): Break into several functions.
1987         (tag_url_attributes): Collect <embed href=...>.
1988
1989 2001-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
1990
1991         * host.c: New type ipv4_address.  Use it consistently instead of
1992         `unsigned char[4]' and `unsigned char *'.
1993         (pretty_print_address): Accept a `const void *', to require even
1994         less casting.
1995
1996 2001-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
1997
1998         * ftp-ls.c (ftp_parse_vms_ls): Fix obvious memory leaks.
1999
2000 2001-12-10  Hrvoje Niksic  <hniksic@arsdigita.com>
2001
2002         * main.c (main): Initialize progress after fork_to_background, so
2003         that it knows when to use dots.
2004
2005         * mswindows.c (ws_hangup): Call log_request_redirect_output.
2006
2007         * utils.c (fork_to_background): Print the PID of the child
2008         process.
2009
2010         * log.c (log_request_redirect_output): Set a flag that output
2011         redirection has been requested.  Doing anything else in a signal
2012         handler is unsafe.
2013         (check_redirect_output): New function: check whether redirection
2014         has been requested and, if so, call redirect_output().
2015         (logputs): Call check_redirect_output.
2016         (logprintf): Ditto.
2017         (debug_logprintf): Ditto.
2018         (redirect_output): Print clearer messages.
2019
2020         * main.c (redirect_output_signal): Don't call
2021         redirect_output_signal directly.  Instead, call
2022         log_request_redirect_output.
2023
2024         * utils.c (memfatal): Ditto.
2025
2026         * progress.c (display_image): Use it.
2027
2028         * log.c (log_set_save_context): New function: allow the caller to
2029         turn off saving log context lines.
2030
2031 2001-12-10  Hrvoje Niksic  <hniksic@arsdigita.com>
2032
2033         * host.c (address_list_set_faulty): Uncomment a sanity check.
2034
2035 2001-12-10  Hrvoje Niksic  <hniksic@arsdigita.com>
2036
2037         * utils.c (long_to_string): Return a pointer after where the
2038         number ends.
2039         (long_to_string): Rename to number_to_string.
2040
2041 2001-12-10  Hrvoje Niksic  <hniksic@arsdigita.com>
2042
2043         * utils.c (path_simplify): Correctly handle the unlikely case that
2044         b starts out as path + 1.
2045
2046 2001-12-10  Hrvoje Niksic  <hniksic@arsdigita.com>
2047
2048         * utils.c (path_simplify): Rewrite, with better comments, and
2049         without the use of strcpy to move overlapping blocks.
2050
2051 2001-12-09  Hrvoje Niksic  <hniksic@arsdigita.com>
2052
2053         * init.c (cmd_spec_progress): Resurrect.  Check whether VAL is a
2054         valid progress type before setting it.
2055
2056 2001-12-09  Hrvoje Niksic  <hniksic@arsdigita.com>
2057
2058         * main.c (main): Remove stray debugging message.
2059
2060 2001-12-09  Hrvoje Niksic  <hniksic@arsdigita.com>
2061
2062         * progress.c (create_image): Fix ETA padding when hours are prined.
2063
2064 2001-12-09  Hrvoje Niksic  <hniksic@arsdigita.com>
2065
2066         * version.c: Wget 1.8 is released.
2067
2068 2001-12-09  Hrvoje Niksic  <hniksic@arsdigita.com>
2069
2070         * url.c (reencode_string): Declare static.
2071
2072         * res.c (registered_specs): Declare static.
2073
2074         * progress.c (current_impl_locked): Declare static.
2075
2076         * log.c (flush_log_p): Declare static.
2077         (needs_flushing): Ditto.
2078
2079         * http.c (digest_authentication_encode): Declare static.
2080
2081         * html-url.c (init_interesting): Declare static.
2082
2083         * host.c (host_name_addresses_map): Declare static.
2084
2085         * cookies.c (find_matching_chains): Declare static.
2086
2087         * ftp-ls.c (ftp_parse_vms_ls): Warn about the memory leak
2088         indicated by lint.
2089
2090         * utils.c (path_simplify): Remove unused variable STUB_CHAR.
2091
2092         * host.c (address_list_set_faulty): Document that INDEX is
2093         currently unused.
2094
2095         * url.c (rewrite_shorthand_url): Remove unused variable PATH.
2096
2097 2001-12-08  Hrvoje Niksic  <hniksic@arsdigita.com>
2098
2099         * version.c: Wget 1.8-pre2 is released.
2100
2101 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
2102
2103         * progress.c (progress_handle_sigwinch): Set up the signal again.
2104
2105         * utils.c: Include <sys/termios.h>, where Solaris defines
2106         TIOCGWINSZ.
2107
2108         * progress.c (bar_create): Don't use the last column on the screen.
2109         (create_image): Pad ETA to constant size.  Pad SIZE to nine digits
2110         only until it exceeded them.
2111
2112 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
2113
2114         * version.c: Wget 1.8-pre1 is released.
2115
2116 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
2117
2118         * progress.c (progress_create): Make sure that, when the output is
2119         redirected, the progress implementation gets changed to the
2120         fallback one.
2121         (bar_set_params): Set current_impl_locked to 1 when "force" is
2122         specified.
2123         (progress_create): Don't change the progress implementation if
2124         current_impl_locked is non-zero.
2125
2126         * main.c (redirect_output_signal): Call
2127         progress_schedule_redirect.
2128
2129         * progress.c (progress_schedule_redirect): New function.
2130
2131 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
2132
2133         * log.c (logvprintf): Restructure to allow being called multiple
2134         times.
2135         (logprintf): Call logvprintf in a loop.
2136         (debug_logprintf): Ditto.
2137
2138 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
2139
2140         * gen_sslfunc.c (ssl_init_prng): Allow the user to disable EGD by
2141         setting egd_file it to empty string.
2142
2143         * main.c (main): Change the option name from --sslegdsock to
2144         --egd-file.
2145
2146 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
2147
2148         * gen_sslfunc.c (ssl_init_prng): Make the printed message
2149         translatable.
2150
2151 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
2152
2153         * url.c (scheme_disable): New function.
2154
2155         * main.c (main): Call ssl_init_prng from here rather than from
2156         init_ssl, so that it has a chance to disable support for https
2157         before a URL has been resolved.
2158
2159         * gen_sslfunc.c (ssl_init_prng): Seed with rand() if all else
2160         failed.
2161         (ssl_init_prng): Disable support for https if seeding the PRNG
2162         fails.
2163
2164 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
2165
2166         * utils.c (read_whole_line): Handle lines beginning with \0.
2167
2168 2001-12-05  Hrvoje Niksic  <hniksic@arsdigita.com>
2169
2170         * recur.c (convert_all_links): Guard against duplicates in
2171         downloaded_html_files.
2172         (register_download): Don't invalidate similar-looking URLs.
2173         (match_except_index): New function.
2174
2175 2001-12-05  Hrvoje Niksic  <hniksic@arsdigita.com>
2176
2177         * utils.c (path_simplify): Document with test cases.
2178
2179 2001-12-04  Hrvoje Niksic  <hniksic@arsdigita.com>
2180
2181         * gen_sslfunc.c: Ditto.
2182
2183         * rbuf.c: Include <string.h>.
2184
2185 2001-12-04  Hrvoje Niksic  <hniksic@arsdigita.com>
2186
2187         * recur.c (retrieve_tree): Check whether the URL was already
2188         downloaded before downloading it again.
2189         (descend_child_p): Renamed to download_child_p.
2190         (register_download): When one URL is downloaded to a file already
2191         "owned" by another URL, delete all references that map any URL to
2192         that file.
2193         (register_delete_file): New function.
2194         (retrieve_tree): Use it after deleting a file.
2195
2196         * url.c (url_parse): Re-canonicalize the URL also if the path is
2197         empty, so that e.g. "http://www.server.com" ->
2198         "http://www.server.com/".
2199         (lowercase_str): Use ISUPPER instead of !ISLOWER.
2200
2201         * retr.c (retrieve_url): Use the canonical URL form when calling
2202         register_download().
2203
2204 2001-12-04  Ian Abbott <abbotti@mev.co.uk>
2205
2206         * snprintf.c (dopr): Use `unsigned int' as the second argument to
2207         va_arg when casting to `unsigned short' is intended.
2208
2209 2001-12-04  Herold Heiko  <Heiko.Herold@previnet.it>
2210
2211         * gen_sslfunc.c: on windows provide ssl crypto random
2212           initialization through RAND_screen(); could possibly
2213           be not enough for strong ssl communication (see the
2214           relevant manual page from the openssl package).
2215
2216 2001-12-04  Hrvoje Niksic  <hniksic@arsdigita.com>
2217
2218         * url.c (local_quote_string): Reenable quoting of question marks,
2219         but only when `--html-extension' is used.
2220
2221 2001-12-03  Hrvoje Niksic  <hniksic@arsdigita.com>
2222
2223         * version.c: Wget 1.8-beta3 is released.
2224
2225 2001-12-03  Hrvoje Niksic  <hniksic@arsdigita.com>
2226
2227         * snprintf.c (dopr): Cast the result of va_arg to short int and
2228         short unsigned int where these types are expected to be used.
2229
2230 2001-12-03  Hrvoje Niksic  <hniksic@arsdigita.com>
2231
2232         * snprintf.c (dopr): Replace `short int' and `unsigned short int'
2233         with `int' when using it as the second argument to `va_arg'.
2234
2235 2001-12-03  Hrvoje Niksic  <hniksic@arsdigita.com>
2236
2237         * host.c (address_list_new_one): New function.
2238         (lookup_host): Use it.
2239
2240 2001-12-03  Andre Majorel  <amajorel@teaser.fr>
2241
2242         * host.c (lookup_host): Don't initialize TMPSTORE directly because
2243         it's not legal C.
2244
2245 2001-12-03  Hrvoje Niksic  <hniksic@arsdigita.com>
2246
2247         * ftp-basic.c (ftp_port): Don't return HOSTERR if we fail getting
2248         the socket data.
2249
2250         * ftp.c: Ditto.
2251
2252         * http.c: No need to declare h_errno.
2253
2254         * host.c: Declare h_errno.
2255
2256 2001-12-02  Hrvoje Niksic  <hniksic@arsdigita.com>
2257
2258         * utils.c (file_merge): If BASE doesn't contain a slash, just
2259         return a copy of FILE.
2260
2261 2001-12-02  Hrvoje Niksic  <hniksic@arsdigita.com>
2262
2263         * version.c: Wget 1.8-beta2 is released.
2264
2265 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
2266
2267         * ftp.c (getftp): When PWD fails, assume "/".
2268
2269         * ftp-basic.c (ftp_syst): Fix indentation.
2270
2271 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
2272
2273         * url.c (get_urls_file): If opt.base_href is specified, merge each
2274         URL with the base.
2275
2276 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
2277
2278         * main.c (print_help): Don't document the removed `-nh'.
2279
2280 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
2281
2282         * url.c (url_full_path): Document better.
2283
2284         * http.c (gethttp): Use the full path when creating digest
2285         authorization.
2286
2287 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
2288
2289         * cookies.c (path_matches): Return 0 if PREFIX doesn't begin with
2290         '/'.
2291
2292 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
2293
2294         * cookies.c (path_matches): FULL_PATH doesn't begin with '/', but
2295         PREFIX does.
2296
2297 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
2298
2299         * cookies.c (check_domain_match): Reimplement to match Netscape's
2300         "preliminary specification" for cookies.
2301
2302 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
2303
2304         * url.c (replace_attr_refresh_hack): New function.
2305         (convert_links): Call replace_attr_refresh_hack for Refresh
2306         links.  It will add the "TMOUT; URL=" junk before the link.
2307
2308         * html-url.c (collect_tags_mapper): Set ID to the ID of the
2309         "content" attribute, not "http-equiv".
2310         (collect_tags_mapper): Don't use OFFSET to hack the raw_* values;
2311         instead, store the information that this entry belongs to a
2312         "refresh" link.
2313
2314 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
2315
2316         * version.c: Wget 1.8-beta1 is released.
2317
2318 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
2319
2320         * recur.c (retrieve_tree): Allow -p retrievals to exceed maximum
2321         depth by more than one.
2322
2323 2001-11-30  Hrvoje Niksic  <hniksic@arsdigita.com>
2324
2325         * retr.c (retrieve_url): Don't allow more than 20 redirections.
2326
2327 2001-11-30  Hrvoje Niksic  <hniksic@arsdigita.com>
2328
2329         * recur.c (retrieve_tree): Skip the non-inline entries when
2330         enqueuing the children of a leaf HTML node in -p mode.
2331         (descend_url_p): Ignore opt.no_parent when in -p mode and UPOS is
2332         "inline".
2333
2334         * html-url.c (get_urls_html): Don't accept dash_p_leaf_HTML.
2335         (collect_tags_mapper): When an entry is "inline", mark it as such.
2336
2337         * recur.c (descend_url_p): Fix test when checking for
2338         acceptance/rejection rules.
2339
2340 2001-10-31 Daniel BODEA <dali@dali-designs.com>
2341
2342         * netrc.c (search_netrc): When slack_default is 0, still look for
2343         an account with matching password, just not the "default account".
2344         HTTP Authorization using .netrc should now work as expected.
2345
2346 2001-11-30  T. Bharath  <TBharath@responsenetworks.com>
2347
2348         * http.c (persistent_available_p): Call SHUTDOWN_SSL if
2349         test_socket_open fails.
2350
2351 2001-11-30  Hrvoje Niksic  <hniksic@arsdigita.com>
2352
2353         * progress.c (display_image): Just print one CR to reset the
2354         cursor position.
2355
2356 2001-11-30  Christian Fraenkel  <c.fraenkel@gmx.net>
2357
2358         * init.c: New command `ssl_egd_sock'.
2359
2360         * main.c (main): New option `--sslegdsock'.
2361
2362         * gen_sslfunc.c (ssl_init_prng): Seed the RNG using EGD.
2363
2364 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
2365
2366         * cmpt.c (memmove): Include a simple memmove implementation.
2367
2368 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
2369
2370         * headers: Guard against header files being included twice.
2371
2372 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
2373
2374         * gen-md5.c: Use unsigned char * as the buffer argument to
2375         gen_md5_update.
2376
2377 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
2378
2379         * connect.h: Declare select_fd.
2380
2381 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
2382
2383         * recur.c (descend_url_p): When resolving no_parent, compare with
2384         start_url, not parent url.  Otherwise link from /a/b/ to /a/c/
2385         wouldn't be followed, although the download started from /a/.
2386
2387 2001-01-23  Herold Heiko  <Heiko.Herold@previnet.it>
2388
2389         * config.h.ms, mswindows.h: defined HAVE_ISATTY, use _isatty for
2390         MS VC; somebody with Borland compiler please check and provide
2391         patch if possible;
2392
2393         * cmpt.c: provided a usleep emulation.
2394
2395 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
2396
2397         * host.c (address_list_new): Initialize al->faulty.
2398
2399 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
2400
2401         * http.c (http_process_range): Accept the broken output of
2402         "JavaWebServer/1.1.1".
2403
2404 2001-11-28  Hrvoje Niksic  <hniksic@arsdigita.com>
2405
2406         * progress.c (dot_set_params): If PARAMS is unspecified, use
2407         dot_style, if available.
2408
2409         * init.c: Ditto.
2410
2411         * main.c (main): Resurect --dot-style.
2412
2413         * progress.c (dot_finish): Print the quantity if we're left at the
2414         beginning of a row.
2415
2416 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
2417
2418         * cmpt.c (random): Removed.
2419
2420         * retr.c (sleep_between_retrievals): Use the more portable rand()
2421         instead of random().
2422
2423 2001-11-27  Ian Abbott <abbotti@mev.co.uk>
2424
2425         * retr.c (retrieve_from_file): Initialize `new_file' to NULL to
2426         prevent seg fault.
2427
2428 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
2429
2430         * connect.c (connect_to_many): Use address_list_set_faulty to
2431         prevent the faulty address from being reused.
2432
2433         * host.c (address_list_set_faulty): New function.
2434         (address_list_get_bounds): New function, instead of
2435         address_list_count.
2436
2437 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
2438
2439         * url.c (convert_links): Don't translate %d-%d.
2440
2441         * main.c (print_help): Remove stray HAVE_RANDOM code.
2442
2443 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
2444
2445         * ftp.c (getftp): Improve output after sending PASV.  Don't
2446         attempt to "look up" the IP address we already know; call
2447         connect_to_one directly.
2448
2449 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
2450
2451         * progress.c: Change the default progress implementation to "bar".
2452
2453 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
2454
2455         * progress.c (bar_create): Print two newlines.
2456
2457 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
2458
2459         * cmpt.c (random): New function, a simple-minded replacement for
2460         random() on systems that don't have it.
2461
2462 2001-11-26  Hrvoje Niksic  <hniksic@arsdigita.com>
2463
2464         * config.h.in: Put a HAVE_USLEEP stub.
2465
2466         * cmpt.c (usleep): Replacement implementation of usleep using
2467         select.
2468
2469         * init.c: New option init_rate.
2470
2471         * main.c (main): New option --limit-rate.
2472
2473         * retr.c (limit_bandwidth): New function.
2474         (get_contents): Call it to limit the bandwidth used when
2475         downloading.
2476
2477         * progress.c (dot_update): Would print the wrong download speed on
2478         rows other than the first one when the download was continued.
2479         (dot_finish): Ditto.
2480
2481 2001-11-26  Ian Abbott <abbotti@mev.co.uk>
2482
2483         * http.c (gethttp): fix undeclared variable 'err' when compiled
2484         with HAVE_SSL.
2485
2486 2001-11-26  Hrvoje Niksic  <hniksic@arsdigita.com>
2487
2488         * progress.c: Don't allocate new timers; use the timing data
2489         propagated from the caller.
2490
2491         * retr.c (get_contents): Allocate and use a timer.
2492
2493 2001-11-26  Hrvoje Niksic  <hniksic@arsdigita.com>
2494
2495         * http.c (last_host_ip): Made into an address_list.
2496         (invalidate_persistent): Release pc_last_host_ip.
2497         (register_persistent): Use lookup_host.
2498         (persistent_available_p): Check for equality of hosts using
2499         address_list_match_all.  Call address_list_release.
2500         (http_cleanup): New function.
2501
2502         * ftp.c (getftp): Use lookup_host and connect_to_many.
2503
2504         * http.c (gethttp): Use lookup_host and connect_to_many.
2505
2506         * connect.c (make_connection): Removed.
2507         (connect_to_one): New function.
2508         (connect_to_many): Ditto.
2509         (set_connection_host_name): Ditto.
2510
2511         * host.c (lookup_host): New function; new return type.
2512         (address_list_new): New function.
2513         (address_list_count): Ditto.
2514         (address_list_copy_one): Ditto.
2515         (address_list_delete): Ditto.
2516         (address_list_release): Ditto.
2517         (pretty_print_address): Ditto.
2518
2519 2001-11-26  Hrvoje Niksic  <hniksic@arsdigita.com>
2520
2521         * recur.c (retrieve_tree): In case of followed redirection,
2522         blacklist the pre-redirection URL.
2523
2524 2001-11-26  Hrvoje Niksic  <hniksic@arsdigita.com>
2525
2526         * recur.c (descend_redirect_p): New function.
2527         (retrieve_tree): Make sure redirections are not blindly followed.
2528
2529 2001-11-04  Alan Eldridge  <alane@geeksrus.net>
2530
2531         * config.h.in: added HAVE_RANDOM.
2532
2533         * options.h: added random_wait to struct options.
2534
2535         * main.c (print_help [HAVE_RANDOM], main): added arg parsing, help
2536         for --random-wait.
2537
2538         * retr.c (sleep_between_retrievals) [HAVE_RANDOM]: added
2539         implementation of random wait times.
2540
2541         * init.c (commands): added "randomwait" keyword.
2542
2543 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
2544
2545         * recur.c (descend_url_p): Be more conservative with blacklisting
2546         URLs.
2547         (convert_all_links): Print how many files have been converted, and
2548         how long it took.
2549
2550         * progress.c (create_image): Place the number of downloaded bytes
2551         right after the progress bar.
2552
2553         * utils.c (suffix): Return a pointer into the string.
2554
2555 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
2556
2557         * url.c (convert_links): Handle CO_NULLIFY_BASE.
2558
2559         * recur.c (retrieve_tree): Ignore download-ignorable children.
2560         (convert_all_links): Specify CO_NULLIFY_BASE when link_base_p.
2561
2562         * html-url.c (handle_link): Return the newly created urlpos.
2563         (collect_tags_mapper): When dealing with BASE, store the base
2564         reference and mark it as download-ignorable.
2565
2566 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
2567
2568         * url.c (convert_links): Attempt to quote '?' as "%3F" when
2569         linking to local files.  Given up on the attempt, as it breaks
2570         local browsing.
2571
2572 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
2573
2574         * main.c (private_initialize): Removed.
2575         (main): Don't call private_initialize.
2576
2577         * http.c: Call lookup_host.
2578
2579         * host.c (host_init): Removed.
2580         (add_host_to_cache): Initialize host_name_address_map here, on
2581         demand.
2582         (ngethostbyname): Commented out.
2583
2584         * connect.c (make_connection): Remove dead code; use lookup_host.
2585
2586         * host.c (store_hostaddress): Renamed to lookup_host and reversed
2587         the args.
2588         Removed host_address_name_map and host_slave_master_map.
2589
2590 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
2591
2592         * progress.c (dot_create): Align the "[ skipping ... ]" string
2593         with the dots.
2594
2595         * retr.c (rate): Split into two functions: calc_rate and
2596         retr_rate.
2597
2598         * progress.c (create_image): Draw a dummy progress bar even when
2599         total size is unknown.
2600         (display_image): Place the text cursor at the end of the "image".
2601
2602 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
2603
2604         * url.c (reencode_string): Use unsigned char, not char --
2605         otherwise the hex digits come out wrong for 8-bit chars such as
2606         nbsp.
2607         (lowercase_str): New function.
2608         (url_parse): Canonicalize u->url if needed.
2609         (get_urls_file): Parse each URL, and return only the valid ones.
2610         (free_urlpos): Call url_free.
2611         (mkstruct): Add :port if the port is non-standard.
2612         (mkstruct): Append the query string to the file name, if any.
2613         (urlpath_length): Use strpbrk_or_eos.
2614         (uri_merge_1): Handle the cases where LINK is an empty string,
2615         where LINK consists only of query, and where LINK consists only of
2616         fragment.
2617         (convert_links): Count and report both kinds of conversion.
2618         (downloaded_file): Use a hash table, not a list.
2619         (downloaded_files_free): Free the hash table.
2620
2621         * retr.c (retrieve_from_file): Ditto.
2622
2623         * main.c (main): Call either retrieve_url or retrieve_tree
2624         for each URL, not both.
2625
2626         * retr.c (register_all_redirections): New function.
2627         (register_redirections_mapper): Ditto.
2628         (retrieve_url): Register the redirections.
2629         (retrieve_url): Make the string "Error parsing proxy ..."
2630         translatable.
2631
2632         * res.c (add_path): Strip leading slash from robots.txt paths so
2633         that the path representations are "compatible".
2634         (free_specs): Free each individual path, too.
2635         (res_cleanup): New function.
2636         (cleanup_hash_table_mapper): Ditto.
2637
2638         * recur.c (url_queue_new): New function.
2639         (url_queue_delete): Ditto.
2640         (url_enqueue): Ditto.
2641         (url_dequeue): Ditto.
2642         (retrieve_tree): New function, replacement for recursive_retrieve.
2643         (descend_url_p): New function.
2644         (register_redirection): New function.
2645
2646         * progress.c (create_image): Cosmetic changes.
2647
2648         * init.c (cleanup): Do all those complex cleanups only if
2649         DEBUG_MALLOC is defined.
2650
2651         * main.c: Removed --simple-check and the corresponding
2652         simple_host_check in init.c.
2653
2654         * html-url.c (handle_link): Parse the URL here, and propagate the
2655         parsed URL to the caller, who would otherwise have to parse it
2656         again.
2657
2658         * host.c (xstrdup_lower): Moved to utils.c.
2659         (realhost): Removed.
2660         (same_host): Ditto.
2661
2662 2001-11-24  Hrvoje Niksic  <hniksic@arsdigita.com>
2663
2664         * utils.c (path_simplify): Preserver the (non-)existence of
2665         leading slash.  Return non-zero if changes were made.
2666
2667 2001-11-24  Hrvoje Niksic  <hniksic@arsdigita.com>
2668
2669         * progress.c (bar_update): Don't modify bp->total_length if it is
2670         zero.
2671
2672 2001-11-24  Hrvoje Niksic  <hniksic@arsdigita.com>
2673
2674         * retr.c (retrieve_url): When the redirection URL doesn't parse,
2675         print the correct error message rather than "UNKNOWN".
2676
2677 2001-11-24  Hrvoje Niksic  <hniksic@arsdigita.com>
2678
2679         * progress.c (bar_finish): If the timer didn't record any time
2680         since the download beginning, fake 1ms.
2681
2682 2001-11-24  Hrvoje Niksic  <hniksic@arsdigita.com>
2683
2684         * recur.c (recursive_retrieve): Fix typo.
2685
2686 2001-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
2687
2688         * progress.c (create_image): Don't translate "%ld ".
2689
2690 2001-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
2691
2692         * progress.c (bar_set_params): Allow the user to force the use of
2693         the bar.
2694
2695 2001-11-23  Lemble Gregory  <gregory.lemble@st.com>
2696
2697         * gen_sslfunc.c (ssl_init_prng): New function; seed the SSL RNG.
2698
2699 2001-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
2700
2701         * progress.c: Renamed dp_* functions to dot_* for greater clarity
2702         and consistency with bar_*.
2703         (print_download_speed): Get rid of the unneeded '@' character.
2704         (create_image): Fix download rate geometry.
2705
2706         * progress.c (print_elapsed): Remove spurious space.
2707         (print_elapsed): Renamed to print_download_speed, since that's
2708         what it does.
2709
2710 2001-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
2711
2712         * progress.c (bar_update): If the downloaded amount becomes larger
2713         than the expected amount, adjust the expected amount accordingly.
2714
2715 2001-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
2716
2717         * utils.c (determine_screen_width): New function.
2718
2719         * main.c (main): New option `--progress=TYPE'.
2720         (main): Implement compatibility with the old option `--dot-style'.
2721
2722         * init.c: Removed cmd_spec_dotstyle -- that logic is now in
2723         dp_set_params.
2724         (cmd_spec_progress): New function.
2725
2726         * retr.c (get_contents): Use the progress_* functions instead of
2727         the old show_progress().
2728         (show_progress): Removed.
2729         (rate): Print "xxxx.xx K/s" instead of "KB/s".  Ditto for MB/s,
2730         etc.
2731
2732         * progress.c (set_progress_implementation): New function.
2733         (valid_progress_implementation_p): Ditto.
2734         (progress_create): Ditto.
2735         (progress_update): Ditto.
2736         (progress_finish): Ditto.
2737         (dp_create): Ditto.
2738         (dp_update): Ditto.
2739         (dp_finish): Ditto.
2740         (dp_set_params): Ditto.
2741         (print_elapsed): Ditto.
2742
2743 2001-11-22  Hrvoje Niksic  <hniksic@arsdigita.com>
2744
2745         * retr.c (show_progress): Use it.
2746
2747         * log.c (log_set_flush): New function.
2748
2749 2001-11-22  Hrvoje Niksic  <hniksic@arsdigita.com>
2750
2751         * utils.c (path_simplify): Don't remove trailing slashes.
2752
2753         * ftp.c (ftp_get_listing): Use it.
2754
2755         * utils.c (file_merge): New function.
2756
2757         * url.c (opt_url): Removed.
2758
2759         * recur.c (recursive_retrieve): Inline "opt_url" logic.
2760
2761         * main.c (main): Use xfree(), not free().
2762
2763         * url.c (rewrite_url_maybe): Renamed to rewrite_shorthand_url.
2764
2765         * ftp.c (ccon): Move `ccon' typedef here, since it's only used
2766         internally.
2767
2768         * config.h.in: Include a stub for HAVE_STRPBRK.
2769
2770         * cmpt.c (strpbrk): Include a replacement for systems without
2771         strpbrk().
2772
2773         * ftp.c: Use url_set_dir and url_set_file when modifying the URL.
2774
2775         * url.c (url_set_dir): New function.
2776         (url_set_file): Ditto.
2777
2778         * ftp-basic.c (ftp_process_type): Process FTP type here; the URL
2779         parser makes the URL "params" available, so we can do that in this
2780         function.
2781
2782         * retr.c: Ditto.
2783
2784         * ftp.c: Ditto; pass the local file information in `ccon'.
2785
2786         * http.c: Get rid of the ugly kludge that had URL being replaced
2787         with the proxy URL when proxy retrieval was requested.  Use a
2788         separate parameter to http_loop and gethttp for the proxy URL.
2789
2790         * http.c: Changed to reflect the fact that local file, proxy, and
2791         referer information are no longer stored in struct url.  The local
2792         file information is passed in `struct hstat' now.
2793
2794         * url.c: Reworked URL parsing to be more regular.  Reencode the
2795         URL using reencode_string.
2796         Removed non-URL-related information from struct url.  This
2797         includes fields `proxy', `local', and `referer'.
2798
2799 2001-11-22  Jochen Hein  <jochen@jochen.org>
2800
2801         * main.c (main): Split the copyright notice for easier
2802         translation.
2803
2804 2001-08-21  Dave Turner <dct25@hermes.cam.ac.uk>
2805
2806         * ftp-basic.c (ftp_size): New function to send non-standard SIZE
2807           command to server to request file size.
2808         * ftp.h (ftp_size): Export it.
2809         * ftp.c (getftp): Use new ftp_size function if restoring
2810           transfer of a file with unknown size.
2811
2812 2001-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
2813
2814         * url.c (parseurl): Don't depend on the now-obsolete TYPE.
2815
2816 2001-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
2817
2818         * url.c (getproxy): Handle URL shorthands.
2819
2820 2001-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
2821
2822         * main.c: Remove --wait / --waitretry backwards compatibility
2823         code.
2824
2825 2001-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
2826
2827         * main.c (main): Use it.
2828
2829         * url.c (rewrite_url_maybe): New function.
2830
2831 2001-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
2832
2833         * url.c: Clean up handling of URL schemes.
2834
2835 2001-05-13  Hrvoje Niksic  <hniksic@arsdigita.com>
2836
2837         * url.c: Get rid of `protostrings'.
2838         (skip_proto): Don't use protostrings.
2839         (has_proto): Ditto.
2840
2841 2001-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
2842
2843         * Makefile.in: Conditionally compile getopt.o.
2844
2845 2001-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
2846
2847         * md5.h: Renamed to gnu-md5.h.
2848
2849         * md5.c: Renamed to gnu-md5.c.
2850
2851         * http.c: Ditto.
2852
2853         * ftp-opie.c: Use the new macros.
2854
2855         * sysdep.h: Define md5-related macros.
2856
2857         * config.h.in: Define HAVE_SOLARIS_MD5 or HAVE_BUILTIN_MD5
2858         depending on which md5 implementation is used.
2859
2860 2001-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
2861
2862         * res.c (res_register_specs): Initialize OLD and HP_OLD to appease
2863         the compiler.
2864
2865 2001-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
2866
2867         * http.c (gethttp): Print the whole response line when printing
2868         headers is requested.
2869
2870 2001-05-12  Hrvoje Niksic  <hniksic@arsdigita.com>
2871
2872         * res.c: New file.  Implement all RES-related code here.
2873
2874 2001-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
2875
2876         * version.c: Wget 1.7.1 is released.
2877
2878 2001-11-16  Hrvoje Niksic  <hniksic@arsdigita.com>
2879
2880         * headers.c (header_extract_number): Ignore trailing whitespace.
2881
2882 2001-08-24  Ian Abbott  <abbotti@mev.co.uk>
2883
2884         * html-url.c (collect_tags_mapper): Fix bug converting links
2885         with -k option for tags with multiple link attributes by
2886         handling links in the order they appear.
2887
2888 2001-08-15  Ian Abbott  <abbotti@mev.co.uk>
2889
2890         * ftp.c (ftp_loop_internal): Avoid a potential buffer overflow in
2891           the call to the 'rate' function by moving it past the error
2892           checking for the 'getftp' function return value.
2893
2894 2001-11-16  Hrvoje Niksic  <hniksic@arsdigita.com>
2895
2896         * html-parse.c (advance_declaration): Use 0x22 instead of '"' or
2897         '\"'.  Different compilers' assert macros are broken in different
2898         ways.
2899
2900 2001-09-29  Christian Fraenkel  <c.fraenkel@gmx.net>
2901
2902         * http.c (gethttp): print debug output for errors occuring during
2903         the ssl handshake.
2904
2905 2001-11-16  Chris Seawood  <cls@seawood.org>
2906
2907         * init.c: Ditto.
2908
2909         * host.c: Ditto.
2910
2911         * connect.c: Ditto.
2912
2913         * sysdep.h: Support compilation under BEOS.
2914
2915 2001-06-08  Edward J. Sabol  <sabol@alderaan.gsfc.nasa.gov>
2916
2917         * url.c (url_equal): Fix a memory leak when parseurl returns an
2918         error on the second URL. Also, since url_equal is not used at the
2919         moment, do not compile it.
2920
2921         * url.h: Ditto for the prototype of url_equal.
2922
2923 2001-11-16  Hrvoje Niksic  <hniksic@arsdigita.com>
2924
2925         * html-parse.c (map_html_tags): Support XML-style empty tags.
2926
2927 2001-06-26  Hrvoje Niksic  <hniksic@arsdigita.com>
2928
2929         * wget.h (DO_REALLOC_FROM_ALLOCA): Check for do_realloc_newsize in
2930         loop condition because we're no longer setting SIZEVAR here.
2931
2932 2001-06-26  Hrvoje Niksic  <hniksic@arsdigita.com>
2933
2934         * wget.h (DO_REALLOC_FROM_ALLOCA): Set SIZEVAR after the memcpy()
2935         call because it needs the old value.
2936
2937 2001-06-18  Hrvoje Niksic  <hniksic@arsdigita.com>
2938
2939         * cookies.c (ATTR_NAME_CHAR): Allow almost any character to be in
2940         an attribute name.
2941
2942 2001-06-18  Hrvoje Niksic  <hniksic@arsdigita.com>
2943
2944         * url.c (url_filename): Make sure that slashes that sneak in to
2945         u->file via query string get protected.
2946         (file_name_protect_query_string): New function.
2947
2948 2001-06-14  Hrvoje Niksic  <hniksic@arsdigita.com>
2949
2950         * recur.c (recursive_retrieve): Also check undesirable_urls with
2951         canonicalized URL.
2952
2953 2001-06-14  Hrvoje Niksic  <hniksic@arsdigita.com>
2954
2955         * http.c (gethttp): Search `.netrc' with real host, not the proxy
2956         one.
2957
2958 2001-06-14  Hrvoje Niksic  <hniksic@arsdigita.com>
2959
2960         * sysdep.h (MAP_FAILED): Provide MAP_FAILED for systems that don't
2961         define it.
2962
2963 2001-06-09  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
2964
2965         * ftp.h: Provide correct prototype for ftp_parse_ls().
2966
2967 2001-06-04  Hrvoje Niksic  <hniksic@arsdigita.com>
2968
2969         * version.c: Wget 1.7 is released.
2970
2971 2001-06-03  Karl Eichwalder  <ke@suse.de>
2972
2973         * ftp-ls.c (ftp_parse_ls): Fix typo.
2974
2975 2001-05-27  Hrvoje Niksic  <hniksic@arsdigita.com>
2976
2977         * all: Update copyright information.
2978
2979 2001-05-26  Hrvoje Niksic  <hniksic@arsdigita.com>
2980
2981         * http.c (gethttp): Indicate that the continued download failed
2982         for *this* file.
2983
2984 2001-05-26  Hrvoje Niksic  <hniksic@arsdigita.com>
2985
2986         * version.c: Wget 1.7-pre1 is released.
2987
2988 2001-05-26  Hrvoje Niksic  <hniksic@arsdigita.com>
2989
2990         * version.c: Updated version to 1.7-pre1.
2991
2992 2001-05-14  Hrvoje Niksic  <hniksic@arsdigita.com>
2993
2994         * gen_sslfunc.c: Don't include <sys/time.h> directly.
2995
2996 2001-05-14  Hrvoje Niksic  <hniksic@arsdigita.com>
2997
2998         * http.c (gethttp): Use real URL data for cookies, not the proxy
2999         stuff.
3000
3001 2001-05-12  Hrvoje Niksic  <hniksic@arsdigita.com>
3002
3003         * main.c (print_help): Document `--no-http-keep-alive'.
3004
3005         * utils.c (numdigit): Handle negative numbers *correctly*.
3006
3007         * hash.c (make_nocase_string_hash_table): Use term "nocase" rather
3008         than the confusing "unsigned".
3009
3010         * utils.c (string_set_contains): Renamed from string_set_exists.
3011
3012         * hash.c (hash_table_contains): Renamed from hash_table_exists.
3013
3014         * cookies.c: Move case-insensitive hash tables to hash.c.
3015
3016 2001-05-09  Hrvoje Niksic  <hniksic@arsdigita.com>
3017
3018         * http.c (gethttp): Before concluding that the file is already
3019         fully retrieved, make sure that the file existed and `Range' was
3020         actually requested.
3021
3022 2001-05-09  Hrvoje Niksic  <hniksic@arsdigita.com>
3023
3024         * cookies.c (eliminate_dups): New function.
3025         (build_cookies_request): Use it.
3026         (build_cookies_request): Set chain_store_size after reallocating
3027         all_chains.
3028         (check_domain_match): Annotated for easier future debugging.
3029         (store_cookie): In the debug message, print whether the cookie is
3030         permanent.
3031
3032 2001-05-08  Hrvoje Niksic  <hniksic@arsdigita.com>
3033
3034         * http.c (http_loop): Reset no_truncate before deciding whether to
3035         set it.
3036         (gethttp): Further clarify "-c conflicts with existing file" error
3037         message, based on input from Herold Heiko.
3038
3039 2001-05-07  Hrvoje Niksic  <hniksic@arsdigita.com>
3040
3041         * http.c (http_loop): If restval is set, set no_truncate to 1
3042         unconditionally.
3043
3044 2001-05-02  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
3045
3046         * ftp-ls.c (ftp_parse_winnt_ls): Assure months are being correctly
3047         converted. Pointed out by <Stefan.Weil@de.heidelberg.com>.
3048         (ftp_parse_vms_ls): Ditto.
3049
3050 2001-04-30  Hrvoje Niksic  <hniksic@arsdigita.com>
3051
3052         * init.c (cmd_address): Zero SIN before using it; apparently
3053         needed on *BSD.
3054
3055 2001-04-29  Hrvoje Niksic  <hniksic@arsdigita.com>
3056
3057         * ftp.c (ftp_loop_internal): Don't set NO_TRUNCATE if the file is
3058         empty.
3059
3060 2001-04-29  Hrvoje Niksic  <hniksic@arsdigita.com>
3061
3062         * main.c (main): Make `--cookies' respect its argument.
3063
3064 2001-04-28  Hrvoje Niksic  <hniksic@arsdigita.com>
3065
3066         * main.c (main): Removed undocumented option `--email-address'.
3067
3068         * netrc.c: Use the latest read_whole_line.
3069
3070         * init.c (defaults): Set opt.ftp_pass to "-wget@".
3071
3072         * mswindows.c (pwd_cuserid): Ditto.
3073
3074         * utils.c (pwd_cuserid): Removed.
3075
3076         * host.c (ftp_getaddress): Removed.
3077
3078 2001-04-28  Hrvoje Niksic  <hniksic@arsdigita.com>
3079
3080         (http_loop): Allocate space for filename_plus_orig_suffix with
3081         alloca; this is more efficient and removes the need to free it
3082         before each and every return.
3083
3084 2001-04-28  Hrvoje Niksic  <hniksic@arsdigita.com>
3085
3086         * http.c (gethttp): Return RETRUNNEEDED when the retrieval is
3087         unneeded because the file is already there and fully downloaded,
3088         and -c is specified.
3089         (http_loop): Handle RETRUNNEEDED.
3090
3091         * wget.h (uerr_t): New value RETRUNNEEDED.
3092
3093         * http.c (http_loop): Set no_truncate for files that both exist
3094         and are non-empty.
3095         (gethttp): Consider the download finished when restval >= contlen,
3096         not only when restval==contlen.
3097         (gethttp): Handle redirection before giving up due to -c.
3098         (gethttp): Clarify error message which explains that -c will not
3099         truncate the file.
3100         (gethttp): When returning CONTNOTSUPPORTED, don't forget to free
3101         the stuff that needs freeing and release the socket.
3102
3103 2001-04-27  Hrvoje Niksic  <hniksic@arsdigita.com>
3104
3105         * main.c (print_help): Wget booleans accept "off", not "no".
3106
3107 2001-04-27  Hrvoje Niksic  <hniksic@arsdigita.com>
3108
3109         * http.c (http_loop): If allow_cache is zero, always disable
3110         caching, not only when retrieving through proxy.
3111
3112         * init.c: Ditto.
3113
3114         * options.h (struct options): Rename proxy_cache to allow_cache.
3115
3116 2001-04-27  Hrvoje Niksic  <hniksic@arsdigita.com>
3117
3118         * http.c (mktime_from_utc): Improve documentation.
3119         (http_atotm): Put format strings into a separate array.
3120
3121 2001-04-27  Hrvoje Niksic  <hniksic@arsdigita.com>
3122
3123         * safe-ctype.h: Instead of throwing #error when isalpha is
3124         defined, redefine it to something that will throw a compile-time
3125         error if actually *used*.  Do the same for the rest of the
3126         standard C macros.
3127
3128 2001-04-26  Hrvoje Niksic  <hniksic@arsdigita.com>
3129
3130         * url.c (getproxy): Ignore empty proxy vars.
3131
3132 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
3133
3134         * http.c (http_loop): Would load cookies every time.
3135
3136         * cookies.c (load_cookies): Handle cookies whose values contain
3137         embedded spaces.
3138
3139 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
3140
3141         * utils.c: Define each DIGITS_* in one line.
3142
3143 2001-04-25  Roger L. Beeman  <beeman@cisco.com>
3144
3145         * http.c (http_atotm): Initialize t.tm_isdst to 0.
3146         (mktime_from_utc): Prevent mktime() from having discontinuities at
3147         DST transition points.
3148
3149 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
3150
3151         * html-url.c (get_urls_html): Fix documentation.
3152
3153 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
3154
3155         * url.c (UNSAFE_CHAR): Reimplement using a static table.
3156         (url_init): Removed.
3157         (init_unsafe_char_table): Removed.
3158
3159 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
3160
3161         * snprintf.c (dopr): Replace ISDIGIT with '0' <= ch && ch <= '9'.
3162
3163 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
3164
3165         * utils.c: Document timer functions.
3166
3167         * retr.c (rate): Use it.
3168         (rate): Print in GB/s if transfer rate exceeds 1 GB/s.
3169
3170         * utils.c (wtimer_granularity): New function.
3171
3172 2001-04-24  Hrvoje Niksic  <hniksic@arsdigita.com>
3173
3174         * retr.c (show_progress): Ditto.
3175
3176         * ftp.c (getftp): Ditto.
3177
3178         * http.c (gethttp): Use new timer functions.
3179
3180         * utils.c (wtimer_allocate): New function.
3181         (wtimer_new): Ditto.
3182         (wtimer_delete): Ditto.
3183         (wtimer_reset): Ditto.
3184         (wtimer_elapsed): Ditto.
3185
3186 2001-04-24  Hrvoje Niksic  <hniksic@arsdigita.com>
3187
3188         * utils.c (long_to_string): New, faster version.  Favors smaller
3189         numbers; much of the calculation is now done at compile-time.
3190
3191 2001-04-24  Hrvoje Niksic  <hniksic@arsdigita.com>
3192
3193         * utils.c (numdigit): Handle negative numbers.
3194
3195 2001-04-23  Hrvoje Niksic  <hniksic@arsdigita.com>
3196
3197         * retr.c (show_progress): Print the download rate even when the
3198         percentages are not available.
3199
3200 2001-04-21  Hrvoje Niksic  <hniksic@arsdigita.com>
3201
3202         * ftp.c (getftp): Adjust expected_bytes if the length is
3203         authoritative.
3204
3205 2001-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
3206
3207         * url.c: Don't declare `construct'.
3208
3209         * hash.c (grow_hash_table): Speed up rehashing; inline storing of
3210         mappings to new locations.
3211         (hash_table_new): Make resize_threshold a field in the hash table,
3212         so we don't have to recalculate it in each hash_table_put.
3213         (grow_hash_table): Update resize_threshold.
3214         (MAX): Remove unused macro.
3215         (prime_size): Made static.
3216
3217 2001-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
3218
3219         * retr.c (retrieve_url): Call uri_merge, not url_concat.
3220
3221         * html-url.c (collect_tags_mapper): Call uri_merge, not
3222         url_concat.
3223
3224         * url.c (mkstruct): Use encode_string instead of xstrdup followed
3225         by URL_CLEANSE.
3226         (path_simplify_with_kludge): Deleted.
3227         (contains_unsafe): Deleted.
3228         (construct): Renamed to uri_merge_1.
3229         (url_concat): Renamed to uri_merge.
3230
3231 2001-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
3232
3233         * url.c (str_url): Use encode_string instead of the unnecessary
3234         CLEANDUP.
3235         (encode_string_maybe): New function, returns input string if no
3236         encoding is needed.
3237         (encode_string): Call encode_string_maybe to do the dirty work,
3238         xstrdup if no work needed.
3239
3240 2001-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
3241
3242         * wget.h (XDIGIT_TO_xchar): Define here.
3243
3244         * url.c (decode_string): Use new name.
3245         (encode_string): Ditto.
3246
3247         * http.c (XDIGIT_TO_xchar): Rename HEXD2asc to XDIGIT_TO_xchar.
3248         (dump_hash): Use new name.
3249
3250         * wget.h: Rename ASC2HEXD and HEXD2ASC to XCHAR_TO_XDIGIT and
3251         XDIGIT_TO_XCHAR respectively.
3252
3253 2001-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
3254
3255         * init.c: Include cookies.h.
3256
3257         * cookies.h: Declare cookies_cleanup.
3258
3259         * cookies.c (check_domain_match): Remove unused variable.
3260         (save_cookies): Remove extraneous argument from debug statement.
3261
3262         * host.c (same_host): Don't call skip_url.
3263
3264         * url.c (skip_url): Removed.  Removed its calls from various
3265         functions in url.c.
3266
3267 2001-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
3268
3269         * cookies.c (unsigned_string_hash): Use the new code in
3270         string_hash as reference.
3271
3272         * hash.c (hash_table_map): Allow deletion and change of the
3273         element processed by MAPFUN.
3274         (string_hash): Use the function from glib.
3275
3276 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
3277
3278         * config.h.in: Include #undef stub.
3279
3280         * hash.c (hash_table_remove): Rewrite to actually clear deleted
3281         entries instead of just marking them as deleted.
3282
3283 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
3284
3285         * hash.h: Declare hash_table_get_pair and hash_table_count.
3286
3287 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
3288
3289         * cookies.c: Declare http_atotm.
3290
3291 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
3292
3293         * ftp-ls.c (ftp_parse_unix_ls): Use octal constants for
3294         permissions.  A compiler that doesn't accept octal constants is
3295         seriously broken and shouldn't be used -- octal constants were
3296         present in K&R C!
3297
3298 2001-01-20  Karl Eichwalder  <ke@suse.de>
3299
3300         * Makefile.in: Provide and use DESTDIR according to the Coding
3301         Standards.
3302
3303 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
3304
3305         * ftp-ls.c (ftp_parse_vms_ls): Make seconds optional in time
3306         specification.
3307
3308 2001-04-11  Hrvoje Niksic  <hniksic@arsdigita.com>
3309
3310         * url.c (parseurl): Don't strip trailing slash when u->dir is "/"
3311         because that strips the *leading* slash, thus forcing relative
3312         FTP retrieval.
3313
3314 2001-04-10  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
3315
3316         * ftp.c (getftp): Convert initial FTP directory from VMS to UNIX
3317         notation for VMS servers.
3318         (ftp_retrieve_dirs): Do not prepend '/' to f->name when
3319         odir is an empty string.
3320
3321 2001-04-10  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
3322
3323         * ftp-ls.c (ftp_parse_winnt_ls): Made the fix for AM/PM more
3324         effective. Suggested by Edward J. Sabol.
3325
3326 2001-04-10  Hrvoje Niksic  <hniksic@arsdigita.com>
3327
3328         * cookies.c (build_cookies_request): Use and sort cookies from all
3329         matching domains.
3330         (build_cookies_request): Check for duplicates before generating
3331         the `Cookies' header.
3332
3333         * main.c (main): Don't load cookies here.
3334         (main): Make loadcookies and savecookies call the correct command.
3335
3336         * http.c (http_loop): Load cookies on-demand.
3337
3338 2001-04-09  Hrvoje Niksic  <hniksic@arsdigita.com>
3339
3340         * http.c (gethttp): Fix indentation of SSL ifdef.
3341
3342 2001-04-09  Hrvoje Niksic  <hniksic@arsdigita.com>
3343
3344         * ftp.c (ftp_retrieve_dirs): Don't forcibly prepend "/" to u->dir;
3345         that hack is no longer necessary.
3346         (getftp): Prepend initial directory to *non*-absolute u->dir's.
3347
3348 2001-04-09  Hrvoje Niksic  <hniksic@arsdigita.com>
3349
3350         * init.c (cmd_file): New function.
3351         (enable_tilde_expansion): New variable.
3352         (run_wgetrc): Use it.
3353         (cmd_file): Use it.
3354
3355 2001-04-08  Hrvoje Niksic  <hniksic@arsdigita.com>
3356
3357         * init.c: Include cookie-related options.
3358
3359         * main.c (main): Include cookie-specific options.
3360         (main): Load cookies before download is finished.
3361         (main): Save cookies when done.
3362
3363         * http.c (gethttp): Process the `Set-Cookie' header.
3364         (gethttp): Include cookies in the response.
3365
3366         * cookies.c: New file.
3367
3368 2001-04-08  Hrvoje Niksic  <hniksic@arsdigita.com>
3369
3370         * utils.c (datetime_str): New function.
3371
3372 2001-04-08  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
3373
3374         * ftp-ls.c (ftp_parse_winnt_ls): The AM/PM change did assume
3375         12:01PM == 00:01, which was obviously wrong. Taken care of this
3376         anomaly.
3377
3378         * ChangeLog: Removed an excess conflict marker. Reformatted the
3379         entry by Philipp Thomas from 2001-03-09.
3380
3381         * ftp-ls.c (ftp_parse_winnt_ls): Ensure that adjusted PM hours lay
3382         between 0 and 23. Elminate unused variable `sec'.
3383
3384 2001-04-08  Hrvoje Niksic  <hniksic@arsdigita.com>
3385
3386         * hash.c (hash_table_count): New function.
3387
3388 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
3389
3390         * utils.c (read_file): Cast MAP_FAILED to char *.  Enforced by
3391         Digital Unix cc.
3392
3393 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
3394
3395         * config.h.in: Oops, do the namespace tweaks only on systems we
3396         know about.
3397
3398 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
3399
3400         * hash.c: Include <string.h>.
3401
3402 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
3403
3404         * config.h.in: Define "compilation environment" options that work
3405         under Linux and Solaris.  To be reviewed on other OS'es.
3406
3407 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
3408
3409         * http.c (gethttp): Prepend literal newline with `\n\'.
3410
3411 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
3412
3413         * sysdep.h: Don't define VERY_LONG_FORMAT.
3414
3415         * utils.c (very_long_to_string): New function.
3416         (legible_very_long): Use it; don't use VERY_LONG_FORMAT.
3417
3418 2001-04-04  Christian Fraenkel  <christian.fraenkel@gmx.net>
3419
3420         * url.c (parse_uname): Would run past the end of the string if the
3421         username was present, but the URL did not contain a slash, e.g.
3422         http://foo:bar@myhost.
3423
3424 2001-04-03  KOJIMA Hajime  <kjm@rins.ryukoku.ac.jp>
3425
3426         * http.c (http_atotm): Use %A instead of %a to match full
3427         weekday.  (On most systems there is no difference.)
3428
3429 2001-04-03  Paul Bludov  <paul@ozero.net>
3430
3431         * mswindows.c (sleep): Use SleepEx() instead of Sleep().
3432         (ws_changetitle): Use alloca() instead of malloc() to avoid memory
3433         leak.
3434         (ws_mypath): Use GetModuleFileName instead of argv[0].
3435         (ws_startup): Use data.wVersion for comparison.
3436
3437 2001-04-02  Hrvoje Niksic  <hniksic@arsdigita.com>
3438
3439         * http.c (http_loop): Ditto.
3440
3441         * ftp.c (ftp_loop_internal): Made the check whether to continue
3442         retrieval `-O'-friendly.
3443
3444 2001-04-02  Hrvoje Niksic  <hniksic@arsdigita.com>
3445
3446         * netrc.c (parse_netrc): Don't trim the line endings explicitly;
3447         they will be handled as whitespace.
3448         (parse_netrc): Correctly handle lines that end with whitespace.
3449
3450 2001-04-02  Hrvoje Niksic  <hniksic@arsdigita.com>
3451
3452         * retr.c (retrieve_url): New variable global_download_count used
3453         to identify first retrieval.
3454
3455         * ftp.c (getftp): Ditto.
3456
3457         * http.c (gethttp): Rewind opt.dfp only on first retrieval.
3458
3459 2001-04-02  Hrvoje Niksic  <hniksic@arsdigita.com>
3460
3461         * init.c (cmd_address): Heap-allocate the address that gets stored
3462         to CLOSURE.  Old code would simply assign an address on the stack.
3463
3464 2001-04-01  Nicolas Lichtmaier <nick@debian.org>
3465
3466         * ftp.c (ftp_get_listing): Propagate error status.
3467         (ftp_retrieve_glob): Use it.
3468         (ftp_loop): Ditto.
3469
3470 2001-04-01  Nicolas Lichtmaier <nick@debian.org>
3471
3472         * main.c (main): Add -C to the string that is the third arg to
3473         getopt_long().
3474
3475 2001-04-01  Hrvoje Niksic  <hniksic@arsdigita.com>
3476
3477         * ftp.c (getftp): Don't start the download from scratch if `-c'
3478         was specified, but the file is already fully downloaded.
3479
3480         * http.c (gethttp): Don't truncate a pre-existing file if `-c' was
3481         specified and the server doesn't support continued download.
3482         (gethttp): Don't start the download from scratch if `-c' was
3483         specified, but the file is already fully downloaded.
3484
3485 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
3486
3487         (recursive_retrieve): Don't clear the hash tables at this point at
3488         all; it interferes with the normal operation of register_download.
3489
3490 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
3491
3492         * recur.c (recursive_retrieve): Clear the hash tables only when
3493         they are defined.
3494
3495 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
3496
3497         * http.c (gethttp): Make sure the socket is closed with
3498         CLOSE_INVALIDATE before we have drained the body.
3499
3500 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
3501
3502         * retr.c (retrieve_url): Call register_download() for downloaded
3503         files and register_html() for downloaded HTML files.
3504
3505         * recur.c (register_download): New function; register here that a
3506         file has been downloaded, rather than in recursive_retrieve().
3507         (register_html): New function; enqueue the location of HTML files
3508         here rather than in recursive_retrieve().
3509
3510 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
3511
3512         * main.c (print_help): Use multiple fputs instead of a single ugly
3513         printf().
3514         (main): Consistently assign numbers >128 to options without a
3515         corresponding character.
3516
3517 2001-03-09  Philipp Thomas  <pthomas@suse.de>
3518
3519         * safe-ctype.h: New file. Locale independent ctype.h replacement
3520         taken from libiberty.
3521
3522         * safe-ctype.c: New file. Tables for above.
3523
3524         * Makefile.in: Add safe-ctype$o to OBJS.  Add dependencies for
3525         safe-ctype$o.
3526
3527         * cmpt.c: Remove include of ctype.h. Use ISSPACE instead of
3528         isspace.
3529
3530         * ftp-basic.c: Don't include ctype.h.
3531
3532         * ftp-ls.c: Likewise.
3533
3534         * ftp.c: Likewise.
3535
3536         * headers.c: Likewise.
3537
3538         * host.c: Likewise.
3539
3540         * html-parse.c: Likewise.
3541
3542         * html-url.c: Likewise.
3543
3544         * http.c: Likewise.
3545
3546         * init.c: Likewise.
3547
3548         * main.c: Likewise. Set LC_CTYPE along with LC_MESSAGES.
3549
3550         * netrc.c: Likewise.
3551
3552         * recur.c: Likewise.
3553
3554         * retr.c: Likewise.
3555
3556         * snprintf.c: Replace ctype.h with safe-ctype.h. Use ISDIGIT
3557         instead of isdigit.
3558
3559         * sysdep.h: Remove defines of ctype macros as they aren't needed
3560         for safe-ctype-h.
3561
3562         * url.c: Don't include ctype.h.
3563
3564         * utils.c: Likewise.
3565
3566         * wget.h: Include safe-ctype.h.
3567
3568 2001-03-27  Dan Harkless  <wget@harkless.org>
3569
3570         * Makefile.in: Moved top_builddir out of "User configuration
3571         section" of top Makefile and analogous spot in this one.
3572
3573 2001-03-17  Dan Harkless  <wget@harkless.org>
3574
3575         * Makefile.in: Include @SSL_INCLUDES@ substition in INCLUDES.
3576         Define top_builddir.  Link wget with libtool so the user doesn't
3577         have to supply a bunch of custom environment variables to
3578         correctly link with the OpenSSL shared libraries.
3579
3580 2001-03-06  Hack Kampbjorn  <hack@hackdata.com>
3581
3582         * http.c (gethttp): skip :port in host header if it is the
3583         DEFAULT_HTTPS_PORT when using SSL.
3584
3585         * url.c: move the #define of DEFAULT_HTTP_PORT, DEFAULT_FTP_PORT
3586         and DEFAULT_HTTPS_PORT to the header file so it can be use in the
3587         rest of the code.
3588         * url.h: Ditto
3589
3590 2001-03-01  Jonas Jensen  <bones@huleboer.dk>
3591
3592         * retr.c (show_progress): Correctly calculate the number of bytes
3593         in the first line of the download that have been actually
3594         downloaded in this run.
3595
3596 2001-02-23  Dan Harkless  <wget@harkless.org>
3597
3598         * main.c (print_help): --help documentation for -N said it would
3599         re-download files if they had the _same_ timestamp on server.
3600         (print_help): -nr belongs in "FTP options" section of --help
3601         output, not "Recursive retrieval" section.  Alphabetized FTP
3602         options by long option name.
3603
3604 2001-02-16  Dan Harkless  <wget@harkless.org>
3605
3606         * init.c (commands): Hack Kampbjørn <hack@hackdata.com> discovered
3607         that "httpsproxy" had been inserted into commands[] out of
3608         alphabetical order, causing "BUG: unknown command `httpuser'".
3609
3610 2001-02-13  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
3611
3612         * ftp-ls.c (ftp_parse_ls): Added support of ST_MACOS (Unix-like
3613         listing without correct permissons).
3614
3615         * ftp.h (stype): Added ST_MACOS to identify the NetPresenz MacOS
3616         FTP server.
3617
3618         * ftp.c (ftp_retrieve_list): New mirroring logic: A remote file
3619         shall be donwloaded only when it's newer than the local copy or
3620         when it has the same timeestamp but its size is different. ST_VMS
3621         and ST_MACOS as special cases that lie about file size.
3622
3623         * ftp-ls.c (ftp_parse_ls): Support for ST_MACOS.
3624
3625         * Makefile.in: Removed dependency on ftpparse library due to unclear
3626         copyright issues and absence of any feedback to our queries.
3627
3628         * ftp-ls.c: Removed dependency on ftpparse library due to unclear
3629         copyright issues and absence of any feedback to our queries.
3630         (ftp_parse_ls): Added a warning message when remote server system
3631         does not seem to be suported by wget.
3632         (ftp_parse_vms_ls): New function for parsing VMS ftp
3633         server listing output.
3634         (clean_line): New function responsible for removing
3635         end-of-line characters from FTP listing texts.
3636
3637         * ftp.c (getftp): Global variables pwd and host_type are now
3638         member of the ccon structure under names ccon.id and ccon.rs.
3639
3640         * ftp.h (struct ccon): Added formed global variables from ftp.c,
3641         enum stype rs (remote system identification) and char *id (initial
3642         working directory), as suggested by Hrvoje.
3643
3644         * url.c (parse_uname): Added support for passwords containing '@'
3645         characters.
3646         (skip_uname): Ditto.
3647
3648 2001-02-11  Hrvoje Niksic  <hniksic@arsdigita.com>
3649
3650         * ftp.c (ftp_loop): Reset con.
3651
3652 2001-01-06  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
3653
3654         * url.c (parse_uname): Added support for passwords containing '@'
3655         characters.
3656         (skip_uname): Ditto.
3657
3658 2001-02-11  Hack Kampbjørn  <hack@hackdata.com>
3659
3660         * url.c (parseurl): Debug-print u->ftp_type.
3661
3662 2001-02-11  Hrvoje Niksic  <hniksic@arsdigita.com>
3663
3664         * ftp.c (ftp_loop_internal): Disable padding.
3665         (getftp): Ditto.
3666
3667         * http.c (http_loop): Disable padding.
3668
3669         * retr.c (show_progress): Use it to enable padding.
3670
3671         * retr.c (rate): Optional parameter PAD for padding the rate.
3672
3673 2001-02-10  Hrvoje Niksic  <hniksic@arsdigita.com>
3674
3675         * retr.c (show_progress): Make sure that the last output line
3676         includes progress.
3677
3678 2001-02-10  Jonas Jensen  <bones@huleboer.dk>
3679
3680         * retr.c (show_progress): Print the download rate along with the
3681         percentages.
3682         Along with Anders Thorsby <anders@thorsby.dk>.
3683
3684 2001-02-10  Tim Mooney  <mooney@dogbert.cc.ndsu.NoDak.edu>
3685
3686         * ftp.h: Rename enums `command' to `wget_ftp_command' and
3687         `fstatus' to `wget_ftp_status' because old names clash with Tru64
3688         net/if.h.
3689
3690 2001-02-08  Christian Fraenkel <christian.fraenkel@gmx.net>
3691
3692         * gen_sslfunc.c: verify_callback is now static
3693
3694         * gen_sslfunc.c (init_ssl): load certificate if specified
3695
3696         * gen_sslfunc.c (ssl_printerr): new function
3697
3698         * init.c: added new --sslcertfile and --sslcertkey switches
3699
3700         * main.c: ditto
3701
3702         * options.h: ditto
3703
3704         * http.c (gethttp): abort when init_ssl fails
3705
3706 2001-01-23  Herold Heiko  <Heiko.Herold@previnet.it>
3707
3708         * mswindows.h: Include <malloc.h>; it's needed for alloca().
3709
3710 2001-01-10  Dan Harkless  <wget@harkless.org>
3711
3712         * url.c (str_url): Clarified this function's comment header after
3713         Hrvoje answered my question on the list as to when hide != 1.
3714         Also Hrvoje pointed out I need to use xstrdup() on the string literal.
3715
3716 2001-01-06  Hrvoje Niksic  <hniksic@arsdigita.com>
3717
3718         * connect.c (bindport): Declare addrlen as int.  Diagnosed by
3719         Drazen Kacar <dave@arsdigita.com>.
3720         (conaddr): Ditto.
3721
3722 2001-01-09  Dan Harkless  <wget@harkless.org>
3723
3724         * html-url.c: A bunch of fixup of `--page-requisites'-related
3725         comments to reflect Hrvoje's changes to my code when transplanting
3726         it into this new file, to fix spelling mistakes, to clarify, etc.
3727
3728         * url.c (write_backup_file): Clarified a comment.
3729         (str_url): Henrik van Ginhoven pointed out on the list that we
3730         shouldn't give away the number of characters in the password by
3731         replacing each character with a 'x'.  Use "<password>" instead.
3732
3733         * ftp.c (ftp_retrieve_dirs): The bug where recursion into FTP
3734         directories didn't work if logging in put you in a directory other
3735         than "/" is fixed now.  Removed the comment here warning of the bug.
3736
3737         * main.c (print_help): --continue's description was misleading.
3738         We don't "restart", we "resume".  Also, better to say
3739         "partially-downloaded file" rather than just "existing file".
3740
3741 2001-01-06  Dan Harkless  <wget@harkless.org>
3742
3743         * ChangeLog: The '[Not in 1.6 branch.]'s were decided not to be
3744         the best way to go about my aim.  Removed them in favor of:
3745
3746         * ChangeLog-branches/1.6_branch.ChangeLog: New file.
3747
3748 2001-01-04  Hrvoje Niksic  <hniksic@arsdigita.com>
3749
3750         * url.c (replace_attr): New function, to be used by both
3751         TO_COMPLETE and TO_RELATIVE case in convert_links.
3752         (find_fragment): New function for finding URL fragments.
3753         (replace_attr): Better handle the case where the original string
3754         is not quoted.  Use find_fragment.
3755         (convert_links): Use replace_attr().
3756
3757 2000-12-31  Dan Harkless  <wget@harkless.org>
3758
3759         * ChangeLog: Since this flat file doesn't have multiple branches,
3760         looking at the dates would make you think that things went into
3761         1.6 that actually just went into the 1.7-dev branch.  Added "[Not
3762         in 1.6 branch.]" where appropriate to clarify.
3763
3764 2000-12-30  Dan Harkless  <wget@harkless.org>
3765
3766         * ftp.c, http.c:  Applied Hack Kampbjørn <hack@hackdata.com>'s
3767         patch to deal with h_errno not being defined in netdb.h under Cygwin.
3768
3769 2000-12-18  Csaba Raduly  <csaba.raduly@sophos.com>
3770
3771         * sysdep.h: Include <malloc.h> and <io.h> under Watcom.
3772
3773 2000-12-17  Igor Khristophorov  <igor@atdot.org>
3774
3775         * http.c (check_end): Fix test for '+' or '-'.
3776
3777 2000-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
3778
3779         * url.c (parseurl): Rename inner loop var from i to ind to avoid
3780         clash with the function top-level-declared variable i.
3781         (str_url): Likewise, rename inner-loop i to j.
3782
3783         * recur.c (parse_robots): Don't declare LEN at top of function.
3784         (robots_match): Renamed parameter FORBIDDEN to avoid hiding of
3785         global variable.
3786
3787         * main.c (main): Change erroneous use of bitwise and to logical.
3788
3789         * init.c (cmd_address): Don't heap-allocate `sin'; it can be on
3790         the stack because it will be copied to closure.
3791
3792         Thanks to Csaba Raduly's run of PC-LINT over the sources.
3793
3794 2000-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
3795
3796         * http.c (basic_authentication_encode): Use xmalloc(), not
3797         malloc().  Thanks to Csaba Raduly's run of PC-LINT over the
3798         sources.
3799
3800 2000-12-17  Csaba Raduly  <csaba.raduly@sophos.com>
3801
3802         * sysdep.h: Test for __EMX__ rather than for EMXOS2 for OS/2
3803         compilation.
3804
3805 2000-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
3806
3807         * mswindows.c: Include <errno.h>.
3808
3809         * gen_sslfunc.c: Include <errno.h>.
3810
3811         * ftp-basic.c: Don't attempt to declare errno or h_errno because
3812         they're not used.
3813
3814         * main.c: Include <errno.h> because errno is used.
3815
3816         * ftp.c: Ditto.
3817
3818         * http.c: Include <netdb.h> for h_errno.
3819
3820 2000-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
3821
3822         * html-parse.c (advance_declaration): MSVC assert() chokes on
3823         '\"'.  Use '"' instead.
3824
3825 2000-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
3826
3827         * utils.c (xfree_real): Removed.
3828         (xfree_debug): Just call free().
3829
3830         * wget.h (xfree): Make it an alias for free.
3831
3832 2000-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
3833
3834         * http.c (http_loop): Furthermore, touch output_document only if
3835         it is known to be an existing regular file.
3836
3837 2000-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
3838
3839         * ftp.c (ftp_retrieve_list): Ditto.
3840
3841         * http.c (http_loop): Touch output_document if that is used for
3842         output.
3843
3844 2000-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
3845
3846         * http.c: Include gen_sslfunc.h after including Wget's headers.
3847         (persistent_available_p): Needed coma before `int ssl'.
3848
3849 2000-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
3850
3851         * ftp.c (ftp_loop_internal): Ditto.
3852
3853         * http.c (http_loop): Use it.
3854
3855         * retr.c (sleep_between_retrievals): New function that handles the
3856         logic of opt.wait and opt.waitretry.
3857
3858 2000-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
3859
3860         * rbuf.h: Implement only a single version of RBUF_READCHAR, using
3861         rbuf_read_bufferful when the buffer is depleted.
3862
3863         * rbuf.c (rbuf_read_bufferful): New function.
3864
3865 2000-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
3866
3867         * gen_sslfunc.h: Use ansi2knr style function declarations.
3868
3869         * gen_sslfunc.c: Reformat according to the GNU coding standards.
3870         More should be done.
3871
3872         * http.c (persistent_available_p): Place the cheap SSL test nearer
3873         the top of the function.
3874         (CLOSE_FINISH, CLOSE_INVALIDATE): Define only one version of each.
3875
3876 2000-12-05  Hrvoje Niksic  <hniksic@arsdigita.com>
3877
3878         * url.c (init_unsafe_char_table): Reinstate space as an unsafe
3879         char.
3880
3881 2000-12-03  Christian Fraenkel <christian.fraenkel@gmx.net>
3882
3883         * Makefile.in: added gen_sslfunc object
3884         * config.h.in: added HAVE_SSL define
3885         * connect.c: changed select_fd from static int to int
3886         * connect.h: ditto
3887         * gen_sslfunc.h: New file
3888         * gen_sslfunc.c: ditto
3889         * http.c: added HTTPS fuctionality
3890         * retrc.c: ditto
3891         * url.c: ditto
3892         * init.c: added opt.httpsproxy
3893         * options.h: ditto
3894         * rbuf.h: added alternate rbuf struct
3895         * wget.h: added CONSSLERR
3896         * rbuf.c: ditto
3897
3898         * http.c: Added HTTPS fuctionality.
3899
3900         * retrc.c: Ditto.
3901
3902         * url.c: Ditto.
3903
3904         * init.c: Added opt.httpsproxy.
3905
3906         * options.h: Ditto.
3907
3908         * rbuf.h: Added alternate rbuf struct.
3909
3910         * wget.h: Added CONSSLERR.
3911
3912         * rbuf.c: Ditto.
3913
3914 2000-11-30  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
3915
3916         * ftp-ls.c (ftp_parse_unix_ls): Added second parameter
3917         "ignore_perms" to ignore file and directory permissions for
3918         Windows NT FTP server listings.
3919         (ftp_parse_winnt_ls): New function.
3920         (ftp_parse_ls): Parses UNIX and Windows NT listings
3921         separately. Simple heuristics for distinguishing between UNIX and
3922         MS-DOS-like FTP listing provided by Windows NT FTP service.
3923
3924 2000-11-18  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
3925
3926         * ftpparse.c, ftpparse.h: New files.
3927
3928         * ftp-ls.c (ftp_parse_ls): Use ftp_parse_unix_ls for UNIX servers
3929         only. Use ftp_parse_nonunix_ls otherwise.
3930         (ftp_parse_nonunix_ls): Stub to the ftpparse library handling all
3931         exotic FTP servers.
3932
3933         * ftp.h (stype): New enum, distinguishes UNIX, VMS, and "other"
3934         FTP servers.
3935
3936         * ftp.c: New static wariables host_type, pwd, and pwd_len.
3937         (getftp): Support for VMS. Support for FTP servers that do not
3938         place you in the root directory after login.
3939         (ftp_retrieve_list): VMS is silent about the real file size, issue
3940         a more appropriate message.
3941         (ftp_get_listing): Pass host_type to ftp_parse_ls.
3942
3943         * ftp-basic.c (ftp_pwd, ftp_syst): New functions.
3944
3945 2000-11-30  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
3946
3947         * ftp-ls.c (ftp_parse_unix_ls): Added second parameter
3948         "ignore_perms" to ignore file and directory permissions for
3949         Windows NT FTP server listings.
3950         (ftp_parse_winnt_ls): New function.
3951         (ftp_parse_ls): Parses UNIX and Windows NT listings
3952         separately. Simple heuristics for distinguishing between UNIX
3953         and MS-DOS-like FTP listing provided by Windows NT FTP service.
3954
3955 2000-11-29  John Summerfield  <summer@OS2.ami.com.au>
3956
3957         * netrc.c (parse_netrc): Get rid of line ending.
3958
3959 2000-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
3960
3961         * ftp.c (ftp_retrieve_list): Undo typo "fix" until resolution by
3962         Dan.
3963
3964 2000-11-24  Karl Eichwalder  <ke@suse.de>
3965
3966         * main.c (print_help): Untabify.
3967
3968 2000-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
3969
3970         * utils.c (xrealloc_debug): Do the unregister/register thing only
3971         if the pointer has actually changed.
3972         (xmalloc_real): Declare `static' in DEBUG_MALLOC builds.
3973         (xfree_real): Ditto.
3974         (xrealloc_real): Ditto.
3975         (xstrdup_real): Ditto.
3976
3977 2000-11-22  Hrvoje Niksic  <hniksic@arsdigita.com>
3978
3979         * ftp.c (getftp): ftp_getaddress() returns a malloc'ed copy of the
3980         string; no need to strdup() it.
3981         (getftp): Make pwd_len a local variable.
3982         (ftp_loop): Free PWD before returning.
3983
3984         * init.c (cleanup): Free opt.ftp_pass only if it's non-NULL.
3985
3986 2000-11-22  Hrvoje Niksic  <hniksic@arsdigita.com>
3987
3988         * all: Use xfree() instead of free.
3989
3990         * utils.c (xfree): New function.
3991
3992 2000-11-21  Hrvoje Niksic  <hniksic@arsdigita.com>
3993
3994         * url.c (convert_links): HTML-quote the converted string.
3995
3996         * utils.c (html_quote_string): Move here from ftp-ls.c
3997         (html_quote_string): Make non-static; declare in utils.h.
3998         (html_quote_string): Convert SP to &#32;.
3999
4000 2000-11-21  Hrvoje Niksic  <hniksic@arsdigita.com>
4001
4002         * ftp.c (getftp): Reformat Jan's code according to GNU coding
4003         standards; remove (debugging?) printf's; use '\0' for the ASCII
4004         zero character.  Use alloca() instead of malloc() for
4005         inter-function temporary allocations.
4006
4007 2000-11-18  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
4008
4009         * ftpparse.c, ftpparse.h: New files.
4010
4011         * ftp-ls.c (ftp_parse_ls): Use ftp_parse_unix_ls for UNIX servers
4012         only. Use ftp_parse_nonunix_ls otherwise.
4013         (ftp_parse_nonunix_ls): Stub to the ftpparse library handling all
4014         exotic FTP servers.
4015
4016         * ftp.h (stype): New enum, distinguishes UNIX, VMS, and "other"
4017         FTP servers.
4018
4019         * ftp.c: New static wariables host_type, pwd, and pwd_len.
4020         (getftp): Support for VMS. Support for FTP servers that do not
4021         place you in the root directory after login.
4022         (ftp_retrieve_list): VMS is silent about the real file size, issue
4023         a more appropriate message.
4024         (ftp_get_listing): Pass host_type to ftp_parse_ls.
4025
4026         * ftp-basic.c (ftp_pwd, ftp_syst): New functions.
4027
4028 2000-11-21  Hrvoje Niksic  <hniksic@arsdigita.com>
4029
4030         * hash.c (hash_table_put): Don't overwrite deleted mappings.
4031
4032 2000-11-21  Hrvoje Niksic  <hniksic@arsdigita.com>
4033
4034         * hash.c (find_mapping): New function.
4035         (hash_table_get): Use it.
4036         (hash_table_get_pair): Ditto.
4037         (hash_table_exists): Ditto.
4038         (hash_table_remove): Ditto.
4039         (hash_table_remove): Really delete the entry if the mapping
4040         following LOCATION is empty.
4041
4042         * utils.c (string_set_add): Check whether the element has existed
4043         before.
4044
4045         * hash.c (hash_table_get_pair): New function.
4046
4047 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
4048
4049         * http.c (http_process_type): Ignore trailing whitespace; use
4050         strdupdelim().
4051
4052         * recur.c (recursive_retrieve): Use the new `convert' field.
4053         (convert_all_links): Ditto.
4054         (convert_all_links): Don't respect meta_disallow_follow.
4055
4056         * html-url.c (handle_link): Fill out link_relative_p and
4057         link_complete_p.
4058
4059         * url.h (struct _urlpos): Make elements more readable.
4060
4061         * recur.c (recursive_retrieve): Call slist_prepend instead of
4062         slist_append.
4063         (convert_all_links): Call slist_nreverse before iterating through
4064         urls_html.
4065
4066         * utils.c (slist_prepend): New function.
4067         (slist_nreverse): Ditto.
4068
4069 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
4070
4071         * http.c (check_end): Constify.
4072
4073 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
4074
4075         * http.c (http_loop): If username and password are known, try the
4076         `Basic' authentication scheme by default.
4077
4078         * connect.h: Declare test_socket_open.
4079
4080 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
4081
4082         * version.c: Bump version from 1.5.3+dev to 1.7-dev.
4083
4084 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
4085
4086         * http.c (gethttp): Don't use the return value of sprintf().
4087         (gethttp): Inhibit keep-alive if opt.http_keep_alive is 0.
4088
4089 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
4090
4091         * recur.c (recursive_retrieve): Print the "so we don't load"
4092         debugging message only if we really don't load.
4093
4094         * http.c (gethttp): Inhibit keep-alive if proxy is being used.
4095         (gethttp): Don't request keep-alive if keep-alive is inhibited.
4096
4097 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
4098
4099         * http.c (gethttp): Make the HTTP persistent connections more
4100         robust.
4101
4102 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
4103
4104         * retr.c (get_contents): If use_expected, make sure that the
4105         appropriate amount of data is being read.
4106
4107         * http.c (gethttp): Check for both `Keep-Alive: ...' and
4108         `Connection: Keep-Alive'.
4109
4110         * wget.h (DEBUGP): Call debug_logprintf only if opt.debug is
4111         turned on.
4112
4113 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
4114
4115         * http.c (connection_available_p): Use it.
4116
4117         * connect.c (test_socket_open): New function.
4118
4119         * http.c (gethttp): Support persistent connections.  Based on the
4120         ideas, and partly on code, by Sam Horrocks <sam@daemoninc.com>.
4121         (register_persistent): New function.
4122         (connection_available_p): Ditto.
4123         (invalidate_connection): Ditto.
4124
4125 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
4126
4127         * url.c (convert_links): Handle UREL2ABS case.
4128
4129         * recur.c (recursive_retrieve): Instead of the list
4130         urls_downloaded, use hash tables dl_file_url_map and
4131         dl_url_file_map.
4132         (convert_all_links): Use them to retrieve data.
4133
4134         * host.c (clean_hosts): Free the hash tables.
4135
4136         * main.c (private_initialize): Call host_init().
4137
4138         * host.c (store_hostaddress): Use a saner, hash table-based data
4139         model.
4140         (realhost): Ditto.
4141         (host_init): Initialize the hash tables.
4142
4143 2000-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
4144
4145         * utils.c (slist_append): Eviscerate NOSORT.  Hash tables are now
4146         used for what the sorted slists used to be used for.
4147         (slist_contains): Don't rely on the list being sorted.
4148         (slist_append): Simplify the code.
4149
4150         * recur.c (recursive_cleanup): Use free_string_set.
4151
4152         * utils.c (string_set_add, string_set_exists, string_set_free):
4153         New functions for easier freeing of hash tables whose keys are
4154         strdup'ed strings.
4155
4156         * recur.c (recursive_retrieve): Use the hash table functions for
4157         storing undesirable URLs.
4158
4159         * hash.c: New file.
4160
4161 2000-11-17  Hrvoje Niksic  <hniksic@arsdigita.com>
4162
4163         * main.c (private_initialize): Call url_init.
4164         (main): Call private_initialize.
4165
4166         * url.c (unsafe_char_table): New table.
4167         (UNSAFE_CHAR): Use it.
4168         (init_unsafe_char_table): New function.
4169         (url_init): New function; call init_unsafe_char_table.
4170
4171 2000-11-16  Hrvoje Niksic  <hniksic@arsdigita.com>
4172
4173         * mswindows.h: Define snprintf and vsnprintf to _snprintf and
4174         _vsnprintf respectively.
4175
4176 2000-11-15  Hrvoje Niksic  <hniksic@arsdigita.com>
4177
4178         * config.h.in: Do the _XOPEN_SOURCE and _SVID_SOURCE things only
4179         on Linux.
4180
4181 2000-11-15  Hrvoje Niksic  <hniksic@arsdigita.com>
4182
4183         * html-url.c (handle_link): Handle HTML fragment identifiers.
4184
4185         * recur.c (recursive_retrieve): If norobot info is respected and
4186         the file is specified not to be followed by robots, respect that.
4187
4188         * html-url.c (collect_tags_mapper): Handle <meta name=robots
4189         content=X>.  For us the important cases are where X is NONE or
4190         where X contains NOFOLLOW.
4191         (get_urls_html): Propagate that information to the caller.
4192
4193 2000-11-13  Hrvoje Niksic  <hniksic@arsdigita.com>
4194
4195         * url.c (convert_links): Unlink the file we might be reading from
4196         before writing to it.
4197         (convert_links): Use alloca instead of malloc for
4198         filename_plus_orig_suffix.
4199
4200 2000-11-12  Hrvoje Niksic  <hniksic@arsdigita.com>
4201
4202         * host.c (realhost): Add HOST to the list with quality==0 only if
4203         it wasn't already there.
4204         Based on analysis by Lu Guohan <feng@public.bjnet.edu.cn>.
4205
4206 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
4207
4208         * url.c (get_urls_file): Ditto.
4209         (convert_links): Ditto.
4210
4211         * html-url.c (get_urls_html): Use read_file() instead of
4212         load_file().
4213
4214         * utils.c (read_file): New function, instead of the old
4215         load_file().
4216         (read_file_free): Ditto.
4217
4218         * url.c (findurl): Search only for the supported protocols.
4219         (convert_links): Use fwrite() when writing out a region of
4220         characters.
4221
4222 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
4223
4224         * ftp-ls.c: Move html_quote_string and ftp_index here.
4225
4226         * url.c: Remove get_urls_html, since that's now in html-url.c.
4227
4228         * html-url.c: New file.
4229
4230         * html-parse.c: New file.
4231
4232 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
4233
4234         * init.c (run_wgetrc): Don't bother killing off '\r' since
4235         pars_line() skips whitespace at end of line anyway.
4236         (parse_line): Oops, it didn't.  Now it does.
4237
4238         * recur.c (parse_robots): Ditto here.
4239
4240         * ftp-ls.c (ftp_parse_unix_ls): Kill off the newline character
4241         manually because read_whole_line no longer does.
4242
4243         * utils.c (read_whole_line): Rewrite to: a) use less memory
4244         (reallocates to needed size after work), b) work faster -->
4245         fgets() instead of getc, c) be more correct --> doesn't kill the
4246         newline character at the end of line.
4247
4248 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
4249
4250         * init.c (comind): Initialize MAX to array size - 1.
4251
4252 2000-11-08  Hrvoje Niksic  <hniksic@arsdigita.com>
4253
4254         * url.c (construct): Changed last_slash[-1] to *(last_slash - 1).
4255         Suggested by Edward J. Sabol.
4256
4257 2000-11-08  Hrvoje Niksic  <hniksic@arsdigita.com>
4258
4259         * url.c (construct): Handle the case where host name is not
4260         followed by a slash.
4261
4262 2000-11-06  Hrvoje Niksic  <hniksic@arsdigita.com>
4263
4264         * init.c: commands[] need to be sorted!  ("base" wasn't.)
4265
4266 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
4267
4268         * wget.h (DO_REALLOC_FROM_ALLOCA): Use braces to disambiguate
4269         `if'.
4270
4271 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
4272
4273         * url.c (construct): Insert unneeded initialization for the
4274         compiler to shut up.
4275
4276         * config.h.in: Define _XOPEN_SOURCE to 500 to get the prototype
4277         for strptime() (*duh*).  Define _SVID_SOURCE to get S_IFLNK which
4278         otherwise gets lost when you define _XOPEN_SOURCE.
4279
4280         * utils.c (touch): Include the file name in the error message.
4281         From Debian.
4282
4283 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
4284
4285         * log.c (logvprintf): Use vsnprintf() in all cases.  If necessary,
4286         resize the buffer to fit the formated message.  That way, messages
4287         of arbitrary size may be printed.
4288         (logvprintf): Use saved_append() to optionally log the last
4289         several lines of output.
4290         (logputs): Ditto.
4291         (log_close): Adapt to new data structures.
4292         (log_dump): Ditto.
4293         (redirect_output): Print messages to stderr, not to stdout.
4294
4295         * log.c (saved_append_1): New function.  Replaces the old logging
4296         system ("log all output until 10M characters") with a new, much
4297         more reasonable one ("log last screenful of text").
4298         (saved_append): New function; call saved_append_1.
4299         (free_log_line): New function.
4300
4301 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
4302
4303         * url.c (construct): Fix comment.
4304         (find_last_char): Document.
4305
4306 2000-11-04  Hrvoje Niksic  <hniksic@arsdigita.com>
4307
4308         * snprintf.c: New file.
4309
4310 2000-11-03  Hrvoje Niksic  <hniksic@arsdigita.com>
4311
4312         * wget.h: If HAVE_STDARG_H is not defined, don't declare argument
4313         types to logprintf() and debug_logprintf().
4314
4315 2000-11-02  Hrvoje Niksic  <hniksic@arsdigita.com>
4316
4317         * ftp.c (ftp_loop_internal): Hide the password from the URL when
4318         printing non-verbose.  Problem spotted by Dariusz Mlynarczyk
4319         <darekm@bydg.lomac.com.pl>.
4320
4321 2000-11-02  Junio Hamano  <junio@twinsun.com>
4322
4323         * ftp-basic.c (ftp_login): Make comparison case-insensitive.
4324
4325 2000-11-02  Tyler Riddle  <triddle@liquidmarket.com>
4326
4327         * http.c (known_authentication_scheme_p): Recognize NTML
4328         authentication.
4329         (create_authorization_line): Treat NTML the same as `Basic'.
4330
4331 2000-11-02  Hrvoje Niksic  <hniksic@arsdigita.com>
4332
4333         * retr.c (retrieve_url): Free url before returning.
4334         (retrieve_url): Free mynewloc before returning.
4335         Spotted by Mark A. Mankins <Mankins_Mark@prc.com>.
4336
4337 2000-11-02  Hrvoje Niksic  <hniksic@arsdigita.com>
4338
4339         * url.c (parseurl): Remove possible reading past the end of
4340         sup_protos[].  Spotted by Mark A. Mankins <Mankins_Mark@prc.com>.
4341
4342 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
4343
4344         * main.c (main): In case of opt.downloaded overflowing, print
4345         <overflow> instead of a totally bogus random value.
4346
4347         * retr.c (retrieve_from_file): Ditto.
4348
4349         * recur.c (recursive_retrieve): Ditto.
4350
4351         * main.c (main): Ditto.
4352
4353         * http.c (http_loop): Ditto.
4354
4355         * ftp.c (ftp_loop_internal): Use downloaded_increase() instead of
4356         `+=', and downloaded_exceeds_quota() instead of the simple-minded
4357         check.
4358         (ftp_retrieve_list): Ditto.
4359         (ftp_retrieve_dirs): Ditto.
4360         (ftp_retrieve_glob): Ditto.
4361
4362         * retr.c (downloaded_increase): New function.  Notice overflows of
4363         opt.downloaded.
4364         (downloaded_exceeds_quota): Make sure that opt.downloaded is not
4365         used if it overflowed.
4366
4367         * options.h (struct options): New member downloaded_overflow.
4368
4369 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
4370
4371         * wget.h (enum): Remove extra space after last enumeration.
4372
4373 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
4374
4375         * main.c (main): Use legible_very_long() for printing
4376         opt.downloaded.
4377
4378         * utils.c (legible_1): New function that operates on strings and
4379         does the brunt of legible()'s work.
4380         (legible): Use legible_1().
4381         (legible_very_long): New function; dump the argument with
4382         sprintf(), and call legible_1().
4383
4384         * options.h (struct options): Use VERY_LONG_TYPE for
4385         opt.downloaded.
4386
4387         * sysdep.h (VERY_LONG_TYPE): Define it to have a 64-bit or greater
4388         type.
4389
4390         * config.h.in: Make sure that SIZEOF_LONG and SIZEOF_LONG_LONG get
4391         defined.  Define HAVE_LONG_LONG if long long is available.
4392
4393 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
4394
4395         * utils.c (long_to_string): Update with a later, better version.
4396
4397 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
4398
4399         * url.c (path_simplify_with_kludge): New function.
4400         (path_simplify_with_kludge): Disable it.  Instead...
4401         (parse_dir): ...make sure that at this point the right thing is
4402         done, i.e. that "query" part of the URL (?...) is always assigned
4403         to the file, never to the directory portion of the path.
4404
4405 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
4406
4407         * retr.c (retrieve_url): Detect redirection cycles.
4408
4409 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
4410
4411         * url.c (get_urls_html): Decode HTML entities using
4412         html_decode_entities.
4413
4414         * html.c (htmlfindurl): Don't count the `#' in numeric entities
4415         (&#NNN;) as an HTML fragemnt.
4416         (html_decode_entities): New function.
4417
4418 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
4419
4420         * html.c (htmlfindurl): Fix recognition of # HTML fragments.
4421
4422 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
4423
4424         * url.c (construct): Rewritten for clarity.  Avoids the
4425         unnecessary copying and stack-allocation the old version
4426         performed.
4427
4428 2000-10-31  Hrvoje Niksic  <hniksic@arsdigita.com>
4429
4430         * ftp.c (getftp): Ditto.
4431
4432         * http.c (gethttp): Rewind the stream when retrying from scratch.
4433
4434 2000-10-31  Hrvoje Niksic  <hniksic@arsdigita.com>
4435
4436         * retr.c (retrieve_url): Use url_concat() to handle relative
4437         redirections instead of /ad hoc/ code.
4438
4439         * url.c (url_concat): New function encapsulating weird
4440         construct().
4441         (urllen_http_hack): New function.
4442         (construct): When constructing new URLs, recognize that `?' does
4443         not form part of the file name in HTTP.
4444
4445 2000-10-13  Adrian Aichner  <adrian@xemacs.org>
4446
4447         * retr.c: Add msec timing support for WINDOWS.
4448         * retr.c (reset_timer): GetSystemTime() on WINDOWS.
4449         * retr.c (elapsed_time): Calculate delta time to msec on WINDOWS.
4450
4451 2000-10-27  Dan Harkless  <wget@harkless.org>
4452
4453         * retr.c (retrieve_url): Manually applied T. Bharath
4454         <TBharath@responsenetworks.com>'s patch to get wget to grok
4455         illegal relative URL redirects.  Reformatted and re-commented it.
4456
4457 2000-10-23  Dan Harkless  <wget@harkless.org>
4458
4459         * connect.c (make_connection and bindport): Manually applied Rob
4460         Mayoff <mayoff@dqd.com>'s 1.5.3 patch to add --bind-address,
4461         changing coding style to GNU's.
4462
4463         * ftp.c (ftp_loop_internal): --delete-after wasn't implemented for
4464         files downloaded via FTP.  Per a comment, .listing files were not
4465         counted towards number of bytes and files downloaded because they're
4466         deleted anyway.  Well, they aren't under -nr, so count them then.
4467
4468         * init.c: Manually applied Rob Mayoff's 1.5.3 patch to add
4469         --bind-address, alphabetizing, changing coding style to GNU's,
4470         commenting, and renaming cmd_ip_address() to cmd_address() to
4471         imply hostnames also okay.
4472
4473         * main.c (main): --delete-after didn't delete the root of the
4474         tree.  Ignore --convert-links if --delete-after was specified.
4475         Manually applied Rob Mayoff's 1.5.3 patch to add --bind-address,
4476         fixing duplicate use of added-since-1.5.3 case value.
4477         (print_help): Clarified that --delete-after deletes local files.
4478         Rob forgot to add a line for his new --bind-address option.
4479
4480         * options.h (struct options): Manually applied Rob Mayoff's patch
4481         to add --bind-address (bind_address structure member).
4482
4483         * recur.c (recursive_retrieve): Improved comment; added DEBUGP().
4484         Ignore --convert-links if --delete-after was specified.
4485
4486         * retr.c (retrieve_from_file): Just added a DEBUGP().
4487
4488 2000-10-19  Dan Harkless  <wget@harkless.org>
4489
4490         * ftp.c (ftp_loop_internal): downloaded_file() enumerators changed.
4491         (getftp): Applied Piotr Sulecki <Piotr.Sulecki@ios.krakow.pl>'s
4492         patch to work around FTP servers that incorrectly respond to the
4493         "REST" command with the remaining size rather than the total file size.
4494
4495         * http.c (gethttp): Improved a comment and added code to tack on
4496         ".html" to text/html files without that extension when -E specified.
4497         (http_loop): Use new downloaded_file() enumerators and deal with
4498         the case of gethttp() called xrealloc() on u->local.
4499
4500         * init.c (commands): Added new "htmlextension" command.
4501         Also renamed John Daily's cmd_quad() to the more descriptive
4502         cmd_lockable_boolean(), alpha-sorted the CMD_DECLARE()s and
4503         removed duplicate cmd_boolean() declaration.
4504
4505         * main.c (print_help): Added my new -E / --html-extension option.
4506         (main): Undocumented --email-address option previously used -E synonym.
4507         Stole it away for the much more deserving --html-extension's use.
4508
4509         * options.h (struct options): Added html_extension field.
4510
4511         * url.c (convert_links): URL X that we saved as X.html locally due
4512         to -E needs to be backed up as X.orig, not X.html.orig.  Added comments.
4513         (downloaded_file): Now remembers if we added .html extension to a file.
4514
4515         * url.h (downloaded_file_t): Added extra enumerators to support above.
4516         (downloaded_file): Now takes and returns a downloaded_file_t.
4517
4518         * wget.h (unnamed "dt" enum): Added ADDED_HTML_EXTENSION enumerator.
4519
4520 2000-10-09  Dan Harkless  <wget@harkless.org>
4521
4522         * html.c (htmlfindurl): Added unneeded initialization to quiet warning.
4523
4524         * main.c (print_help): Clarified what --retr-symlinks does.
4525
4526 2000-09-15  John Daily  <jdaily@cyberdude.com>
4527
4528         * init.c: Add support for "always" and "never" values to allow
4529         .wgetrc to override commandline (useful e.g. with .pm files
4530         calling `wget --passive-ftp' when your firewall doesn't allow that).
4531
4532         * ftp.c (getftp): passive_ftp is first option to support always/never.
4533
4534 2000-08-30  Dan Harkless  <wget@harkless.org>
4535
4536         * ftp.c (ftp_retrieve_list): Use new INFINITE_RECURSION #define.
4537
4538         * html.c: htmlfindurl() now takes final `dash_p_leaf_HTML' parameter.
4539         Wrapped some > 80-column lines.  When -p is specified and we're at a
4540         leaf node, do not traverse <A>, <AREA>, or <LINK> tags other than
4541         <LINK REL="stylesheet">.
4542
4543         * html.h (htmlfindurl): Now takes final `dash_p_leaf_HTML' parameter.
4544
4545         * init.c: Added new -p / --page-requisites / page_requisites option.
4546
4547         * main.c (print_help): Clarified that -l inf and -l 0 both allow
4548         infinite recursion.  Changed the unhelpful --mirrior description
4549         to simply give the options it's equivalent to.  Added new -p option.
4550         (main): Added some comments; handle new -p / --page-requisites.
4551
4552         * options.h (struct options): Added new page_requisites field.
4553
4554         * recur.c: Changed "URL-s" to "URLs" and "HTML-s" to "HTMLs".
4555         Calculate and pass down new `dash_p_leaf_HTML' parameter to
4556         get_urls_html().  Use new INFINITE_RECURSION #define.
4557
4558         * retr.c: Changed "URL-s" to "URLs".  get_urls_html() now takes
4559         final `dash_p_leaf_HTML' parameter.
4560
4561         * url.c: get_urls_html() and htmlfindurl() now take final
4562         `dash_p_leaf_HTML' parameter.
4563
4564         * url.h (get_urls_html): Now takes final `dash_p_leaf_HTML' parameter.
4565
4566         * wget.h: Added some comments and new INFINITE_RECURSION #define.
4567
4568 2000-08-23  Dan Harkless  <wget@harkless.org>
4569
4570         * main.c (print_help): -B / --base was not mentioned.
4571
4572 2000-08-22  Dan Harkless  <wget@harkless.org>
4573
4574         * main.c (print_help): Modified -nc description to mention that it
4575         also prevents the creation of multiple versions of the same file
4576         with ".<number>" suffixes.
4577
4578 2000-07-14  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
4579
4580         * retr.c (retrieve_url): Consistently strdup opt.referer when
4581         setting u->referer.
4582
4583 2000-06-09  Dan Harkless  <wget@harkless.org>
4584
4585         * main.c (print_help): --help output for --waitretry was over 80 cols.
4586
4587 2000-06-09  Hrvoje Niksic  <hniksic@iskon.hr>
4588
4589         * url.c (encode_string): Fix comment.
4590         Suggested by Herold Heiko <Heiko.Herold@previnet.it>.
4591
4592 2000-06-01  Const Kaplinsky  <const@ce.cctpu.edu.ru>
4593
4594         * ftp.c (ftp_retrieve_list): Change permissions only on plain
4595         files.
4596
4597 2000-06-01  Hrvoje Niksic  <hniksic@iskon.hr>
4598
4599         * url.c (str_url): Print the port number only if it's different
4600         from the default port number for that protocol.
4601
4602 2000-05-22  Dan Harkless  <wget@harkless.org>
4603
4604         * main.c (print_help): Added --help line for Damir Dzeko
4605         <ddzeko@zesoi.fer.hr>'s until-now-undocumented --referer option.
4606         Removed comments that --referer and --waitretry were undocumented.
4607         Changed "`.wgetrc' command" to "`.wgetrc'-style command" on --help
4608         line for --execute.
4609
4610 2000-05-18  Hrvoje Niksic  <hniksic@iskon.hr>
4611
4612         * ftp.c (getftp): Ditto.
4613
4614         * http.c (gethttp): Check for return value of fclose/fflush.
4615
4616 2000-04-12  Hrvoje Niksic  <hniksic@iskon.hr>
4617
4618         * host.c (store_hostaddress): Instead of shifting ADDR, start
4619         copying from the correct address.
4620
4621 2000-04-12  Hrvoje Niksic  <hniksic@iskon.hr>
4622
4623         * http.c (gethttp): Don't free REQUEST -- it was allocated with
4624         alloca().
4625         Pointed out by Gisle Vanem <gvanem@eunet.no>.
4626
4627 2000-04-04  Dan Harkless  <wget@harkless.org>
4628
4629         * host.c (store_hostaddress): R. K. Owen's patch introduces a
4630         "left shift count >= width of type" warning on 32-bit
4631         architectures.  Got rid of it by tricking the compiler w/ a variable.
4632
4633         * url.c (UNSAFE_CHAR): The macro didn't include all the illegal
4634         characters per RFC1738, namely everything above '~'.  It also
4635         generated a warning on OSes where char =~ unsigned char.  Fixed.
4636
4637 1998-10-17  Hrvoje Niksic  <hniksic@srce.hr>
4638
4639         * http.c (http_process_type): Removed needless strdup(), a memory
4640         leak.
4641
4642 1998-09-25  Hrvoje Niksic  <hniksic@srce.hr>
4643
4644         * html.c (htmlfindurl): Set PH to the first occurrence of `#'.
4645
4646 1998-09-25  Simon Munton  <simonm@m4data.co.uk>
4647
4648         * init.c (wgetrc_file_name): Don't free HOME under Windows.
4649
4650 1998-12-01  "R. K. Owen"  <rkowen@Nersc.GOV>
4651
4652         * host.c (store_hostaddress): Fix for big endian 64-bit machines.
4653
4654 1998-12-01  Hrvoje Niksic  <hniksic@srce.hr>
4655
4656         * url.c (UNSAFE_CHAR): New macro.
4657         (contains_unsafe): Use it.
4658         (encode_string): Ditto.
4659
4660 1998-12-01  Hrvoje Niksic  <hniksic@srce.hr>
4661
4662         * main.c (i18n_initialize): Use LC_MESSAGES only if available.
4663
4664 2000-03-31  Hrvoje Niksic  <hniksic@srce.hr>
4665
4666         * Use TOUPPER/TOLOWER.
4667
4668 1998-12-22  Alexander V. Lukyanov  <lav@yars.free.net>
4669
4670         * ftp-opie.c (btoe): Zero-terminate OSTORE.
4671
4672 2000-03-21  Hrvoje Niksic  <hniksic@iskon.hr>
4673
4674         * wget.h (DO_REALLOC_FROM_ALLOCA): Ditto.
4675
4676         * sysdep.h (ISALNUM): New macro.
4677         (TOLOWER): Ditto.
4678         (TOUPPER): Ditto.
4679
4680 2000-03-10  Dan Harkless  <wget@harkless.org>
4681
4682         * html.c (idmatch): Implemented checking of my new --follow-tags
4683         and --ignore-tags options.
4684
4685         * init.c (commands): Added comment reminding people adding new
4686         entries doing allocation to add corresponding freeing in cleanup().
4687         (commands): Added new followtags and ignoretags commands.
4688         (cleanup): Free storage for new followtags and ignoretags.
4689
4690         * main.c: Use of "comma-separated list" was random -- normalized
4691         it.  Did some alphabetization.  Added comments pointing out
4692         "Options without arguments" and "Options accepting an argument"
4693         sections of long_options[].  Added new options --follow-tags and
4694         -G / --ignore-tags.  Added comment that Damir's --referer is
4695         currently undocumented.  Added comment that Heiko's --waitretry is
4696         partially undocumented (mentioned in --help but not in
4697         wget.texi).  Moved improperly sorted 24, 129, and 'G' cases.
4698
4699         * options.h (struct options): Added new fields follow_tags and
4700         ignore_tags.
4701
4702         * wget.h: Added "#define EQ 0" so we can say "strcmp(a, b) == EQ".
4703
4704 2000-03-02  Dan Harkless  <wget@harkless.org>
4705
4706         * ftp.c (ftp_loop_internal): Heiko introduced "suggest explicit
4707         braces to avoid ambiguous `else'" warnings.  Eliminated them.
4708
4709         * http.c (gethttp): Dan Berger's query string patch is totally
4710         bogus.  If you have two different URLs, gen_page.cgi?page1 and
4711         get_page.cgi?page2, they'll both be saved as get_page.cgi and the
4712         second will overwrite the first.  Also, parameters to implicit
4713         CGIs, like "http://www.host.com/db/?2000-03-02" cause the URLs to
4714         be printed with trailing garbage characters, and could seg fault.
4715         Backing out the patch, which Dan B. informed me by email was just
4716         a kludge to download StarOffice from Sun made necessary due to
4717         wget's unconditional escaping of certain characters (room for an
4718         option there?).
4719         (http_loop): Heiko introduced "suggest explicit braces to avoid
4720         ambiguous `else'" warnings.  Eliminated them.
4721
4722         * main.c: Heiko's --wait / --waitretry backwards compatibility
4723         code looks to have been totally untested -- automatic variable
4724         'wr' was used without being initialized, and a long int was passed
4725         into setval()'s char* val parameter.
4726
4727         * recur.c (parse_robots): Applied Edward J. Sabol
4728         <sabol@alderaan.gsfc.nasa.gov>'s patch for Guan Yang's reported
4729         problem with "User-agent:<space>*<space>" lines in robots.txt.
4730
4731         * url.c (parseurl, str_url): Removing Dan Berger's code (see
4732         http.c above for explanation).
4733
4734 1999-08-25  Heiko Herold  <Heiko.Herold@previnet.it>
4735
4736         * ftp.c: Respect new option waitretry.
4737
4738 2000-01-30  Damir Dzeko  <ddzeko@zesoi.fer.hr>
4739
4740         * http.c (gethttp): Send custom Referer, if required.
4741
4742 1999-09-24  Charles G Waldman  <cgw@fnal.gov>
4743
4744         * netrc.c (parse_netrc): Allow passwords to contain spaces.
4745
4746         * netrc.c (parse_netrc): New function.
4747
4748 1999-09-17  Dan Berger  <dberger@ix.netcom.com>
4749
4750         * http.c (gethttp): Send it.
4751
4752         * url.c (parseurl): Detect query string in HTTP URL-s.
4753         (str_url): Print it.
4754
4755 2000-03-02  HIROSE Masaaki  <hirose31@t3.rim.or.jp>
4756
4757         * html.c (html_allow): Add <link href=...> and <script src=...>.
4758
4759 1999-05-02  andrew deryabin  <djsf@softhome.net>
4760
4761         * http.c (gethttp): Specify port in `Host' header only if it's
4762         different from 80.
4763
4764 1998-11-03  Edward J. Sabol  <sabol@alderaan.gsfc.nasa.gov>
4765
4766         * recur.c (recursive_retrieve): If a finite maximum depth is
4767         specified, and we're are already at that depth, don't download the
4768         HTML file for parsing.
4769
4770 2000-03-01  Dan Harkless  <wget@harkless.org>
4771
4772         * ftp.c (ftp_loop_internal): Call new downloaded_file() function,
4773         even though we don't do conversion on HTML files retrieved via
4774         FTP, so _current_ usage of downloaded_file() makes this call unneeded.
4775         (ftp_retrieve_list): Added a comment saying where we need to
4776         stat() a .orig file if FTP'd HTML file conversion is ever implemented.
4777         (ftp_retrieve_list): "Local file '%s' is more recent," is sometimes
4778         a lie -- reworded as "Server file no newer than local file '%s' --".
4779
4780         * http.c (http_loop): Fixed a typo and clarified a comment.
4781         (http_loop): When -K and -N are specified together, compare size
4782         and timestamp of server file X against local file X.orig (if
4783         extant) rather than converted local file X.
4784         (http_loop): "Local file '%s' is more recent," is sometimes a lie
4785         -- reworded as "Server file no newer than local file '%s' --".
4786         (http_loop): Call new downloaded_file() function to prevent
4787         wrongful overwriting of .orig file when -N is specified.
4788
4789         * url.c (convert_links): When -K specified, only rename X to
4790         X.orig if downloaded_file() returns TRUE.  Otherwise when we skip
4791         file X due to -N, we clobber an X.orig from a previous invocation.
4792         (convert_links): Call the failsafe xstrdup(), not the real strdup().
4793         (convert_links): Added a note asking anyone who understands how
4794         multiple URLs can correspond to a single file to comment it.
4795         (downloaded_file): Added this new function.
4796
4797         * url.h (downloaded_file): Added prototype for this new function
4798         as well as its downloaded_file_t enum type.
4799
4800         * wget.h (boolean): Added this new typedef and TRUE and FALSE #defines.
4801
4802 2000-02-29  Dan Harkless  <wget@harkless.org>
4803
4804         * version.c: Upped version to developer-only "1.5.3+dev".
4805
4806 2000-02-18  Dan Harkless  <wget@harkless.org>
4807
4808         * init.c (backup_converted): Added this new option.
4809
4810         * main.c (-K / --backup-converted): Added this new option.
4811
4812         * options.h (backup_converted): Added this new option.
4813
4814         * url.c (convert_links): When backup_converted is specified, save
4815         file X as X.orig before converting.
4816
4817         * url.h (urlpos): Fixed typo -- said "Rekative" instead of "Relative".
4818
4819 1998-09-21  Hrvoje Niksic  <hniksic@srce.hr>
4820
4821         * version.c: Wget 1.5.3 is released.
4822
4823 1998-09-21  Hrvoje Niksic  <hniksic@srce.hr>
4824
4825         * host.c (ftp_getaddress): Don't warn when reverse-lookup of local
4826         address doesn't yield FQDN.
4827
4828 1998-09-21  Andreas Schwab  <schwab@issan.informatik.uni-dortmund.de>
4829
4830         * cmpt.c (strerror): Fix declaration of sys_errlist.
4831
4832 1998-09-11  Hrvoje Niksic  <hniksic@srce.hr>
4833
4834         * main.c (main): Don't use an array subscript as the first
4835         argument to STRDUP_ALLOCA.
4836         From Kaveh R. Ghazi.
4837
4838 1998-09-11  Szakacsits Szabolcs  <szaka@sienet.hu>
4839
4840         * html.c (htmlfindurl): Download table background.
4841
4842 1998-09-11  Hans Grobler  <grobh@conde.ee.sun.ac.za>
4843
4844         * init.c (parse_line): Would free *com before allocating it.
4845         (parse_line): Would free com instead of *com.
4846
4847 1998-09-10  Howard Gayle  <howard@fjst.com>
4848
4849         * url.c (get_urls_html): Would drop the last character of the
4850         link.
4851
4852 1998-09-10  Hrvoje Niksic  <hniksic@srce.hr>
4853
4854         * http.c (http_loop): Don't print status code if quiet.
4855
4856 1998-09-10  Kaveh R. Ghazi  <ghazi@caip.rutgers.edu>
4857
4858         * log.c: Use <stdarg.h> only when __STDC__.
4859
4860 1998-09-10  Adam D. Moss  <adam@foxbox.org>
4861
4862         * html.c (htmlfindurl): Download <layer src=...>.
4863
4864 1998-09-10  Howard Gayle  <howard@fjst.com>
4865
4866         * ftp.c (ftp_retrieve_list): Don't update the time stamp of a file
4867         not retrieved.
4868
4869 1998-06-27  Hrvoje Niksic  <hniksic@srce.hr>
4870
4871         * utils.c: Include <libc.h> on NeXT.
4872
4873 1998-06-26  Heinz Salzmann  <heinz.salzmann@intermetall.de>
4874
4875         * url.c (get_urls_html): Fix calculation of URL position.
4876
4877 1998-06-23  Hrvoje Niksic  <hniksic@srce.hr>
4878
4879         * version.c: Wget 1.5.2 is released.
4880
4881 1998-06-23  Dave Love  <d.love@dl.ac.uk>
4882
4883         * ftp.c, init.c, netrc.c: Include errno.h.
4884
4885         * http.c: Include errno.h and time header.
4886
4887         * Makefile.in (exext): Define.
4888         (install.bin, uninstall.bin): Use it.
4889
4890 1998-06-21  Hrvoje Niksic  <hniksic@srce.hr>
4891
4892         * http.c (http_loop): Don't attempt to compare local and remote
4893         sizes if the remote size is unknown.
4894
4895 1998-06-16  Hrvoje Niksic  <hniksic@srce.hr>
4896
4897         * url.c (get_urls_html): Use malloc() instead of alloca in the
4898         loop.
4899
4900 1998-06-13  Hrvoje Niksic  <hniksic@srce.hr>
4901
4902         * version.c: Wget 1.5.2-b4 is released.
4903
4904 1998-06-13  Hrvoje Niksic  <hniksic@srce.hr>
4905
4906         * url.c (get_urls_html): Ignore spaces before and after the URI.
4907
4908 1998-06-08  Wanderlei Antonio Cavassin  <cavassin@conectiva.com.br>
4909
4910         * ftp.c (getftp): Translate `done'.
4911
4912 1998-06-06  Hrvoje Niksic  <hniksic@srce.hr>
4913
4914         * version.c: Wget 1.5.2-b3 is released.
4915
4916 1998-06-06  Alexander Kourakos  <awk@bnt.com>
4917
4918         * init.c (cleanup): Close dfp, don't free it.
4919
4920 1998-06-06  Hrvoje Niksic  <hniksic@srce.hr>
4921
4922         * utils.c (make_directory): Twiddle.
4923
4924         * config.h.in: Added template for access().
4925
4926 1998-06-05  Mathieu Guillaume  <mat@cythere.com>
4927
4928         * html.c (htmlfindurl): Download <input src=...>
4929
4930 1998-06-03  Hrvoje Niksic  <hniksic@srce.hr>
4931
4932         * utils.c (file_exists_p): Use access() with two arguments.
4933
4934 1998-05-27  Martin Kraemer  <Martin.Kraemer@mch.sni.de>
4935
4936         * netrc.c (parse_netrc): Correct logic.
4937
4938 1998-05-27  Hrvoje Niksic  <hniksic@srce.hr>
4939
4940         * ftp.c (getftp): Added `break'; suggested by Lin Zhe Min
4941         <ljm@ljm.wownet.net>.
4942
4943 1998-05-24  Hrvoje Niksic  <hniksic@srce.hr>
4944
4945         * version.c: Wget 1.5.2-b2 is released.
4946
4947 1998-05-18  Juan Jose Rodriguez  <jcnsoft@jal1.telmex.net.mx>
4948
4949         * mswindows.h: Don't translate mkdir to _mkdir under Borland.
4950
4951 1998-05-17  Hrvoje Niksic  <hniksic@srce.hr>
4952
4953         * retr.c (elapsed_time): Return correct value when
4954         HAVE_GETTIMEOFDAY is undefined.
4955
4956 1998-05-13  Hrvoje Niksic  <hniksic@srce.hr>
4957
4958         * version.c: Wget 1.5.2-b1 is released.
4959
4960 1998-05-08  Hrvoje Niksic  <hniksic@srce.hr>
4961
4962         * getopt.c (_getopt_internal): Use exec_name instead of argv[0].
4963         (_getopt_internal): Don't translate `#if 0'-ed strings.
4964
4965 1998-05-06  Douglas E. Wegscheid  <wegscd@whirlpool.com>
4966
4967         * mswindows.c (ws_handler): Use fork_to_background().
4968
4969 1998-05-05  Hrvoje Niksic  <hniksic@srce.hr>
4970
4971         * version.c: Wget 1.5.1 is released.
4972
4973 1998-05-05  Hrvoje Niksic  <hniksic@srce.hr>
4974
4975         * http.c (parse_http_status_line): Avoid `minor' and `major'
4976         names.
4977
4978 1998-05-02  Hrvoje Niksic  <hniksic@srce.hr>
4979
4980         * utils.c (mkdirhier): Renamed to make_directory.
4981
4982 1998-05-01  Hrvoje Niksic  <hniksic@srce.hr>
4983
4984         * mswindows.c (fork_to_background): Define under Windows.
4985
4986         * utils.c (fork_to_background): New function.
4987
4988         * html.c (htmlfindurl): Removed rerdundant casts.
4989
4990 1998-05-01  Douglas E. Wegscheid  <wegscd@whirlpool.com>
4991
4992         * mswindows.c (ws_mypath): Cache the path.
4993
4994 1998-04-30  Douglas E. Wegscheid  <wegscd@whirlpool.com>
4995
4996         * ftp.h: Prefix enum ftype members with FT_.
4997
4998         * ftp-ls.c, ftp.c, html.h: Adjust accordingly.
4999
5000         * mswindows.h: Use stat under Borland, _stat under MSVC.
5001
5002 1998-04-28  Hrvoje Niksic  <hniksic@srce.hr>
5003
5004         * http.c (known_authentication_scheme_p): New function.
5005         (gethttp): Handle authorization more correctly.
5006
5007         * ftp-basic.h: Removed.
5008
5009         * cmpt.h: Removed.
5010
5011         * utils.c: Include <unistd.h> before <pwd.h>; needed under SunOS
5012         with gcc 2.8.
5013         (numdigit): Use `while' loop.
5014
5015         * http.c (create_authorization_line): Detect authentication
5016         schemes case-insensitively.
5017
5018         * http.c (extract_header_attr): Use strdupdelim().
5019         (digest_authentication_encode): Move declaration of local
5020         variables to smaller scope.
5021         (digest_authentication_encode): Reset REALM, OPAQUE and NONCE.
5022         (create_authorization_line): Detect authentication schemes
5023         case-insensitively.
5024
5025         * utils.c (touch): Constify.
5026
5027         * http.c (gethttp): Report a nicer error when no data is received.
5028
5029         * rbuf.h (RBUF_READCHAR): Ditto.
5030
5031         * ftp-basic.c (ftp_response): Use sizeof.
5032
5033 1998-04-27  Hrvoje Niksic  <hniksic@srce.hr>
5034
5035         * retr.c (print_percentage): EXPECTED is long, not int.
5036         (print_percentage): Use floating-point arithmetic to avoid
5037         overflow with large files' sizes multiplied with 100.
5038
5039 1998-04-27  Gregor Hoffleit  <flight@mathi.uni-heidelberg.de>
5040
5041         * config.h.in: Added pid_t stub.
5042
5043         * sysdep.h (S_ISREG): Moved here from mswindows.h (NeXT doesn't
5044         define it).
5045
5046 1998-04-20  Hrvoje Niksic  <hniksic@srce.hr>
5047
5048         * version.c: Wget 1.5.0 is released.
5049
5050 1998-04-18  Hrvoje Niksic  <hniksic@srce.hr>
5051
5052         * url.c (str_url): Ditto.
5053
5054         * ftp-basic.c (ftp_rest): Use new name.
5055
5056         * utils.c (long_to_string): Renamed from prnum().
5057
5058 1998-04-16  Hrvoje Niksic  <hniksic@srce.hr>
5059
5060         * version.c: Wget 1.5-b17 is released.
5061
5062 1998-04-08  Hrvoje Niksic  <hniksic@srce.hr>
5063
5064         * headers.c (header_get): New argument FLAGS.
5065
5066         * http.c (gethttp): If request is malformed, bail out of the
5067         header loop.
5068         (gethttp): Check for empty header *after* the status line checks.
5069         (gethttp): Disallow continuations for status line.
5070
5071 1998-04-08  Hrvoje Niksic  <hniksic@srce.hr>
5072
5073         * version.c: Wget 1.5-b16 is released.
5074
5075 1998-04-08  Hrvoje Niksic  <hniksic@srce.hr>
5076
5077         * init.c (commands): Renamed `always_rest' to `continue'.
5078
5079 1998-04-05  Hrvoje Niksic  <hniksic@srce.hr>
5080
5081         * all: Use it.
5082
5083         * log.c (logputs): New argument.
5084         (logvprintf): Ditto.
5085         (logprintf): Ditto.
5086
5087 1998-04-04  Hrvoje Niksic  <hniksic@srce.hr>
5088
5089         * http.c (http_atotm): Update comment.
5090
5091         * main.c (i18n_initialize): Set LC_MESSAGES, not LC_ALL.
5092
5093         * wget.h: Renamed ENABLED_NLS to HAVE_NLS.
5094
5095         * main.c (i18n_initialize): New function.
5096         (main): Use it.
5097
5098         * log.c: Include <unistd.h>.
5099
5100         * retr.c (show_progress): Cast alloca to char *.
5101
5102 1998-04-04  Hrvoje Niksic  <hniksic@srce.hr>
5103
5104         * version.c: Wget 1.5-b15 is released.
5105
5106 1998-04-04  Hrvoje Niksic  <hniksic@srce.hr>
5107
5108         * utils.h: Declare file_non_directory_p().
5109
5110 1998-04-03  Hrvoje Niksic  <hniksic@srce.hr>
5111
5112         * main.c (main): It's `tries', not `numtries' now.
5113
5114 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
5115
5116         * init.c (getperms): Removed.
5117
5118 1998-04-01  Tim Charron  <tcharron@interlog.com>
5119
5120         * log.c (logvprintf): Don't use ARGS twice.
5121
5122 1998-04-01  John  <john@futuresguide.com>
5123
5124         * mswindows.c: Cleaned up.
5125
5126 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
5127
5128         * version.c: Wget 1.5-b14 is released.
5129
5130 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
5131
5132         * ftp-opie.c (STRLEN4): New macro.
5133         (btoe): Use it.
5134
5135 1998-04-01  Junio Hamano  <junio@twinsun.com>
5136
5137         * http.c: Document all the Digest functions.
5138
5139 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
5140
5141         * utils.c (file_non_directory_p): Renamed from isfile().
5142
5143         * mswindows.h (S_ISREG): New macro, suggested by Tim Adam.
5144
5145 1998-03-31  Hrvoje Niksic  <hniksic@srce.hr>
5146
5147         * utils.c (mkdirhier): Use 0777 instead of opt.dirmode.
5148
5149         * init.c (cmd_spec_dotstyle): Use 48 dots per line for binary
5150         style.
5151         (cmd_permissions): Removed.
5152
5153         * config.h.in: Add template for WORDS_BIGENDIAN.
5154
5155 1998-03-31  Junio Hamano  <junio@twinsun.com>
5156
5157         * http.c (HEXD2asc): New macro.
5158         (dump_hash): Use it.
5159
5160 1998-03-31  Hrvoje Niksic  <hniksic@srce.hr>
5161
5162         * version.c: Wget 1.5-b13 is released.
5163
5164 1998-03-31  Hrvoje Niksic  <hniksic@srce.hr>
5165
5166         * main.c (main): Don't try to use `com'.
5167
5168 1998-03-30  Hrvoje Niksic  <hniksic@srce.hr>
5169
5170         * init.c (cmd_permissions): New function.
5171
5172 1998-03-30  Hrvoje Niksic  <hniksic@srce.hr>
5173
5174         * version.c: Wget 1.5-b12 is released.
5175
5176 1998-03-30  Hrvoje Niksic  <hniksic@srce.hr>
5177
5178         * init.c (commands): Renamed `numtries' to `tries'.
5179         (cmd_spec_debug): Removed.
5180         (home_dir): Under Windows, return `C:\' if HOME is undefined.
5181
5182 1998-03-29  Hrvoje Niksic  <hniksic@srce.hr>
5183
5184         * config.h.in: Define _XOPEN_SOURCE.
5185
5186         * init.c (check_user_specified_header): New function.
5187         (cmd_spec_header): Use it.
5188         (cmd_spec_useragent): New function.
5189
5190 1998-03-29  Hrvoje Niksic  <hniksic@srce.hr>
5191
5192         * version.c: Wget 1.5-b11 is released.
5193
5194 1998-03-28  Hrvoje Niksic  <hniksic@srce.hr>
5195
5196         * wget.h: Include <libintl.h> only if NLS is enabled.
5197
5198 1998-03-26  Hrvoje Niksic  <hniksic@srce.hr>
5199
5200         * options.h (struct options): Made `wait' a long.
5201         (struct options): Ditto for `timeout'.
5202
5203 1998-03-19  Hrvoje Niksic  <hniksic@srce.hr>
5204
5205         * utils.c (exists): Renamed to file_exists_p.
5206         (file_exists_p): Use access() if available.
5207
5208 1998-03-17  Hrvoje Niksic  <hniksic@srce.hr>
5209
5210         * utils.c (memfatal): Set save_log_p to 0 to avoid potential
5211         infloop.
5212
5213         * log.c: do_logging -> save_log_p.
5214
5215         * config.h.in: Added template for HAVE_VSNPRINTF.
5216
5217 1998-03-16  Hrvoje Niksic  <hniksic@srce.hr>
5218
5219         * init.c: Ditto.
5220
5221         * http.c: Protect declaration against non-ANSI compiler.
5222
5223         * log.c (logvprintf): Use vsnprintf() if available.
5224
5225         * getopt.c (main): Don't translate test stuff.
5226
5227 1998-03-16  Hrvoje Niksic  <hniksic@srce.hr>
5228
5229         * version.c: Wget 1.5-b10 is released.
5230
5231 1998-03-11  Hrvoje Niksic  <hniksic@srce.hr>
5232
5233         * ftp.c (getftp): Don't translate "CWD %s".
5234
5235         * wget.h (GCC_FORMAT_ATTR): Renamed from FORMAT_ATTR.
5236
5237 1998-03-07  Hrvoje Niksic  <hniksic@srce.hr>
5238
5239         * ftp-opie.c (btoe): Use memcpy() instead of strncat().
5240
5241         * log.c (logputs): New function.
5242         (logvprintf): Renamed from vlogmsg; use logputs().
5243
5244         * retr.c (show_progress): Print `[100%]' when the retrieval is
5245         finished.
5246
5247         * init.c (run_wgetrc): Use FILE, not PATH.
5248         (wgetrc_file_name): Ditto.
5249
5250 1998-03-07  Tim Adam  <tma@osa.com.au>
5251
5252         * recur.c (parse_robots): Correctly reset `entries' on empty
5253         disallow.
5254
5255 1998-03-07  Hrvoje Niksic  <hniksic@srce.hr>
5256
5257         * init.c (cmd_spec_debug): Use cmd_boolean().
5258
5259 1998-02-23  Hrvoje Niksic  <hniksic@srce.hr>
5260
5261         * http.c (gethttp): Create proxy-authorization correctly.
5262
5263 1998-02-22  Hrvoje Niksic  <hniksic@srce.hr>
5264
5265         * md5.c: Ditto.
5266
5267         * getopt.c: Use ANSI function definitions.
5268
5269         * ftp-opie.c: New file.
5270
5271         * options.h: Don't redefine EXTERN.
5272
5273         * init.c: Sort it correctly.
5274
5275 1998-02-22  Hrvoje Niksic  <hniksic@srce.hr>
5276
5277         * version.c: Wget 1.5-b9 is released.
5278
5279 1998-02-22  Hrvoje Niksic  <hniksic@srce.hr>
5280
5281         * recur.c (recursive_retrieve): Reset `first_time'.
5282
5283         * ftp.c (getftp): Added `default' clause to switches of uerr_t.
5284
5285         * rbuf.c (rbuf_peek): Simplified.
5286         (rbuf_flush): Use MINVAL.
5287
5288         * wget.h (MINVAL): Moved from url.h.
5289
5290         * rbuf.h (RBUF_FD): New macro.
5291
5292         * url.c (add_url): Add to the head of the list.
5293
5294         * ftp.c (ftp_retrieve_list): Set the permissions to downloaded
5295         file.
5296         (getftp): Set the default permissions to 0600.
5297
5298 1998-02-21  Hrvoje Niksic  <hniksic@srce.hr>
5299
5300         * url.c (get_urls_html): Ditto.
5301         (convert_links): Ditto.
5302
5303         * recur.c (parse_robots): Ditto.
5304
5305         * html.c (ftp_index): Ditto.
5306
5307         * ftp-ls.c (ftp_parse_unix_ls): Open file as binary.
5308
5309         * init.c (defaults): Initialize `opt' to zero via memset.
5310
5311         * http.c (digest_authentication_encode): goto considered harmful.
5312
5313 1998-02-19  Hrvoje Niksic  <hniksic@srce.hr>
5314
5315         * ftp.c (delelement): Simplify and fix leak.
5316
5317 1998-02-18  Hrvoje Niksic  <hniksic@srce.hr>
5318
5319         * http.c (dump_hash): Use HEXD2ASC instead of home-grown stuff.
5320
5321         * url.h (HEXD2ASC): Removed warning.
5322
5323         * init.c (comind): Use binary search.
5324         (commands): Reorganized.
5325         (setval): Ditto.
5326         (cmd_boolean): New function.
5327         (cmd_number): Ditto.
5328         (cmd_number_inf): Ditto.
5329         (cmd_string): Ditto.
5330         (cmd_vector): Ditto.
5331         (cmd_directory_vector): Ditto.
5332         (cmd_bytes): Ditto.
5333         (cmd_time): Ditto.
5334         (cmd_spec_debug): Ditto.
5335         (cmd_spec_dirmode): Ditto.
5336         (cmd_spec_dirstruct): Ditto.
5337         (cmd_spec_dotstyle): Ditto.
5338         (cmd_spec_header): Ditto.
5339         (cmd_spec_htmlify): Ditto.
5340         (cmd_spec_mirror): Ditto.
5341         (cmd_spec_outputdocument): Ditto.
5342         (cmd_spec_recursive): Ditto.
5343         (settime): Merged with cmd_time().
5344         (setbytes): Merged with cmd_bytes().
5345         (setonoff): Merged with cmd_boolean().
5346         (onoff): Ditto.
5347
5348 1998-02-17  Hrvoje Niksic  <hniksic@srce.hr>
5349
5350         * Makefile.in (distclean): Remove `config.h'.
5351
5352 1998-02-17  Hrvoje Niksic  <hniksic@srce.hr>
5353
5354         * version.c: Wget 1.5-b8 is released.
5355
5356 1998-02-17  Hrvoje Niksic  <hniksic@srce.hr>
5357
5358         * http.c (digest_authentication_encode): New function.
5359         (create_authorization_line): Use it.
5360         (dump_hash): New function.
5361         (digest_authentication_encode): Use it.
5362
5363         * fnmatch.c: Renamed from `mtch.c'.
5364
5365 1998-02-15  Karl Eichwalder  <ke@suse.de>
5366
5367         * main.c (main): Tag "Written by..." string as translatable.
5368
5369 1998-02-15  Hrvoje Niksic  <hniksic@srce.hr>
5370
5371         * wget.h (FREE_MAYBE): New macro.
5372
5373         * http.c (create_authorization_line): Don't use ANSI C string
5374         concatenation feature.
5375         (basic_authentication_encode): Use alloca() for temporary
5376         variables.
5377
5378         * recur.h: Ditto.
5379
5380         * http.c: Ditto.
5381
5382         * headers.h: Ditto.
5383
5384         * ftp-basic.c: Protect declaration against non-ANSI compiler.
5385
5386         * http.c (create_authorization_line): Cast `unsigned char *' to
5387         `char *' for sprintf, to shut up the noisy Digital Unix cc.
5388
5389 1998-02-15  Hrvoje Niksic  <hniksic@srce.hr>
5390
5391         * version.c: Wget 1.5-b7 is released.
5392
5393 1998-02-15  Hrvoje Niksic  <hniksic@srce.hr>
5394
5395         * cmpt.c (strstr): Synched with glibc-2.0.6.
5396
5397         * ftp-basic.c (calculate_skey_response): Ditto.
5398         (calculate_skey_response): Use alloca().
5399
5400         * http.c (create_authorization_line): Work with FSF's version of
5401         md5.c.
5402
5403         * md5.c: New file, from GNU libc.
5404
5405 1998-02-14  Hrvoje Niksic  <hniksic@srce.hr>
5406
5407         * url.h (URL_CLEANSE): Name the temporary variable more carefully.
5408
5409 1998-02-13  Hrvoje Niksic  <hniksic@srce.hr>
5410
5411         * http.c (basic_authentication_encode): New function, instead of
5412         the macro.
5413
5414 1998-02-13  Junio Hamano  <junio@twinsun.com>
5415
5416         * http.c: Add HTTP-DA support.
5417         * ftp-basic.c: Add Opie/S-key support.
5418         * config.h.in, Makefile.in: Add HTTP-DA and Opie/S-key support.
5419         * md5.c, md5.h: New files.
5420
5421 1998-02-13  Hrvoje Niksic  <hniksic@srce.hr>
5422
5423         * http.c (http_process_range): Renamed from hprocrange().
5424         (http_process_range): Parse the whole header.
5425
5426         * headers.c: New file.
5427         (header_process): New function.
5428         (header_get): Renamed from fetch_next_header.
5429
5430         * all: Include utils.h only where necessary.
5431
5432         * wget.h: Declare xmalloc(), xrealloc() and xstrdup() here.
5433
5434         * wget.h: Add provisions for dmalloc.
5435
5436 1998-02-12  Hrvoje Niksic  <hniksic@srce.hr>
5437
5438         * version.c: Wget 1.5-b6 is released.
5439
5440 1998-02-12  Hrvoje Niksic  <hniksic@srce.hr>
5441
5442         * ftp.c (ftp_loop): Determine `filename' more precisely.
5443
5444         * init.c (setval): Don't set `opt.quiet' if output-document is
5445         `-'.
5446
5447         * log.c (log_init): Print to STDERR instead of STDOUT.
5448         (vlogmsg): Use STDERR by default.
5449         (logflush): Ditto.
5450
5451 1998-02-11  Simon Josefsson  <jas@pdc.kth.se>
5452
5453         * host.c: Use addr_in again.
5454
5455 1998-02-08  Karl Eichwalder  <karl@suse.de>
5456
5457         * http.c (gethttp): Fixed typo.
5458
5459 1998-02-08  Hrvoje Niksic  <hniksic@srce.hr>
5460
5461         * version.c: Wget 1.5-b5 is released.
5462
5463 1998-02-08  Hrvoje Niksic  <hniksic@srce.hr>
5464
5465         * retr.c (show_progress): Use it.
5466
5467         * log.c (logflush): New function.
5468
5469         * wget.h: Utilize __attribute__ if on gcc.
5470
5471 1998-02-07  Hrvoje Niksic  <hniksic@srce.hr>
5472
5473         * http.c (base64_encode_line): New argument LENGTH.
5474         (BASIC_AUTHENTICATION_ENCODE): Use it.
5475         (BASIC_AUTHENTICATION_ENCODE): Take length of HEADER into account.
5476
5477         * main.c (main): Fixed fprintf() format mismatch.
5478
5479 1998-02-06  Hrvoje Niksic  <hniksic@srce.hr>
5480
5481         * version.c: Wget 1.5-b4 is released.
5482
5483 1998-02-03  Simon Josefsson  <jas@pdc.kth.se>
5484
5485         * host.c: use sockaddr_in instead of addr_in.
5486
5487 1998-02-04  Hrvoje Niksic  <hniksic@srce.hr>
5488
5489         * init.c (cleanup): Use it.
5490
5491         * recur.c (recursive_cleanup): New function.
5492
5493         * retr.c (retrieve_from_file): Ditto.
5494
5495         * main.c (main): Use it.
5496
5497         * recur.c (recursive_reset): New function.
5498
5499         * retr.c (retrieve_from_file): Ditto.
5500
5501         * main.c (main): Simplify call to recursive_retrieve().
5502
5503         * recur.c (recursive_retrieve): Removed FLAGS argument.
5504
5505         * http.c (gethttp): Changed call to iwrite().
5506
5507 1998-02-03  Hrvoje Niksic  <hniksic@srce.hr>
5508
5509         * url.c (get_urls_html): Ditto.
5510         (free_urlpos): Ditto.
5511         (mkstruct): Ditto.
5512         (construct): Ditto.
5513
5514         * retr.c (retrieve_url): Move declaration of local variables to
5515         smaller scope.
5516
5517         * url.c (urlproto): Use it.
5518         (parseurl): Ditto.
5519         (str_url): Ditto.
5520         (get_urls_html): Ditto.
5521
5522         * utils.h (ARRAY_SIZE): New macro.
5523
5524         * url.c (proto): Moved from url.h.
5525
5526         * url.h (URL_CLEANSE): Reformatted.
5527         (USE_PROXY_P): Renamed from USE_PROXY.
5528
5529         * ftp-basic.c: Adjust to the new interface of iwrite().
5530
5531         * ftp-basic.c (ftp_port): Use alloca().
5532
5533 1998-02-03  Hrvoje Niksic  <hniksic@srce.hr>
5534
5535         * version.c: Wget 1.5-b3 is released.
5536
5537         * host.c (ftp_getaddress): Don't print to stderr directly.
5538
5539         * init.c (setbytes): Support `g' for gigabytes.
5540         (cmdtype): New specification CTIME.
5541         (setval): Use it with settime().
5542         (commands): Use it for WAIT and TIMEOUT.
5543
5544 1998-02-02  Hrvoje Niksic  <hniksic@srce.hr>
5545
5546         * http.c (BASIC_AUTHENTICATION_ENCODE): New macro.
5547         (gethttp): Use it.
5548
5549         * utils.c (unique_name_1): Moved from url.c.
5550         (unique_name): Ditto.
5551
5552         * url.c (url_filename): Ditto.
5553
5554         * log.c (redirect_output): Changed call to unique_name().
5555
5556         * url.c (unique_name_1): Renamed from unique_name().
5557         (unique_name): Changed interface.
5558
5559         * init.c (enum cmdid): Moved from init.h.
5560         (cmdtype): Ditto.
5561         (struct cmd): Ditto.
5562
5563         * main.c (main): Use it.
5564         (main): Moved `--backups' to not have a short option.
5565
5566         * options.h (struct options): New member BACKGROUND.
5567
5568         * main.c (print_help): Rearranged.
5569         (main): New long options for -n* short options: --no-directories,
5570         --no-host-directories, --non-verbose, --no-host-lookup and
5571         --dont-remove-listing.
5572
5573 1998-02-01  Hrvoje Niksic  <hniksic@srce.hr>
5574
5575         * main.c (main): Use log_close().
5576
5577         * log.c: New variable LOGFP.
5578         (vlogmsg): Use it.
5579         (redirect_output): Don't open /dev/null; set LOGFP to stdin
5580         instead.
5581         (log_close): New function.
5582
5583         * options.h (struct options): Removed LFILE.
5584
5585         * log.c (log_enable): Removed.
5586
5587         * main.c (main): Use it.
5588
5589         * log.c (log_init): New function.
5590
5591         * url.c (get_urls_html): Removed needless assignment to BASE.
5592
5593         * host.c (add_hlist): Don't set CMP needlessly.
5594
5595         * utils.c (match_backwards): Ditto.
5596         (in_acclist): Ditto.
5597
5598         * url.c (findurl): Ditto.
5599
5600         * netrc.c (parse_netrc): Ditto.
5601
5602         * log.c (log_dump): Ditto.
5603
5604         * html.c (html_quote_string): Ditto.
5605
5606         * ftp-basic.c (ftp_request): Made static.
5607
5608         * connect.c: Made global variables static.
5609
5610         * url.c (construct): Ditto.
5611
5612         * init.c (init_path): Avoid assignment inside `if'-condition.
5613
5614         * ftp.c: Don't include in.h or winsock.h.
5615
5616         * ftp.c (ftp_loop): Use SZ.
5617
5618         * connect.c (bindport): Cast &addrlen to int *.
5619         (conaddr): Ditto.
5620
5621         * init.c (initialize): Don't use SYSTEM_WGETRC unconditionally.
5622
5623 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
5624
5625         * ftp.c (getftp): Initialize opt.ftp_pass here.
5626         (ftp_retrieve_dirs): Use alloca().
5627
5628         * init.c (defaults): Don't initialize opt.ftp_pass.
5629
5630         * sysdep.h (S_ISLNK): Declare for OS/2; ditto for lstat.
5631         From Ivan F. Martinez <ivanfm@ecodigit.com.br>.
5632
5633 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
5634
5635         * recur.c (parse_robots): Check for comments more correctly.
5636
5637         * host.c (ftp_getaddress): Use STRDUP_ALLOCA.
5638         (ftp_getaddress): Add diagnostics when reverse-lookup yields only
5639         hostname.
5640
5641 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
5642
5643         * version.c: Wget 1.5-b2 is released.
5644
5645         * netrc.c (NETRC_FILE_NAME): Moved from netrc.h.
5646
5647         * utils.c (proclist): Pass FNM_PATHNAME to fnmatch().
5648
5649         * ftp-basic.c (ftp_pasv): Avoid unnecessary casting to unsigned
5650         char.
5651
5652         * log.c: Don't attempt to hide arguments from ansi2knr.
5653
5654         * cmpt.c: Synched strptime() and mktime() with glibc-2.0.6.
5655
5656         * ansi2knr.c: Use a later version, from fileutils-3.16l alpha.
5657
5658         * ftp.c (getftp): Ditto.
5659
5660         * http.c (gethttp): Use it.
5661
5662         * retr.c (get_contents): New argument EXPECTED; pass it to
5663         show_progress().
5664         (show_progress): New argument EXPECTED; use it to display
5665         percentages.
5666
5667         * init.c (setval): Ditto.
5668
5669         * http.c (gethttp): Ditto.
5670         (http_loop): Ditto.
5671
5672         * ftp.c (getftp): Ditto.
5673         (ftp_loop_internal): Ditto.
5674
5675         * ftp-ls.c (ftp_parse_unix_ls): Use abort() instead of assert(0).
5676
5677         * sysdep.h (CLOSE): Simplify; use DEBUGP.
5678
5679         * netrc.c (search_netrc): Use alloca().
5680
5681         * init.c (defaults): Initialize no_flush.
5682
5683         * log.c (vlogmsg): Don't flush if no_flush.
5684
5685         * options.h (struct options): New variable no_flush.
5686
5687         * main.c (main): Don't play games with buffering.
5688
5689         * log.c (vlogmsg): Flush the output after every message.
5690
5691 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
5692
5693         * init.c (parse_line): Ditto.
5694
5695         * url.c (get_urls_html): Ditto.
5696
5697         * main.c (main): Don't cast to unsigned char.
5698
5699         * init.c (run_wgetrc): Don't cast to unsigned char.
5700         (parse_line): Accept char instead of unsigned char.
5701
5702         * html.c (htmlfindurl): Use char instead of unsigned char.
5703
5704         * all: Use them.
5705
5706         * sysdep.h: Add wrappers to ctype macros to make them
5707         eight-bit-clean:
5708
5709 1998-01-30  Hrvoje Niksic  <hniksic@srce.hr>
5710
5711         * html.c (htmlfindurl): Download <img lowsrc=...>
5712
5713         * main.c (main): Ignore SIGPIPE.
5714
5715         * connect.c (select_fd): New argument WRITEP.
5716         (iwrite): Call select_fd().
5717
5718 1997-02-27  Fila Kolodny <fila@ibi.com>
5719
5720         * ftp.c (ftp_retrieve_list): If retrieving symlink and the proper
5721         one already exists, just skip it.
5722
5723 1998-01-30  Hrvoje Niksic  <hniksic@srce.hr>
5724
5725         * http.c (gethttp): Cosmetic changes.
5726
5727         * http.c (check_end): Allow `+D...' instead of `GMT'.
5728         From Fabrizio Pollastri <pollastri@cstv.to.cnr.it>.
5729
5730         * url.c (process_ftp_type): New function.
5731         (parseurl): Use it.
5732
5733         * connect.c (iwrite): Allow writing in a few chunks.
5734         (bindport): Made SRV static, so addr can point to it.
5735         (select_fd): Removed HPUX kludge.
5736
5737         * host.c (free_hlist): Incorporated into clean_hosts().
5738
5739 1998-01-29  Hrvoje Niksic  <hniksic@srce.hr>
5740
5741         * host.c (hlist): Made static.
5742         (search_address): Cosmetic change.
5743
5744 1998-01-29  Hrvoje Niksic  <hniksic@srce.hr>
5745
5746         * version.c: Wget v1.5-b1 is released.
5747
5748         * http.c (hgetlen): Use sizeof() to get the header length.
5749         (hgetrange): Ditto.
5750         (hgettype): Ditto.
5751         (hgetlocation): Ditto.
5752         (hgetmodified): Ditto.
5753         (haccepts_none): Ditto.
5754
5755         * main.c (main): Updated `--version' and `--help' output, as per
5756         Francois Pinard's suggestions.
5757
5758         * main.c: Include locale.h; call setlocale(), bindtextdomain() and
5759         textdomain().
5760
5761         * config.h.in: Define stubs for I18N3.
5762
5763         * wget.h: Include libintl.h.
5764
5765 1998-01-28  Hrvoje Niksic  <hniksic@srce.hr>
5766
5767         * url.c (mkstruct): Check for opt.cut_dirs.
5768         (mkstruct): alloca()-te more, xmalloc() less.
5769
5770         * utils.c (load_file): Check for ferror().
5771
5772         * url.c (get_urls_file): Close only the files we opened.
5773         (get_urls_html): Ditto.
5774         (count_slashes): New function.
5775
5776         * http.h: Removed.
5777
5778         * http.c (gethttp): Respect username and password provided by
5779         proxy URL.
5780         (base64_encode_line): Write into an existing buffer instead of
5781         malloc-ing a new one.
5782         (struct http_stat): Moved from http.h
5783
5784         * retr.c (retrieve_url): Free SUF.
5785
5786         * all: Removed lots of unnecessary .h dependencies.
5787
5788         * html.c (global_state): Made static.
5789
5790         * utils.h (ALLOCA_ARRAY): New macro.
5791
5792         * main.c (main): New option `--cut-dirs'.
5793
5794         * url.c (construct): Use alloca() for T.
5795
5796         * utils.c (mkdirhier): Use STRDUP_ALLOCA.
5797
5798         * host.c (_host_t): Moved from host.h.
5799         (struct host): Renamed from _host_t.
5800         (store_hostaddress): Use STRDUP_ALLOCA for INET_S.
5801         (realhost): Ditto.
5802
5803         * host.h: Don't include url.h.
5804
5805         * ftp.c (LIST_FILENAME): Moved from ftp.h.
5806
5807         * init.c (DEFAULT_FTP_ACCT): Moved from ftp.h.
5808
5809         * main.c (main): Enable log if the output goes to a TTY.
5810
5811         * connect.h: Removed unused constant `BACKLOG'.
5812
5813         * config.h.in: Check for isatty().
5814
5815         * Makefile.in (LINK): Use CFLAGS when linking.
5816
5817 1998-01-27  Hrvoje Niksic  <hniksic@srce.hr>
5818
5819         * mswindows.c (ws_hangup): Use redirect_output().
5820
5821         * main.c (redirect_output_signal): New function; use
5822         redirect_output().
5823
5824         * log.c (redirect_output): New function, based on hangup(), which
5825         is deleted.
5826
5827         * log.c (vlogmsg): New function.
5828
5829         * wget.h (DEBUGP): Use debug_logmsg().
5830
5831         * main.c (hangup): Use it.
5832
5833         * log.c (log_dump): New function.
5834
5835         * utils.h (DO_REALLOC): Use `long' for various sizes.
5836
5837         * http.c (hskip_lws): Use `while', for clarity.
5838         (HTTP_DYNAMIC_LINE_BUFFER): New constant.
5839         (fetch_next_header): Use it instead of DYNAMIC_LINE_BUFFER.
5840
5841         * ftp-basic.c (FTP_DYNAMIC_LINE_BUFFER): New constant.
5842         (ftp_response): Use it instead of DYNAMIC_LINE_BUFFER.
5843
5844         * utils.c (DYNAMIC_LINE_BUFFER): Moved from utils.c.
5845         (LEGIBLE_SEPARATOR): Ditto.
5846         (FILE_BUFFER_SIZE): Ditto.
5847
5848         * retr.c (BUFFER_SIZE): Moved from retr.h.
5849
5850         * log.c: New file.
5851         (logmsg): Moved from utils.c.
5852         (debug_logmsg): New function.
5853
5854         * mswindows.h: Include it here.
5855
5856         * init.c: Ditto.
5857
5858         * utils.c: Don't include <windows.h>.
5859
5860 1998-01-25  Hrvoje Niksic  <hniksic@srce.hr>
5861
5862         * host.c (ftp_getaddress): Ditto.
5863
5864         * main.c (main): Use it.
5865
5866         * utils.h (STRDUP_ALLOCA): New macro.
5867
5868         * init.c: Prepend `wget: ' to error messages printed on stderr.
5869
5870         * utils.c (mkdirhier): Renamed from mymkdir.
5871         (touch): Renamed from my_touch.
5872         (pwd_cuserid): Renamed from my_cuserid().
5873
5874 1998-01-24  Andy Eskilsson  <andy.eskilsson@telelogic.se>
5875
5876         * utils.c (accdir): Process wildcards.
5877         (proclist): New function.
5878         (accdir): Use it to avoid code repetition.
5879
5880 1998-01-24  Hrvoje Niksic  <hniksic@srce.hr>
5881
5882         * recur.c (parse_robots): Respect opt.useragent; use alloca().
5883
5884         * http.c (gethttp): Construct useragent accordingly.
5885
5886         * version.c: Changed version string to numbers-only.
5887
5888         * main.c (print_help): List all the options.
5889
5890         * mswindows.c (windows_main_junk): Initialize argv0 here.
5891
5892 1998-01-24  Karl Heuer  <kwzh@gnu.org>
5893
5894         * netrc.c (search_netrc): Initialize `l' only after processing
5895         netrc.
5896
5897         * main.c (main): Don't trap SIGHUP if it's being ignored.
5898
5899 1998-01-24  Hrvoje Niksic  <hniksic@srce.hr>
5900
5901         * all: Use logmsg().
5902
5903         * utils.c (time_str): Moved from retr.c.
5904         (logmsg): New function.
5905         (logmsg_noflush): Ditto.
5906
5907         * rbuf.c: New file, moved buf_* functions here.
5908
5909         * ftp.c (ftp_expected_bytes): Moved from ftp-basic.c.
5910
5911         * ftp-basic.c (ftp_rest): Use prnum().
5912
5913         * ftp-basic.c: Ditto.
5914
5915         * ftp.c: Use the new reading functions and macros.
5916
5917         * retr.c (buf_initialize): New function.
5918         (buf_initialized_p): Ditto.
5919         (buf_uninitialize): Ditto.
5920         (buf_fd): Ditto.
5921
5922         * http.c (fetch_next_header): Use the BUF_READCHAR macro for
5923         efficiency.
5924         (gethttp): Use alloca() where appropriate.
5925
5926         * retr.c (buf_readchar): Use it.
5927         (buf_peek): Use rstreams.
5928
5929         * retr.h (BUF_READCHAR): New macro.
5930
5931         * init.c (home_dir): Rewritten for clarity.
5932         (init_path): Ditto.
5933
5934         * mswindows.c (ws_backgnd): Made static.
5935         (read_registry): Ditto.
5936         (ws_cleanup): Ditto.
5937         (ws_handler): Ditto.
5938
5939 1998-01-23  Hrvoje Niksic  <hniksic@srce.hr>
5940
5941         * alloca.c: New file.
5942
5943         * Makefile.in (ALLOCA): Define.
5944
5945         * mswindows.c (ws_help): Constify.
5946         (ws_help): Use alloca.
5947
5948         * mswindows.c: Reformat.
5949
5950         * all: Added _(...) annotations for I18N snarfing and translation.
5951
5952         * host.c (ftp_getaddress): Nuke SYSINFO.
5953         (ftp_getaddress): Don't use getdomainname().
5954         (ftp_getaddress): Use uname(), where available.
5955
5956         * http.c (gethttp): Protect a stray fprintf().
5957
5958         * init.c (settime): New function.
5959         (setval): Treat WAIT specially, allowing suffixes like `m' for
5960         minutes, etc.
5961
5962 1998-01-21  Hrvoje Niksic  <hniksic@srce.hr>
5963
5964         * url.c (get_urls_html): Use alloca() for TEMP.
5965
5966 1998-01-21  Jordan Mendelson  <jordy@wserv.com>
5967
5968         * url.c (rotate_backups): New function.
5969
5970         * http.c (gethttp): Ditto.
5971
5972         * ftp.c (getftp): Rotate backups.
5973
5974 1997-12-18  Hrvoje Niksic  <hniksic@srce.hr>
5975
5976         * all: Renamed nmalloc(), nrealloc() and nstrdup() to xmalloc(),
5977         xrealloc() and xstrdup().  Use the new functions.
5978
5979         * url.c (decode_string): Made static.
5980         (has_proto): Ditto.
5981         (parse_dir): Ditto.
5982         (parse_uname): Ditto.
5983         (mkstruct): Ditto.
5984         (construct): Ditto.
5985         (construct_relative): Ditto.
5986
5987         * retr.c (show_progress): Made static.
5988
5989         * recur.c (robots_url): Made static.
5990         (retrieve_robots): Ditto.
5991         (parse_robots): Ditto.
5992         (robots_match): Ditto.
5993
5994         * main.h: Removed.
5995
5996         * main.c (printhelp): Made static.
5997         (hangup): Ditto.
5998
5999         * init.c (comind): Made static.
6000         (defaults): Ditto.
6001         (init_path): Ditto.
6002         (run_wgetrc): Ditto.
6003         (onoff): Ditto.
6004         (setonoff): Ditto.
6005         (setnum): Ditto.
6006         (myatoi): Ditto.
6007         (getperms): Ditto.
6008         (setbytes): Ditto.
6009
6010         * http.c (fetch_next_header): Made static.
6011         (hparsestatline): Ditto.
6012         (hskip_lws): Ditto.
6013         (hgetlen): Ditto.
6014         (hgetrange): Ditto.
6015         (hgettype): Ditto.
6016         (hgetlocation): Ditto.
6017         (hgetmodified): Ditto.
6018         (haccepts_none): Ditto.
6019         (gethttp): Ditto.
6020         (base64_encode_line): Ditto.
6021         (mktime_from_utc): Ditto.
6022         (http_atotm): Ditto.
6023
6024         * html.c (idmatch): Made static.
6025
6026         * host.c (search_host): Made static.
6027         (search_address): Ditto.
6028         (free_hlist): Ditto.
6029
6030         * ftp.c (getftp): Made static.
6031         (ftp_loop_internal): Ditto.
6032         (ftp_get_listing): Ditto.
6033         (ftp_retrieve_list): Ditto.
6034         (ftp_retrieve_dirs): Ditto.
6035         (ftp_retrieve_glob): Ditto.
6036         (freefileinfo): Ditto.
6037         (delelement): Ditto.
6038
6039         * ftp-ls.c (symperms): Made static.
6040         (ftp_parse_unix_ls): Ditto.
6041
6042         * connect.c (select_fd): Made static.
6043
6044         * utils.c (xmalloc): Renamed from nmalloc.
6045         (xrealloc): Renamed from nrealloc.
6046         (xstrdup): Renamed from nstrdup.
6047
6048         * getopt.c (exchange): Use alloca.
6049
6050         * mswindows.c (mycuserid): Use strncpy.
6051
6052         * New files mswindows.c, mswindows.h, sysdep.h.  winjunk.c,
6053         systhings.h, windecl.h and winjunk.h removed.
6054
6055         * mswindows.c (sleep): New function.
6056
6057         * utils.c: Include <windows.h> under Windows.
6058
6059 1997-06-12  Darko Budor  <dbudor@zesoi.fer.hr>
6060
6061         * url.h (URL_UNSAFE): Change default under Windows.
6062
6063         * retr.c (retrieve_from_file): Respect opt.delete_after.
6064
6065         * main.c (main): Call ws_help on Windows.
6066
6067         * winjunk.c (windows_main_junk): New function.
6068
6069         * main.c (main): Junk-process argv[0].
6070
6071         * http.c (mktime_from_utc): Return -1 if mktime failed.
6072
6073         * http.c (http_loop): Ditto.
6074
6075         * ftp.c (ftp_loop_internal): Change title on Windows when using a
6076         new URL.
6077
6078         * winjunk.c (getdomainname): Lots of functions.
6079
6080 1997-06-12  Hrvoje Niksic  <hniksic@srce.hr>
6081
6082         * cmpt.c (strptime_internal): Handle years more correctly for
6083         `%y'.
6084
6085 1997-06-09  Mike Thomas <mthomas@reality.ctron.com>
6086
6087         * http.c (gethttp): Allocate enough space for
6088         `Proxy-Authorization' header.
6089
6090 1997-05-10  Hrvoje Niksic  <hniksic@srce.hr>
6091
6092         * version.c: Wget/1.4.5 is released.
6093
6094 1997-05-10  Hrvoje Niksic  <hniksic@srce.hr>
6095
6096         * retr.c (get_contents): Check return value of fwrite more
6097         carefully.
6098
6099 1997-03-30  Andreas Schwab  <schwab@issan.informatik.uni-dortmund.de>
6100
6101         * cmpt.c (strptime_internal) [case 'Y']: Always subtract 1900 from
6102         year, regardless of century.
6103
6104 1997-03-30  Hrvoje Niksic  <hniksic@srce.hr>
6105
6106         * utils.c (isfile): Use `lstat' instead of `stat'.
6107
6108 1997-03-29  Hrvoje Niksic  <hniksic@srce.hr>
6109
6110         * utils.c (numdigit): Use explicit test.
6111
6112 1997-03-21  Hrvoje Niksic  <hniksic@srce.hr>
6113
6114         * http.c (http_loop): Always use `url_filename' to get u->local.
6115
6116 1997-03-20  Hrvoje Niksic  <hniksic@srce.hr>
6117
6118         * url.c: Recognize https.
6119
6120 1997-03-13  Hrvoje Niksic  <hniksic@srce.hr>
6121
6122         * recur.c (recursive_retrieve): Lowercase just the host name.
6123
6124 1997-03-09  Hrvoje Niksic  <hniksic@srce.hr>
6125
6126         * url.c (get_urls_file): Use the correct test.
6127         (get_urls_html): Ditto.
6128
6129 1997-03-07  Hrvoje Niksic  <hniksic@srce.hr>
6130
6131         * connect.c: Reverted addrlen to int.
6132
6133         * init.c (parse_line): Check for -1 instead of NONE.
6134
6135         * version.c: Changed version to 1.4.5.
6136
6137 1997-02-17  Hrvoje Niksic  <hniksic@srce.hr>
6138
6139         * init.c: New option netrc.
6140         (initialize): Don't parse .netrc.
6141
6142         * cmpt.c (recursive): Return rp.
6143         (strptime_internal): Match the long strings first, the abbreviated
6144         second.
6145
6146 1997-02-16  Hrvoje Niksic  <hniksic@srce.hr>
6147
6148         * http.c (check_end): New function.
6149         (http_atotm): Use it.
6150
6151 1997-02-13  gilles Cedoc  <gilles@cedocar.fr>
6152
6153         * http.c (gethttp): Use them.
6154
6155         * init.c: New options proxy_user and proxy_passwd.
6156
6157 1997-02-14  Hrvoje Niksic  <hniksic@srce.hr>
6158
6159         * ftp.c (ftp_retrieve_list): Create links even if not relative.
6160
6161 1997-02-10  Hrvoje Niksic  <hniksic@srce.hr>
6162
6163         * recur.c (recursive_retrieve): Lowercase the host name, if the
6164         URL is not "optimized".
6165
6166         * host.c (realhost): Return l->hostname, even if it matches with
6167         host.
6168
6169 1997-02-10  Marin Purgar  <pmc@asgard.hr>
6170
6171         * connect.c: Make addrlen size_t instead of int.
6172         (conaddr): Ditto.
6173
6174 1997-02-09  Gregor Hoffleit  <flight@mathi.uni-heidelberg.DE>
6175
6176         * systhings.h: Define S_ISLNK on NeXT too.
6177
6178 1997-02-09  Hrvoje Niksic  <hniksic@srce.hr>
6179
6180         * version.c: Released 1.4.3.
6181
6182         * url.c: Futher update to list of protostrings.
6183         (skip_proto): Skip `//' correctly for FTP and HTTP.
6184
6185         * url.c (get_urls_html): Handle bogus `http:' things a little
6186         different.
6187
6188         * main.c (main): Removed `follow-ftp' from `f'.
6189         (main): Dumped the `prefix-files' and `file-prefix' options and
6190         features; old and bogus.
6191         (main): Exit on failed setval() in `-e'.
6192
6193         * http.c (fetch_next_header): Use it to detect header continuation
6194         correctly.
6195
6196         * retr.c (buf_peek): New function.
6197
6198 1997-02-08  Hrvoje Niksic  <hniksic@srce.hr>
6199
6200         * wget.h: Include time.h and stuff.
6201
6202 1997-02-08  Roger Beeman  <beeman@cisco.com>
6203
6204         * ftp.c: Include <time.h>
6205
6206 1997-02-07  Hrvoje Niksic  <hniksic@srce.hr>
6207
6208         * url.c (findurl): Would read over buffer limits.
6209
6210 1997-02-06  Hrvoje Niksic  <hniksic@srce.hr>
6211
6212         * ftp-ls.c (ftp_parse_unix_ls): Allow spaces in file names.
6213
6214 1997-02-05  Hrvoje Niksic  <hniksic@srce.hr>
6215
6216         * http.c (http_atotm): Initialize tm.is_dst.
6217
6218 1997-02-02  Hrvoje Niksic  <hniksic@srce.hr>
6219
6220         * http.c (gethttp): Don't print the number of retrieved headers.
6221
6222         * main.c (main): New option `--no-clobber', alias for `-nc'.
6223
6224         * url.c: Recognize `https://'.
6225
6226 1997-02-01  Hrvoje Niksic  <hniksic@srce.hr>
6227
6228         * host.c (herrmsg): Don't use h_errno.
6229
6230 1997-01-30  Hrvoje Niksic  <hniksic@srce.hr>
6231
6232         * host.c (accept_domain): Use it.
6233
6234         * main.c (main): New option `--exclude-domains'.
6235
6236         * retr.c (retrieve_url): Use it.
6237         (retrieve_url): Bail out when an URL is redirecting to itself.
6238
6239         * url.c (url_equal): New function.
6240
6241 1997-01-29  Hrvoje Niksic  <hniksic@srce.hr>
6242
6243         * connect.c: Include arpa/inet.h instead of arpa/nameser.h.
6244
6245         * http.c (mk_utc_time): New function.
6246         (http_atotm): Use it; handle time zones correctly.
6247
6248 1997-01-28  Hrvoje Niksic  <hniksic@srce.hr>
6249
6250         * http.c: Ditto.
6251
6252         * ftp-basic.c: Use it instead of WRITE.
6253
6254         * connect.c (iwrite): New function.
6255
6256 1997-01-27  Hrvoje Niksic  <hniksic@srce.hr>
6257
6258         * cmpt.c (mktime): New function.
6259
6260         * netrc.c: Include <sys/types.h>.
6261
6262         * main.c (main): Wouldn't recognize --spider.
6263
6264         * retr.c (rate): Use `B', `KB' and `MB'.
6265         (reset_timer,elapsed_time): Moved from utils.c.
6266
6267         * ftp.c (ftp_retrieve_list): Ditto.
6268
6269         * http.c (http_loop): Don't touch the file if opt.dfp.
6270
6271 1997-01-24  Hrvoje Niksic  <hniksic@srce.hr>
6272
6273         * cmpt.c: New file.
6274
6275         * ftp.c (ftp_retrieve_glob): New argument semantics.
6276         (ftp_retrieve_dirs): Use it.
6277         (ftp_loop): Ditto.
6278
6279         * html.c (htmlfindurl): Recognize `'' as the quote char.
6280
6281 1997-01-23  Hrvoje Niksic  <hniksic@srce.hr>
6282
6283         * ftp.c (ftp_loop_internal): Use it.
6284
6285         * utils.c (remove_link): New function.
6286
6287 1997-01-22  Hrvoje Niksic  <hniksic@srce.hr>
6288
6289         * retr.c (retrieve_url): Require STRICT redirection URL.
6290
6291         * url.c (parseurl): New argument STRICT.
6292
6293         * http.c (hparsestatline): Be a little-bit less strict about
6294         status line format.
6295
6296 1997-01-21  Hrvoje Niksic  <hniksic@srce.hr>
6297
6298         * http.c (gethttp): Use it.
6299
6300         * main.c (main): Don't use '<digit>' as options.
6301
6302         * init.c: New option ignore_length.
6303
6304         * http.c (gethttp): Ditto.
6305         (http_loop): Check for redirection without Location:.
6306         (gethttp): Don't print Length unless RETROKF.
6307
6308         * ftp.c (getftp): Use it.
6309
6310         * url.c (mkalldirs): New function.
6311
6312         * utils.c (mymkdir): Don't check for existing non-directory.
6313
6314         * url.c (mkstruct): Don't create the directory.
6315
6316 1997-01-20  Hrvoje Niksic  <hniksic@srce.hr>
6317
6318         * init.c (setval): Removed NO_RECURSION checks.
6319
6320 1997-01-19  Hrvoje Niksic  <hniksic@srce.hr>
6321
6322         * version.c: "Released" 1.4.3-pre2.
6323
6324         * recur.c (recursive_retrieve): Bypass host checking only if URL
6325         is ftp AND parent URL is not ftp.
6326
6327         * ftp-basic.c (ftp_request): Print out Turtle Power.
6328
6329         * ftp.c (ftp_loop): Call ftp_retrieve_glob with 0 if there's no
6330         wildcard.
6331         (ftp_retrieve_glob): Call ftp_loop_internal even on empty list, if
6332         not glob.
6333
6334         * http.c (gethttp): Be a little bit smarter about status codes.
6335
6336         * recur.c (recursive_retrieve): Always reset opt.recursive when
6337         dealing with FTP.
6338
6339 1997-01-18  Hrvoje Niksic  <hniksic@srce.hr>
6340
6341         * retr.c (retrieve_url): New variable location_changed; use it for
6342         tests instead of mynewloc.
6343         (retrieve_url): Allow heuristic adding of html.
6344
6345         * url.c (url_filename): Don't use the `%' in Windows file names.
6346
6347         * http.c (http_loop): Always time-stamp the local file.
6348
6349         * http.c (http_loop): Ditto.
6350
6351         * ftp.c (ftp_retrieve_list): Use it.
6352
6353         * utils.c (my_touch): New function.
6354
6355         * ftp.c (ftp_retrieve_list): Use #ifdef HAVE_STRUCT_UTIMBUF
6356         instead of #ifndef NeXT.
6357
6358         * utils.c (strptime): New version, by Ulrich Drepper.
6359
6360 1997-01-17  Hrvoje Niksic  <hniksic@srce.hr>
6361
6362         * http.c (haccepts_none): Renamed from `haccepts_bytes'.
6363         (gethttp): If haccepts_none(), disable ACCEPTRANGES.
6364         (http_loop): Would remove ACCEPTRANGES.
6365
6366         * ftp.c (getftp): Call ftp_list with NULL.
6367
6368 1997-01-15  Hrvoje Niksic  <hniksic@srce.hr>
6369
6370         * html.c (ftp_index): Don't print minutes and seconds if we don't
6371         know them; beautify the output.
6372
6373         * ftp.c (getftp): Don't close the socket on FTPNSFOD.
6374
6375 1997-01-14  Hrvoje Niksic  <hniksic@srce.hr>
6376
6377         * utils.c (strptime): New function.
6378         (strptime): Don't use get_alt_number.
6379         (strptime): Don't use locale.
6380         (match_string): Made it a function.
6381
6382 1997-01-12  Hrvoje Niksic  <hniksic@srce.hr>
6383
6384         * http.c (http_atotm): New function.
6385         (http_loop): Use it.
6386
6387         * atotm.c: Removed from the distribution.
6388
6389         * http.c (base64_encode_line): Rewrite.
6390
6391 1997-01-09  Hrvoje Niksic  <hniksic@srce.hr>
6392
6393         * ftp.c (getftp): Use ftp_expected_bytes; print size.
6394
6395         * ftp-basic.c (ftp_response): Use ftp_last_respline.
6396         (ftp_expected_bytes): New function.
6397
6398         * ftp.c (getftp): Print the unauthoritative file length.
6399
6400         * ftp-ls.c: Renamed from ftp-unix.c.
6401         (ftp_parse_ls): Moved from ftp.c.
6402         (ftp_parse_unix_ls): Recognize seconds in time spec.
6403         (ftp_parse_unix_ls): Recognize year-less dates of the previous
6404         year.
6405
6406 1997-01-08  Hrvoje Niksic  <hniksic@srce.hr>
6407
6408         * ftp-basic.c: Don't declare errno if #defined.
6409
6410         * host.c (ftp_getaddress): Check for sysinfo legally.
6411
6412 1997-01-08  Darko Budor  <dbudor@diana.zems.fer.hr>
6413
6414         * connect.c (iread): Use READ.
6415
6416 1996-12-23  Hrvoje Niksic  <hniksic@srce.hr>
6417
6418         * url.c: Recognize finger, rlogin, tn3270, mid and cid as valid
6419         schemes.
6420
6421 1996-12-22  Hrvoje Niksic  <hniksic@srce.hr>
6422
6423         * host.c (ftp_getaddress): Allow `.' in hostname.
6424
6425 1996-12-26  Darko Budor <dbudor@zems.fer.hr>
6426
6427         * wget.h: READ and WRITE macros for use instead of read and write
6428         on sockets, grep READ *.c, grep WRITE *.c
6429
6430         * wsstartup.c: new file - startup for winsock
6431
6432         * wsstartup.h: new file
6433
6434         * win32decl.h: new file - fixup for <errno.h> and winsock trouble
6435
6436         * configure.bat: Configure utility for MSVC
6437
6438         * src/Makefile.ms,config.h.ms: new files for use with MSVC 4.x
6439
6440 1996-12-22  Hrvoje Niksic  <hniksic@srce.hr>
6441
6442         * version.c: Released 1.4.3-pre.
6443
6444         * utils.c (prnum): Accept long.
6445         (legible): Use prnum().
6446
6447         * connect.c (make_connection): Accept port as short.
6448         (bindport): Ditto.
6449
6450         * http.c (gethttp): Use search_netrc.
6451
6452 1996-12-21  Hrvoje Niksic  <hniksic@srce.hr>
6453
6454         * ftp.c (getftp): Use search_netrc.
6455
6456         * netrc.c (free_netrc): New function.
6457
6458         * init.c (home_dir): New function.
6459
6460         * url.c (convert_links): Allow REL2ABS changes.
6461
6462 1996-12-21  Gordon Matzigkeit  <gord@gnu.ai.mit.edu>
6463
6464         * netrc.c: New file.
6465         (parse_netrc, maybe_add_to_list): New functions.
6466
6467 1996-12-17  Hrvoje Niksic  <hniksic@srce.hr>
6468
6469         * retr.c (retrieve_url): Reset opt.recursion before calling
6470         ftp_loop if it is reached through newloc.
6471
6472         * init.c (run_wgetrc): Print the wgetrc path too, when reporting
6473         error; don't use "Syntax error", since we don't know if it is
6474         really a syntax error.
6475
6476 1996-12-16  Hrvoje Niksic  <hniksic@srce.hr>
6477
6478         * utils.c (acceptable): Extract the filename part of the path.
6479
6480         * recur.c (recursive_retrieve): Call acceptable() with the right
6481         argument; would bug out on wildcards.
6482
6483         * init.c (parse_line): Likewise.
6484
6485         * html.c (htmlfindurl): Cast to char * when calling stuff.
6486
6487 1996-12-15  Hrvoje Niksic  <hniksic@srce.hr>
6488
6489         * ftp.c (getftp): Use ftp_pasv.
6490
6491         * ftp-basic.c (ftp_request): Accept NULL value.
6492         (ftp_pasv): New function.
6493
6494         * options.h (struct options): Add passive FTP option.
6495
6496 1996-12-15  Hrvoje Niksic  <hniksic@srce.hr>
6497
6498         * url.c (parseurl): Debug output.
6499
6500         * utils.c (path_simplify): New one, adapted from bash's
6501         canonicalize_pathname().
6502
6503 1996-12-14  Hrvoje Niksic  <hniksic@srce.hr>
6504
6505         * ftp.c (getftp): Don't discard the buffer.
6506
6507         * retr.c (get_contents): New parameter nobuf.
6508
6509 1996-12-13  Shawn McHorse  <riffraff@txdirect.net>
6510
6511         * html.c (htmlfindurl): Recognize <meta contents="d; URL=...".
6512
6513         * init.c (setval): Strip the trailing slashes on CVECDIR.
6514
6515 1996-12-13  Hrvoje Niksic  <hniksic@srce.hr>
6516
6517         * init.c: Make excludes and includes under CVECDIR instead of
6518         CVEC.
6519
6520 1996-12-13  Shawn McHorse  <riffraff@txdirect.net>
6521
6522         * url.c (get_urls_html): Skip "http:".
6523
6524 1996-12-13  Hrvoje Niksic  <hniksic@srce.hr>
6525
6526         * utils.c (strcasecmp): From glibc.
6527         (strncasecmp): Also.
6528         (strstr): Also.
6529
6530         * url.c: Added javascript: to the list of URLs prefixes.
6531
6532 1996-12-12  Shawn McHorse  <riffraff@txdirect.net>
6533
6534         * recur.c (retrieve_robots): Print the warning message only if
6535         verbose.
6536
6537 1996-12-12  Gregor Hoffleit  <flight@mathi.uni-heidelberg.DE>
6538
6539         * ftp.c (ftp_retrieve_list): Use NeXT old utime interface.
6540
6541 1996-12-12  Hrvoje Niksic  <hniksic@srce.hr>
6542
6543         * systhings.h: New file.
6544
6545         * ../configure.in: Check for utime.h
6546
6547         * ftp.c: Check whether we have unistd.h.
6548
6549 1996-11-27  Hrvoje Niksic  <hniksic@srce.hr>
6550
6551         * recur.c (recursive_retrieve): Send the canonical URL as referer.
6552         (recursive_retrieve): Call get_urls_html with the canonical URL.
6553
6554 1996-12-13  Kaveh R. Ghazi  <ghazi@caip.rutgers.edu>
6555
6556         * (configure.in, config.h.in, src/Makefile.in, src/*.[ch]): Add
6557         ansi2knr support for compilers which don't support ANSI style
6558         function prototypes and signatures.
6559
6560         * (aclocal.m4, src/ansi2knr.c, src/ansi2knr.1): New files.
6561
6562 1996-11-26  Hrvoje Niksic  <hniksic@srce.hr>
6563
6564         * url.c: Use it; Recognize paths ending with "." and ".." as
6565         directories.
6566         (url_filename): Append .n whenever file exists and could be a
6567         directory.
6568
6569         * url.h (ISDDOT): New macro.
6570
6571         * init.c (parse_line): Use unsigned char.
6572
6573         * url.c (get_urls_html): Cast to unsigned char * when calling
6574         htmlfindurl.
6575
6576         * html.c (htmlfindurl): Use unsigned char.
6577
6578         * version.c: Changed version to 1.4.3.
6579
6580 1996-11-25  Hrvoje Niksic  <hniksic@srce.hr>
6581
6582         * version.c: Released 1.4.2.
6583
6584         * ftp.c (getftp): Simplified assertion.
6585         (ftp_loop_internal): Remove symlink before downloading.
6586         (ftp_retrieve_list): Unlink the symlink name before attempting to
6587         create a symlink!
6588
6589         * options.h (struct options): Renamed print_server_response to
6590         server_response.
6591
6592         * ftp.c (rel_constr): Removed.
6593         (ftp_retrieve_list): Don't use it.
6594         (ftp_retrieve_list): Use opt.retr_symlinks.
6595
6596 1996-11-24  Hrvoje Niksic  <hniksic@srce.hr>
6597
6598         * main.c (main): New option retr_symlinks.
6599
6600         * url.c (convert_links): Print verbose message.
6601
6602 1996-11-24  Hrvoje Niksic  <hniksic@srce.hr>
6603
6604         * http.c (http_loop): Reset newloc in the beginning of function;
6605         would cause FMR in retrieve_url.
6606
6607 1996-11-23  Hrvoje Niksic  <hniksic@srce.hr>
6608
6609         * recur.c (convert_all_links): Find the URL of each HTML document,
6610         and feed it to get_urls_html; would bug out.
6611         (convert_all_links): Check for l2 instead of dl; removed dl.
6612
6613         * url.c (convert_links): Don't refer to freed newname.
6614
6615         * recur.c (recursive_retrieve): Add this_url to urls_downloaded.
6616
6617         * main.c (main): Print the OS_TYPE in the debug output, too.
6618
6619         * recur.c (recursive_retrieve): Check for opt.delete_after.
6620
6621         * main.c (main): New option delete-after.
6622
6623         * init.c (setval): Cleaned up.
6624
6625 1996-11-21  Hrvoje Niksic  <hniksic@srce.hr>
6626
6627         * Makefile.in (wget): Make `wget' the default target.
6628
6629         * ftp.c (ftp_loop_internal): Move noclobber checking out of the
6630         loop.
6631         (ftp_retrieve_list): Warn about non-matching sizes.
6632
6633         * http.c (http_loop): Made -nc non-dependent on opt.recursive.
6634
6635         * init.c (setnum): Renamed from setnuminf; New argument flags.
6636         (setval): Use it.
6637
6638         * main.c (main): Sorted the options.
6639         (main): New option --wait.
6640
6641 1996-11-21  Shawn McHorse  <riffraff@txdirect.net>
6642
6643         * html.c (htmlfindurl): Reset s->in_quote after getting out of
6644         quotes.
6645
6646 1996-11-20  Hrvoje Niksic  <hniksic@srce.hr>
6647
6648         * version.c: Changed version to 1.4.2.
6649
6650 1996-11-20  Hrvoje Niksic  <hniksic@srce.hr>
6651
6652         * version.c: Released 1.4.1.
6653
6654         * html.c (html_quote_string): New function.
6655         (ftp_index): Use it.
6656         (htmlfindurl): A more gentle ending debug message.
6657
6658         * ftp.c (ftp_loop): Check for opt.htmlify.
6659
6660         * init.c: New command htmlify.
6661
6662         * ftp.c (getftp): Nicer error messages, with `'-encapsulated
6663         strings.
6664         (ftp_loop): Print size of index.html.
6665
6666         * init.c (setval): Implement "styles".
6667
6668         * main.c (main): New option dotstyle.
6669
6670 1996-11-19  Hrvoje Niksic  <hniksic@srce.hr>
6671
6672         * ftp.c (getftp): Close the master socket in case of errors, after
6673         bindport().
6674
6675         * connect.c (bindport): Initialize msock to -1.
6676
6677         * ftp.c (getftp): Initialize dtsock to -1.
6678
6679         * connect.c (closeport): Don't close sock if sock == -1.
6680
6681 1996-11-18  Hrvoje Niksic  <hniksic@srce.hr>
6682
6683         * init.c (setnuminf): Nuked default value -- just leave unchanged.
6684         (setval): Don't send default values.
6685         (defaults): Use DEFAULT_TIMEOUT -- aaargh.
6686
6687         * options.h (struct options): Use long for dot_bytes.
6688
6689         * init.c (setquota): Renamed to setbytes.
6690         (setval): Use setbytes on DOTBYTES.
6691
6692 1996-11-17  Hrvoje Niksic  <hniksic@srce.hr>
6693
6694         * ftp.c (getftp): Initialize con->dltime.
6695
6696         * recur.c (recursive_retrieve): Use same_host instead of
6697         try_robots; simply load robots_txt whenever the host is changed.
6698         (recursive_retrieve): Free forbidden before calling parse_robots.
6699
6700 1996-11-16  Hrvoje Niksic  <hniksic@srce.hr>
6701
6702         * retr.c (show_progress): Use them.
6703
6704         * options.h (struct options): New options dot_bytes, dots_on_line
6705         and dot_spacing.
6706
6707 1996-11-16  Mark Boyns  <boyns@sdsu.edu>
6708
6709         * recur.c (recursive_retrieve): Retrieve directories regardless of
6710         acc/rej rules; check for empty u->file.
6711
6712 1996-11-14  Hrvoje Niksic  <hniksic@srce.hr>
6713
6714         * init.c (setval): Use it.
6715
6716         * utils.c (merge_vecs): New function.
6717
6718         * init.c (setval): Reset the list-type functions when encountering
6719         "".
6720
6721 1996-11-14  Shawn McHorse  <riffraff@txdirect.net>
6722
6723         * recur.c (recursive_retrieve): Use base_url instead of this_url
6724         for no_parent.
6725
6726 1996-11-14  Shawn McHorse  <riffraff@txdirect.net>
6727
6728         * html.c (htmlfindurl): Reset s->in_quote after exiting the quote.
6729
6730 1996-11-13  Hrvoje Niksic  <hniksic@srce.hr>
6731
6732         * utils.c (sepstring): Rewrote; don't use strtok.
6733
6734         * recur.c (recursive_retrieve): Enter assorted this_url to slist
6735         when running the first time.
6736         (retrieve_robots): Warn to ignore errors when robots are loaded.
6737
6738         * utils.c (load_file): Moved from url.c.
6739
6740         * http.c: Made static variables const too in h* functions.
6741
6742         * main.c (main): Renamed --continue-ftp to --continue.
6743
6744         * recur.c (recursive_retrieve): Use it.
6745
6746         * utils.c (frontcmp): New function.
6747
6748         * url.c (accdir): New function.
6749
6750         * html.c (htmlfindurl): Recognize <area href=...>.
6751
6752         * ftp.c (ftp_retrieve_dirs): Implemented opt.includes.
6753
6754         * init.c (setval): Free the existing opt.excludes and
6755         opt.includes, if available.
6756
6757         * main.c (main): New option -I.
6758
6759 1996-11-12  Hrvoje Niksic  <hniksic@srce.hr>
6760
6761         * ftp.c (ftp_retrieve_glob): Do not weed out directories.
6762
6763         * version.c: Changed version to 1.4.1.
6764
6765 1996-11-11  Hrvoje Niksic  <hniksic@srce.hr>
6766
6767         * version.c: Released 1.4.0.
6768
6769 1996-11-10  Hrvoje Niksic  <hniksic@srce.hr>
6770
6771         * main.c (main): Free com and val after parse_line.
6772         (printhelp): Reorder the listing.
6773
6774         * http.c: More robust header parsing.
6775
6776         * http.c: Allow any number of spaces, or no spaces, precede ':'.
6777         (hskip_lws): New function.
6778         (haccepts_bytes): New function.
6779         (gethttp): Use it.
6780
6781         * init.c (setval): Check header sanity.
6782         (setval): Allow resetting of headers.
6783
6784 1996-11-10  Hrvoje Niksic  <hniksic@srce.hr>
6785
6786         * http.c (http_loop): Don't use has_wildcards.
6787
6788         * http.c (gethttp): Free all_headers -- would leak.
6789
6790         * recur.c (recursive_retrieve): Initialize depth to 1 instead of
6791         0 -- this fixes a long-standing bug in -rl.
6792
6793 1996-11-09  Hrvoje Niksic  <hniksic@srce.hr>
6794
6795         * ftp.c: Use -1 as "impossible" value for con->fd.
6796
6797         * url.h (URL_SEPARATOR): Don't treat `*' and `+' as separators.
6798
6799         * init.c (parse_line): Use isalpha.
6800
6801         * ftp-unix.c: Use HAVE_UNISTD_H.
6802
6803         * mtch.c (has_wildcards): Don't match \.
6804
6805         * http.c (http_loop): Warn on HTTP wildcard usage.
6806
6807 1996-11-08  Hrvoje Niksic  <hniksic@srce.hr>
6808
6809         * url.c (url_filename): Do not create numbered suffixes if
6810         opt.noclobber -- would bug out on -nc.
6811
6812 1996-11-07  Hrvoje Niksic  <hniksic@srce.hr>
6813
6814         * recur.c (parse_robots): Don't chuck out the commands without
6815         arguments (`Disallow:<empty>' didn't work).
6816         (parse_robots): Compare versions lowercase.
6817         (parse_robots): Match on base_version, not version_string!
6818         (parse_robots): Handle comments properly.
6819         (parse_robots): Match versions in a sane way.
6820
6821         * init.c: Print nicer error messages.
6822
6823         * version.c: Changed version to 1.4.0.
6824
6825 1996-11-06  Hrvoje Niksic  <hniksic@srce.hr>
6826
6827         * version.c: Released 1.4.0-test2.
6828
6829         * init.c (run_wgetrc): Close fp.
6830
6831         * ftp.c (ftp_retrieve_dirs): Allocate the correct length for
6832         u->dir.
6833
6834 1996-11-06  Hrvoje Niksic  <hniksic@srce.hr>
6835
6836         * init.c (setquota): Allow inf as quota specification.
6837
6838 1996-11-05  Hrvoje Niksic  <hniksic@srce.hr>
6839
6840         * ftp.c (ftp_retrieve_dirs): Return QUOTEXC if quota exceeded.
6841         (ftp_retrieve_glob): Return QUOTEXC on quota exceeded.
6842
6843         * main.c (main): Check for quota by comparison with downloaded
6844         stuff, not from status.
6845
6846         * connect.c (select_fd): Should compile on HPUX without warnings now.
6847
6848         * ftp.c (ftp_get_listing): Check whether ftp_loop_internal
6849         returned RETROK.
6850
6851 1996-11-04  Hrvoje Niksic  <hniksic@srce.hr>
6852
6853         * ftp.c (ftp_retrieve_glob): Print the pattern nicely.
6854         (getftp): Return FTPRETRINT on control connection error.
6855
6856         * html.c (htmlfindurl): Recognize <embed src=...> and
6857         <bgsound src=...>.
6858         (ftp_index): Handle username and password correctly.
6859
6860         * main.c (main): Made `-np' a synonim for --no-parent.
6861
6862 1996-11-02  Hrvoje Niksic  <hniksic@srce.hr>
6863
6864         * ftp.c (ftp_loop): Check for opt.ftp_glob too before calling
6865         ftp_retrieve_glob.
6866
6867         * version.c: Changed version to 1.4.0-test2.
6868
6869 1996-11-02  Hrvoje Niksic  <hniksic@srce.hr>
6870
6871         * version.c: Released 1.4.0-test1.
6872
6873         * url.c (str_url): Don't use sprintf when creating %2F-prefixed
6874         directory.
6875         (convert_links): Removed definition of make_backup.
6876
6877         * http.h: Removed definition of MAX_ERROR_LENGTH.
6878
6879         * host.c (ftp_getaddress): Check for "(none)" domains.
6880
6881         * ftp.c (ftp_retrieve_dirs): Docfix.
6882
6883         * http.c (gethttp): Use ou->referer instead of u->referer.
6884
6885         * retr.c (retrieve_url): Reset u to avoid freeing pointers twice;
6886         this was known to cause coredumps on Linux.
6887
6888         * html.c (ftp_index): Cast the argument to local_time to time_t *.
6889
6890 1996-11-01  Hrvoje Niksic  <hniksic@srce.hr>
6891
6892         * connect.c (select_fd): Use exceptfds -- once and for all.
6893
6894         * retr.c (retrieve_from_file): Free filename after
6895         recursive_retrieve.
6896         (retrieve_from_file): Send RFIRST_TIME to recursive_retrieve on
6897         first-time retrieval.
6898         (retrieve_from_file): Return uerr_t; new argument, count.
6899         (retrieve_from_file): Break on QUOTEXC.
6900
6901         * init.c (setquota): Fixed a bug that caused rejection of
6902         non-postfixed values..
6903
6904 1996-10-30  Hrvoje Niksic  <hniksic@srce.hr>
6905
6906         * version.c: Changed name to wget.
6907
6908         * connect.c (iread): Smarter use of select.
6909         (select_fd): Set errno on timeout.  If not timeout, return 1
6910         instead of 0.
6911
6912 1996-10-29  Hrvoje Niksic  <hniksic@srce.hr>
6913
6914         * ftp.c (ftp_loop_internal): Don't use con->cmd before
6915         establishing it.
6916
6917 1996-10-26  Hrvoje Niksic  <hniksic@srce.hr>
6918
6919         * http.c (gethttp): Send correct referer when using proxy.
6920         (gethttp): Use struct urlinfo ou to access the relevant data; send
6921         correct authorization in all cases.
6922
6923         * host.c (same_host): Use skip_uname to skip username and
6924         password.
6925
6926         * url.c (skip_uname): New function.
6927         (parseurl): Use it.
6928
6929         * host.c (same_host): Do not assume HTTP -- same_host should now
6930         be totally foolproof.
6931
6932         * url.c (skip_proto): New function.
6933         (parse_uname): Use it.
6934
6935         * http.c (gethttp): Create local user and passwd from what is
6936         given.
6937
6938         * url.c (parseurl): Check for HTTP username and password too.
6939
6940 1996-10-25  Hrvoje Niksic  <hniksic@srce.hr>
6941
6942         * config.h.in: Removed #define gethostbyname R...
6943
6944 1996-10-22  Hrvoje Niksic  <hniksic@srce.hr>
6945
6946         * version.c: Changed version to 1.4.0-test1.
6947
6948 1996-10-21  Hrvoje Niksic  <hniksic@srce.hr>
6949
6950         * version.c: "Released" 1.4b29.
6951
6952         * recur.c (recursive_retrieve): Check for no_parent.
6953
6954         * init.c (setval): Option update.
6955
6956         * main.c (main): New option no-parent.
6957
6958         * options.h (struct options): New variable no_parent.
6959
6960         * recur.c (recursive_retrieve): Only files are checked for
6961         opt.accepts and opt.rejects.
6962         (recursive_retrieve): Check directories for opt.excludes.
6963         (recursive_retrieve): Make the dir absolute when checking
6964         opt.excludes.
6965
6966         * html.c (htmlfindurl): Recognize <applet code=...> and <script
6967         src=...>
6968
6969 1996-10-18  Hrvoje Niksic  <hniksic@srce.hr>
6970
6971         * ftp.c (getftp): Do not line-break assert entries at all.
6972         (ftp_retrieve_dirs): docfix.
6973
6974         * connect.c (select_fd): Use fd + 1 as nfds.
6975
6976         * version.c: Changed version to 1.4b29.
6977
6978 1996-10-18  Hrvoje Niksic  <hniksic@srce.hr>
6979
6980         * version.c: "Released" 1.4b28.
6981
6982         * ftp.c (ftp_loop_internal): Check whether f->size == len and
6983         don't continue the loop if it is.
6984         (ftp_get_listing): Remove list_filename on unsuccesful loop.
6985
6986 1996-10-17  Hrvoje Niksic  <hniksic@srce.hr>
6987
6988         * ftp.c (ftp_loop_internal): Use strcpy to initialize tmp.
6989         (getftp): Do not use multiline assert.
6990
6991         * http.c (hparsestatline): Use mjr and mnr instead of major and
6992         minor, which don't compile on Ultrix.
6993         (http_loop): Use strcpy() to initialize tmp.
6994
6995         * all: Geturl -> Fetch
6996
6997 1996-10-17  Hrvoje Niksic  <hniksic@srce.hr>
6998
6999         * recur.c (parse_robots): Fixed an off-by-one bug when looking for
7000         ':'.
7001
7002         * html.c (htmlfindurl): Fixed several possible off-by-one bugs by
7003         moving `bufsize &&' to the beginning of each check in for-loops.
7004
7005         * recur.c (parse_robots): Close fp on exit.
7006
7007         * url.c (mymkdir): Check for each directory before creating.
7008
7009 1996-10-16  Hrvoje Niksic  <hniksic@srce.hr>
7010
7011         * version.c: Changed version to 1.4b28.
7012
7013 1996-10-16  Hrvoje Niksic  <hniksic@srce.hr>
7014
7015         * version.c: "Released" 1.4b27.
7016
7017         * init.c (parse_line): Use isspace.
7018         (parse_line): Free *com on all errors.
7019
7020         * ftp.c (ftp_loop): Change FTPOK to RETROK before exiting.
7021         (delelement): Use next instead of f->next and prev instead of
7022         f->prev.
7023         (delelement): Free the members of the deleted element.
7024
7025         * http.c (http_loop): Do not return RETROK on code != 20x.
7026
7027         * init.c (cleanup): Free opt.user_header.
7028         (cleanup): Free opt.domains.
7029
7030         * url.c (freelists): Moved to cleanup().
7031
7032         * http.c (hparsestatline): Docfix.
7033
7034         * main.c (main): Return with error status on unsuccesful
7035         retrieval.
7036
7037         * init.c (setval): Do not remove listing when mirroring.
7038
7039         * url.c (url_filename): Use opt.fileprefix.
7040
7041         * ftp.c (ftp_get_listing): Use url_filename to get filename for
7042         .listing.
7043
7044         * main.c (main): New option: -rn.
7045
7046 1996-10-15  Hrvoje Niksic  <hniksic@srce.hr>
7047
7048         * Makefile.in (RM): Added RM = rm -f.
7049
7050         * host.c (clean_hosts): New function.
7051         (free_hlist): Just free the list, no reset.
7052
7053         * version.c: Changed version to 1.4b27.
7054
7055 1996-10-13  Hrvoje Niksic  <hniksic@srce.hr>
7056
7057         * version.c: "Released" 1.4b26.
7058
7059         * retr.c (retrieve_from_file): If call get_urls_html with
7060         opt.spider to make it silent in spider mode.
7061
7062         * url.c (str_url): Use CLEANDUP instead of URL_CLEANSE.
7063
7064         * url.h (CLEANDUP): New macro.
7065
7066         * http.c (gethttp): Fixed a bug that freed location only when it
7067         was NULL.
7068
7069         * retr.c (retrieve_url): Free url if it will not be stored,
7070         i.e. newloc is NULL.
7071
7072         * html.c (htmlfindurl): Handle exiting from quotes correctly; the
7073         old version would bug out on <a href="x#a"href="y">.
7074
7075         * html.h (state_t): New member in_quote.
7076
7077         * html.c (htmlfindurl): Free s->attr at the beginning of
7078         attr-loop.
7079
7080         * recur.c (recursive_retrieve): Recognize RCLEANUP.
7081         (tried_robots): Make hosts a global variable.
7082         (recursive_retrieve): Free constr after URL host optimization.
7083         (tried_robots): Free urlinfo before exiting.
7084
7085         * utils.c (free_slist): New function.
7086
7087         * recur.c (recursive_retrieve): Use flags to add cleanup
7088         possibility.
7089
7090         * main.c (main): Free filename after recursive_retrieve.
7091
7092         * http.c (gethttp): Store successful responses too.
7093
7094 1996-10-12  Hrvoje Niksic  <hniksic@srce.hr>
7095
7096         * all: Constified the whole source.  This required some minor
7097         changes in many functions in url.c, possibly introducing bugs -- I
7098         hope not.
7099
7100         * ftp-basic.c: Removed last_respline.
7101
7102         * http.c (gethttp): Free type.
7103
7104         * host.c (same_host): Free real1 and real2.
7105
7106         * main.c (main): New option --spider.
7107
7108         * retr.c (get_contents): Don't reset errno.
7109
7110         * main.c (main): Sorted the options.
7111
7112         * connect.c (iread): Set errno to ETIMEDOUT only if it was left
7113         uninitialized by select().
7114
7115         * http.c (http_loop): Print the time when the connection is
7116         closed.
7117         (gethttp): Debug-print the HTTP request.
7118
7119 1996-10-11  Hrvoje Niksic  <hniksic@srce.hr>
7120
7121         * connect.c (iread): Do not try reading after timeout.
7122
7123         * main.c (main): Would bug out on -T.
7124
7125         * connect.c (select_fd): Do not use exceptfds.
7126         (iread): Set ETIMEDOUT on select_fd <= 0.
7127
7128         * version.c: Changed version to 1.4b26.
7129
7130 1996-10-10  Hrvoje Niksic  <hniksic@srce.hr>
7131
7132         * version.c: "Released" 1.4b25.
7133
7134         * ftp-unix.c (ftp_parse_unix_ls): Ignore lines without file name
7135         or link name.
7136
7137         * http.c (gethttp): Add errcode to struct hstat.
7138         (http_loop): Use it.
7139
7140         * url.c (no_proxy_match): Simplify using char** for no_proxy.
7141
7142         * options.h (struct options): Make opt.no_proxy a vector.
7143
7144         * utils.c (sepstring): Use !*s instead of !strlen(s).
7145
7146         * init.c (setval): Set opt.maxreclevel to 0 on --mirror.
7147         (getperms): Use ISODIGIT instead of isdigit.
7148
7149         * ftp.c (getftp): Print time.
7150
7151         * main.c (main): Use legible output of downloaded quantity.
7152
7153         * ftp.c (getftp): Use elapsed_time().
7154         (ftp_loop_internal): Use rate().
7155
7156         * http.c (http_loop): Add download ratio output; Use rate().
7157
7158         * utils.c (rate): New function.
7159
7160 1996-10-09  Hrvoje Niksic  <hniksic@srce.hr>
7161
7162         * http.c (http_loop): Use timer.
7163
7164         * ftp.c: Split to ftp-basic.c and ftp.c
7165
7166         * utils.c (reset_timer): New function.
7167         (elapsed_time): New function.
7168
7169         * retr.c (show_progress): Make bytes_in_line and offs long; should
7170         work on 16-bit machines.
7171
7172 1996-10-08  Hrvoje Niksic  <hniksic@srce.hr>
7173
7174         * url.c (in_acclist): New argument backward.
7175
7176         * ftp.c (ftp_retrieve_glob): Use acceptable() to determine whether
7177         a file should be retrieved according to suffix.
7178         (ftp_get_listing): Check the return value of unlink; Do not call
7179         ftp_retrieve_dirs if depth reached maxreclevel.
7180         (ftp_retrieve_dirs): Check whether the directory is in
7181         exclude-list.
7182
7183         * main.c (main): Print the version number at the beginning of
7184         DEBUG output.
7185         (main): Use strrchr when creating exec_name.
7186
7187         * ftp.c (ftp_retrieve_glob): Do not close control connection.
7188
7189         * version.c: Changed version to 1.4b25.
7190
7191 1996-10-07  Hrvoje Niksic  <hniksic@srce.hr>
7192
7193         * version.c: "Released" 1.4b24.
7194
7195         * Makefile.in: Rewrite.
7196
7197         * ftp.c (ftp_loop_internal): Likewise.
7198
7199         * retr.c (time_str): Check for failed time().
7200
7201         * html.c (htmlfindurl): Recognize <fig src> and <overlay src> from
7202         HTML3.0.
7203
7204         * retr.c (time_str): Return time_t *.
7205
7206         * connect.c (bindport): Close msock on unsuccesful bind.
7207         (bindport): The same for getsockname and listen.
7208
7209         * retr.c (retrieve_url): Allow any number of retries on
7210         proxy.
7211
7212         * http.c (gethttp): Do not treat errno == 0 as timeout.
7213         (http_loop): Likewise.
7214         (http_loop): Cosmetic changes.
7215
7216         * connect.c (iread): Set errno to ETIMEDOUT in case of timeout.
7217
7218         * retr.c (get_contents): Reset errno.
7219
7220         * ftp.c (getftp): Minor fixes.
7221
7222 1996-10-06  Hrvoje Niksic  <hniksic@srce.hr>
7223
7224         * http.c: Do not use backups.
7225
7226         * geturl.1 (WARNING): Warn that man-page could be obsolete.
7227
7228         * getopt.c (getopt_long): Moved to getopt.c
7229
7230         * geturl.texi: Enhanced.
7231
7232         * main.c (main): Use it.
7233
7234         * recur.c (convert_all_links): New function.
7235
7236         * utils.c (add_slist): New argument flags.
7237
7238         * recur.c (recursive_retrieve): Update a list of downloaded URLs.
7239         (parse_robots): Do not chuck out empty value fields.
7240         (parse_robots): Make yourself welcome on empty Disallow.
7241
7242         * version.c: Changed version to 1.4b24.
7243
7244 1996-10-06  Hrvoje Niksic  <hniksic@srce.hr>
7245
7246         * version.c: "Released" 1.4b23.
7247
7248         * ftp.c (ftp_loop_internal): Get the time after getftp.
7249
7250         * Makefile.in (install.info): New target.
7251         (install): Use it.
7252
7253         * http.c (http_loop): Fix output when doing -O.
7254
7255 1996-10-05  Hrvoje Niksic  <hniksic@srce.hr>
7256
7257         * geturl.texi: New file.
7258
7259         * main.c (main): Do not print the warnings and download summary if
7260         opt.quiet is set.
7261
7262         * version.c: Changed version to 1.4b23.
7263
7264 1996-10-05  Hrvoje Niksic  <hniksic@srce.hr>
7265
7266         * "Released" 1.4b22.
7267
7268         * atotm.c (atotm): Use True and False instead of TRUE and FALSE,
7269         to avoid redefinition warnings.
7270
7271         * host.c (store_hostaddress): Use memcpy() to copy the address
7272         returned by inet_addr.
7273
7274         * version.c: Changed version to 1.4b22.
7275
7276 1996-10-04  Hrvoje Niksic  <hniksic@srce.hr>
7277
7278         * version.c: "Released" 1.4b21.
7279
7280         * ftp-unix.c (ftp_parse_ls): Renamed to ftp_parse_unix_ls.
7281
7282         * ftp.c (ftp_port): Use conaddr.
7283         (getftp): Print the file length.
7284         (ftp_retrieve_list): Check the stamps of plain files only.
7285
7286         * connect.c (closeport): Do not call shutdown().
7287         (conaddr): New function.
7288
7289         * html.c (ftp_index): Made it dfp-aware.
7290
7291         * init.c (cleanup): New name of freemem. Close opt.dfp.
7292
7293         * ftp.c (getftp): Use opt.dfp if it is set.
7294
7295         * ftp-unix.c (ftp_parse_ls): Recognize time in h:mm format.
7296
7297         * ftp.c (ftp_retrieve_dirs): Fixed a bug that caused incorrect
7298         CWDs to be sent with recursive FTP retrievals.
7299
7300 1996-10-03  Hrvoje Niksic  <hniksic@srce.hr>
7301
7302         * recur.c (parse_robots): Made it more compliant with "official"
7303         specifications.
7304
7305         * http.c: New function.
7306
7307         * ftp-unix.c (ftp_parse_ls): Added better debug output.
7308
7309         * ftp.c (getftp): Print out the LIST in case of
7310         opt.print_server_response.
7311
7312         * version.c: Changed version to 1.4b21.
7313
7314 1996-10-01  Hrvoje Niksic  <hniksic@srce.hr>
7315
7316         * version.c: "Released" 1.4b20.
7317
7318         * README: Update.
7319
7320         * http.c (gethttp): Preset lengths of various headers instead of
7321         calculating them dynamically.
7322         (gethttp): Check for 206 partial contents.
7323
7324 1996-09-30  Hrvoje Niksic  <hniksic@srce.hr>
7325
7326         * configure.in: Set SYSTEM_GETURLRC to $libdir/geturlrc
7327
7328         * http.c (gethttp): Send the port number in the Host: header.
7329
7330 1996-09-29  Hrvoje Niksic  <hniksic@srce.hr>
7331
7332         * http.c (gethttp): Send host: header.
7333         (gethttp): Add the possibility of user-defined headers.
7334         (gethttp): Move decision about pragma: no-cache to http_loop,
7335         where it belongs.
7336         (gethttp): Pass a struct instead of enormous argument list.
7337         (http_loop): Use a new, fancier display format.
7338         (ftp_loop): Likewise.
7339
7340         * main.c: (hangup): Turn off buffering of the new log file.
7341
7342         * install-sh: Likewise.
7343
7344         * config.sub: Replace with the one in autoconf-2.10
7345
7346         * geturl.1: Update.
7347
7348         * init.c: New options httpuser and httppasswd.
7349
7350         * http.c: (base64_encode_line): New function.
7351         (gethttp): Send authentication.
7352
7353         * connect.c (make_connection): Use store_hostaddress.
7354
7355 1996-09-28  Hrvoje Niksic  <hniksic@srce.hr>
7356
7357         * host.c (store_hostaddress): New function.
7358
7359         * NEWS: Update.
7360
7361         * http.c (hgetrange): New function.
7362         (gethttp): Use ranges.
7363
7364         * utils.c (numdigit): Accept long instead of int.
7365
7366         * http.c (http_loop): Add restart capabilities.
7367
7368         * ftp.c (ftp_retrieve_glob): Fixed a bug that could cause matchres
7369         being used uninitialized.
7370         (ftp_retrieve_list): Similar fix.
7371
7372         * host.c (add_hlist): Fixed a bug that could cause cmp being used
7373         uninitialized.
7374
7375         * url.c (construct_relative): New function.
7376
7377         * recur.c (recursive_retrieve): Use it.
7378
7379         * retr.c (convert_links): New function.
7380
7381 1996-09-27  Hrvoje Niksic  <hniksic@srce.hr>
7382
7383         * url.c (free_urlpos): New function.
7384
7385         * recur.c (recursive_retrieve): Adapt.
7386
7387         * url.c (get_urls_html): Return a linked list instead of a vector.
7388
7389         * url.c (get_urls_file): Return a linked list instead of a vector.
7390
7391         * geturl.1: Update.
7392
7393         * http.c (gethttp): Implement it.
7394
7395         * init.c (setval): New option: SAVEHEADERS
7396
7397         * ftp.c (ftp_loop_internal): Do not set restval if listing is to
7398         be retrieved. Lack of this test caused bugs when the connection
7399         was lost during listing.
7400
7401         * retr.c (retrieve_url): Fixed a bug that caused
7402         coredumps. *newloc is now reset by default.
7403         (retrieve_url): Lift the twenty-tries limit on proxies.
7404
7405         * version.c: Changed version to 1.4b20.
7406
7407 1996-09-20  Hrvoje Niksic  <hniksic@srce.hr>
7408
7409         * version.c: "Released" 1.4b19.
7410
7411 1996-09-19  Hrvoje Niksic  <hniksic@srce.hr>
7412
7413         * ftp.c (ftp_loop_internal): Renamed from ftp_1fl_loop.
7414         (getftp): Changed prototype to accept ccon *.
7415
7416 1996-09-17  Hrvoje Niksic  <hniksic@srce.hr>
7417
7418         * ftp.c (ftp_retrieve_list): Fixed a bug that caused setting
7419         incorrect values to files pointed to by symbolic links.
7420         (ftp_1fl_loop): Do not count listings among the downloaded URL-s.
7421
7422 1996-09-16  Hrvoje Niksic  <hniksic@srce.hr>
7423
7424         * url.c (mkstruct): Do not prepend "./" in front of a pathname.
7425
7426         * main.c (main): New option: --user-agent.
7427
7428         * geturl.1: Ditto.
7429
7430         * init.h: Ditto.
7431
7432         * init.c (setval): Ditto.
7433
7434         * main.c (main): Rename "server-headers" to "server-response".
7435
7436         * ftp-unix.c (ftp_parse_ls): Check for asterisks at the end of
7437         executables in 'ls -F' listings.
7438
7439 1996-09-15  Hrvoje Niksic  <hniksic@srce.hr>
7440
7441         * url.c (parseurl): Remove realloc() and sprintf().
7442         (str_url): Get rid of sprintf().
7443
7444         * recur.c (recursive_retrieve): Enable FTP recursion through proxy
7445         servers.
7446
7447         * url.h (URL_CLEANSE): Made it else-resistant.
7448         (USE_PROXY): New macro.
7449
7450 1996-09-14  Hrvoje Niksic  <hniksic@srce.hr>
7451
7452         * NEWS: Update.
7453
7454         * version.c: Changed version to 1.4b19.
7455
7456 1996-09-14  Hrvoje Niksic  <hniksic@srce.hr>
7457
7458         * version.c: "Released" 1.4b18.
7459
7460         * url.c: Made it reallocate space exponentially.
7461
7462 1996-09-14  Drazen Kacar  <dave@fly.cc.fer.hr>
7463
7464         * html.c (htmlfindurl): Added <frame src> and <iframe src> among
7465         the list of stuff to fetch.
7466
7467 1996-09-13  Hrvoje Niksic  <hniksic@srce.hr>
7468
7469         * url.c (get_urls_html): Fixed a bug that caused SIGSEGV's with
7470         -Fi.
7471
7472         * html.c (htmlfindurl): Rewrite.
7473
7474         * http.c (gethttp): Use opt.proxy_cache.
7475
7476         * main.c (main): Added --cache option.
7477
7478         * ftp.c (ftp_response): Print server response if opt.print_server
7479         response is set.
7480         (getftp): Print newlines after each request if the server response
7481         is to be printed.
7482         (ftp_response): Copy the last response line to last_respline.
7483
7484         * http.c (gethttp): Add Pragma: nocache for retried
7485         proxy-retrievals.
7486
7487         * ftp.c (getftp): Use it.
7488
7489         * retr.c (buf_discard): New function.
7490
7491         * ftp.c (ftp_response): Use buf_readchar().
7492         (getftp): Flush the control connection buffer before calling
7493         get_contents().
7494
7495         * retr.c (buf_readchar): New function.
7496         (buf_flush): New function.
7497         (get_contents): Use buf_readchar() instead of read(x, x, 1).
7498         (get_contents): Use buf_flush.
7499
7500 1996-09-12  Hrvoje Niksic  <hniksic@srce.hr>
7501
7502         * ftp.c: Incorporate changes to ftp_response.
7503
7504         * ftp.c (ftp_response): Allocate the server response dynamically,
7505         as in read_whole_line and fetch_next_header.
7506
7507         * utils.c (read_whole_line): Fixed a bug that prevented reading
7508         the last line if it is not \n-terminated. Also fixed a possible
7509         memory overflow.
7510
7511         * http.c (fetch_next_header): Return malloc-ed string as large as
7512         needed.
7513         (gethttp): Use new fetch_next_header.
7514
7515 1996-09-12  Hrvoje Niksic  <hniksic@srce.hr>
7516
7517         * http.c (hgetlen): Compute the header length the first time only.
7518         (hgettype): Ditto.
7519         (hgetlocation): Ditto.
7520         (hgetmodified): Ditto.
7521
7522 1996-09-11  Hrvoje Niksic  <hniksic@srce.hr>
7523
7524         * sample.geturlrc: Update.
7525
7526 1996-09-10  Hrvoje Niksic  <hniksic@srce.hr>
7527
7528         * http.c (http_loop): Ditto.
7529
7530         * ftp.c (getftp): Open the output file as binary.
7531
7532         * version.c: Changed version to 1.4b18.
7533
7534 1996-09-10  Hrvoje Niksic  <hniksic@srce.hr>
7535
7536         * version.c: "Released" 1.4b17.
7537
7538         * ftp-unix.c (ftp_parse_ls): If unable to open file, return NULL
7539         instead of failed assertion.
7540
7541 1996-09-09  Hrvoje Niksic  <hniksic@srce.hr>
7542
7543         * ftp.c (ftp_get_listing): Add a numbered suffix to LIST_FILENAME
7544         if a file of that name already exists.
7545
7546 1996-09-05  Hrvoje Niksic  <hniksic@srce.hr>
7547
7548         * ftp.c (ftp_1fl_loop): Handler FTPPORTERR and FOPENERR correctly.
7549
7550         * config.h.in: Define gethostbyname as Rgethostbyname when using
7551         Socks.
7552
7553         * configure.in: Check for -lresolv if using Socks.
7554
7555         * version.c: Changed version to 1.4b17.
7556
7557 1996-07-15  Hrvoje Niksic  <hniksic@srce.hr>
7558
7559         * version.c: "Released" 1.4b16.
7560
7561         * http.c (gethttp): More intelligent check for first line of HTTP
7562         response.
7563         (gethttp): Would bug out on time-stamping.
7564
7565         * version.c: Changed version to 1.4b16.
7566
7567 1996-07-11  Hrvoje Niksic  <hniksic@srce.hr>
7568
7569         * version.c: Released 1.4b15.
7570
7571         * http.c (http_loop): Print \n after the loop entry, not before.
7572
7573         * url.c (url_filename): Use ISDOT.
7574
7575         * url.h (ISDOT): New macro.
7576
7577         * recur.c (recursive_retrieve): Change only opt.recursive for
7578         following FTP.
7579
7580 1996-07-11  Antonio Rosella <antonio.rosella@agip.it>
7581
7582         * socks/geturl.cgi: Fixed version No.
7583
7584         * socks/download-netscape.html: Ditto.
7585
7586         * socks/download.html: Changed socks.html to download.html.
7587
7588 1996-07-11  Hrvoje Niksic  <hniksic@srce.hr>
7589
7590         * url.c (url_filename): Check for opt.dirstruct instead for
7591         opt.recursive && opt.dirstruct.
7592
7593         * init.c (defaults): Ditto.
7594         (defaults): Reset dirstruct by default.
7595         (setval): Set opt.dirstruct whenever setting recursive.
7596
7597         * init.h: Removed FORCEDIRHIER.
7598
7599         * INSTALL: Added -L to socks-description.
7600
7601         * version.c: Changed version to 1.4b15.
7602
7603 1996-07-10  Hrvoje Niksic  <hniksic@srce.hr>
7604
7605         * version.c: "Released" 1.4b14.
7606
7607         * geturl.1: Update AUTHOR to include Rosella as contributor.
7608
7609         * NEWS: Update.
7610
7611         * socks/geturl.cgi: Simplified command creation, nuked <blink>.
7612
7613         * socks/geturl.cgi: Wrap nutscape extensions within if $netscape.
7614         (cal_time): Fix == to eq.
7615
7616         * socks/geturl.cgi: GPL-ized with permission of A. Rosella.
7617
7618         * geturl.1 (hostname): Moved URL CONVENTIONS to the beginning.
7619
7620         * Makefile.in: Use @VERSION@.
7621
7622         * configure.in: Check version from version.c.
7623
7624         * socks/geturl.cgi: Changed /pub/bin/perl to /usr/bin/perl.
7625
7626         * socks/download.html: Created from download-netscape.html, made
7627         HTML-2.0 compliant.
7628
7629         * recur.c (recursive_retrieve): Set opt.force_dir_hier when
7630         following FTP links from recursions.
7631
7632 1996-07-09  Hrvoje Niksic  <hniksic@srce.hr>
7633
7634         * url.c (mymkdir): Fixed a bug that prevented mymkdir() to create
7635         absolute directories correctly.
7636
7637         * version.c: Changed version to 1.4b14.
7638
7639 1996-07-09  Hrvoje Niksic  <hniksic@srce.hr>
7640
7641         * version.c: "Released" 1.4b13.
7642
7643         * url.c (make_backup): New function.
7644
7645         * http.c (http_loop): Make a backup copy of the local file (using
7646         rename(2)) before opening it.
7647
7648         * main.c (main): Added --backups.
7649
7650         * host.c (ftp_getaddress): Bail out on failed mycuserid().
7651         (ftp_getaddress): Check for leading dot on MY_DOMAIN.
7652         (ftp_getaddress): Check for empty, null or (null) domain.
7653
7654         * url.c (get_urls_html): If this_url is NULL, the base must have a
7655         protocol.
7656         (parseurl): Use has_proto.
7657
7658         * retr.c (retrieve_url): Warn when proxy is used with more than 20
7659         retries.
7660
7661         * url.c (mkstruct): Create the directory (calling mymkdir()) only
7662         if it is not already there.
7663         (has_proto): New function.
7664         (get_urls_html): Eliminate the remaining call to findurl -- use
7665         has_proto.
7666
7667         * geturl.1: Ditto.
7668
7669         * main.c: Change -X to -x.
7670
7671         * url.c (url_filename): Simplify creation of filename if
7672         prefix_files is set.
7673         (url_filename): Simplify everything. And I do mean *everything*.
7674         (mkstruct): Add dir_prefix before hostname.
7675         (path_simplify): Fixed a bug that caused writing outside the path
7676         string in case of "." and ".." path strings.
7677
7678 1996-07-06  Hrvoje Niksic  <hniksic@srce.hr>
7679
7680         * init.c: Added --mirror.
7681
7682         * main.c (main): Added -X to force saving of directory hierarchy.
7683
7684         * ftp.c (ftp_retrieve_list): Added recursion depth counter.
7685         (ftp_retrieve_list): Check whether quota is exceeded.
7686
7687         * url.c (get_urls_html): Skip leading blanks for absolute URIs.
7688
7689         * http.c (gethttp): Use referer if present.
7690
7691         * recur.c (recursive_retrieve): Set u->referer before calling
7692         retrieve_url.
7693
7694         * url.c (newurl): Use memset to nullify the struct members.
7695         (freeurl): Free the referer field too.
7696
7697         * url.h: Added referer to urlinfo.
7698
7699         * geturl.1: Updated the manual to document some of the new features.
7700
7701         * utils.c (numdigit): Moved from url.c.
7702
7703         * README: Rewritten.
7704
7705         * config.h.in: Add the support for socks.
7706
7707         * configure.in: Add the support for socks.
7708
7709         * url.c (url_filename): If the dir_prefix is ".", work with just
7710         the file name.
7711         (url_filename): Do not look for .n extensions if timestamping if
7712         turned on.
7713
7714         * retr.c (show_progress): Skip the over-abundant restval data, and
7715         print the rest of it with ',' instead of '.'.
7716
7717 1996-07-05  Hrvoje Niksic  <hniksic@srce.hr>
7718
7719         * retr.c (show_progress): Changed second arg. to long (as it
7720         should be).
7721         (show_progress): Moved to retr.c.
7722         (get_contents): Moved to retr.c.
7723
7724         * version.c: Change version to 1.4b13.
7725
7726 1996-07-05  Hrvoje Lacko <hlacko@fly.cc.fer.hr>
7727
7728         * url.c (in_acclist): Would return after the first suffix.
7729
7730 1996-07-04  Hrvoje Niksic  <hniksic@srce.hr>
7731
7732         * version.c: "Released" 1.4b12.
7733
7734         * url.c (path_simplify): More kludgifications.
7735         (get_urls_html): Use new parameters for htmlfindurl.
7736
7737         * html.c: Removed memorizing "parser states", since the new
7738         organization does not require them.
7739
7740         * init.c (run_geturlrc): Use read_whole_line.
7741
7742         * ftp-unix.c (ftp_parse_ls): Use read_whole_line.
7743
7744         * recur.c (parse_robots): Use read_whole_line.
7745
7746         * utils.c (read_whole_line): New function.
7747
7748         * recur.c (tried_robots): Use add_slist/in_slist, *much* cleaner.
7749
7750         * host.c (ngethostbyname): Call inet_addr just once. Yet to be
7751         tested on OSF and Ultrix.
7752         (add_hlist): New function.
7753         (free_hlist): New function.
7754         (search_host): New function.
7755         (search_address): New function.
7756         (realhost): Use search_host, search_address and add_hlist.
7757         (same_host): Replaced realloc() with strdupdelim(), made
7758         case-insensitive, fixed a memory leak.
7759
7760         * html.c (ftp_index): Fixed tm_min and tm_sec to be tm_hour and
7761         tm_min, like intended.
7762
7763         * version.c: Change user agent information to
7764         Geturl/version.
7765
7766 1996-07-03  Hrvoje Niksic  <hniksic@srce.hr>
7767
7768         * utils.c: Renamed nmalloc.c to utils.c, .h likewise.
7769
7770         * url.c (acceptable): Always accept directories.
7771
7772         * ftp-unix.c (ftp_parse_ls): Support brain-damaged "ls -F"-loving
7773         servers by stripping trailing @ from symlinks and trailing / from
7774         directories.
7775
7776         * ftp.c (ftp_loop): Debugged the "enhanced" heuristics. :-)
7777
7778         * url.c (skip_url): Use toupper instead of UCASE.
7779
7780         * host.c (sufmatch): Made it case-insensitive.
7781
7782         * url.c (match_backwards_or_pattern): Fixed i == -1 to j == -1.
7783         (match_backwards): New function, instead of
7784         match_backwards_or_pattern.
7785
7786         * recur.c (recursive_retrieve): Increased performance by
7787         introducing inl, which reduces number of calls to in_slist to only
7788         one.
7789
7790         * ftp.c (ftp_loop): Enhanced the heuristics that decides which
7791         routine to use.
7792
7793         * main.c (printhelp): Removed the warranty stuff.
7794
7795 1996-07-02  Hrvoje Niksic  <hniksic@srce.hr>
7796
7797         * url.c (add_slist): Simplify.
7798         (match_backwards_or_pattern): New function.
7799         (in_acclist): Use match_backwards_or_pattern.
7800         (matches): Remove.
7801
7802 1996-06-30  Hrvoje Niksic  <hniksic@srce.hr>
7803
7804         * ftp.c (ftp_loop): Call ftp_index on empty file names, if not
7805         recursive.
7806
7807         * html.c (ftp_index): Fixed to work. Beautified the output.
7808
7809         * ftp.c (ftp_retrieve_glob): Another argument to control whether
7810         globbing is to be used.
7811         (ftp_retrieve_list): Compare the time-stamps of local and remote
7812         files to determine whether to download.
7813
7814 1996-06-29  Hrvoje Niksic  <hniksic@srce.hr>
7815
7816         * ftp.c (rel_constr): New function.
7817
7818         * retr.c (retrieve_from_file): Check for text/html before
7819         retrieving recursively.
7820
7821         * main.c (main): Check whether the file is HTML before going into
7822         recursive HTML retrieving.
7823
7824         * ftp.c (ftp_retrieve_list): Manage directories.
7825         (ftp_retrieve_glob): Pass all the file-types to ftp_retrieve_list.
7826         (ftp_1fl_loop): Fixed a bug that caused con->com to be incorrectly
7827         initialized, causing bugchecks in getftp to fail.
7828
7829         * configure.in: Check for symlink.
7830
7831         * ftp.c (ftp_retrieve_list): Added support for symlinks.
7832
7833         * version.c: "Released" 1.4b10.
7834
7835         * atotm.c (atotm): Redeclared as time_t.
7836
7837         * init.c: New variable "timestamping".
7838
7839         * main.c (main): New option 'N'.
7840
7841         * http.c (hgetlocation): Case-insensitive match.
7842         (hgetmodified): New function.
7843         (http_loop): Implement time-stamping.
7844
7845 1996-06-28  Hrvoje Niksic  <hniksic@srce.hr>
7846
7847         * version.c: Changed version to 1.4b10
7848
7849         * atotm.c: New file, from phttpd.
7850
7851         * options.h (struct options): New parameter timestamping.
7852
7853         * version.c: 1.4b9 "released".
7854
7855         * recur.c (recursive_retrieve): Used linked list (ulist) for
7856         faster storing of URLs.
7857
7858         * url.c (get_urls_html): Removed the old kludge with comparing the
7859         outputs of htmlfindurl and findurl.
7860         (get_urls_html): Added better protocol support here.
7861         (create_hash): Removed, as well as add_hash and in_hash.
7862         (addslist): New function.
7863         (in_slist): ditto
7864
7865         * version.c: Released 1.4b8, changed version to b9.
7866
7867 1996-06-27  Hrvoje Niksic  <hniksic@srce.hr>
7868
7869         * ftp.c (freefileinfo): New function.
7870         (delelement): New function.
7871
7872         * everywhere: GPL!
7873
7874         * ftp.c (ftp_loop): Use ccon.
7875         (ftp_retrieve_glob): Likewise.
7876
7877         * ftp.h: Define ccon, to define status of control connection.
7878
7879         * ftp.c (ftp_get_listing): New function.
7880         (ftp_retrieve_more): New function.
7881         (ftp_retrieve_glob): New function.
7882
7883 1996-06-25  Hrvoje Niksic  <hniksic@srce.hr>
7884
7885         * configure.in: Removed the search for cuserid().
7886
7887         * init.c (getmode): Renamed to getperms.
7888
7889 1996-06-24  Hrvoje Niksic  <hniksic@srce.hr>
7890
7891         * version.c: New version.
7892
7893         * main.c (hangup): New function, that handles hangup. Hangup
7894         signal now causes geturl to stop writing on stdout, and to write
7895         to a log file.
7896
7897         * ftp.c (getftp): "Released" 1.4b7.
7898
7899         * html.c (htmlfindurl): Ignore everything inside <head>...</head>.
7900         (ftp_index): Use fileinfo/urlinfo.
7901
7902         * ftp-unix.c (ftp_parse_ls): New function.
7903         (symperms): New function.
7904
7905         * ftp.c (ftp_1fl_loop): New function, to handle 1-file loops.
7906
7907         * retr.c (retrieve_url): Added FTP support.
7908
7909 1996-06-23  Hrvoje Niksic  <hniksic@srce.hr>
7910
7911         * geturl.h: Removed NOTFTP2HTML enum.
7912         Added DO_LOGIN, DO_CWD and DO_LIST. LIST_ONLY is obsolete.
7913
7914         * ftp.c (getftp): Resynched with urlinfo.
7915         (getftp): Removed HMTL-ization of index.html from getftp.
7916
7917         * version.c: 1.4b6 "released".
7918
7919         * options.h (options): New struct, to keep options in.
7920
7921         * http.c (http_loop,gethttp): Synched with proxy.
7922
7923         * retr.c (retrieve_url): Implemented proxy retrieval.
7924
7925         * main.c (main): Use retrieve_from_file.
7926
7927 1996-06-22  Hrvoje Niksic  <hniksic@srce.hr>
7928
7929         * retr.c (retrieve_from_file): New function.
7930
7931         * url.c (parseurl): Modified to return URLOK if all OK. Protocol
7932         can be found in u->proto.
7933
7934         * ftp.c (ftp_response): Fixed to accept multi-line responses as
7935         per RFC 959.
7936
7937         * recr.c (recursive_retrieve): Take newloc from retrieve_url.
7938
7939         * url.c (mymkdir): Removed the file of the same name, if one
7940         exists.
7941         (isfile): New function.
7942         (mkstruct): Fixed the '/' glitches.
7943         (path_simplify): Hacked to treat something/.. correctly.
7944
7945 1996-06-21  Hrvoje Niksic  <hniksic@srce.hr>
7946
7947         * http.c (gethttp): Close the socket after error in headers.
7948         (http_loop): HEOF no longer a fatal header.
7949
7950         * loop.c (retrieve_url): When dt is NULL, do not modify it. This
7951         simplifies the syntax of calling retrieve_url.
7952
7953         * recr.c (recursive_retrieve): Modified to use get_urls_html.
7954
7955         * url.c (get_urls_file): New function.
7956         (get_urls_html): New function.
7957
7958         * recr.c (recursive_retrieve): Patched up to conform to the
7959         standards.
7960
7961         * http.c (gethttp): Synched with the rest...
7962         (gethttp): Treat only CONREFUSED specially, with connection
7963         errors.
7964
7965         * init.c,geturl.1,http.c (http_loop): Removed kill_error.
7966
7967 1996-06-20  Hrvoje Niksic  <hniksic@srce.hr>
7968
7969         * http.c (http_loop): New function.
7970
7971         * loop.c: Removed *lots* of stuff from retrieve_url.
7972
7973         * url.c (parseurl): Changed to work with urlinfo. Integrated
7974         username finding and path parsing.
7975         (newurl): New function.
7976         (freeurl): New function.
7977         (mkstruct): Removed the old bogosities, made it urlinfo-compliant.
7978         (url_filename): Likewise.
7979         (path_simplify): Accept relative paths too.
7980         (opt_url): Made urlinfo-compliant, removed bogosities.
7981         (path_simplify): Expanded to accept relative paths.
7982         (str_url): A replacement for hide_url
7983         (decode_string): Fixed a bug that caused malfunctioning when
7984         encountering an illegal %.. combination.
7985         (opt_url): Removed the argument. Dot-optimizations are now default.
7986
7987         * nmalloc.c (strdupdelim): New function.
7988
7989         * url.h: Added the urlinfo structure
7990
7991 1996-06-19  Hrvoje Niksic  <hniksic@srce.hr>
7992
7993         * url.c (hide_url): Thrown out the protocol assertion. Do not
7994         change the URL if the protocol if not recognized.
7995         (findurl): Put continue instead of break.
7996
7997 1996-06-18  Hrvoje Niksic  <hniksic@srce.hr>
7998
7999         * sample.geturlrc: Changed the defaults to be commented out and
8000         harmless (previous defaults caused pains if copied to
8001         ~/.geturlrc).
8002
8003         * http.c (gethttp): Print the HTTP request in debug mode.
8004
8005         * connect.c (iread): Added EINTR check loop to select-ing
8006         too. EINTR is now correctly handled with select().
8007
8008         * TODO: new file
8009
8010 1996-05-07  Hrvoje Niksic  <hniksic@srce.hr>
8011
8012         * host.c (same_host): Made the function a little bit more
8013         intelligent regarding diversified URL syntaxes.
8014
8015         * url.c (skip_url): Spaces are now skipped after URL:
8016
8017         * Released 1.3.1 with the patch to prevent crashing when sending
8018         NULL to robot* functions and the patch to compile "out of the box"
8019         on AIX.
8020
8021         * recr.c (recursive_retrieve): Added checking whether this_url is
8022         NULL when calling the robot functions.
8023
8024         * ChangeLog: New file.