sjero.net Git - wget/blob - src/ChangeLog

   1 2005-07-08  Hrvoje Niksic  <hniksic@xemacs.org>
   2
   3         * utils.c (aprintf): Use vasprintf where available.
   4
   5 2005-07-08  Hrvoje Niksic  <hniksic@xemacs.org>
   6
   7         * url.c (rewrite_shorthand_url): Simplify code using aprintf and
   8         strspn.
   9
  10 2005-07-07  Hrvoje Niksic  <hniksic@xemacs.org>
  11
  12         * gnutls.c (ssl_check_certificate): Check for the validity of the
  13         presented X509 certificate.
  14
  15 2005-07-07  Hrvoje Niksic  <hniksic@xemacs.org>
  16
  17         * openssl.c (ssl_check_certificate): Print custom error messages
  18         for frequent X509 certificate problems.
  19
  20 2005-07-07  Hrvoje Niksic  <hniksic@xemacs.org>
  21
  22         * mswindows.h: Define an alias for stat and fstat, as requested by
  23         config-compiler.h.
  24         (gai_strerror): Define to windows_strerror if NEED_GAI_STRERROR is
  25         defined.
  26
  27 2005-07-06  Hrvoje Niksic  <hniksic@xemacs.org>
  28
  29         * mswindows.h: Use strtoll where available.
  30
  31 2005-07-06  Hrvoje Niksic  <hniksic@xemacs.org>
  32
  33         * sysdep.h: Add a full declaration of fnmatch.h.
  34
  35 2005-07-06  Hrvoje Niksic  <hniksic@xemacs.org>
  36
  37         * utils.c: Unconditionally include <setjmp.h>.
  38
  39 2005-07-06  Hrvoje Niksic  <hniksic@xemacs.org>
  40
  41         * utils.c (fnmatch_nocase): New function.
  42         (proclist): Use it instead of fnmatch when opt.ignore_case is
  43         requested.
  44         (in_acclist): Respect opt.ignore_case.
  45         (frontcmp): Respect opt.ignore_case.
  46
  47         * options.h (struct options): New flag opt.ignore_case.
  48
  49 2005-07-06  Hrvoje Niksic  <hniksic@xemacs.org>
  50
  51         * ptimer.c: Measure time in seconds rather than milliseconds.
  52         Adjusted all callers.
  53
  54 2005-07-06  Hrvoje Niksic  <hniksic@xemacs.org>
  55
  56         * http.c (gethttp): When freeing MESSAGE, take into account that
  57         it can be NULL.
  58
  59 2005-07-05  Hrvoje Niksic  <hniksic@xemacs.org>
  60
  61         * cmpt.c (timegm): Handle years after 2099.
  62
  63 2005-07-05  Hrvoje Niksic  <hniksic@xemacs.org>
  64
  65         * cmpt.c (timegm): Remove unused variable.
  66
  67 2005-07-05  Hrvoje Niksic  <hniksic@xemacs.org>
  68
  69         * cmpt.c (timegm): Don't call mktime; simply count the seconds
  70         between 1970-01-01 and the specified date.
  71
  72 2005-07-05  Hrvoje Niksic  <hniksic@xemacs.org>
  73
  74         * wget.h (or): Define HAVE_SSL when either HAVE_OPENSSL or
  75         HAVE_GNUTLS are defined.
  76
  77         * gnutls.c: New file.
  78
  79 2005-07-05  Hrvoje Niksic  <hniksic@xemacs.org>
  80
  81         * http.c (gethttp): Don't print the request write error message
  82         twice.
  83
  84 2005-07-04  Hrvoje Niksic  <hniksic@xemacs.org>
  85
  86         * openssl.c (openssl_errstr): Instead of always using a large
  87         static buffer, only allocate the error string when there is an
  88         actual error.
  89
  90 2005-07-04  Hrvoje Niksic  <hniksic@xemacs.org>
  91
  92         * xmalloc.c (debugging_free): Prefix hex pointer value with "0x"
  93         when printing.
  94
  95 2005-07-04  Hrvoje Niksic  <hniksic@xemacs.org>
  96
  97         * utils.c (NEXT_BASE64_CHAR): Rename to NEXT_CHAR and simplify to
  98         get the next non-whitespace character.
  99
 100 2005-07-04  Hrvoje Niksic  <hniksic@xemacs.org>
 101
 102         * utils.c (base64_decode): Don't silently tolerate non-base64
 103         non-white-space characters in the base64 stream.
 104
 105 2005-07-04  Hrvoje Niksic  <hniksic@xemacs.org>
 106
 107         * connect.c (LAZY_RETRIEVE_INFO): Make last_tick unsigned to match
 108         transport_map_modified_tick.
 109
 110 2005-07-04  Hrvoje Niksic  <hniksic@xemacs.org>
 111
 112         * config-post.h (alloca): Updated declaration to not enumerate all
 113         Windows compilers.
 114
 115 2005-07-04  Hrvoje Niksic  <hniksic@xemacs.org>
 116
 117         * openssl.c (openssl_errstr): Separate error messages with "; ".
 118
 119 2005-07-03  Hrvoje Niksic  <hniksic@xemacs.org>
 120
 121         * ftp.c (getftp): Ditto.
 122
 123         * http.c (gethttp): Use fd_errstr.
 124
 125         * connect.c (fd_register_transport): Restructure parameters to
 126         include only a single structure that describes transport
 127         implementation.
 128
 129         * openssl.c (openssl_errstr): New function: dump SSL error strings
 130         into a static buffer and return a pointer to the buffer.
 131
 132         * connect.c (fd_errstr): New function; returns transport-specific
 133         error message, or strerror(errno) if transport doesn't supply one.
 134
 135 2005-07-03  Hrvoje Niksic  <hniksic@xemacs.org>
 136
 137         * mswindows.h: Also wrap accept() and listen().
 138
 139 2005-07-03  Hrvoje Niksic  <hniksic@xemacs.org>
 140
 141         * url.c (path_end): Skip separators appropriate for the scheme.
 142         (strpbrk_or_eos): Remove gcc-specific version, as the optimization
 143         it tried to perform no longer applies.
 144
 145 2005-07-02  Hrvoje Niksic  <hniksic@xemacs.org>
 146
 147         * host.c: Don't include "connect.h" now that we no longer have
 148         socket_has_inet6.
 149
 150 2005-07-02  Hrvoje Niksic  <hniksic@xemacs.org>
 151
 152         * host.c: Remove extraneous definition of netdb.h.
 153
 154 2005-07-02  Hrvoje Niksic  <hniksic@xemacs.org>
 155
 156         * http.c (gethttp): Skip error message body in the keep-alive
 157         case.
 158
 159 2005-07-02  Hrvoje Niksic  <hniksic@xemacs.org>
 160
 161         * url.c (url_parse): Would crash when parsing fragments.  Support
 162         fragments for FTP URLs too.
 163
 164 2005-07-02  Hrvoje Niksic  <hniksic@xemacs.org>
 165
 166         * version.c: Don't use "cvs" in version name, since we're not
 167         using CVS anymore.
 168
 169 2005-07-02  Hrvoje Niksic  <hniksic@xemacs.org>
 170
 171         * progress.c (create_image): Ditto.
 172
 173         * retr.c (retr_rate): Display smaller rate numbers with greater
 174         precision.
 175
 176 2005-07-02  Hrvoje Niksic  <hniksic@xemacs.org>
 177
 178         * http.c (response_head_terminator): Minor optimization.
 179
 180         * retr.c (fd_read_hunk): Call terminator with pointer to the start
 181         of the data and the pointer to the current data.  Changed all
 182         callers.
 183
 184 2005-07-01  Hrvoje Niksic  <hniksic@xemacs.org>
 185
 186         * url.c (url_parse): Make sure u->params is not initialized for
 187         http/https URLs.
 188         (url_parse): Don't crash on garbage following []-delimited IPv6
 189         addresses.
 190
 191 2005-07-01  Hrvoje Niksic  <hniksic@xemacs.org>
 192
 193         * main.c (print_help): Don't refer to the non-existent -nr in
 194         description of --mirror.
 195
 196 2005-06-30  Hrvoje Niksic  <hniksic@xemacs.org>
 197
 198         * host.c (pretty_print_address): Renamed to just print_address.
 199         Clarify documentation.
 200
 201 2005-06-30  Hrvoje Niksic  <hniksic@xemacs.org>
 202
 203         * http.c (gethttp): Explicitly document the different cases when
 204         generating the Host header.
 205
 206 2005-06-30  Hrvoje Niksic  <hniksic@xemacs.org>
 207
 208         * host.c (pretty_print_address): Handle error result from
 209         inet_ntop.
 210
 211 2005-06-30  Gisle Vanem  <giva@bgnett.no>
 212
 213         * mswindows.c (inet_ntop): New function.  Print IPv6 addresses
 214         using WSAAddressToString.
 215
 216 2005-06-27  Hrvoje Niksic  <hniksic@xemacs.org>
 217
 218         * progress.c (dot_update): Remove unused variable row_qty.
 219
 220 2005-06-29  Hrvoje Niksic  <hniksic@xemacs.org>
 221
 222         * main.c: Check for both SIGHUP and SIGUSR1 before using them.
 223
 224 2005-06-29  Hrvoje Niksic  <hniksic@xemacs.org>
 225
 226         * utils.c: Unconditionally include locale.h.
 227
 228 2005-06-29  Hrvoje Niksic  <hniksic@xemacs.org>
 229
 230         * ptimer.c: Include sys/time.h to get struct timeval.
 231
 232 2005-06-29  Hrvoje Niksic  <hniksic@xemacs.org>
 233
 234         * wget.h: Remove obsolete definition of with_thousand_seps_sum.
 235
 236 2005-06-29  Hrvoje Niksic  <hniksic@xemacs.org>
 237
 238         * gnu-md5.h: Unconditionally include limits.h.
 239
 240 2005-06-29  Hrvoje Niksic  <hniksic@xemacs.org>
 241
 242         * utils.c (random_number): Use lrand48 if available.
 243         (random_float): Use drand48 if available.
 244
 245 2005-06-29  Hrvoje Niksic  <hniksic@xemacs.org>
 246
 247         * main.c (secs_to_human_time): Use print_decimal when printing
 248         total download time in seconds.
 249
 250         * progress.c (print_row_stats): Use it to print total download
 251         time at the end of the download.
 252         (create_image): Ditto.
 253
 254         * utils.c (print_decimal): New function; print small decimal
 255         numbers with more precision than large ones.
 256
 257         * progress.c (print_row_stats): New function.  Print ETA after the
 258         download rate at the end of each row.
 259
 260 2005-06-28  Hrvoje Niksic  <hniksic@xemacs.org>
 261
 262         * init.c (parse_line): Check for alphanumerics.
 263
 264 2005-06-28  Hrvoje Niksic  <hniksic@xemacs.org>
 265
 266         * (dot_create): Remove unnecessary casts.
 267
 268 2005-06-28  Hrvoje Niksic  <hniksic@xemacs.org>
 269
 270         * ftp.c (getftp): Delete trailing newlines from LIST output so
 271         lines don't come out with trailing \015\012 with -S.
 272
 273 2005-06-27  Hrvoje Niksic  <hniksic@xemacs.org>
 274
 275         * mswindows.h: Remove superfluous includes.
 276
 277 2005-06-27  Hrvoje Niksic  <hniksic@xemacs.org>
 278
 279         * config-post.h (alloca): Amend alloca declaration to take care of
 280         all Win32 compilers, not just MSVC and MinGW.
 281
 282 2005-06-27  Hrvoje Niksic  <hniksic@xemacs.org>
 283
 284         * utils.c (get_grouping_data): Force separator to "." rather than
 285         " " when "," is taken.
 286
 287 2005-06-27  Hrvoje Niksic  <hniksic@xemacs.org>
 288
 289         * wget.h (PTR_FORMAT): Cast the result of sizeof to int before
 290         passing it to printf's %*.
 291
 292         * retr.h: Declare output_stream and output_stream_regular.
 293
 294         * ftp.h: Declare ftp_last_respline.
 295
 296         * convert.h: Declare dl_url_file_map.
 297
 298         * http.h: New file.
 299
 300 2005-06-27  Hrvoje Niksic  <hniksic@xemacs.org>
 301
 302         * cookies.c: Make cookies_now static.
 303
 304 2005-06-27  Hrvoje Niksic  <hniksic@xemacs.org>
 305
 306         * utils.c (human_readable): Remove intermediary cast to long; MSVC
 307         has problems casting *unsigned* __int64 to double.
 308
 309 2005-06-27  Hrvoje Niksic  <hniksic@xemacs.org>
 310
 311         * sysdep.h: Use the system-provided fnmatch by default.
 312
 313 2005-06-27  Hrvoje Niksic  <hniksic@xemacs.org>
 314
 315         * http.c (mktime_from_utc): Renamed to timegm and moved to cmpt.c.
 316         Don't compile it if GNU timegm is available.
 317         (http_atotm): Use timegm.
 318
 319 2005-06-27  Hrvoje Niksic  <hniksic@xemacs.org>
 320
 321         * http.c (http_atotm): Correctly query the old locale value.
 322
 323 2005-06-27  Hrvoje Niksic  <hniksic@xemacs.org>
 324
 325         * config-post.h (alloca): Don't #define alloca under MinGW32,
 326         which defines it in malloc.h, included from mswindows.h.
 327
 328 2005-06-27  Hrvoje Niksic  <hniksic@xemacs.org>
 329
 330         * utils.c (get_grouping_data): Force the use of separators in C
 331         locale.
 332
 333 2005-06-27  Hrvoje Niksic  <hniksic@xemacs.org>
 334
 335         * main.c (i18n_initialize): Set all locale categories.
 336
 337         * http.c (http_atotm): Temporarily set locale to "C".
 338
 339 2005-06-27  Hrvoje Niksic  <hniksic@xemacs.org>
 340
 341         * http.c (gethttp): Improve "POST data file missing" error
 342         message.
 343
 344 2005-06-27  Hrvoje Niksic  <hniksic@xemacs.org>
 345
 346         * progress.c (set_progress_implementation): Type COLON as const
 347         char *.
 348
 349 2005-06-27  Hrvoje Niksic  <hniksic@xemacs.org>
 350
 351         * utils.c (with_thousand_seps): Handle negative numbers.
 352
 353 2005-06-26  Hrvoje Niksic  <hniksic@xemacs.org>
 354
 355         * progress.c (create_image): Mark the "eta" string for translation.
 356
 357 2005-06-26  Hrvoje Niksic  <hniksic@xemacs.org>
 358
 359         * html-url.c (get_urls_file): Don't explicitly set entry->next to
 360         NULL since entry is already zeroed out.
 361
 362 2005-06-26  Gisle Vanem  <giva@bgnett.no>
 363
 364         * mswindows.h: Define gai_strerror under MinGW.
 365
 366 2005-06-26  Hrvoje Niksic  <hniksic@xemacs.org>
 367
 368         * utils.c (with_thousand_seps): Correctly implement thousand seps
 369         consisting of more than one character.
 370
 371 2005-06-26  Hrvoje Niksic  <hniksic@xemacs.org>
 372
 373         * main.c (secs_to_human_time): Ditto.
 374
 375         * progress.c (create_image): Print more exact duration of very
 376         short downloads.
 377
 378         * main.c (secs_to_human_time): Don't translate time suffixes "h",
 379         "m", and "s", which are not strictly SI, but are "accepted for use
 380         with SI".
 381         (secs_to_human_time): Print really small intervals as 0s, not
 382         0.00s.
 383
 384 2005-06-26  Hrvoje Niksic  <hniksic@xemacs.org>
 385
 386         * config-post.h: Replace the alloca declaration with the one from
 387         the latest Autoconf manual.  This should remove a warning with GCC
 388         on AIX.
 389
 390 2005-06-26  Hrvoje Niksic  <hniksic@xemacs.org>
 391
 392         * ftp.c (getftp): Always invoke SIZE, not only when continuing a
 393         download.
 394
 395         * main.c (main): Ditto here.
 396
 397         * progress.c (create_image): When the download is finished, print
 398         how long it took.
 399
 400 2005-06-26  Hrvoje Niksic  <hniksic@xemacs.org>
 401
 402         * main.c (main): Print the downloaded and quota amounts with the
 403         "human_readable" function.
 404
 405         * ftp.c (print_length): Ditto.
 406
 407         * http.c (gethttp): Don't display thousand separators.
 408
 409         * utils.c (with_thousand_seps): Rewritten to respect locale
 410         settings and to be type size agnostic.
 411
 412 2005-06-25  Hrvoje Niksic  <hniksic@xemacs.org>
 413
 414         * utils.c (human_readable): Divide with 1024 instead of shifting
 415         so the operation can work with non-integer N.
 416
 417 2005-06-25  Hrvoje Niksic  <hniksic@xemacs.org>
 418
 419         * progress.c (eta_to_human): New logic for more human-readable
 420         ETA.
 421
 422 2005-06-25  Hrvoje Niksic  <hniksic@xemacs.org>
 423
 424         * utils.c (with_thousand_seps_sum): Decrease buffer size so it
 425         cannot overrun add_thousand_seps's buffer.
 426
 427 2005-06-25  Hrvoje Niksic  <hniksic@xemacs.org>
 428
 429         * utils.c (SPRINTF_WGINT): The correct format is %I64d, not just
 430         %I64.
 431
 432 2005-06-25  Hrvoje Niksic  <hniksic@xemacs.org>
 433
 434         * http.c (http_loop): Don't warn about wildcards in HTTP URLs if
 435         globbing isn't requested in the first place.
 436
 437         * retr.c (retrieve_url): Temporarily turn off globbing when
 438         processing HTTP->FTP redirects.
 439
 440 2005-06-25  Hrvoje Niksic  <hniksic@xemacs.org>
 441
 442         * utils.c (with_thousand_seps_sum): Now defined only if
 443         SUM_SIZE_INT is double.
 444
 445         * wget.h (SUM_SIZE_INT): Instead of bothering with long, long
 446         long, __int64, and friends, simply either use wgint or double, end
 447         of story.  Since we know how to print either, we no longer need
 448         LARGE_INT_FMT.
 449
 450         * sysdeps.h (LARGE_INT): Renamed to SUM_SIZE_INT to better reflect
 451         its intent, and moved to wget.h.
 452
 453 2005-06-25  Hrvoje Niksic  <hniksic@xemacs.org>
 454
 455         * Makefile.in: No need to clean .libs.
 456
 457 2005-06-25  Hrvoje Niksic  <hniksic@xemacs.org>
 458
 459         * cookies.c (parse_set_cookies): Cast pointer subtraction to int
 460         before using it with %d; AIX compiler warns on this.
 461         Reported by Jens Schleusener.
 462
 463 2005-06-24  Hrvoje Niksic  <hniksic@xemacs.org>
 464
 465         * http.c (gethttp): Don't prepend / here.
 466
 467         * cookies.c (cookie_handle_set_cookie): Prepend / to PATH.
 468         (cookie_header): Ditto.
 469
 470 2005-06-24  Hrvoje Niksic  <hniksic@xemacs.org>
 471
 472         * init.c: opt.verbose must be declared as int.
 473
 474 2005-06-23  Hrvoje Niksic  <hniksic@xemacs.org>
 475
 476         * cmpt.c (strpbrk): Removed.
 477         (mktime): Removed.
 478         Include <time.h>.
 479
 480 2005-06-23  Hrvoje Niksic  <hniksic@xemacs.org>
 481
 482         * utils.c (read_file): Ditto.
 483
 484         * main.c (main): Use struct_fstat.
 485
 486         * mswindows.h (struct_fstat): Define a struct_fstat to deal with
 487         the fact that Borland 5.5 has 64-bit stat, but not 64-bit fstat!
 488
 489 2005-06-23  Hrvoje Niksic  <hniksic@xemacs.org>
 490
 491         * sysdep.h: Remove code that deals with Watcom.
 492
 493 2005-06-22  Hrvoje Niksic  <hniksic@xemacs.org>
 494
 495         * all: Use bool instead of int and false/true instead of 0/non-0
 496         for boolean variables and values.
 497
 498 2005-06-22  Hrvoje Niksic  <hniksic@xemacs.org>
 499
 500         * sysdep.h: Include the stdbool.h/_Bool/bool blurb from Autoconf.
 501
 502 2005-06-22  Hrvoje Niksic  <hniksic@xemacs.org>
 503
 504         * init.c (cmd_lockable_boolean): Removed.
 505
 506 2005-06-22  Hrvoje Niksic  <hniksic@xemacs.org>
 507
 508         * cookies.c (struct cookie): Use 1-bit bitfields for booleans
 509         which makes the structure takes less space at no cost in
 510         complexity.
 511
 512 2005-06-22  Hrvoje Niksic  <hniksic@xemacs.org>
 513
 514         * Makefile.in ($(OBJ)): Add the config.h dependency.
 515
 516 2005-06-22  Hrvoje Niksic  <hniksic@xemacs.org>
 517
 518         * openssl.c, connect.c, host.c: Replace instances of #ifdef
 519         ENABLE_DEBUG if (opt.debug) {...} #endif with IF_DEBUG {...}.
 520
 521         * main.c: Rename the IF_DEBUG defined here to WHEN_DEBUG.
 522
 523         * wget.h (IF_DEBUG): New macro.
 524         (DEBUGP): Define in terms of IF_DEBUG.
 525
 526 2005-06-22  Hrvoje Niksic  <hniksic@xemacs.org>
 527
 528         * http.c (gethttp): Only handle --set-cookies (and assert that
 529         cookie jar exists) if opt.cookies is true.  Failure to do so
 530         triggered the assert when --no-cookies was used and the server
 531         sent a Set-Cookie header.  Ouch!
 532
 533 2005-06-22  Hrvoje Niksic  <hniksic@xemacs.org>
 534
 535         * connect.c (select_fd): Expect select() to exist.
 536
 537         * utils.c (xsleep): Always use select() as sleep fallback on
 538         non-Windows platforms.
 539
 540         * ptimer.c: Delete the implementation of PTIMER_TIME.
 541
 542         * main.c: Assume existence of signal(), test for different signal
 543         names instead.
 544
 545         * cmpt.c: Better document reasons why certain functions are
 546         included.
 547
 548 2005-06-22  Hrvoje Niksic  <hniksic@xemacs.org>
 549
 550         * Makefile.in: Remove the manually maintained dependency list;
 551         make all object files depend on every header.
 552
 553 2005-06-20  Hrvoje Niksic  <hniksic@xemacs.org>
 554
 555         * hash.c: Rename "mapping" to "cell" to avoid confusion with the
 556         term "mapping" (or "map") sometimes being used for the entire hash
 557         table.  Also rename "non-empty" to "occupied" for easier reading
 558         of if (!NON_EMPTY (...)) ... .
 559
 560 2005-06-20  Hrvoje Niksic  <hniksic@xemacs.org>
 561
 562         * main.c, ptimer.c, sysdep.h, utils.c: Use #elif to simplify reading of
 563         chained if-else-else-else-... statements.
 564
 565 2005-06-20  Hrvoje Niksic  <hniksic@xemacs.org>
 566
 567         * all: Return type of signal handlers is `void'.  Include signal.h
 568         unconditionally.
 569
 570         * all: Don't explicitly cast values returned by malloc.  We no
 571         longer support ancient compilers that don't declare malloc, and we
 572         never supported C++ builds.
 573
 574 2005-06-19  Hrvoje Niksic  <hniksic@xemacs.org>
 575
 576         * all: Don't declare errno.  Include both time.h and sys/time.h,
 577         as long as sys/time.h exists.  Don't dereference function pointers
 578         when invoking the functions they point to.
 579
 580         * cmpt.c (memmove): Remove function mandated by C89.
 581         (strerror): Ditto.
 582         (strstr): Ditto.
 583
 584         * all: Undo the K&R-ization changes from 2005-05-03.
 585
 586         * all: Remove support for K&R compilers: use C89 function
 587         declarations, remove definition of PARAMS, remove support for
 588         varargs, and remove ansi2knr.  Assume the presence of time.h,
 589         string.h, and other headers mandated by C89.
 590
 591 2005-06-19  Hrvoje Niksic  <hniksic@xemacs.org>
 592
 593         * init.c (cmd_lockable_boolean): Don't recognize literal "2" and
 594         "-1" values; unlike 0 and 1, those should never be exposed to the
 595         user.  Update the error message to be more self-consistent, as
 596         proposed by Benno Schulenberg.
 597
 598 2005-06-18  Hrvoje Niksic  <hniksic@xemacs.org>
 599
 600         * http.c (gethttp): Don't free "head" before using it to save
 601         headers.
 602
 603 2005-06-18  Hrvoje Niksic  <hniksic@xemacs.org>
 604
 605         * http.c (gethttp): When -E is in use, check for file existence
 606         after appending ".html" to the name and modify the file name if
 607         necessary.
 608
 609 2005-06-17  Hrvoje Niksic  <hniksic@xemacs.org>
 610
 611         * connect.c (socket_has_inet6): Removed.
 612
 613         * host.c (lookup_host): Don't use the AI_ADDRCONFIG getaddrinfo
 614         hint.
 615
 616 2005-06-16  Hrvoje Niksic  <hniksic@xemacs.org>
 617
 618         * init.c (cmd_lockable_boolean): Improve the error message so it
 619         lists the more useful values first.
 620
 621 2005-06-15  Hrvoje Niksic  <hniksic@xemacs.org>
 622
 623         * http.c (gethttp): Also report the system error when the POST
 624         data file is missing.
 625
 626 2005-06-15  Benno Schulenberg  <benno@nietvergeten.nl>
 627
 628         * ftp.c, http.c, connect.c, cookies.c, html-url.c, init.c, res.c:
 629         Gettext-ize messages that were previously missed.
 630
 631 2005-06-15  Hrvoje Niksic  <hniksic@xemacs.org>
 632
 633         * host.h (ip_address): Remove the trailing comma from the type
 634         enum in the no-IPv6 case.
 635
 636         * main.c (struct cmdline_option): Remove the trailing comma from
 637         the enum.
 638
 639         Reported by Jens Schleusener.
 640
 641 2005-05-30  Hrvoje Niksic  <hniksic@xemacs.org>
 642
 643         * url.c (strpbrk_or_eos): Check for a recent GCC version before
 644         using the statement-as-expression extension.
 645
 646 2005-05-30  Hrvoje Niksic  <hniksic@xemacs.org>
 647
 648         * http.c (gethttp): Don't attempt to "skip short body" if we're
 649         issuing a HEAD request (in which case the response head is not
 650         followed by a body).
 651
 652 2005-05-30  Hrvoje Niksic  <hniksic@xemacs.org>
 653
 654         * init.c (cmd_spec_header): Don't split the string along the
 655         commas using cmd_vector; just append the new value using
 656         vec_append instead.
 657
 658         * utils.c (vec_append): New function.
 659
 660 2005-05-27  Andreas Beckmann  <debian@abeckmann.de>
 661
 662         * html-url.c (tag_handle_link): Mark the content from the <link
 663         src="..."> tag as expecting HTML.
 664
 665 2005-05-24  Hrvoje Niksic  <hniksic@xemacs.org>
 666
 667         * http.c (http_atotm): Document the origin of the "cookie date"
 668         format.
 669
 670 2005-05-21  Hrvoje Niksic  <hniksic@xemacs.org>
 671
 672         * init.c (setval_internal): Report exact command name alongside
 673         the "display name".
 674
 675 2005-05-18  Hrvoje Niksic  <hniksic@xemacs.org>
 676
 677         * cookies.c (update_cookie_field): Explicitly cast -1 to time_t to
 678         cope with systems where time_t is unsigned.
 679
 680         * cookies.c: Remove unnecessary casts to time_t from values
 681         already of that type.
 682
 683 2005-05-17  Hrvoje Niksic  <hniksic@xemacs.org>
 684
 685         * ftp.c (ftp_loop_internal): Same here.
 686
 687         * http.c (http_loop): Don't clobber the file when -c is specified
 688         and the first attempt to retrieve the file fails.
 689
 690 2005-05-16  Hrvoje Niksic  <hniksic@xemacs.org>
 691
 692         * openssl.c (ssl_check_certificate): Print all issues with a
 693         certificate.
 694
 695 2005-05-16  Hrvoje Niksic  <hniksic@xemacs.org>
 696
 697         * ftp-basic.c: Don't xfree() the line returned by ftp_response if
 698         the returned code is not FTPOK.
 699
 700 2005-05-16  Hrvoje Niksic  <hniksic@xemacs.org>
 701
 702         * init.c (cleanup): Don't free the non-existent opt.ftp_acc.  Free
 703         the SSL-related stuff.
 704
 705 2005-05-16  Hrvoje Niksic  <hniksic@xemacs.org>
 706
 707         * ftp.c (print_length): Consistently print \n at end of the
 708         "Length" line.
 709
 710 2005-05-14  Hrvoje Niksic  <hniksic@xemacs.org>
 711
 712         * openssl.c (ssl_connect): Announce the beginning and the end of
 713         the SSL handshake when in debug mode.
 714
 715         * wget.h (PTR_FORMAT): New macro for easier printing of pointer
 716         values.  Use %0*lx along with PTR_FORMAT instead of %p.
 717
 718 2005-05-14  Hrvoje Niksic  <hniksic@xemacs.org>
 719
 720         * http.c (gethttp): Would forget to close the connection when
 721         keep_alive was not used.
 722
 723 2005-05-13  Hrvoje Niksic  <hniksic@xemacs.org>
 724
 725         * openssl.c (pattern_match): Document the code that decides
 726         whether "*" matches ".".
 727
 728 2005-05-12  Hrvoje Niksic  <hniksic@xemacs.org>
 729
 730         * ftp-ls.c (ftp_index): Use %d to print the port number, which is
 731         now int.
 732         From Steven M. Schweda's VMS patches.
 733
 734 2005-05-12  Hrvoje Niksic  <hniksic@xemacs.org>
 735
 736         * url.c (rewrite_shorthand_url): Don't rewrite "https://host" to
 737         "ftp://https//host" when SSL is not used.
 738
 739 2005-05-11  Hrvoje Niksic  <hniksic@xemacs.org>
 740
 741         * openssl.c (ssl_check_server_identity): Renamed to
 742         ssl_check_certificate because it does more than just checking the
 743         server's identity.
 744         (ssl_check_certificate): Tell the user about
 745         --no-check-certificate.
 746
 747 2005-05-11  Hrvoje Niksic  <hniksic@xemacs.org>
 748
 749         * openssl.c (ssl_init): Always use SSL_VERIFY_NONE, so that the
 750         handshake finishes even if the certificate is invalid.  That way
 751         ssl_check_server_identity can provide better diagnostics on why
 752         the verification failed.
 753
 754 2005-05-11  Hrvoje Niksic  <hniksic@xemacs.org>
 755
 756         * openssl.c (pattern_match): New function.
 757         (ssl_check_server_identity): Treat peer certificate common name as
 758         wildcard.
 759
 760 2005-05-10  Hrvoje Niksic  <hniksic@xemacs.org>
 761
 762         * openssl.c (ssl_check_server_identity): Print certificate subject
 763         and issuer.
 764
 765 2005-05-10  Hrvoje Niksic  <hniksic@xemacs.org>
 766
 767         * res.c (res_register_specs): Correctly pass pointers to
 768         hash_table_get_pair.
 769
 770 2005-05-10  Hrvoje Niksic  <hniksic@xemacs.org>
 771
 772         * http.c (gethttp): Call ssl_check_server_identity.
 773
 774         * openssl.c (ssl_check_server_identity): New function, verifies
 775         that the host name in the certificate matches the actual host
 776         name.
 777         (verify_cert_callback): Removed, since it didn't do anything
 778         except returning the preverify_ok argument.
 779
 780         * connect.c (fd_transport_context): Allow retrieval of the context
 781         pointer registered with fd_register_transport.
 782
 783 2005-05-09  Hrvoje Niksic  <hniksic@xemacs.org>
 784
 785         * openssl.c (verify_cert_callback): Renamed from verify_callback.
 786         Always return the received "ok" value.  Print the X509 name in
 787         debug mode.
 788         (ssl_init): Enable partial writes in SSL context.
 789
 790 2005-05-08  Hrvoje Niksic  <hniksic@xemacs.org>
 791
 792         * http.c (http_loop): Check for wildcards in the URL path
 793         component, not in the whole URL.
 794
 795         * ftp.c (ftp_loop): Check for wildcards in URL path before
 796         unescaping, so the users can escape globbing metacharacters with %
 797         escapes.
 798
 799 2005-05-08  Hrvoje Niksic  <hniksic@xemacs.org>
 800
 801         * init.c (run_command): Correctly interpret the return value of
 802         parse_line.
 803         (commands): Re-alphabetize.
 804
 805 2005-05-08  Hrvoje Niksic  <hniksic@xemacs.org>
 806
 807         * netrc.c (parse_netrc): Explicitly check for assignment != NULL
 808         to silence warning from Borland C.
 809
 810         * url.c (sync_path): Don't unnecessarily increment p.
 811         (url_parse): Don't unnecessarily set url_encode to NULL just
 812         prior to return from the function.
 813
 814 2005-05-08  Hrvoje Niksic  <hniksic@xemacs.org>
 815
 816         * log.c (escnonprint_internal): Place variable declarations
 817         before other statements.
 818
 819 2005-05-08  Hrvoje Niksic  <hniksic@xemacs.org>
 820
 821         * html-url.c: Include recur.h.
 822
 823         * http.c (request_new): Define as accepting no args.
 824
 825 2005-05-07  Hrvoje Niksic  <hniksic@xemacs.org>
 826
 827         * url.c (strpbrk_or_eos): Made inline.  Use strchr(s, '\0') for
 828         finding the NUL char position.
 829
 830 2005-05-07  Hrvoje Niksic  <hniksic@xemacs.org>
 831
 832         * url.c (decide_copy_method): Renamed to char_needs_escaping.
 833         Since it now returns only two possible values, change it to return
 834         boolean (int).
 835
 836 2005-05-07  Hrvoje Niksic  <hniksic@xemacs.org>
 837
 838         * ftp-basic.c (ftp_request): Prevent newlines in VALUE causing
 839         inadvertent sending of multiple FTP commands.
 840
 841 2005-05-07  Hrvoje Niksic  <hniksic@xemacs.org>
 842
 843         * url.c (decide_copy_method): Never cause reencode_escapes to
 844         decode % escapes; it is too intrusive and breaks some servers.
 845
 846 2005-05-07  Hrvoje Niksic  <hniksic@xemacs.org>
 847
 848         * http.c (gethttp): When tunnelling SSL traffic over proxy with
 849         CONNECT, we're really talking to the remote server directly.
 850         Because of this, the request-line argument must be the URL path
 851         rather than the whole URL, as it would be when using regular
 852         proxies.
 853         Reported by Charles Lane.
 854
 855 2005-05-06  Hrvoje Niksic  <hniksic@xemacs.org>
 856
 857         * init.c (cmd_spec_useragent): Allow empty User-Agent.
 858
 859         * http.c (gethttp): Don't print "unknown authentication scheme"
 860         for failed Basic authentication.
 861         (SET_USER_AGENT): Don't set user-agent if opt.useragent is empty.
 862         (gethttp): Use alloca for allocation of www_authenticate.
 863
 864 2005-05-06  Hrvoje Niksic  <hniksic@xemacs.org>
 865
 866         * main.c (print_help): Fix wording of --secure-protocol help text.
 867
 868 2005-05-06  Hrvoje Niksic  <hniksic@xemacs.org>
 869
 870         * cmpt.c (strstr): Updated from glibc 2.3.5.
 871
 872 2005-05-05  Hrvoje Niksic  <hniksic@xemacs.org>
 873
 874         * http.c (http_atotm): Zero out the whole struct tm being passed
 875         to strptime.
 876
 877 2005-05-05  Hrvoje Niksic  <hniksic@xemacs.org>
 878
 879         * main.c (main): Propagate option name to setoptval.
 880
 881         * init.c (setoptval): Accept another argument, OPTNAME.  Propagate
 882         that argument as the option name independently of the actual
 883         command, determined by command_by_name(com).
 884
 885 2005-05-05  Hrvoje Niksic  <hniksic@xemacs.org>
 886
 887         * init.c (parse_line): Make the return value indicate whether
 888         there was a syntax error or a setter failed.
 889         (run_wgetrc): Return an indication on whether an error has been
 890         encountered.
 891         (initialize): Abort if there have been errors running either
 892         .wgetrc file.
 893
 894 2005-05-05  Hrvoje Niksic  <hniksic@xemacs.org>
 895
 896         * log.c (copy_and_escape): Slightly reduce code repetition between
 897         the two loops.
 898
 899 2005-05-05  Charles C.Fu  <ccwf@bacchus.com>
 900
 901         * utils.c (proclist): Strip leading slash when calling fnmatch
 902         too, otherwise wildcard comparisons always fail.
 903
 904 2005-05-05  Hrvoje Niksic  <hniksic@xemacs.org>
 905
 906         * utils.c (touch): Set access time to current time.
 907
 908 2005-05-05  Hrvoje Niksic  <hniksic@xemacs.org>
 909
 910         * url.c (url_unescape): Don't unescape %00, it effectively
 911         truncates the string.
 912
 913 2005-05-05  Hrvoje Niksic  <hniksic@xemacs.org>
 914
 915         * log.c (copy_and_escape): Replace the FOR_URI argument with a
 916         slightly more general mechanism for specifying different kinds of
 917         escape.
 918
 919 2005-05-05  Hrvoje Niksic  <hniksic@xemacs.org>
 920
 921         * ftp-basic.c (ftp_response): Fix printing FTP server response.
 922
 923 2005-05-05  Hrvoje Niksic  <hniksic@xemacs.org>
 924
 925         * retr.c (limit_bandwidth_reset): Reset sleep_adjust.
 926         (limit_bandwidth): Don't allow huge "adjustment" values that
 927         result from being suspended for a while.
 928
 929 2005-05-04  Hrvoje Niksic  <hniksic@xemacs.org>
 930
 931         * wget.h: If gettext was found but libtintl.h wasn't, declare
 932         gettext's return type to avoid type mismatches.
 933
 934 2005-05-03  Hrvoje Niksic  <hniksic@xemacs.org>
 935
 936         * url.c (url_parse): Rename label `error' to avoid conflict with
 937         identifier.
 938
 939         * retr.c (fd_read_body): Rename label `out' to avoid conflict with
 940         identifier.
 941         (fd_read_hunk): Use explicit double constant.
 942         (retrieve_from_file): Don't use string concatenation.
 943         (sleep_between_retrievals): Make sure xsleep is called with a
 944         `double' argument.
 945         (no_proxy_match): Define as static, like it is declared.
 946
 947         * progress.c (bar_create): Use 0.0 instead of 0 because K&R
 948         compilers can't automatically promote it.
 949
 950         * http-ntlm.c (ntlm_output): Replace \xHH sequences with \OOO for
 951         the sake of old compilers.
 952
 953         * ftp.c (ftp_loop_internal): Don't use string concatenation.
 954
 955         * http.c (request_send): Use explicit double constants when
 956         calling fd_read and fd_write.
 957         (post_file): Ditto.
 958         (gethttp): Ditto.
 959         (skip_short_body): Ditto.
 960
 961         * ftp-basic.c: When calling fd_write, specify the last argument as
 962         a `double' constant for the sake of K&R compilers which don't see
 963         the prototype and therefore can't promote it to double
 964         automatically.
 965
 966         * cookies.c (cookie_jar_load): Rename abort label to abort_cookie
 967         to avoid name conflict in K&R compilers.
 968
 969 2005-04-29  Hrvoje Niksic  <hniksic@xemacs.org>
 970
 971         * ptimer.c (posix_init): Since we allow _POSIX_MONOTONIC_CLOCK==0,
 972         it is not enough to check for _POSIX_MONOTONIC_CLOCK-0, we must
 973         also check for defined(_POSIX_MONOTONIC_CLOCK).
 974
 975 2005-04-28  Hrvoje Niksic  <hniksic@xemacs.org>
 976
 977         * ftp.c, hash.c, connect.c, host.c, http.c: Remove unreached code,
 978         such as "break" following return or abort.
 979
 980 2005-04-28  Hrvoje Niksic  <hniksic@xemacs.org>
 981
 982         * init.c (commands): Wrap the use of opt.random_file in #ifdef
 983         HAVE_SSL.
 984
 985 2005-04-28  Hrvoje Niksic  <hniksic@xemacs.org>
 986
 987         * http.c (gethttp): Correctly set the user agent.
 988
 989 2005-04-27  Hrvoje Niksic  <hniksic@xemacs.org>
 990
 991         * init.c (cmd_spec_useragent): Free the old value of
 992         opt.useragent before setting the new one.
 993
 994 2005-04-27  Mauro Tortonesi  <mauro@ferrara.linux.it>
 995
 996         * main.c: Map --ftp-password, --http-password and --proxy-password to
 997         the new ftppassword, httppassword and proxypassword commands
 998         respectively.  Document the --user and --password options in the help
 999         string.
1000
1001 2005-04-27  Mauro Tortonesi  <mauro@ferrara.linux.it>
1002
1003         * ftp.c: Add support for --user and --password.
1004
1005         * http.c: Add support for --user and --password.
1006
1007         * init.c: Deprecated ftppasswd, httppasswd, login, passwd and
1008         proxypasswd commands.  Added ftppassword, ftpuser, httppassword,
1009         password, proxypassword and user commands.
1010
1011         * main.c: Renamed --ftp-passwd to --ftp-password.  Added --ftp-user,
1012         --http-password, --password, --proxy-password and --user.  Deprecated
1013         --http-passwd and --proxy-passwd.  Added documentation for new options
1014         and removed documentation for deprecated options in the help string.
1015
1016         * options.h (struct options): Added user and passwd members to handle
1017         --user and --password respectively.  Renamed ftp_acc and ftp_pass
1018         members to ftp_user and ftp_passwd for consistency.
1019
1020 2005-04-27  Hrvoje Niksic  <hniksic@xemacs.org>
1021
1022         * main.c (print_help): Advertise "DER", not "ASN1".
1023
1024 2005-04-27  Hrvoje Niksic  <hniksic@xemacs.org>
1025
1026         * openssl.c (init_prng): Disable the weak random seed by default.
1027
1028         * http.c (gethttp): Simplify SSL initialization; disable SSL when
1029         anything goes wrong with the initialization.
1030
1031         * options.h (struct options): New option opt.random_file.
1032
1033 2005-04-27  Hrvoje Niksic  <hniksic@xemacs.org>
1034
1035         * init.c: Wrap private key commands in IF_SSL.
1036
1037 2005-04-27  Hrvoje Niksic  <hniksic@xemacs.org>
1038
1039         * openssl.c (ssl_init): Ditto.
1040
1041         * options.h (struct options): Allow separate specification of key
1042         type and certificate type.
1043
1044         * init.c (cmd_spec_cert_type): Provide a "der" synonym for "asn1"
1045         certificate encoding.
1046
1047 2005-04-26  Hrvoje Niksic  <hniksic@xemacs.org>
1048
1049         * openssl.c: Renamed "gen_sslfunc.c" to "openssl.c" and
1050         "gen_sslfunc.h" to "openssl.h".  This reflects the intent of
1051         openssl.c encapsulating the OpenSSL-specific code.
1052
1053 2005-04-26  Hrvoje Niksic  <hniksic@xemacs.org>
1054
1055         * init.c: Renamed "closure" (a synonym for context in some
1056         cultures) to "place", which more accurately reflects the usage.
1057
1058 2005-04-26  Hrvoje Niksic  <hniksic@xemacs.org>
1059
1060         * gen_sslfunc.c (ssl_init): Use default locations for loading the
1061         certificate bundles.
1062         (ssl_init_prng): Disable the cryptographically weak PRNG
1063         initialization fallback.
1064
1065         * init.c: Renamed SSL command-line arguments and wgetrc commands.
1066         (defaults): Check the server certificate by default.
1067
1068 2005-04-26  Hrvoje Niksic  <hniksic@xemacs.org>
1069
1070         * cookies.c (cookie_handle_set_cookie): Delete the part of the
1071         path after the trailing slash.
1072
1073         * http.c (gethttp): Call cookie_handle_set_cookie with path that
1074         begins with '/'.
1075
1076 2005-04-26  Hrvoje Niksic  <hniksic@xemacs.org>
1077
1078         * http.c (gethttp): Call skip_short_body only if keep_alive is in
1079         use.
1080         (gethttp): Send the User-Agent header with the CONNECT request as
1081         well.
1082
1083 2005-04-25  Hrvoje Niksic  <hniksic@xemacs.org>
1084
1085         * main.c (option_data): Removed support for the undocumented flag
1086         --use-proxy.
1087
1088 2005-04-25  Hrvoje Niksic  <hniksic@xemacs.org>
1089
1090         * main.c (option_data): Don't treat -Y as a boolean switch; treat
1091         it as a value switch instead, so "-Y off" continues to work.
1092
1093 2005-04-24  Hrvoje Niksic  <hniksic@xemacs.org>
1094
1095         * utils.c (aprintf): Delete unreachable statement.
1096
1097 2005-04-24  Hrvoje Niksic  <hniksic@xemacs.org>
1098
1099         * host.c (cmp_prefer_ipv4): New function.
1100         (cmp_prefer_ipv6): New function.
1101         (lookup_host): Use the appropriate comparator according to
1102         opt.prefer_family.
1103
1104         * init.c: New option prefer_family.
1105
1106         * host.c (is_valid_ipv6_address): Spell NS_* constants in lower
1107         case to avoid clash with system headers.
1108         (lookup_host): Reorder the addresses so that IPv4 ones come first.
1109
1110         * utils.c (stable_sort): New function.
1111
1112 2005-04-24  Hrvoje Niksic  <hniksic@xemacs.org>
1113
1114         * connect.c (retryable_socket_connect_error): Return 0 for
1115         ENETUNREACH and EHOSTUNREACH.
1116
1117 2005-04-23  Hrvoje Niksic  <hniksic@xemacs.org>
1118
1119         * cmpt.c: Reenable the memmove implementation for systems that
1120         lack it.
1121
1122         * http.c (gethttp): Store the "authorized" state of the persistent
1123         connection.
1124         (request_remove_header): New function.
1125         (gethttp): Don't send the "Basic" authentication if the connection
1126         is already authorized.
1127
1128 2005-04-23  Hrvoje Niksic  <hniksic@xemacs.org>
1129
1130         * utils.c (base64_encode): Treat input as unsigned chars.
1131         Required for correct encoding of binary stuff.
1132
1133 2005-04-23  Hrvoje Niksic  <hniksic@xemacs.org>
1134
1135         * http-ntlm.c: Format the function definitions in an
1136         ansi2knr-friendly fashion.
1137
1138 2005-04-22  Hrvoje Niksic  <hniksic@xemacs.org>
1139
1140         * http.c (gethttp): Handle multiple WWW-Authentication headers,
1141         only one of which is recognized.  Those are sent by IIS with NTLM
1142         authorization.
1143         (create_authorization_line): Propagate information whether
1144         authorization is finished.
1145         (gethttp): Only stop authorization when it's really finished, not
1146         after fixed two steps.
1147
1148 2005-04-21  Hrvoje Niksic  <hniksic@xemacs.org>
1149
1150         * gen_sslfunc.c (ssl_init): Fix warning message text; mark the
1151         message as translatable.
1152
1153 2005-04-21  Hrvoje Niksic  <hniksic@xemacs.org>
1154
1155         * main.c (print_help): Print the EGD option outside the cluster of
1156         SSL options.
1157
1158 2005-04-21  Hrvoje Niksic  <hniksic@xemacs.org>
1159
1160         * http-ntlm.c (ntlm_output): Fix setting the domain.
1161         Suggested by Sami Krank.
1162
1163 2005-04-20  Mauro Tortonesi  <mauro@ferrara.linux.it>
1164
1165         * connect.c: Set IPV6_V6ONLY socket option when -6 switch is used.
1166
1167 2005-04-20  FUJISHIMA Satsuki  <sf@FreeBSD.org>
1168
1169         * http.c (request_set_header): Fix the check whether a new header
1170         needs to be allocated.
1171
1172 2005-04-18  Hrvoje Niksic  <hniksic@xemacs.org>
1173
1174         * utils.c (base64_encode): Use the parameter order that makes more
1175         sense.  Return the length of the base64 written.  Updated all
1176         callers.
1177
1178 2005-04-17  Hrvoje Niksic  <hniksic@xemacs.org>
1179
1180         * http.c (request_set_header): Free NAME when VALUE is NULL and
1181         freeing the header name is requested.
1182
1183 2005-04-17  Hrvoje Niksic  <hniksic@xemacs.org>
1184
1185         * snprintf.c (fmtstr): Declare VALUE as const char *.
1186         Based on patch by Russ Allbery.
1187
1188 2005-04-17  Hrvoje Niksic  <hniksic@xemacs.org>
1189
1190         * snprintf.c (fmtfp): More correct handling of significant digit
1191         count with %g -- 0.002 has one significant digit, not three.
1192
1193 2005-04-16  Hrvoje Niksic  <hniksic@xemacs.org>
1194
1195         * retr.c (fd_read_body): Respect read timeout with non-interactive
1196         or no progress gauge -- treat ETIMEDOUT specially only when
1197         progress_interactive.
1198         Reported by FUJISHIMA Satsuki.
1199
1200 2005-04-16  FUJISHIMA Satsuki  <sf@FreeBSD.org>
1201
1202         * http.c (gethttp): Don't use HTTP/1.0 persistent connections over
1203         proxy.
1204
1205 2005-04-16  Hrvoje Niksic  <hniksic@xemacs.org>
1206
1207         * snprintf.c: Use the PARAMS macro to handle prototypes.  Write
1208         function definitions in the ansi2knr-friendly way.
1209         (fmtstr): If string precision is specified, don't read VALUE past
1210         it.
1211         (dopr): Actually print %g and %e formats.
1212         (fmtfp): Fix a bug that caused 0.01 to be printed as 0.1.
1213         (fmtfp): Use LLONG in floating point conversions to be able to
1214         convert more digits.
1215         (fmtfp): Interpret precision as number of significant digits with
1216         %g.
1217         (fmtfp): Omit trailing decimal zeros with %g.
1218
1219         * snprintf.c: Don't include <ctype.h> because none of it is used.
1220         Include strings.h/string.h, as per Autoconf.
1221
1222 2005-04-15  Hrvoje Niksic  <hniksic@xemacs.org>
1223
1224         * ptimer.c: Use _POSIX_TIMERS - 0 > 0, which handles the case when
1225         _POSIX_TIMERS is defined but empty, as well as the case when it is
1226         undefined.  Do the same with the check for _POSIX_MONOTONIC_CLOCK.
1227         Suggested by Larry Jones.
1228
1229 2005-04-15  Hrvoje Niksic  <hniksic@xemacs.org>
1230
1231         * ptimer.c: Check that _POSIX_TIMERS is defined as well as > 0.
1232         Problem reported by Steven M. Schweda.
1233
1234 2005-04-14  Hrvoje Niksic  <hniksic@xemacs.org>
1235
1236         * http.c (skip_short_body): Print the skipped body data in debug
1237         mode.
1238         (skip_short_body): Don't skip more than 4k of body data.
1239         (skip_short_body): Return whether the skipping was successful.
1240         (gethttp): If skip_short_body failed, invalidate the connection.
1241
1242 2005-04-12  Gisle Vanem  <giva@bgnett.no>
1243
1244         * ftp.c (getftp): Ditto.
1245
1246         * http.c (gethttp): Open the output file in binary mode.
1247
1248 2005-04-11  Hrvoje Niksic  <hniksic@xemacs.org>
1249
1250         * hash.c: Conditionalize including config.h on HAVE_CONFIG_H
1251         instead of on STANDALONE.
1252
1253 2005-04-11  Hrvoje Niksic  <hniksic@xemacs.org>
1254
1255         * gen_sslfunc.c (ssl_print_errors): Made static.
1256         (ssl_print_errors): Eliminate potentially dangerous fixed-size
1257         error buffer.  Passing NULL to ERR_error_string causes it to use
1258         its own static buffer, which is fine for our purposes.
1259
1260         * gen_sslfunc.c: Include gen_sslfunc.h.  Make the declarations of
1261         ssl_init and ssl_conect match the actual definitions.
1262         (ssl_connect): Simply return a boolean, the SSL context is no
1263         longer useful as a return value.
1264
1265         * retr.c: Don't include SSL headers; we don't need them.
1266
1267 2005-04-11  Hrvoje Niksic  <hniksic@xemacs.org>
1268
1269         * config-post.h: Don't define _VA_LIST under Solaris; it breaks
1270         compilation with GCC 3.4 under Solaris 10.  (It was defined to
1271         avoid a warning with previous versions of GCC.)
1272
1273 2005-04-11  Hrvoje Niksic  <hniksic@xemacs.org>
1274
1275         * xmalloc.c (register_ptr): Warn the user to increase SZ prior to
1276         aborting.
1277
1278 2005-04-11  Hrvoje Niksic  <hniksic@xemacs.org>
1279
1280         * convert.c (convert_cleanup): Free converted_files.
1281
1282 2005-04-10  Hrvoje Niksic  <hniksic@xemacs.org>
1283
1284         * wget.h (DEBUGP): Use __builtin_expect to give a hint to GCC that
1285         opt.debug is false in the vast majority of cases.
1286
1287 2005-04-10  Hrvoje Niksic  <hniksic@xemacs.org>
1288
1289         * config-post.h: Declare alloca as void *, not char *.
1290
1291 2005-04-09  Hrvoje Niksic  <hniksic@xemacs.org>
1292
1293         * recur.c (download_child_p): When -p is used, (temporarily)
1294         ignore accept/reject rules for HTMLs, even when they are at the
1295         maximum recursion depth.  That is because with -p we are, if
1296         necessary, overstepping the max. depth to get the requisites.
1297
1298 2004-06-12  Larry Jones <lawrence.jones@ugsplm.com>
1299
1300         * recur.c (download_child_p): Correct the logic in check number 6:
1301         test opt.reclevel (not DEPTH) against INFINITE_RECURSION.
1302
1303 2005-04-09  Hrvoje Niksic  <hniksic@xemacs.org>
1304
1305         * url.c: Use "static const" in preference to "const static".
1306         Sun's cc warns that "storage class after type is obsolescent".
1307
1308         * url.c (urlchr_table): Don't mark ~ as unsafe, too many broken
1309         web sites are confused when ~ is changed to %7E.  Their servers
1310         redirect /%7Efoo/ to /~foo/, which Wget again accesses using %7E,
1311         causing further redirections, therefore looping infinitely.  See
1312         Debian bug #301624 for an example.
1313
1314 2005-04-09  Hrvoje Niksic  <hniksic@xemacs.org>
1315
1316         * alloca.c: Include wget.h to be able to use xmalloc.  In addition
1317         to defining malloc to xmalloc, also define free to xfree.
1318
1319 2005-04-09  Hrvoje Niksic  <hniksic@xemacs.org>
1320
1321         * http-ntlm.c (ntlm_output): Use "char", not "unsigned char" for
1322         ntlmbuf.  Our base64 functions accept char anyway.
1323         (ntlm_output): Join up the format string, since we nominally
1324         support K&R compilers.
1325         (ntlm_output): Ditto.
1326
1327 2005-04-08  Hrvoje Niksic  <hniksic@xemacs.org>
1328
1329         * ptimer.c: Use Windows timers under Cygwin, whose POSIX timer
1330         implementation is incomplete.
1331
1332 2005-04-08  Hrvoje Niksic  <hniksic@xemacs.org>
1333
1334         * ptimer.c (struct ptimer): Remove the unused initialized field.
1335
1336         * ptimer.c: Renamed function parameters from WT (which used to
1337         stand for wget_timer or wtimer) to PT.
1338
1339 2005-04-08  Hrvoje Niksic  <hniksic@xemacs.org>
1340
1341         * ptimer.c (posix_init): Be smarter about choosing clocks.  In
1342         decreasing order of preference, use CLOCK_MONOTONIC,
1343         CLOCK_HIGHRES, and CLOCK_REALTIME.
1344         (ptimer_allocate): Removed.
1345
1346         * ptimer.c: Refactor the code by cleanly separating the
1347         architecture-dependent code from the architecture-independent
1348         code.
1349
1350 2005-04-08  Hrvoje Niksic  <hniksic@xemacs.org>
1351
1352         * ptimer.c (ptimer_init): Explicitly check that
1353         _POSIX_MONOTONIC_CLOCK is *both* defined and >=0.  (Undefined
1354         symbols are >=0.)
1355
1356 2005-04-08  Hrvoje Niksic  <hniksic@xemacs.org>
1357
1358         * ptimer.c (ptimer_diff): Fix typo affecting Windows build.
1359
1360 2005-04-08  Hrvoje Niksic  <hniksic@xemacs.org>
1361
1362         * ptimer.c (ptimer_init): In fact, _POSIX_MONOTONIC_CLOCK needs to
1363         be >= 0.
1364
1365         * ptimer.c (ptimer_init): Check whether _POSIX_MONOTONIC_CLOCK is
1366         defined instead of whether it's greater than 0.  glibc defines it
1367         to 0, but still makes it available via sysconf.
1368
1369 2005-04-08  Hrvoje Niksic  <hniksic@xemacs.org>
1370
1371         * mswindows.c (str_to_int64): Rename OVERFLOW and UNDERFLOW to
1372         INT64_OVERFLOW and INT64_UNDERFLOW, since those names are used.
1373
1374 2005-04-07  Hrvoje Niksic  <hniksic@xemacs.org>
1375
1376         * ptimer.c: New file.  Move the "wtimer" functions from utils.c to
1377         this file and rename them to ptimer_.
1378
1379 2005-04-07  Hrvoje Niksic  <hniksic@xemacs.org>
1380
1381         * host.c (NO_ADDRESS): Define NO_ADDRESS only after the system
1382         headers have been included.
1383
1384 2005-04-06  Hrvoje Niksic  <hniksic@xemacs.org>
1385
1386         * http.c (pconn): Include NTLM data, which is per-connection.
1387         (known_authentication_scheme_p): Recognize NTLM authorization.
1388         (create_authorization_line): Call ntlm_input and ntlm_output.
1389
1390         * http-ntlm.c: New file, donated by Daniel Stenberg and originally
1391         written for curl, heavily modified for Wget.
1392
1393         * utils.c (base64_encode): Relocated from http.c, since it is now
1394         used by http-ntlm.c, and will possibly be used elsewhere.
1395         (base64_decode): New function, originally based on code from GNU
1396         recode.
1397
1398 2005-04-02  Hrvoje Niksic  <hniksic@xemacs.org>
1399
1400         * ftp.c (ftp_loop): Ditto.
1401
1402         * ftp-basic.c (ftp_pasv): Use the xzero shorthand for memset(0).
1403         (ftp_lpsv): Ditto.
1404
1405 2005-04-05  Mauro Tortonesi  <mauro@ferrara.linux.it>
1406
1407         * Makefile.in: removed string_t.c from list of source files.
1408
1409 2005-04-04  Mauro Tortonesi  <mauro@ferrara.linux.it>
1410
1411         * string_t.c: Removed.
1412
1413         * string_t.h: Removed.
1414
1415 2005-04-02  Hrvoje Niksic  <hniksic@xemacs.org>
1416
1417         * url.c (rewrite_shorthand_url): Only accept recognized schemes.
1418         That way "foo:80" will correctly be rewritten to "http://foo:80"
1419         instead of left unchanged and ultimately rejected because of
1420         "unsupported scheme foo".
1421
1422 2005-03-31  Hrvoje Niksic  <hniksic@xemacs.org>
1423
1424         * utils.c (number_to_string): Avoid explicit 64-bit constants;
1425         construct them by multiplication at compile-time.
1426
1427         * utils.c, elsewhere: Don't append "L" to 32-bit integer
1428         constants; we aren't really compilable on 16-bit systems anyway.
1429
1430         * hash.c (prime_size): Remove primes larger than 2^31, but include
1431         2^31-1, which is prime.
1432
1433 2005-03-30  Hrvoje Niksic  <hniksic@xemacs.org>
1434
1435         * utils.c (string_set_to_array): New function.
1436
1437         * convert.c: Replace the use of "slists" with sets/hash-tables,
1438         which in fact suit the intended purpose much better.
1439         downloaded_html_list is removed altogether.
1440
1441 2005-03-29  Hrvoje Niksic  <hniksic@xemacs.org>
1442
1443         * ftp.h (enum): Rename GLOBALL, GETALL, and GETONE to
1444         GLOB_GLOBALL, GLOB_GETALL, and GLOB_GETONE to avoid conflict with
1445         Linux headers.
1446
1447 2005-03-29  Hrvoje Niksic  <hniksic@xemacs.org>
1448
1449         * utils.c (numdigit): More correct handling of negative numbers.
1450
1451 2005-03-21  Hrvoje Niksic  <hniksic@xemacs.org>
1452
1453         * http.c (gethttp): Print the human-readable size.
1454
1455         * ftp.c (getftp): Print the human-readable size of the file to be
1456         downloaded.
1457
1458         * utils.c (human_readable): New function.
1459
1460         * utils.c: Renamed "legible" to "with_thousand_seps",
1461         "legible_large_int" to "with_thousand_seps_large", and "legible_1"
1462         to "add_thousand_seps".
1463
1464 2005-03-21  Hrvoje Niksic  <hniksic@xemacs.org>
1465
1466         * http.c (gethttp): Inhibit persistent connections when talking to
1467         proxies, as mandated by RFC 2068.
1468
1469 2005-03-20  Hrvoje Niksic  <hniksic@xemacs.org>
1470
1471         * url.c (unescape_single_char): New function.
1472         (url_escape_dir): Use it to unescape slashes in directory
1473         components.
1474         (url_string): Escape unsafe chars in host name, except for the ':'
1475         charaters, which can appear in IPv6 addresses.
1476
1477         * main.c (main): Don't access the cookie jar directly.
1478
1479         * log.c (escnonprint_internal): Correctly calculate the needed
1480         string size.  Don't forget the buffer's new size after having
1481         reallocated it.
1482         (log_cleanup): New function.  Free the escnonprint ring data.
1483
1484         * init.c (cleanup): Don't free the cookie jar explicitly, it is
1485         now done by http_cleanup.
1486         (cleanup): opt.user_headers is now a vector, free it with
1487         free_vec.
1488
1489         * http.c (gethttp): Make sure to free the request data, the status
1490         message, and the response data before returning from the function.
1491         (save_cookies): New function.
1492         (http_cleanup): Free the cookie jar here.
1493
1494         * hash.c: Renamed string_hash to hash_string and ptrhash to
1495         hash_pointer.  Exported hash_pointer.
1496
1497         * xmalloc.c: Organized malloc_table (previously malloc_debug) as a
1498         simple EQ hash table.  register_ptr and unregister_ptr are now of
1499         O(1) complexity.
1500
1501         * xmalloc.c: Renamed "*_debug" to debugging_* and "*_real" to
1502         checking_*.
1503
1504 2005-03-12  Hrvoje Niksic  <hniksic@xemacs.org>
1505
1506         * utils.c (debug_test_md5): Moved to gen-md5.c.
1507
1508         * mswindows.h: Don't declare inet_ntop, since we don't use it.
1509
1510         * mswindows.h: For consistency, also wrap closesocket, it being
1511         a Winsock call.
1512
1513         * mswindows.h: Don't declare sleep and usleep; we're defining
1514         xsleep now.
1515
1516         * mswindows.h (mkdir): Don't special-case Borland C, _mkdir
1517         works there as well.
1518
1519         * host.c: Don't include winsock header files; the correct ones
1520         are already included by mswindows.h.
1521
1522         * mswindows.c (xsleep): Round toward the nearest millisecond
1523         in an attempt to avoid average short sleeps.
1524
1525         * utils.c (wtimer_granularity): Report correct values for
1526         Windows timers and for high-resolution timers.
1527
1528         * utils.c (wtimer_initialize_once): New function, called to
1529         initialize the timer frequency.
1530
1531         * utils.c: Replace the use of GetSystemTime with high-resolution
1532         counters under Windows.  When high-resolution counters are
1533         unavailable, use GetTickCount().
1534
1535 2005-03-15  Hrvoje Niksic  <hniksic@xemacs.org>
1536
1537         * retr.c (fd_read_body): Undo the 2004-11-18 change.  Instead,
1538         always be "exact".
1539
1540 2005-03-17  Hrvoje Niksic  <hniksic@xemacs.org>
1541
1542         * ftp-basic.c (ftp_login): Don't free the string if ftp_response
1543         returned an error status because the line didn't get allocated in
1544         the first place.
1545
1546 2005-03-15  Hrvoje Niksic  <hniksic@xemacs.org>
1547
1548         * http.c (read_http_response_head): Limit the response size to 64k
1549         bytes.
1550
1551         * retr.c (fd_read_hunk): Accept a MAXSIZE argument that limits the
1552         number of bytes the function is allowed to allocate.
1553         (fd_read_line): Limit the line to 4096 bytes.
1554
1555 2005-03-12  Hrvoje Niksic  <hniksic@xemacs.org>
1556
1557         * wget.h: Include options.h after wgint has been defined.
1558
1559         * options.h (struct options): Declare options processed with
1560         cmd_bytes as wgint, not long.
1561
1562 2005-03-18  Hrvoje Niksic  <hniksic@xemacs.org>
1563
1564         * init.c (cmd_file): Use concat_strings.
1565
1566         * http.c (basic_authentication_encode): Use concat_strings.
1567
1568         * ftp-ls.c (ftp_index): Use concat_strings.
1569
1570         * ftp-basic.c (ftp_request): Use concat_strings.
1571
1572         * utils.c (concat_strings): New function.
1573
1574 2005-03-12  Hrvoje Niksic  <hniksic@xemacs.org>
1575
1576         * init.c (simple_atof): Handle negative numbers; skip whitespace
1577         before the number.
1578         (simple_atoi): Ditto.  Also, check for overflow and underflow.
1579         (cmd_number): Bail out on negative numbers.
1580         (parse_bytes_helper): Ditto.
1581
1582 2005-03-06  Hrvoje Niksic  <hniksic@xemacs.org>
1583
1584         * http.c (gethttp): Handle multiple Set-Cookie headers sent by
1585         remote server.
1586
1587 2005-03-06  Hrvoje Niksic  <hniksic@xemacs.org>
1588
1589         * init.c (defaults): Use passive FTP by default.
1590
1591 2005-03-06  Hrvoje Niksic  <hniksic@xemacs.org>
1592
1593         * mswindows.c: Provide wrappers to Winsock functions that set
1594         errno to WSAGetLastError() in case of failure.  Also provide a
1595         Windows-specific version of strerror.
1596
1597         * mswindows.h: Wrap calls to socket, bind, connect, recv, send,
1598         select, getsockname, getpeername, and setsockopt.
1599
1600 2005-03-06  Hrvoje Niksic  <hniksic@xemacs.org>
1601
1602         * url.c (url_parse): Reject port numbers larger than 65535.  We
1603         also check for overflow while parsing port numbers.
1604
1605 2005-03-06  Hrvoje Niksic  <hniksic@xemacs.org>
1606
1607         * utils.c (read_file): Don't use wgint for file size; LFS won't
1608         work since the file is mmap'ed as a whole.
1609
1610         * options.h: Don't include stdio.h.
1611
1612         * log.c: Ditto.
1613
1614         * init.c: Disambiguate assignment from non-zero test to avoid
1615         Borland C warning.
1616
1617         * http.c (response_new): Don't needlessly post-increment count.
1618
1619         * hash.c: Include stdio.h.
1620
1621         * gnu-md5.h: Don't include stdio.h.
1622
1623         * getopt.h (struct option): Always use const.
1624
1625         * ftp.c (getftp): Avoid unnecessary assignment to RES to avoid
1626         Borland C warning.
1627
1628         * ftp-ls.c: Disambiguate assignment from non-zero test to avoid
1629         Borland C warning.
1630
1631         * cmpt.c (strptime_internal): Don't initialize rp_backup when
1632         !_NL_CURRENT to avoid Borland C warning.
1633
1634 2005-03-06  Hrvoje Niksic  <hniksic@xemacs.org>
1635
1636         * utils.c (fopen_excl): Fix parse error when O_BINARY is
1637         available.
1638
1639 2005-03-05  Hrvoje Niksic  <hniksic@xemacs.org>
1640
1641         * url.c (url_file_name): Don't allow hosts named ".." to be
1642         appended as path elements.
1643
1644 2005-03-03  Hrvoje Niksic  <hniksic@xemacs.org>
1645
1646         * retr.c (retrieve_url): Escape location header.
1647
1648         * http.c (print_server_response_1): Escape server response when
1649         printing it.
1650         (gethttp): Escape host name, status message, location header, and
1651         content type.
1652         (http_loop): Escape error message from server.
1653
1654         * host.c (lookup_host): Escape host name when printing it.
1655
1656         * ftp.c (getftp): Escape user name when printing it.
1657         (getftp): Escape remote file and directory for printing.
1658         (getftp): Escape server listing when printing it.
1659         (ftp_retrieve_list): Escape link name and file name.
1660         (ftp_retrieve_glob): Escape file name.
1661
1662         * ftp-basic.c (ftp_response): Escape server response when printing
1663         it.
1664
1665         * cookies.c (parse_set_cookies): Escape the cookie field when
1666         printing it.
1667         (parse_set_cookies): Escape contents of remote header.
1668         (cookie_handle_set_cookie): Escape host name and cookie domain.
1669
1670         * connect.c (connect_to_ip): Escape the host name.
1671
1672         * log.c (escnonprint): New function, used for printing strings
1673         coming from the server that possibly contain non-ASCII characters.
1674         (escnonprint_uri): Ditto.
1675
1676 2005-02-24  Hrvoje Niksic  <hniksic@xemacs.org>
1677
1678         * ftp.c (getftp): Ditto.
1679
1680         * http.c (gethttp): When we're not supposed to overwrite files,
1681         use fopen_excl to open the file and recompute the file name.
1682
1683         * log.c (redirect_output): Use unique_create to avoid a race
1684         condition.
1685
1686         * mswindows.c (fake_fork_child): Use unique_create.
1687
1688         * utils.c (fopen_excl): New function that opens a stdio stream
1689         with the O_EXCL flag (where available).
1690         (unique_create): New function, like unique_name, but also creating
1691         the file and returning a file pointer.
1692         (fork_to_background): Use unique_create to create the file
1693         immediately to avoid race condition with multiple instances of
1694         wget -b.
1695
1696 2005-02-24  Hrvoje Niksic  <hniksic@xemacs.org>
1697
1698         * host.c (lookup_host): Test for AI_ADDRCONFIG directly, instead
1699         of checking for HAVE_GETADDRINFO_AI_ADDRCONFIG.
1700
1701 2005-02-23  Hrvoje Niksic  <hniksic@xemacs.org>
1702
1703         * host.c (is_valid_ipv6_address): Move here from url.c.
1704         (lookup_host): If the address is numeric, don't print the
1705         "resolving..." line, don't set up DNS timeouts, and set the
1706         AI_NUMERICHOST hint, where available.
1707
1708 2005-02-26  Gisle Vanem  <giva@bgnett.no>
1709
1710         * utils.c: Use the nnnLL syntax under GCC.  Define struct_stat to
1711         struct _stati64 under __MINGW32__ as well as under MS VC.
1712
1713 2005-02-26  Hrvoje Niksic  <hniksic@xemacs.org>
1714
1715         * utils.c: Use the nnnI64 syntax for __int64 constants under all
1716         Windows compilers.
1717         (SPRINTF_WGINT): Use "%I64" under all Windows compilers.
1718
1719         * mswindows.h (WGINT_MAX): Use the nnnI64 syntax for
1720         __int64 constants under all Windows compilers.
1721         (struct_stat): Use `struct stati64' under Borland C.
1722         (fstat): Don't redefine to _fstati64 under Borland.
1723
1724         * mswindows.c: Define str_to_int64 under Borland C as well as
1725         under (older) Visual C.
1726
1727 2005-02-25  Hrvoje Niksic  <hniksic@xemacs.org>
1728
1729         * ftp.c (getftp): Initialize err to suppress compiler warning.
1730
1731 2005-02-24  Hrvoje Niksic  <hniksic@xemacs.org>
1732
1733         * ftp.c (ftp_expected_bytes): Fix bug that caused infloop because
1734         of not correctly skipping the '(' character.
1735
1736 2005-02-24  Hrvoje Niksic  <hniksic@xemacs.org>
1737
1738         * mswindows.c (wget_ftello): Removed.
1739
1740         * mswindows.h: Remove bogus definition of stat.
1741         (wget_ftello): Remove the leftover ftello replacement.
1742
1743 2005-02-20  Hrvoje Niksic  <hniksic@xemacs.org>
1744
1745         * mswindows.c (wget_ftello): Wget's replacement for ftello.
1746
1747         * utils.c (file_size): Use ftello where available.
1748
1749         * ftp-ls.c (ftp_parse_unix_ls): Use str_to_wgint to parse the file
1750         size.
1751         (ftp_parse_winnt_ls): Ditto.
1752
1753         * ftp-basic.c (ftp_size): Use str_to_wgint to convert number to
1754         wgint; pass 10 instead of 0 as the BASE argument.
1755
1756         * ftp.c (ftp_expected_bytes): Use str_to_wgint to parse the file
1757         size.
1758
1759         * sysdep.h (LARGE_INT_FMT): Use __int64 as LARGE_INT on
1760         MSVC/Windows; print it with "%I64".
1761
1762         * wget.h: Define a `wgint' type, normally aliased to (the possibly
1763         64-bit variant of) off_t.
1764
1765         * all: Use `wgint' instead of `long' for numeric variables that
1766         can hold file sizes.
1767
1768         * utils.c (number_to_string): Support printing of `wgint'
1769         argument.
1770         (number_to_static_string): New function.
1771
1772         * all: Replace printf("%ld", long_value) with printf("%s",
1773         number_to_static_string(wgint_value)).
1774
1775 2005-02-18  Mauro Tortonesi <mauro@ferrara.linux.it>
1776
1777         * main.c: Added the --ftp-passwd command line option.
1778
1779         * init.c: Renamed command passwd to ftppasswd.
1780
1781 2005-02-11  Mauro Tortonesi <mauro@ferrara.linux.it>
1782
1783         * string_t.c: Fixed a bug in do_escape and triggered escape of
1784         backslashes in string_escape to avoid ambiguities in the result
1785         string.
1786
1787 2005-02-10  Mauro Tortonesi <mauro@ferrara.linux.it>
1788
1789         * string.h: Renamed to string_t.h to fix a compilation conflict
1790         with the string.h header in the standard C library.
1791
1792         * string.c: Renamed to string_t.c for consistency with string.h.
1793
1794         * string_t.c: Ditto.
1795
1796         * string_t.h: Ditto.
1797
1798 2004-12-31  Mauro Tortonesi <mauro@ferrara.linux.it>
1799
1800         * string.c: New file.
1801
1802         * string.h: New file.
1803
1804         * Makefile.in: Added string.c to the list of modules to compile.
1805
1806         * main.c: Updated copyright.
1807
1808 2004-11-18  Ulf Harnhammar <ulf.harnhammar.9485@student.uu.se>
1809
1810         * ftp-ls.c: Fixed a problem in ftp_parse_winnt_ls that could allow a
1811         malicious remote FTP server to crash wget.
1812
1813 2004-11-18  Hans-Andreas Engel <engel@node.ch>
1814
1815         * http.c: Enable --convert-links (-k) when a single page is downloaded
1816         via --output-document (-O).
1817
1818 2004-11-18  Mauro Tortonesi <mauro@deepspace6.net>
1819
1820         * connect.c: Minor correction to the comment in front of fd_peek.
1821
1822 2004-11-18  Leonid Petrov <nouser@lpetrov.net>
1823
1824         * retr.c: Fix a timeout problem in fd_read_body when using http_proxy.
1825
1826 2004-11-15  YAMAZAKI Makoto <Yamazaki.Makoto@fujixerox.co.jp>
1827
1828         * netrc.c: Fix termination by assertion bug in netrc parsing.
1829
1830 2004-05-09  David Fritz  <zeroxdf@att.net>
1831
1832         * mswindows.c (fake_fork): Pass entire command line to the child
1833         process.
1834
1835 2004-03-31  Hrvoje Niksic  <hniksic@xemacs.org>
1836
1837         * http.c (gethttp): Fix typo: SCHEME_SSL -> SCHEME_HTTPS.
1838
1839 2004-03-30  Hrvoje Niksic  <hniksic@xemacs.org>
1840
1841         * http.c (gethttp): Send the Proxy-Authorization header over
1842         non-SSL connections too.
1843
1844 2004-03-25  David Fritz  <zeroxdf@att.net>
1845
1846         * mswindows.c (fake_fork_child): Ignore error code when
1847         OpenFileMapping() fails; assume it failed because the object does
1848         not exist.
1849
1850 2004-03-24  David Fritz  <zeroxdf@att.net>
1851
1852         * mswindows.c (fake_fork): New function.
1853
1854         * mswindows.c (fork_to_background): Use it.
1855
1856 2004-03-19  David Fritz  <zeroxdf@att.net>
1857
1858         * mswindows.c (ws_hangup): Incorporate old fork_to_background()
1859         code.  Add event name argument.
1860         (fork_to_backgorund): Now a simple wrapper around ws_hangup().
1861         (ws_handler): Correctly handle the case when neither CTRLC_BACKGND
1862         nor CTRLBREAK_BACKGND are defined.  Don't bother handling close,
1863         logoff, or shutdown events.  Call ws_hangup() with the correct
1864         event name; don't assume it was CTRL+Break.
1865
1866 2004-03-19  Hrvoje Niksic  <hniksic@xemacs.org>
1867
1868         * url.c (url_parse): Decode %HH sequences in host name.
1869
1870 2004-03-04  Hrvoje Niksic  <hniksic@xemacs.org>
1871
1872         * convert.c (local_quote_string): Quote "#" as "%23" and "%" as
1873         "%25" when creating links to local files.
1874
1875 2004-03-02  David Fritz  <zeroxdf@att.net>
1876
1877         * mswindows.c (ws_percenttitle): Guard against future changes by
1878         doing nothing if the proper variables have not been initialized.
1879         Clamp percentage value.
1880
1881 2004-03-04  Gisle Vanem  <giva@bgnett.no>
1882
1883         * retr.c (fd_read_body): Don't change console title if quiet.
1884
1885 2004-02-25  David Fritz  <zeroxdf@att.net>
1886
1887         * mswindows.c (set_sleep_mode): Remove argument and return value.
1888         Call GetModuleHandle() instead of LoadLibrary()/FreeLibrary() for
1889         kernel32.dll.  Use typedef for function-pointer.  Don't cast
1890         l-value.  Don't use dereference operator when calling through
1891         function-pointer.
1892         (ws_startup): Update call to set_sleep_mode().
1893         (ws_cleanup): Remove call to set_sleep_mode().
1894
1895 2004-02-23  David Fritz  <zeroxdf@att.net>
1896
1897         * http.c (http_loop): Ditto.
1898
1899         * ftp.c (ftp_loop_internal): Update call to ws_changetitle().
1900
1901         * main.c (main): Don't bother calling ws_changetitle().
1902
1903         * mswindows.h (ws_changetitle): Update prototype.
1904
1905         * mswindows.c (ws_changetitle): Remove second argument.  Use
1906         xfree_null().
1907         (ws_percenttitle): Only update title when percentage has changed.
1908
1909 2004-02-23  David Fritz  <zeroxdf@att.net>
1910
1911         * mswindows.h: Ditto.
1912
1913         * mswindows.c: Misc. formatting/comment tweaks throughout.
1914
1915 2004-02-20  David Fritz  <zeroxdf@att.net>
1916
1917         * main.c (print_help): Remove call to ws_help().
1918
1919         * mswindows.c (ws_help): Remove.
1920
1921         * mswindows.h (ws_help): Remove.
1922
1923 2004-02-16  David Fritz  <zeroxdf@att.net>
1924
1925         * init.c (home_dir): Use aprintf() instead of xmalloc()/sprintf().
1926         Under Windows, if $HOME is not defined, use the directory that
1927         contains the Wget binary instead of hard-coded `C:\'.
1928         (wgetrc_file_name): Under Windows, look for $HOME/.wgetrc then, if
1929         not found, look for wget.ini in the directory of the Wget binary.
1930
1931         * mswindows.c (ws_mypath): Employ slightly more robust methodology.
1932         Strip trailing path separator.
1933
1934 2004-02-06  Hrvoje Niksic  <hniksic@xemacs.org>
1935
1936         * http.c (gethttp): Respect --ignore-length.
1937         (gethttp): Inhibit keep-alive if --ignore-length is specified.
1938
1939 2004-02-06  Hrvoje Niksic  <hniksic@xemacs.org>
1940
1941         * connect.c (sockaddr_set_data): Zero out
1942         sockaddr_in/sockaddr_in6.  Apparently BSD-derived stacks need this
1943         when binding a socket to local address.
1944
1945 2004-02-04  Hrvoje Niksic  <hniksic@xemacs.org>
1946
1947         * hash.c: Make the file compilable outside Wget source tree when
1948         -DSTANDALONE is used.
1949
1950 2004-01-29  Hrvoje Niksic  <hniksic@xemacs.org>
1951
1952         * utils.c (determine_screen_width): Return 0 if not running on
1953         Windows or on a TIOCGWINSZ-capable system.
1954
1955 2004-01-28  David Fritz  <zeroxdf@att.net>
1956
1957         * utils.c (determine_screen_width): Correctly determine console
1958         width under Windows.
1959
1960 2004-01-28  Christian Biere  <christianbiere@gmx.de>
1961
1962         * progress.c (bar_set_params): Fixed syntax error when HAVE_ISATTY
1963         was undefined.
1964
1965         * ftp.c (ftp_loop_internal): Allocate a larger buffer in case
1966         "try" gets translated to something large.  Ditto in http_loop in
1967         http.c.
1968
1969         * http.c (response_header_copy): Don't write to buf[BUFSIZE].
1970
1971         * ftp-opie.c (skey_response): Eliminate unnecessary string
1972         concatenation; just call gen_md5_update twice.
1973
1974 2004-01-25  Hrvoje Niksic  <hniksic@xemacs.org>
1975
1976         * utils.c (xsleep): Don't call usleep with values larger than
1977         1,000,000.
1978
1979 2003-12-16  Hrvoje Niksic  <hniksic@xemacs.org>
1980
1981         * http.c (gethttp): Fix generation of `Content-Length'.
1982
1983 2003-12-15  Gisle Vanem  <giva@bgnett.no>
1984
1985         * url.c (url_skip_credentials): Fixed return value; 'url' if no
1986         credentials.
1987
1988 2003-12-14  Hrvoje Niksic  <hniksic@xemacs.org>
1989
1990         * url.c (url_skip_credentials): Return a pointer directly.
1991
1992 2003-12-14  Hrvoje Niksic  <hniksic@xemacs.org>
1993
1994         * url.c (url_file_name): Ditto.
1995         (parse_errors): Ditto.
1996
1997         * retr.c (retr_rate): Ditto.
1998
1999         * progress.c (create_image): Ditto.
2000
2001         * netrc.c (parse_netrc): Ditto.
2002
2003         * main.c (struct cmdline_option): Ditto.
2004         (redirect_output_signal): Ditto.
2005
2006         * init.c (commands): Ditto.
2007
2008         * ftp-ls.c (ftp_index): Ditto.
2009
2010         * cookies.c (check_domain_match): Declare the pointer to a literal
2011         string as `const'.
2012
2013 2003-12-12  Hrvoje Niksic  <hniksic@xemacs.org>
2014
2015         * retr.c (fd_read_body): Pass total size to progress_create, not
2016         the remaining amount.
2017
2018 2003-12-12  Hrvoje Niksic  <hniksic@xemacs.org>
2019
2020         * retr.c (fd_read_body): Don't fiddle with "interactive timeout"
2021         if read timeout is unset.
2022
2023 2003-12-12  Hrvoje Niksic  <hniksic@xemacs.org>
2024
2025         * connect.c (bind_local): Don't set the IPV6_V6ONLY option on the
2026         socket.
2027
2028 2003-12-06  Hrvoje Niksic  <hniksic@xemacs.org>
2029
2030         * url.c (url_file_name): Respect the setting of
2031         opt.protocol_directories.
2032
2033         * main.c (main): Only check for ret=='?' when longindex is unset.
2034         (option_data): New option --protocol-directories.
2035
2036 2003-12-06  Hrvoje Niksic  <hniksic@xemacs.org>
2037
2038         * ftp.c (getftp): Ditto.
2039
2040         * http.c (gethttp): Correctly calculate bandwidth as total data
2041         read divided with download time.
2042
2043         * retr.c (fd_read_body): Separate the return values for data
2044         written and read.
2045
2046 2003-12-05  Hrvoje Niksic  <hniksic@xemacs.org>
2047
2048         * http.c (H_REDIRECTED): Respect the HTTP/1.1 "303 See Other"
2049         response code.
2050         Suggested by Dan Razzell.
2051
2052 2003-11-30  Hrvoje Niksic  <hniksic@xemacs.org>
2053
2054         * retr.c (fd_read_body): Report the amount of data *written* as
2055         amount_read.  This is not entirely logical, but that's what the
2056         callers expect, and it's not easy to change.
2057
2058         * ftp.c (ftp_loop_internal): Ditto.
2059
2060         * http.c (http_loop): Be smarter about assigning restval; if we're
2061         in the nth pass of a download, simply use the information we have
2062         about how much data has been retrieved as restval.
2063
2064         * ftp.c (getftp): Ditto for FTP "REST" command.
2065
2066         * http.c (gethttp): When the server doesn't respect range, skip
2067         the first RESTVAL bytes of the read body.  Never truncate the
2068         output file.
2069
2070         * retr.c (fd_read_body): Support skipping initial STARTPOS octets.
2071
2072 2003-11-30  Hrvoje Niksic  <hniksic@xemacs.org>
2073
2074         * http.c (skip_short_body): Renamed skip_body to skip_short_body;
2075         don't bother calling fd_read_body.
2076
2077 2003-11-30  Hrvoje Niksic  <hniksic@xemacs.org>
2078
2079         * retr.c (fd_read_body): Sanitize arguments and document them
2080         better.  Make sure the timer is created and updated only if
2081         necessary.  Updated callers.
2082
2083 2003-11-30  Hrvoje Niksic  <hniksic@xemacs.org>
2084
2085         * http.c (skip_body): New function.
2086         (gethttp): Use it to skip the body of the responses we don't care
2087         to download.  That allows us to reuse the connection.
2088         (gethttp): Trust that the HEAD requests will not generate body
2089         data.
2090
2091         * retr.c (fd_read_body): Don't write to OUT if it's NULL.
2092
2093 2003-11-29  Hrvoje Niksic  <hniksic@xemacs.org>
2094
2095         * http.c (gethttp): Initialize SSL only the first time when SSL
2096         URL is downloaded.
2097
2098 2003-11-29  Hrvoje Niksic  <hniksic@xemacs.org>
2099
2100         * cookies.c (cookie_header): Only generate the contents of the
2101         header, not the leading "Cookie: " or the trailing "\r\n".
2102
2103         * http.c (gethttp): When adding headers specified with `--header',
2104         allow them to override the headers generated by Wget.
2105
2106         * init.c (cmd_spec_header): Made opt.user_headers a vector.
2107
2108         * http.c (request_new): New function.  Returns a request structure
2109         which can be modified in various ways, most notably by adding HTTP
2110         headers to the request.
2111         (request_set_header): New function for adding the header to the
2112         request.  If the header is already available, it gets replaced.
2113         (request_send): Construct and send the request.
2114         (gethttp): Use the request_* functions to generate the request.
2115
2116 2003-11-28  Hrvoje Niksic  <hniksic@xemacs.org>
2117
2118         * http.c (gethttp): Don't include the Proxy-Authorization header
2119         in the request tunneled through proxy.
2120
2121 2003-11-28  Hrvoje Niksic  <hniksic@xemacs.org>
2122
2123         * http.c (gethttp): Use the CONNECT handle to establish SSL
2124         passthrough through non-SSL proxies.
2125
2126 2003-11-28  Hrvoje Niksic  <hniksic@xemacs.org>
2127
2128         * init.c: Don't #include netinet/Winsock stuff.
2129
2130 2003-11-28  Hrvoje Niksic  <hniksic@xemacs.org>
2131
2132         * http.c: Deleted the old functions header_process,
2133         header_extract_number, header_exists, header_strdup,
2134         http_process_range, http_process_none, http_process_type, and
2135         http_process_connection.
2136
2137         * http.c (response_new): New function.
2138         (response_header_bounds): Ditto.
2139         (response_header_copy): Ditto.
2140         (response_header_strdup): Ditto.
2141         (response_status): Ditto.
2142         (gethttp): Use the new response_* functions to parse the response.
2143         Support HTTP/0.9 responses.
2144
2145 2003-11-27  Hrvoje Niksic  <hniksic@xemacs.org>
2146
2147         * progress.c (create_image): Don't calculate ETA if nothing has
2148         been downloaded yet, because it causes division by zero.
2149
2150 2003-11-27  Hrvoje Niksic  <hniksic@xemacs.org>
2151
2152         * connect.c (bind_local): Rename sa_len to addrlen because IRIX
2153         headers define sa_len as a macro.
2154
2155 2003-11-26  Hrvoje Niksic  <hniksic@xemacs.org>
2156
2157         * html-parse.c (convert_and_copy): Remove embedded newlines when
2158         AP_TRIM_BLANKS is specified.
2159
2160 2003-11-26  Hrvoje Niksic  <hniksic@xemacs.org>
2161
2162         * ftp.c: Set con->csock to -1 where rbuf_uninitialize was
2163         previously used.
2164
2165 2003-11-26  Hrvoje Niksic  <hniksic@xemacs.org>
2166
2167         * Makefile.in (http$o): Added the trailing backslash that was
2168         missing.
2169
2170 2003-11-21  Hrvoje Niksic  <hniksic@xemacs.org>
2171
2172         * headers.c: Removed.  The file is no longer relevant, now that no
2173         special handling of headers is done by the rbuf code.  Moved
2174         portions to http.c.
2175
2176 2003-11-21  Hrvoje Niksic  <hniksic@xemacs.org>
2177
2178         * rbuf.c: Removed.
2179
2180         * ftp-basic.c (ftp_response): Use fd_read_line.  No longer use
2181         struct rbuf.  Updated all callers.
2182
2183         * http.c (gethttp): Use fd_read_head to read all the headers in
2184         one go.
2185         (next_header): New function.
2186
2187         * retr.c (fd_read_line): New function: reads a line from FD,
2188         leaving the rest of the data unread.
2189         (fd_read_head): New function.
2190
2191         * connect.c (fd_peek): New function, implements peeking.
2192         (poll_internal): New function.
2193         (fd_read): Use it.
2194         (fd_write): Ditto.
2195         (fd_peek): Ditto.
2196         (fd_register_transport): Allow registering a "peeker" callback.
2197
2198 2003-11-20  Hrvoje Niksic  <hniksic@xemacs.org>
2199
2200         * connect.c: Renamed xread/xwrite/xclose to
2201         fd_read/fd_write/fd_close.  The "x" prefix is not appropriate
2202         because the semantics have diverged from read/write/close too
2203         significantly.  Updated all callers.
2204
2205 2003-11-20  Hrvoje Niksic  <hniksic@xemacs.org>
2206
2207         * connect.c (sock_write): It's not necessary to initialize RES.
2208
2209 2003-11-19  Hrvoje Niksic  <hniksic@xemacs.org>
2210
2211         * main.c (main): Don't reference opt.ipv4_only and opt.ipv6_only
2212         if IPv6 is disabled.
2213
2214 2003-11-19  Hrvoje Niksic  <hniksic@xemacs.org>
2215
2216         * connect.c (socket_has_inet6): Only compile it if IPv6 is enabled
2217         and AI_ADDRCONFIG is missing.
2218
2219 2003-11-18  Hrvoje Niksic  <hniksic@xemacs.org>
2220
2221         * gen_sslfunc.c (ssl_init_prng): Warn the user when using a weak
2222         random seed.
2223
2224 2003-11-18  Hrvoje Niksic  <hniksic@xemacs.org>
2225
2226         * host.c (address_list_contains): Renamed address_list_find to
2227         address_list_contains because its result is boolean.
2228
2229 2003-11-18  Hrvoje Niksic  <hniksic@xemacs.org>
2230
2231         * connect.c (select_fd): Return 1 if select is not available.
2232
2233 2003-11-17  Hrvoje Niksic  <hniksic@xemacs.org>
2234
2235         * connect.c (connect_to_host): Don't reference address list after
2236         releasing it.
2237
2238 2003-11-17  Hrvoje Niksic  <hniksic@xemacs.org>
2239
2240         * main.c (print_help): Fix alignment of FTP options output.
2241
2242 2003-11-17  Hrvoje Niksic  <hniksic@xemacs.org>
2243
2244         * host.c (lookup_host): Check for the ability to create IPv6
2245         sockets here.
2246
2247         * init.c (defaults): Don't auto-set --inet4-only on IPv6-less
2248         systems.
2249
2250 2003-11-16  Hrvoje Niksic  <hniksic@xemacs.org>
2251
2252         * main.c (print_help): Fix typo in `-O' help message.  Fix docs of
2253         -Y/--proxy.  Fix docs of `--cookies' and `--glob'.  Improve docs
2254         of --convert-links.  Fix docs of SSL options.
2255
2256 2003-11-16  Hrvoje Niksic  <hniksic@xemacs.org>
2257
2258         * ftp-basic.c: Don't include <arpa/inet.h> and others because
2259         they're no longer needed.
2260
2261 2003-11-16  Hrvoje Niksic  <hniksic@xemacs.org>
2262
2263         * main.c (main): Don't allow setting of both opt.ipv4_only and
2264         opt.ipv6_only.
2265
2266         * init.c (defaults): Mark opt.ipv4_only specially when set
2267         automatically.
2268
2269 2003-11-15  Hrvoje Niksic  <hniksic@xemacs.org>
2270
2271         * host.c (lookup_host): Use AI_ADDRCONFIG only if the family is
2272         unspecified.  This ensures that specifying `--no-inet4' on systems
2273         where IPv6 resolves, but doesn't work behaves the same regardless
2274         of the availability of AI_ADDRCONFIG.
2275
2276 2003-11-15  Hrvoje Niksic  <hniksic@xemacs.org>
2277
2278         * host.c: Don't refer to the now-removed function
2279         forget_host_lookup in the documentation of lookup_host.
2280
2281 2003-11-15  Hrvoje Niksic  <hniksic@xemacs.org>
2282
2283         * http.c (persistent_available_p): Correctly specify the endpoint
2284         argument to socket_ip_address.
2285         (gethttp): When printing the "reusing connection to..." message,
2286         specify the host name of the reused connection, not the current
2287         host name.  That makes more sense because it provides a useful
2288         piece of information -- we know to which host we're supposed to
2289         connect anyway!
2290
2291 2003-11-15  Hrvoje Niksic  <hniksic@xemacs.org>
2292
2293         * init.c: Make sure the options are in alphabetic order!
2294
2295         * host.c (lookup_host): Merge lookup_host_passive and lookup_host
2296         after all -- having both would result in some code duplication.
2297         (lookup_host): Set hints.ai_family to AF_INET if ipv4_only is
2298         requested.  Likewise, set it to AF_INET6 for ipv6_only.  Specify
2299         AI_ADDRCONFIG where available.
2300         (lookup_host): New flag LH_REFRESH that specifies that a cached
2301         entry for HOST should be refreshed.
2302         (cache_query): New function.
2303         (cache_store): Ditto.
2304         (cache_remove): Ditto.
2305         (forget_host_lookup): No longer necessary, replaced with static
2306         function cache_remove.
2307
2308 2003-11-14  Hrvoje Niksic  <hniksic@xemacs.org>
2309
2310         * main.c: Enable -4 and -6 only if IPv6 is enabled.
2311
2312 2003-11-14  Hrvoje Niksic  <hniksic@xemacs.org>
2313
2314         * connect.c (register_transport): Renamed from register_extended.
2315         Explain the intended usage.
2316
2317 2003-11-14  Hrvoje Niksic  <hniksic@xemacs.org>
2318
2319         * url.c (uri_merge): Merging "foo" and "bar" should result in
2320         "bar", not in "foo/bar".
2321         (path_simplify): Don't remove empty path elements; don't
2322         special-case leading slash.
2323         (path_simplify): Don't swallow ".."'s at the beginning of string.
2324         E.g. simplify "foo/../../bar" as "../bar", not as "bar".
2325         (append_uri_pathel): Defang ".." path element upon encountering
2326         it.
2327
2328 2003-11-13  Hrvoje Niksic  <hniksic@xemacs.org>
2329
2330         * http.c (persistent_available_p): Don't attempt to talk to two
2331         different SSL sites over the same secure connection.
2332
2333 2003-11-13  Hrvoje Niksic  <hniksic@xemacs.org>
2334
2335         * http.c (gethttp): Ditto.
2336
2337         * ftp.c (getftp): Use retryable_socket_connect_error instead of
2338         CONNECT_ERROR.
2339
2340         * wget.h (CONNECT_ERROR): Removed.
2341
2342         * connect.c (retryable_socket_connect_error): New function instead
2343         of unsupported_socket_family_error.
2344
2345 2003-11-13  Hrvoje Niksic  <hniksic@xemacs.org>
2346
2347         * wget.h (CONNECT_ERROR): Use it.
2348
2349         * connect.c (unsupported_socket_family_error): New function.
2350
2351 2003-11-13  Hrvoje Niksic  <hniksic@xemacs.org>
2352
2353         * connect.c (bind_local): Renamed bindport to bind_local; return
2354         the socket directly.  Updated callers.
2355         (accept_connection): Renamed acceptport to accept_connection;
2356         return the created socket directly.  Updated callers.
2357
2358 2003-11-13  Hrvoje Niksic  <hniksic@xemacs.org>
2359
2360         * init.c (defaults): Turn on opt.ipv4_only if we're compiling with
2361         IPv6, and AI_ADDRINFO is not available, and AF_INET6 sockets can't
2362         be created.
2363
2364 2003-11-13  Hrvoje Niksic  <hniksic@xemacs.org>
2365
2366         * host.c (lookup_host): Document the fact that the addresses are
2367         returned in order.
2368
2369 2003-11-12  Hrvoje Niksic  <hniksic@xemacs.org>
2370
2371         * utils.c: Use limits.h only where available.
2372
2373         * hash.c: Use INVALID_PTR and INVALID_PTR_BYTE.  Include limits.h.
2374
2375 2003-11-11  Hrvoje Niksic  <hniksic@xemacs.org>
2376
2377         * main.c: Added options --inet4-only and --inet6-only.
2378
2379 2003-11-11  Hrvoje Niksic  <hniksic@xemacs.org>
2380
2381         * host.c (host_errstr): Use the more standard message "Unknown
2382         host".
2383
2384 2003-11-10  Hrvoje Niksic  <hniksic@xemacs.org>
2385
2386         * connect.c (connect_to_host): Use that flag to decide whether to
2387         re-resolve the host name.
2388
2389         * host.c (struct address_list): Added a flag that maintains
2390         whether the connection worked at some point.
2391
2392 2003-11-10  Hrvoje Niksic  <hniksic@xemacs.org>
2393
2394         * host.c (lookup_host): Special-case the numeric addresses only in
2395         the non-IPv6 case.
2396
2397 2003-11-10  Hrvoje Niksic  <hniksic@xemacs.org>
2398
2399         * connect.c (resolve_bind_address): Call lookup_host_passive.
2400         Make sure that opt.bind_address is resolved only once.
2401
2402         * host.c (lookup_host_passive): New function, handles "passive"
2403         lookups.
2404         (lookup_host): Remove the passive flags.  Remove the
2405         family-related flags -- use ip_default_family instead.
2406
2407 2003-11-09  Hrvoje Niksic  <hniksic@xemacs.org>
2408
2409         * html-url.c: Get URLs from <object data="...">.
2410
2411 2003-11-09  Hrvoje Niksic  <hniksic@xemacs.org>
2412
2413         * main.c (option_data): Specify the command to use for --mirror.
2414
2415 2003-11-08  Hrvoje Niksic  <hniksic@xemacs.org>
2416
2417         * cookies.c (cookie_handle_set_cookie): Specify exact match for
2418         unspecified domains.
2419
2420 2003-11-08  Hrvoje Niksic  <hniksic@xemacs.org>
2421
2422         * main.c (main): Removed one-letter options `-C', `-g', `-G', and
2423         `-s'.
2424
2425 2003-11-08  Hrvoje Niksic  <hniksic@xemacs.org>
2426
2427         * main.c (main): Add --dont-remove-listing for backward
2428         compatibility with previous versions.
2429         (print_help): Fix typo, spotted by Dennis Smit.
2430
2431 2003-11-08  Gisle Vanem  <giva@bgnett.no>
2432
2433         * ftp-basic.c: Support Windows-2000 ftp servers. Win-2000 *is*
2434         Win-NT 5.0 so calling it ST_WINNT is okay I guess.
2435
2436 2003-11-08  Hrvoje Niksic  <hniksic@xemacs.org>
2437
2438         * progress.c (update_speed_ring): Clear the speed ring when the
2439         download stalls.
2440
2441         * retr.c (get_contents): Specify 0.95s read timeout, so that the
2442         progress gauge can be updated even when data arrives very slowly
2443         or stalls.
2444
2445 2003-11-08  Hrvoje Niksic  <hniksic@xemacs.org>
2446
2447         * utils.c (wtimer_allocate): Bless the use of wtimer_read on a
2448         timer that has merely been allocated because get_contents() does
2449         that.
2450         (wtimer_update): Abort if the timer is not initialized.
2451
2452 2003-11-08  Hrvoje Niksic  <hniksic@xemacs.org>
2453
2454         * retr.c (get_contents): Pass the timer to limit_bandwidth().
2455
2456         * utils.c (wtimer_update): New function instead of wget_elapsed;
2457         just update the timer, but don't return anything.
2458         (wtimer_read): Read and return the last known value of the timer.
2459
2460 2003-11-08  Hrvoje Niksic  <hniksic@xemacs.org>
2461
2462         * http.c (persistent_available_p): Instead of matching all the
2463         addresses of HOST and last host, determine the peer's IP address
2464         with socket_ip_address and see if that address is one of those
2465         HOST resolves to.
2466
2467         * host.c (address_list_match_all): Removed.
2468         (address_list_find): New function, finds an IP address in the
2469         address list.
2470
2471         * ftp.c (ftp_do_pasv): Get the peer's address here, and pass it to
2472         ftp_epsv so it doesn't need to call getpeername.
2473
2474         * ftp-basic.c (ftp_port): Use socket_ip_address instead of
2475         getpeername.
2476         (ftp_lprt): Ditto.
2477
2478         * connect.c (socket_ip_address): Replaces conaddr, generalized to
2479         either get peer's or local address.
2480         (sockaddr_get_data): Made local to this file.
2481
2482 2003-11-08  Hrvoje Niksic  <hniksic@xemacs.org>
2483
2484         * hash.c (HASH_POSITION): Explicitly accept the hash function.
2485         (grow_hash_table): Extract ht->hash_function outside the loop.
2486         (hash_table_remove): Ditto.
2487         (hash_table_clear): Fill entries with 0xff to clear them.
2488         (hash_table_remove): Mark entries as deleted with the correct
2489         marker.
2490
2491 2003-11-08  Hrvoje Niksic  <hniksic@xemacs.org>
2492
2493         * http.c (persistent_available_p): No reason for the host lookup
2494         to be silent -- it's a lookup like any other.
2495
2496 2003-11-08  Hrvoje Niksic  <hniksic@xemacs.org>
2497
2498         * connect.c (register_extended): Check that fd >= 0.
2499
2500 2003-11-07  Hrvoje Niksic  <hniksic@xemacs.org>
2501
2502         * connect.c (LAZY_RETRIEVE_INFO): Set LAST_INFO.
2503
2504 2003-11-07  Hrvoje Niksic  <hniksic@xemacs.org>
2505
2506         * hash.c (NON_EMPTY): Use the all-bit-set value as the marker that
2507         the field is empty.  This allows NULL pointer and 0 value to be
2508         used as keys, which is necessary for the connect.c code to work
2509         when fd==0.
2510         (hash_table_new): Fill mappings with 0xff.
2511         (grow_hash_table): Ditto.
2512
2513 2003-11-07  Hrvoje Niksic  <hniksic@xemacs.org>
2514
2515         * url.c (url_parse): Allow empty ports.
2516
2517 2003-11-07  Hrvoje Niksic  <hniksic@xemacs.org>
2518
2519         * main.c (print_help): Break the help string into multiple chunks.
2520         (cmdline_option): New option handler OPT_FUNCALL.  Generalized
2521         HANDLE_CMD to generic DATA.
2522         (option_data): Use the new OPT_FUNCALL feature.
2523
2524 2003-11-06  Hrvoje Niksic  <hniksic@xemacs.org>
2525
2526         * log.h: Declare log_init, log_close, and
2527         log_request_redirect_output here.
2528
2529 2003-11-05  Dennis Smit  <ds@nerds-incorporated.org>
2530
2531         * main.c: (main): added --preserve-permissions option.
2532
2533         * ftp.c (ftp_retrieve_list): added support for
2534         --preserve-permissions option.
2535
2536         * init.c: added support for --preserve-permission option.
2537
2538         * option.h: added support for --preserve-permission option.
2539
2540 2003-11-06  Hrvoje Niksic  <hniksic@xemacs.org>
2541
2542         * main.c (init_switches): New function.  Convert option_data to
2543         long_options and short_options, which can be fed to getopt_long.
2544         (main): Execute command-line options by consulting option_data.
2545
2546 2003-11-06  Hrvoje Niksic  <hniksic@xemacs.org>
2547
2548         * gen_sslfunc.c (ssl_read): Implement a more correct check for
2549         EINTR.
2550         (ssl_write): Ditto.
2551         (init_ssl): Use a global SSL context.
2552
2553 2003-11-06  Hrvoje Niksic  <hniksic@xemacs.org>
2554
2555         * connect.c (xclose): Free INFO even if it doesn't provide a
2556         closer.
2557
2558 2003-11-06  Hrvoje Niksic  <hniksic@xemacs.org>
2559
2560         * connect.c: Updated all callers of
2561         iread/ssl_iread/iwrite/ssl_iwrite to use xread and xwrite instead.
2562
2563         * rbuf.h (struct rbuf): Removed the SSL member because SSL is
2564         handled automatically by xread.
2565
2566         * hash.c (ptrhash): Made private.
2567         (ptrcmp): Ditto.
2568         (inthash): Removed.
2569
2570         * connect.c (select_fd): Don't set errno, leave it to the caller.
2571
2572         * gen_sslfunc.c (connect_ssl): Use register_extended to register
2573         SSL callbacks for communication with SSL-enabled endpoints.
2574         (ssl_read): New function.
2575         (ssl_write): Ditto.
2576         (ssl_poll): Ditto.
2577         (ssl_close): Ditto.
2578
2579         * connect.c (register_extended): New function -- register
2580         callbacks for basic socket operations.
2581         (xread): Ditto.
2582         (xwrite): Ditto.
2583         (xclose): Ditto.
2584         (sock_read): New function, default implementation for reading.
2585         (sock_write): Ditto for writing.
2586         (sock_poll): Ditto for polling.
2587         (sock_close): Ditto for closing.
2588
2589 2003-11-05  Hrvoje Niksic  <hniksic@xemacs.org>
2590
2591         * connect.c (bindport): Fix compilation under pre-C99 compilers.
2592
2593 2003-11-05  Hrvoje Niksic  <hniksic@xemacs.org>
2594
2595         * connect.c (connect_to_ip): More compact error checking.
2596         (bindport): Don't treat failed setsockopt as a fatal error.
2597
2598 2003-11-05  Hrvoje Niksic  <hniksic@xemacs.org>
2599
2600         * connect.c (resolve_bind_address): Use a more accurate error
2601         message -- we're not binding to ANY, we're disabling bind
2602         altogether.
2603
2604 2003-11-05  Hrvoje Niksic  <hniksic@xemacs.org>
2605
2606         * cookies.c (save_cookies_mapper): Respect the setting of
2607         keep-session-cookies.
2608         (cookie_jar_load): Import session cookies.
2609         Based on code submitted by Nicolas Schodet.
2610
2611         * utils.c (datetime_str): Use information in TM when it's
2612         non-NULL.
2613
2614         * main.c (main): New option `--keep-session-cookies'.
2615
2616 2003-11-04  Hrvoje Niksic  <hniksic@xemacs.org>
2617
2618         * Makefile.in (realclean): Delete config.h.in.
2619
2620 2003-11-04  Hrvoje Niksic  <hniksic@xemacs.org>
2621
2622         * config-post.h: New file, included from now autogenerated
2623         config.h.in.
2624
2625 2003-11-04  Hrvoje Niksic  <hniksic@xemacs.org>
2626
2627         * progress.c (progress_handle_sigwinch): Don't call
2628         determine_screen_width() from the signal handler.  Instead, just
2629         set a volatile variable.
2630         (bar_create): Check whether SIGWINCH was received.
2631         (bar_update): Ditto.
2632
2633         * sysdep.h: Define SYSTEM_FNMATCH only if HAVE_FNMATCH_H is true.
2634
2635 2003-11-03  Hrvoje Niksic  <hniksic@xemacs.org>
2636
2637         * utils.c (xsleep): New function.  Uses nanosleep where available,
2638         resuming sleeps interrupted by signals.  Updated callers of sleep
2639         and usleep to use xsleep.
2640
2641 2003-11-03  Hrvoje Niksic  <hniksic@xemacs.org>
2642
2643         * ftp-basic.c (ftp_login): Remove shadowing (and bogus)
2644         declaration of SEED.
2645
2646 2003-11-03  Hrvoje Niksic  <hniksic@xemacs.org>
2647
2648         * log.c (logvprintf): Documented better.  Renamed to
2649         log_vprintf_internal to avoid confusion with the public API
2650         functions logprintf and logputs.
2651
2652 2003-11-03  Hrvoje Niksic  <hniksic@xemacs.org>
2653
2654         * wget.h (N_): Don't parenthesize argument.
2655
2656 2003-11-03  Hrvoje Niksic  <hniksic@xemacs.org>
2657
2658         * host.h (ADDRESS_IPV4_DATA): Don't take the address of in.s_addr
2659         because that doesn't work on machines that define it as bitfield.
2660
2661 2003-11-03  Hrvoje Niksic  <hniksic@xemacs.org>
2662
2663         * connect.c (select_fd): Generalize the third argument into WAIT,
2664         so that the caller can request waiting for both read and write.
2665         Updated callers.
2666
2667 2003-11-02  Hrvoje Niksic  <hniksic@xemacs.org>
2668
2669         * html-url.c (cleanup_html_url): Destroy the hash tables, don't
2670         just call free on them.
2671         (init_interesting): Use hash_table_put instead of string_set_add
2672         because we don't need the strdup that the latter function
2673         performs.
2674
2675         * init.c (cleanup): Don't pass NULL to cookie_jar_delete.
2676
2677         * xmalloc.c (xfree_real): Abort when passed a NULL pointer.
2678         (xfree_debug): Print at the file and line of the offending call to
2679         free.
2680
2681 2003-11-02  Hrvoje Niksic  <hniksic@xemacs.org>
2682
2683         * wget.h: Retired the `boolean' type.  Moved the DEFAULT_LOGFILE
2684         define to log.h.  Moved the INFINITE_RECURSION define to recur.h.
2685
2686         * xmalloc.h: Renamed FREE_MAYBE to xfree_null and moved the
2687         definition from wget.h to xmalloc.h.
2688
2689 2003-11-02  Hrvoje Niksic  <hniksic@xemacs.org>
2690
2691         * html-parse.c (decode_entity): New function; split the decoding
2692         of entities here.
2693         (convert_and_copy): Use it to decode entities.
2694         (decode_entity): Handle the &apos entity.
2695         (decode_entity): Don't decode Latin 1 numeric entities.  Don't
2696         decode &#0.
2697
2698 2003-11-01  Hrvoje Niksic  <hniksic@xemacs.org>
2699
2700         * ftp-opie.c (calculate_skey_response): Use uint32_t instead of
2701         `unsigned long' for the cheksum array.  Document the function.
2702
2703 2003-11-01  Hrvoje Niksic  <hniksic@xemacs.org>
2704
2705         * connect.c (acceptport): Don't call select_fd when timeout is not
2706         requested.
2707
2708 2003-11-01  Hrvoje Niksic  <hniksic@xemacs.org>
2709
2710         * host.c: Removed the ip_default_family global variable.
2711
2712         * host.c (lookup_host): Document the function.  Fixed declaration
2713         of VEC.
2714
2715 2003-10-31  Hrvoje Niksic  <hniksic@xemacs.org>
2716
2717         * various: Use new macros xnew, xnew0, xnew_array, and xnew0_array
2718         in various places.
2719
2720 2003-10-31  Hrvoje Niksic  <hniksic@xemacs.org>
2721
2722         * wget.h: Move declarations of malloc and logging code to
2723         xmalloc.h and log.h respectively to unclutter this file.
2724         (STRDUP_ALLOCA): Made it side-effect free.
2725
2726         * xmalloc.h: New files.  Define macros xnew, xnew0, xnew_array,
2727         and xnew0_array.
2728
2729         * xmalloc.c: New file.  Move the xmalloc routines here.
2730
2731 2003-10-31  Hrvoje Niksic  <hniksic@xemacs.org>
2732
2733         * connect.c (sockaddr_set_data): Remove the broken code that
2734         checked for NULL address.
2735
2736 2003-10-31  Hrvoje Niksic  <hniksic@xemacs.org>
2737
2738         * host.c (address_list_from_single): Removed.
2739         (address_list_from_ipv4_addresses): Renamed from
2740         address_list_from_vector.
2741
2742 2003-10-31  Hrvoje Niksic  <hniksic@xemacs.org>
2743
2744         * sysdep.h (CLOSE): Don't call close on file descriptors less than
2745         0, i.e. on uncreated sockets.
2746
2747         * connect.c (resolve_bind_address): Work on struct sockaddr
2748         directly.
2749         (connect_to_host): Replacement for connect_to_many.  Resolve HOST
2750         and connect to any of its addresses.  If we can't connect and the
2751         host name lookup was cached, try to resolve it again.  This should
2752         fix problems with hosts behind dynamic DNS.  Updated all callers.
2753         (connect_to_ip): Replacement for connect_to_one.  Removed SILENT;
2754         added the argument PRINT instead.  Updated all callers.
2755         (set_connection_host_name): Removed.
2756
2757         * host.c (address_list_address_at): New function instead of
2758         address_list_copy_one. It returns a pointer to ip_address *, so
2759         it's not necessary to copy the data.
2760         (address_list_cached_p): New function.
2761         (forget_host_lookup): Ditto.
2762
2763         * connect.c: Got rid of the MSOCK global variable.  Made bindport
2764         return the local socket it creates.  Added a new argument to
2765         acceptport, the socket to call accept on.  Updated callers.
2766         (closeport): Removed.
2767
2768         * connect.c: Moved the sockaddr code from host.c to this file,
2769         because most of that stuff is used for connecting, and has nothing
2770         to do with host names anyway.
2771         (sockaddr_set_data, sockaddr_get_data): New functions, replace the
2772         old sockaddr_set_address, sockaddr_set_port, sockaddr_get_address,
2773         and sockaddr_get_port.
2774
2775 2003-10-30  Hrvoje Niksic  <hniksic@xemacs.org>
2776
2777         * sysdep.h: Use `S >= 8' rather than `S == 8' when looking for
2778         large integers.
2779
2780 2003-10-30  Hrvoje Niksic  <hniksic@xemacs.org>
2781
2782         * url.c (append_uri_pathel): New argument ESCAPED_P that says
2783         whether [B, E) is to be treated as URL-escaped or not.  If
2784         ESCAPED_P is false, don't unescape the region.
2785         (url_file_name): u->file is not URL-escaped.
2786
2787 2003-10-30  Hrvoje Niksic  <hniksic@xemacs.org>
2788
2789         * retr.c (retrieve_from_file): Use retrieve_tree for
2790         page-requisites.
2791
2792         * main.c (main): Don't define opt.recursive when -p is used.
2793         Instead, make sure that recursion is used for HTTP in that case.
2794
2795 2003-10-29  Hrvoje Niksic  <hniksic@xemacs.org>
2796
2797         * host.h: Defined accessors for elements of ip_address.  Updated
2798         all callers.
2799         (address_list_match_all): Use memcmp in the non-IPv6 case.
2800
2801         * wget.h (CONNECT_ERROR): Don't retry connecting if connect()
2802         returned EAFNOSUPPORT.
2803
2804 2003-10-27  Mauro Tortonesi <mauro@deepspace6.net>
2805
2806         * connect.h: changed bindport prototype and added the related
2807         BIND_ON_IPV4_ONLY and BIND_ON_IPV6_ONLY flags.
2808
2809         * connect.c: changed bindport and resolve_bind_address to allow
2810         protocol-version specific DNS resolution. modified conaddr,
2811         acceptport and connect_to_one to make use of struct
2812         sockaddr_storage and of the new ip_address structure.
2813
2814         * ftp-basic.c: added LPRT/LPSV (RFC1639) support, refactored
2815         PORT/PASV (RFC959) and EPRT/EPSV (RFC2428) support code.
2816
2817         * ftp.c: added the ftp_do_port and ftp_do_pasv functions to
2818         handle FTP over IPv6.
2819
2820         * ftp.h: changed prototype of ftp_epsv and added prototypes for
2821         ftp_lpsv, ftp_lprt and ftp_eprt.
2822
2823         * host.c: renamed the
2824         wget_sockaddr_set_address and wget_sockaddr_get_addr, and
2825         wget_sockaddr_{s,g}et_port couples to sockaddr_{s,g}et_address and
2826         sockaddr_{g,s}et_port respectively.  changed
2827         address_list_match_all, address_list_from_addrinfo sockaddr_len,
2828         pretty_print_address, lookup_host, sockaddr_{s,g}et_address and
2829         sockaddr_{g,s}et_port to make use of struct sockaddr_storage and
2830         of the new ip_address structure.  removed map_ipv4_to_ip and
2831         map_ip_to_ipv4.
2832
2833         * host.h: redefined structure ip_address and removed structure
2834         wget_sockaddr.
2835
2836 2003-10-26  Hrvoje Niksic  <hniksic@xemacs.org>
2837
2838         * sysdep.h: Include inttypes.h where available.
2839
2840         * host.c: Switch from u_int32_t to uint32_t.
2841
2842 2003-10-26  Hrvoje Niksic  <hniksic@xemacs.org>
2843
2844         * netrc.c (parse_netrc): Reset the QUOTE flag after the closing
2845         quote.
2846
2847 2003-10-25  Hrvoje Niksic  <hniksic@xemacs.org>
2848
2849         * url.c (is_valid_ipv6_address): Reformat to GNU coding style.
2850         Use enums for NS_IN* constants.  Use ISXDIGIT.
2851
2852         * convert.c (construct_relative): Document better how the function
2853         works.
2854
2855 2003-10-23  Hrvoje Niksic  <hniksic@xemacs.org>
2856
2857         * config.h.in: Deploy preprocessor magic to avoid Ultrix's
2858         <netdb.h> include <bitypes.h> which defines its own u_int32_t.
2859         Reported by Bernhard Simon.
2860
2861 2003-10-23  Hrvoje Niksic  <hniksic@xemacs.org>
2862
2863         * version.c: Bump version.
2864
2865 2003-10-23  Hrvoje Niksic  <hniksic@xemacs.org>
2866
2867         * url.c: Ditto.
2868
2869         * html-parse.c (advance_declaration): Don't use trailing comma in
2870         enum because older compilers don't support it.
2871
2872         * utils.c: Don't redefine HAVE_SIGSETJMP.
2873
2874 2003-10-16  Hrvoje Niksic  <hniksic@xemacs.org>
2875
2876         * convert.c (construct_relative): Don't handle absolute files
2877         specially -- for example, -P/tmp/foo shouldn't imply that
2878         converted files must refer to "/tmp/foo/..."!
2879
2880 2003-10-15  Hrvoje Niksic  <hniksic@xemacs.org>
2881
2882         * http.c: Consider status 307 a valid redirect.
2883
2884 2003-10-15  Philip Stadermann  <philip.stadermann@credativ.de>
2885
2886         * ftp.c (ftp_retrieve_glob): Correctly loop through the list whose
2887         elements might have been deleted.
2888
2889 2003-10-13  Hrvoje Niksic  <hniksic@xemacs.org>
2890
2891         * html-url.c (tag_handle_meta): Set the Refresh link to expect
2892         HTML.
2893         (append_one_url): Renamed to append_url.
2894
2895 2003-10-13  Hrvoje Niksic  <hniksic@xemacs.org>
2896
2897         * sysdep.h: Only define u_int32_t.
2898
2899 2003-10-11  Hrvoje Niksic  <hniksic@xemacs.org>
2900
2901         * utils.c (large_int_to_string): Use snprintf() to print the
2902         number.  This will work even on systems where libc doesn't
2903         understand %lld, but the compiler does, because it will use our
2904         snprintf replacement.
2905
2906         * init.c (parse_bytes_helper): New function.
2907         (cmd_bytes): Use it to parse bytes, but cast the result to long.
2908         (cmd_bytes_large): Ditto, but store the result to LARGE_INT.  Used
2909         for --quota so that --quota=10G works even on machines without
2910         long long.
2911
2912         * options.h (struct options): Declare quota as LARGE_INT.
2913
2914         * retr.c (downloaded_exceeds_quota): Removed.
2915         (downloaded_increase): Ditto.
2916         (total_downloaded_bytes): New variable, replaces opt.downloaded,
2917         which was the wrong place for it anyway.  Updated callers of
2918         downloaded_exceeds_quota and downloaded_increase to check this
2919         variable directly.
2920
2921         * sysdep.h: Get rid of VERY_LONG_TYPE.  Use LARGE_INT for the same
2922         purpose, defined as `long', `long long' or `double', depending on
2923         size of long and whether long long is available.
2924
2925 2003-10-11  Hrvoje Niksic  <hniksic@xemacs.org>
2926
2927         * sysdep.h: Also check size of short for int32_t.
2928
2929 2003-10-11  Hrvoje Niksic  <hniksic@xemacs.org>
2930
2931         * host.c (lookup_host): Use u_int32_t to store the result of
2932         inet_addr().  That removes the need for offset fiddling, caring
2933         about endian-ness, etc.
2934
2935         * sysdep.h: Define int32_t and u_int32_t if not available.
2936
2937 2003-10-11  Hrvoje Niksic  <hniksic@xemacs.org>
2938
2939         * ftp-basic.c (ftp_epsv): Use socklen_t * as the third argument to
2940         getpeername.
2941
2942         * config.h.in: Define socklen_t stub.
2943
2944         * host.c (sockaddr_len): Return socklen_t.
2945
2946         * connect.c (conaddr): Use socklen_t as the third argument to
2947         accept, getsockname, and connect.
2948
2949 2003-10-10  Hrvoje Niksic  <hniksic@xemacs.org>
2950
2951         * recur.c (retrieve_tree): Don't descend into documents that are
2952         not expected to contain HTML, regardless of their content-type.
2953
2954         * html-url.c (tag_url_attributes): Record which attributes are
2955         supposed to yield HTML links that can be followed.
2956         (tag_find_urls): Propagate that information to the caller through
2957         struct urlpos.
2958
2959 2003-10-10  Hrvoje Niksic  <hniksic@xemacs.org>
2960
2961         * hash.c (find_mapping): Return the next available mapping when
2962         the key is not found, not NULL.
2963         (hash_table_put): Use find_mapping to find the storage for the new
2964         data.
2965         (hash_table_put): Grow the table before exceeding maximum
2966         fullness, not afterwards.
2967
2968 2003-10-10  Hrvoje Niksic  <hniksic@xemacs.org>
2969
2970         * hash.c (hash_table_new): Slightly change the meaning of the
2971         first parameter.  Instead of being the minimum initial size, it is
2972         now the minimum number of items that the hash table can take
2973         without needing to resize.
2974
2975 2003-10-09  Hrvoje Niksic  <hniksic@xemacs.org>
2976
2977         * html-url.c (init_interesting): Initialize interesting_tags and
2978         interesting_attributes as hash tables.  This simplifies the code
2979         immensely because hash tables handle allocation and remove
2980         duplicates automatically.
2981         (find_tag): Removed.
2982         (collect_tags_mapper): Instead of calling find_tag, simply get the
2983         entry from interesting_tags hash table, which is both simpler and
2984         faster.
2985
2986 2003-10-09  Hrvoje Niksic  <hniksic@xemacs.org>
2987
2988         * hash.c (hash_table_get): Declare hash-table argument as const.
2989         (find_mapping): Ditto.
2990         (hash_table_get_pair): Ditto.
2991         (hash_table_contains): Ditto.
2992         (hash_table_count): Ditto.
2993
2994 2003-10-08  Hrvoje Niksic  <hniksic@xemacs.org>
2995
2996         * html-url.c (get_urls_html): Parse the appropriate flags to
2997         html-parse.c.
2998
2999         * html-parse.c (map_html_tags): Accept FLAGS from the caller
3000         instead of examining OPT.
3001
3002 2003-10-08  Hrvoje Niksic  <hniksic@xemacs.org>
3003
3004         * html-url.c (find_tag): Switch to binary search.
3005
3006 2003-10-08  Hrvoje Niksic  <hniksic@xemacs.org>
3007
3008         * main.c (print_help): Fix typo; stured -> stored.
3009
3010 2003-10-08  Hrvoje Niksic  <hniksic@xemacs.org>
3011
3012         * getopt.c: Add definitions of getopt_long and getopt_long_only.
3013
3014 2003-10-08  Hrvoje Niksic  <hniksic@xemacs.org>
3015
3016         * config.h.in: Renamed DEBUG to ENABLE_DEBUG.  ENABLE_DEBUG is, I
3017         think, a better name, because it implies that debugging output is
3018         merely possible, not "on by default", as might be construed from
3019         just DEBUG.
3020
3021 2003-10-08  Hrvoje Niksic  <hniksic@xemacs.org>
3022
3023         * ftp.c (has_insecure_name_p): Define it here.
3024
3025         * utils.c (has_wildcards_p): Define it here.
3026
3027         * sysdep.h: Declare fnmatch-related macros here, if not using
3028         system fnmatch().  Update .c files to not declare fnmatch.h
3029         directly.
3030
3031         * cmpt.c (fnmatch): Moved here.  Use it only under non-GNU libc.
3032
3033 2003-10-08  Hrvoje Niksic  <hniksic@xemacs.org>
3034
3035         * getopt.c: Newer version, imported from Free libit.
3036
3037 2003-10-07  Hrvoje Niksic  <hniksic@xemacs.org>
3038
3039         * cookies.c (struct cookie): Remove unused backpointer to cookie
3040         jar.
3041
3042 2003-10-07  Hrvoje Niksic  <hniksic@xemacs.org>
3043
3044         * cmpt.c (memmove): Comment out, since it's no longer used.
3045
3046         * cookies.c (cookie_jar_generate_cookie_header): Allocate room for
3047         chains in one pass.
3048         (find_chains_of_host): Assume that the caller has allocated DEST
3049         to be sufficiently large to take all the data.
3050         (eliminate_dups): Run through the array and eliminate dups on the
3051         fly instead of using memmove.
3052         (cookie_jar_process_set_cookie): Free cookie->domain before
3053         re-setting it.
3054
3055 2003-10-05  Gisle Vanem  <giva@bgnett.no>
3056
3057         * mswindows.c (set_sleep_mode): Fix type of
3058         _SetThreadExecutionState.
3059
3060 2003-10-05  Hrvoje Niksic  <hniksic@xemacs.org>
3061
3062         * utils.c (file_size): Return -1 if fopen() returns NULL.  Prior
3063         to this patch, wget --post-file=nosuchfile dumped core.
3064
3065 2003-10-04  Gisle Vanem  <giva@bgnett.no>
3066
3067         * mswindows.c (run_with_timeout): Use WaitForSingleObject to wait
3068         for thread termination.
3069
3070 2003-10-04  Hrvoje Niksic  <hniksic@xemacs.org>
3071
3072         * log.c: Use `...' in function definitions; ansi2knr will convert
3073         them to va_dcl.  This allowed removal of the ugly VA_START_1 and
3074         VA_START_2 macros.
3075
3076 2003-10-03  Gisle Vanem  <giva@bgnett.no>
3077
3078         * connect.c: And don't include them here.
3079
3080         * mswindows.h: Include winsock headers here.
3081
3082 2003-10-03  Hrvoje Niksic  <hniksic@xemacs.org>
3083
3084         * html-parse.c (convert_and_copy): Move variable declarations
3085         before statements.
3086
3087 2003-10-02  Gisle Vanem  <giva@bgnett.no>
3088
3089         * mswindows.c (run_with_timeout): For Windows: Run the 'fun' in a
3090         thread via a helper function. Continually query the thread's
3091         exit-code until finished or timed out.
3092
3093 2003-10-02  Hrvoje Niksic  <hniksic@xemacs.org>
3094
3095         * wget.h (XMALLOC_ARRAY): Removed.
3096         (ALLOCA_ARRAY): Ditto.
3097
3098         * html-parse.c: Renamed alloca_p to resized.
3099         (GROW_ARRAY): Renamed DO_REALLOC_FROM_ALLOCA to GROW_ARRAY and
3100         returned it to html-parse.c, since nothing else was using it.
3101
3102 2003-10-02  Hrvoje Niksic  <hniksic@xemacs.org>
3103
3104         * retr.c (retrieve_url): Initialize DUMMY storage for DT.  Caught
3105         by valgrind.
3106
3107 2003-10-02  Hrvoje Niksic  <hniksic@xemacs.org>
3108
3109         * html-parse.c (convert_and_copy): Handle numeric entities in
3110         hexadecimal, &#xHH.
3111         (convert_and_copy): Copy the contents directly to the pool without
3112         a stack-allocated intermediary.
3113
3114 2003-10-02  Hrvoje Niksic  <hniksic@xemacs.org>
3115
3116         * utils.c (alarm_set): New function; use either setitimer or alarm
3117         to set up the alarm.
3118         (alarm_cancel): New function; cancel the alarm set up by
3119         alarm_set.
3120         (run_with_timeout): Use them.
3121
3122 2003-10-01  Hrvoje Niksic  <hniksic@xemacs.org>
3123
3124         * url.c (url_parse): Don't leak memory when a reencoded URL turns
3125         out to be invalid.
3126
3127         * url.c (parse_errors): Mark error messages for translation.
3128         (url_error): Translate error messages returned to the caller.
3129
3130 2003-10-01  Hrvoje Niksic  <hniksic@xemacs.org>
3131
3132         * ftp.c (ftp_loop_internal): Initialize TMRATE to NULL to shut up
3133         the compiler.
3134
3135 2003-09-26  Gisle Vanem  <giva@bgnett.no>
3136
3137         * src/mswindows.c: Added ws_percenttitle() showing progress in the
3138         window titlebar. Called from retr.c. Secured ws_mypath().
3139
3140         * windows/config.h.ms: alloca() prototype not needed.  Removed
3141         "#undef ENABLE_NLS"; should be in Makefile IMHO. Moved
3142         WGET_USE_STDARG from mswindows.h to config.ms.h because of #ifdef
3143         in log.c. (MSVC's vararg.h and stdarg.h are incompatible).
3144
3145 2003-09-29  Aaron Hawley <Aaron.Hawley@uvm.edu>
3146
3147         * ftp.c (getftp): --spider option should now work with FTP
3148         downloads.
3149         (ftp_loop_internal): quiet reports and calculations of downloads
3150         when --spider option set, nor try deleting when --delete-after
3151         also set.
3152         (ftp_loop): --spider will skip HTML-ification of .listing file.
3153
3154 2003-09-26  Gisle Vanem  <giva@bgnett.no>
3155
3156         * mswindows.c (read_registry): Removed.
3157         (set_sleep_mode): New function.
3158         (windows_main_junk): Call it.
3159
3160 2003-09-26  Gisle Vanem  <giva@bgnett.no>
3161
3162         * mswindows.c (read_registry): Fix invocation of registry
3163         functions.
3164
3165         * mswindows.c (read_registry): Condition definitions of sleep and
3166         usleep with not HAVE_SLEEP and HAVE_USLEEP respectively.  Define
3167         HAVE_SLEEP and HAVE_USLEEP under __DMC__.
3168
3169 2003-09-24  Hrvoje Niksic  <hniksic@xemacs.org>
3170
3171         * url.c (url_escape_1): Revert unintentional change to lowercase
3172         xdigit escapes.
3173         (url_escape_dir): Document that this function depends on the
3174         output of url_escape_1.
3175
3176 2003-09-23  Hrvoje Niksic  <hniksic@xemacs.org>
3177
3178         * progress.c (create_image): Print the current ETA if we're done
3179         with the download.
3180         (create_image): Change '-' display char to '+' in the progress bar.
3181
3182         * Makefile.in (clean): Remove .libs.
3183
3184 2003-09-23  Hrvoje Niksic  <hniksic@xemacs.org>
3185
3186         * cookies.c (struct cookie): New flag domain_exact.
3187         (update_cookie_field): Skip leading dot in domain.
3188         (find_matching_chains): Match numeric addresses exactly; don't
3189         needlessly copy HOST to the stack.
3190         (matching_cookie): Added argument HOST.  If cookie->domain_exact
3191         is set, check that HOST is equal to cookie->domain.
3192         (cookie_jar_load): Only use TAB as delimiter.  Document the
3193         meaning of DOMAIN-FLAG.  Skip leading dot in domain.
3194         (cookie_jar_load): Don't ignore DOMAIN-FLAG -- instead, set
3195         domain_exact to true if DOMAIN-FLAG is false.
3196         (save_cookies_mapper): If domain_exact is false, prepend the
3197         domain with dot, like Mozilla does.
3198
3199 2003-09-22  Hrvoje Niksic  <hniksic@xemacs.org>
3200
3201         * progress.c (create_image): Print the initial part of the
3202         download with '-' characters, analogous to how dot progress prints
3203         the initial part with ','.
3204
3205         * hash.c (ptrhash): New function.
3206         (ptrcmp): Ditto.
3207         (hash_table_new): Default to identity hash table.
3208
3209 2003-09-22  Hrvoje Niksic  <hniksic@xemacs.org>
3210
3211         * safe-ctype.h (_sch_test): The cast of BIT to unsigned char was
3212         broken -- _sch_istable bitmasks are 16-bit, not 8-bit!  Cast BIT
3213         to unsigned short instead.
3214
3215 2003-09-22  Hrvoje Niksic  <hniksic@xemacs.org>
3216
3217         * url.c (path_simplify): Instead of calls to memmove, handle "./"
3218         and "../" by advancing pointers.
3219
3220 2003-09-22  Hrvoje Niksic  <hniksic@xemacs.org>
3221
3222         * retr.c (getproxy): Moved from url.c.
3223
3224         * convert.c: Split off link conversion from url.c into separate
3225         file.  Also included the book-keeping stuff from recur.c.
3226
3227 2003-09-21  Hrvoje Niksic  <hniksic@xemacs.org>
3228
3229         * init.c: Improved documentation of functions.
3230         (cmd_boolean): Attempt to make code that tries to avoid calling
3231         strcmp for "speed" a bit more readable.
3232
3233         * init.c (simple_atof): Report error on encountering non-digit,
3234         non-"." character.
3235         (simple_atoi): Replacement for myatoi(), calling interface
3236         compatible with simple_atof.  Updated myatoi's callers.
3237
3238 2003-09-21  Bertrand Demiddelaer  <bert@b3rt.org>
3239
3240         * url.c (path_simplify): Would read two bytes past the end of the
3241         string in the "./" case.
3242
3243 2003-09-21  Matthew J. Mellon  <mellon@tymenet.com>
3244
3245         * http.c (gethttp): Recognize content-type "application/xhtml+xml"
3246         as what Wget considers "text/html".
3247
3248 2003-09-21  Hrvoje Niksic  <hniksic@xemacs.org>
3249
3250         * connect.c (connect_with_timeout): Made timeout type double.
3251
3252         * options.h (struct options): New members read_timeout,
3253         dns_timeout, and connect_timeout.
3254         Use them.
3255
3256 2003-09-21  Hrvoje Niksic  <hniksic@xemacs.org>
3257
3258         * init.c (simple_atof): New function.
3259         (cmd_time): Use it.
3260         (cmd_bytes): Accept things like "1.5k" and such.  Use simple_atof
3261         to parse decimals.
3262
3263         * retr.c (limit_bandwidth): Adjust each sleep by the error of the
3264         previous one.
3265
3266 2003-09-21  Hrvoje Niksic  <hniksic@xemacs.org>
3267
3268         * main.c (main): Use setoptval() for setting the options.  Use
3269         run_command for `-e'.
3270
3271         * init.c (parse_line): Rewritten to return COMIND right away.
3272         Changed linkage to static.
3273         (run_wgetrc): Use the available comind when calling setval, so it
3274         doesn't have to be computed twice.
3275         (setval_internal): New function, runs the command's action without
3276         any error checking.
3277         (setoptval): New function, does what setval used to do, but exits
3278         in case of error.
3279         (run_command): New function.
3280
3281 2003-09-21  Hrvoje Niksic  <hniksic@xemacs.org>
3282
3283         * connect.c (select_fd): Change MAXTIME's type to double.  Handle
3284         its decimal part.
3285
3286         * retr.c (sleep_between_retrievals): In the random-wait case, use
3287         random_float() to wait between 0 and 2*opt.wait seconds.
3288
3289         * utils.c (run_with_timeout): Accept `double' timeouts.  Correctly
3290         handle timeout values in (0, 1) range.
3291         (random_float): New function.
3292
3293         * options.h (struct options): Change the types of wait, waitretry,
3294         and timeout to double.
3295
3296         * init.c (cmd_time): Accept floating point time.
3297
3298 2003-09-20  Hrvoje Niksic  <hniksic@xemacs.org>
3299
3300         * retr.c (get_contents): Cosmetic fixes.
3301
3302 2003-09-20  Hrvoje Niksic  <hniksic@xemacs.org>
3303
3304         * url.c (uri_merge): Get rid of uri_merge_1.
3305         (uri_merge): Merge "foo//", "bar" as "foo//bar", not "foo///bar",
3306         i.e. don't add an extra slash merely because BASE ends with two
3307         slashes.
3308         (parse_credentials): Renamed from parse_uname.  Rewrittern in
3309         standard [beg, end) calling style.
3310         (url_skip_credentials): Renamed from url_skip_uname.  Made static.
3311         (url_skip_credentials): Include # and ; as terminators.  Old code
3312         would mistakenly consider "http://foo.com#hniksic@iskon.hr" to
3313         contain a username.
3314         (url_skip_scheme): Removed because it was unused.
3315         (url_has_scheme): Require "scheme" to be at least one char long.
3316
3317 2003-09-19  Hrvoje Niksic  <hniksic@xemacs.org>
3318
3319         * url.c (url_file_name): Expect NULL dir_prefix.
3320
3321         * init.c (cmd_file): Use a macro to prevent multiple #ifdef
3322         WINDOWS.
3323         (defaults): Set dir_prefix to NULL by default.
3324
3325 2003-09-19  Hrvoje Niksic  <hniksic@xemacs.org>
3326
3327         * safe-ctype.h (_sch_test): Cast BIT to unsigned char, like latest
3328         gcc does.
3329
3330 2003-09-19  Hrvoje Niksic  <hniksic@xemacs.org>
3331
3332         * wget.h (BOUNDED_TO_ALLOCA): Evaluate PLACE only once.
3333         (ARRAY_SIZE): Renamed to countof.  All callers updated.
3334
3335 2003-09-19  Hrvoje Niksic  <hniksic@xemacs.org>
3336
3337         * main.c (main): New option --strict-comments.
3338
3339         * html-parse.c (find_comment_end): New function: simple BM search
3340         for "-->".
3341         (map_html_tags): Use it if looking at a comment and not in strict
3342         comments mode.
3343
3344 2003-09-17  Aurelien Marchand  <artaxerxes@users.sf.net>
3345
3346         * ftp.h: Added OS400 system in enum
3347         * ftp-basic.c: recognize OS400 systems
3348         * ftp.c: don't prepend the CWD if talking to OS400, since it
3349         breaks the change in library
3350
3351 2003-09-18  Hrvoje Niksic  <hniksic@xemacs.org>
3352
3353         * retr.c (get_contents): Pass the correct argument to ssl_iread.
3354
3355 2003-09-18  Hrvoje Niksic  <hniksic@xemacs.org>
3356
3357         * safe-ctype.h: Don't #define ctype.h macros to errors because
3358         that loses when someone #include's ctype.h after safe-ctype.h.
3359
3360 2003-09-17  Hrvoje Niksic  <hniksic@xemacs.org>
3361
3362         * url.c: Undef U, W, C after use.
3363
3364 2003-09-17  Hrvoje Niksic  <hniksic@xemacs.org>
3365
3366         * init.c (cmd_spec_restrict_file_names): Allow the OS setting to
3367         be augmented by ",nocontrol" which means don't escape the control
3368         characters, but otherwise keep OS settings.
3369
3370         * url.c (file_unsafe_char): Deleted.
3371         (append_uri_pathel): Query filechr_table directly.
3372         (filechr_table): Separated Unix, Windows, and control-unsafe
3373         characters.
3374
3375 2003-09-17  Hrvoje Niksic  <hniksic@xemacs.org>
3376
3377         * url.c (url_escape_1): New function.
3378         (url_escape): Use it.
3379         (sync_path): Handle pathological cases where u->file and u->dir
3380         contain really strange characters.
3381         (ENCODE): Deleted.
3382         (REENCODE): Deleted.
3383
3384 2003-09-16  Hrvoje Niksic  <hniksic@xemacs.org>
3385
3386         * url.c (url_file_name): Don't reallocate FNAME if the file
3387         doesn't exist, as is usually the case.
3388
3389         * utils.c (unique_name): New flag allow_passthrough.
3390
3391 2003-09-16  Hrvoje Niksic  <hniksic@xemacs.org>
3392
3393         * utils.c (wtimer_sys_diff): Convert the time difference to signed
3394         __int64, then to double.  This works around MS VC++ 6 which can't
3395         convert unsigned __int64 to double directly.
3396
3397 2003-09-16  Hrvoje Niksic  <hniksic@xemacs.org>
3398
3399         * Makefile.in (clean): Also remove the core.<number> files
3400         produced by recent Linux systems.
3401
3402 2003-09-16  Hrvoje Niksic  <hniksic@xemacs.org>
3403
3404         * http.c (post_file): Don't pad the file if it's not large
3405         enough.  Bail out instead.
3406
3407 2003-09-15  Hrvoje Niksic  <hniksic@xemacs.org>
3408
3409         * retr.c (get_contents): Reduce the buffer size to the amount of
3410         data that may pass through for one second.  This prevents long
3411         sleeps when limiting bandwidth.
3412
3413         * connect.c (connect_to_one): Reduce the socket's RCVBUF when
3414         bandwidth limitation to small values is requested.
3415
3416 2003-09-15  Hrvoje Niksic  <hniksic@xemacs.org>
3417
3418         * progress.c (update_speed_ring): Moved the speed ring update to a
3419         separate function and documented it better.
3420
3421         * progress.c: Use `double' for most timers to support granularity
3422         smaller than 1ms.
3423
3424 2003-09-15  Hrvoje Niksic  <hniksic@xemacs.org>
3425
3426         * wget.h (XDIGIT_TO_XCHAR): Implement as index into a literal
3427         string.
3428         (XDIGIT_TO_xchar): Ditto.
3429
3430 2003-09-15  Hrvoje Niksic  <hniksic@xemacs.org>
3431
3432         * utils.c: Change the type of timer-related functions from long to
3433         double, for better precision.  On machines supporting gettimeofday
3434         the timers now work with granularity of less than one millisecond.
3435
3436 2003-09-15  Hrvoje Niksic  <hniksic@xemacs.org>
3437
3438         * cookies.c (parse_set_cookies): Fixed the parser to handle more
3439         edge conditions.
3440         (test_cookies): New function, contains a test suite for
3441         parse_set_cookies.
3442
3443 2003-09-15  Hrvoje Niksic  <hniksic@xemacs.org>
3444
3445         * url.c (strpbrk_or_eos): Implement as a macro under Gcc.
3446
3447 2003-09-15  Hrvoje Niksic  <hniksic@xemacs.org>
3448
3449         * cookies.c (parse_set_cookies): Allow trailing space in
3450         set-cookies header.  Also, allow any amount of whitespace, not
3451         only one character.  Allow empty set-cookies header without
3452         spewing an error.
3453
3454 2003-09-14  Hrvoje Niksic  <hniksic@xemacs.org>
3455
3456         * url.c (append_uri_pathel): Use opt.restrict_file_names when
3457         calling file_unsafe_char.
3458
3459         * init.c: New command restrict_file_names.
3460
3461         * main.c (main): New option --restrict-file-names[=windows,unix].
3462
3463         * url.c (url_file_name): Renamed from url_filename.
3464         (url_file_name): Add directory and hostdir prefix here, not in
3465         mkstruct.
3466         (append_dir_structure): New function, does part of the work that
3467         used to be in mkstruct.  Iterates over path elements in u->path,
3468         calling append_uri_pathel on each one to append it to the file
3469         name.
3470         (append_uri_pathel): URL-unescape a path element and reencode it
3471         with a different set of rules, more appropriate for handling of
3472         files.
3473         (file_unsafe_char): New function, uses a lookup table to decide
3474         whether a character should be escaped for use in file name.
3475         (append_string): New utility function.
3476         (append_char): Ditto.
3477         (file_unsafe_char): New argument restrict_for_windows, decide
3478         whether Windows file names should be escaped in run-time.
3479
3480         * connect.c: Include <stdlib.h> to get prototype for abort().
3481
3482 2003-09-14  Hrvoje Niksic  <hniksic@xemacs.org>
3483
3484         * utils.c (wtimer_sys_set): Extracted the code that sets the
3485         current time here.
3486         (wtimer_reset): Call it.
3487         (wtimer_sys_diff): Extracted the code that calculates the
3488         difference between two system times here.
3489         (wtimer_elapsed): Call it.
3490         (wtimer_elapsed): Don't return a value smaller than the previous
3491         one, which could previously happen when system time is set back.
3492         Instead, reset start time to current time and note the elapsed
3493         offset for future calculations.  The returned times are now
3494         guaranteed to be monotonically nondecreasing.
3495
3496 2003-09-10  Hrvoje Niksic  <hniksic@xemacs.org>
3497
3498         * host.c (lookup_host): Print the result of the DNS lookup.
3499
3500 2003-09-10  Hrvoje Niksic  <hniksic@xemacs.org>
3501
3502         * init.c (cmd_boolean): Accept yes/no along with on/off.
3503         (cmd_lockable_boolean): Ditto.
3504
3505 2003-09-10  Hrvoje Niksic  <hniksic@xemacs.org>
3506
3507         * init.c: New command dns_cache.
3508
3509         * main.c (main): New option --dns-cache[=off].
3510
3511 2003-09-09  Hrvoje Niksic  <hniksic@xemacs.org>
3512
3513         * config.h.in: Initialize HAVE_GETADDRINFO and ENABLE_IPV6.
3514
3515         * all: Use #ifdef ENABLE_IPV6 instead of the older INET6.  Use
3516         HAVE_GETADDRINFO for getaddrinfo-related stuff.
3517
3518 2003-09-09  Hrvoje Niksic  <hniksic@xemacs.org>
3519
3520         * url.c (url_parse): Return an error if the URL contains a [...]
3521         IPv6 numeric address and we don't support IPv6.
3522
3523 2003-09-05  Hrvoje Niksic  <hniksic@xemacs.org>
3524
3525         * url.c (is_valid_ipv6_address): Modified to not require
3526         zero-terminated strings.
3527         (is_valid_ipv4_address): Ditto.
3528
3529 2003-09-05  Mauro Tortonesi <mauro@deepspace6.net>
3530
3531         src/url.c: added RFC 2732 compliance for URL parsing. The
3532         functions is_*_address valid are a modified version of
3533         glibc 2.3.2 inet_pton's code.
3534
3535 2003-09-03  Ahmon Dancy  <dancy@dancysoft.com>
3536
3537         * main.c init.c options.h: Added --retry-connrefused option so
3538         that Connection Refused failures are treated as non-fatal (when
3539         trying to retrieve from busy servers).
3540
3541         * wget.h: New CONNECT_ERROR macro for encapsulating this
3542         modification.
3543
3544         * ftp.c http.c : Use CONNECT_ERROR macro in places where
3545         ECONNREFUSED was checked.
3546
3547 2003-01-11  Ian Abbott  <abbotti@mev.co.uk>
3548
3549         * ftp.c (ftp_retrieve_glob): Reject insecure filenames as determined
3550         by calling new function has_insecure_name_p.  This is based on a
3551         patch by Red Hat.
3552
3553         * fnmatch.c (has_insecure_name_p): New function: returns non-zero
3554         if filename starts with `/' or contains `../' and is therefore
3555         considered insecure.
3556
3557         * fnmatch.h: Declare has_insecure_name_p().
3558
3559 2002-08-03  Hrvoje Niksic  <hniksic@xemacs.org>
3560
3561         * init.c (cmd_file): Allocate RESULT correctly.
3562
3563 2002-07-24  Hrvoje Niksic  <hniksic@xemacs.org>
3564
3565         * recur.c (retrieve_tree): Check whether downloaded_html_set is
3566         non-NULL before using it.
3567
3568 2002-05-27  Hrvoje Niksic  <hniksic@arsdigita.com>
3569
3570         * html-parse.c (NAME_CHAR_P): Allow almost any character here.
3571
3572 2002-05-24  Hrvoje Niksic  <hniksic@arsdigita.com>
3573
3574         * progress.c (bar_set_params): Fall back to dot progress if the
3575         terminal type is "emacs".
3576
3577 2002-05-20  Hrvoje Niksic  <hniksic@arsdigita.com>
3578
3579         * log.c: Don't #undef WGET_USE_STDARG.
3580
3581 2002-05-16  Hrvoje Niksic  <hniksic@arsdigita.com>
3582
3583         * hash.c (prime_size): Store the offset of the prime number in the
3584         prime table.  When searching, start with the given offset.
3585         (hash_table_new): Pass the pointer to ht->prime_offset to
3586         prime_size.
3587         (grow_hash_table): Ditto.
3588         (prime_size): Make 13 the first prime to make empty hash tables
3589         slightly smaller.
3590
3591 2002-05-16  Ian Abbott  <abbotti@mev.co.uk>
3592
3593         * recur.c (download_child_p): Minor optimization to avoid an
3594         unnecessary additional call to schemes_are_similar_p function.
3595
3596 2002-05-16  Ian Abbott  <abbotti@mev.co.uk>
3597
3598         * url.c (schemes_are_similar_p): New function to test enumerated
3599         scheme codes for similarity.
3600
3601         * url.h: Declare it.
3602
3603         * recur.c (download_child_p): Use it to compare schemes.  This
3604         also fixes a bug that allows hosts to be spanned (without the
3605         -H option) when the parent scheme is https and the child's is
3606         http or vice versa.
3607
3608 2002-05-14  Bill Richardson  <bill@riverstonenet.com>
3609
3610         * ftp.c (getftp): Don't ftruncate stdout.
3611
3612         * http.c (gethttp): Don't ftruncate stdout.
3613
3614 2002-05-09  Ian Abbott  <abbotti@mev.co.uk>
3615
3616         * cmpt.c (strptime_internal): Synched with glibc-2.1.3.
3617         (get_number): Ditto.
3618         (get_alt_number): Ditto.
3619         (__isleap): New function-like macro used by strptime.
3620         (day_of_the_week): New function used by strptime.
3621         (day_of_the_year): Ditto.
3622         (__mon_yday): Now shared by mktime and strptime implementations.
3623
3624 2002-05-08  Hrvoje Niksic  <hniksic@arsdigita.com>
3625
3626         * cookies.c (check_domain_match): Use match_tail in case
3627         insensitive mode.
3628
3629         * utils.c (match_tail): Allow the caller to specify case
3630         insensitive mode.
3631
3632         * cookies.c (store_cookie): When expiry_time is 0, print it as
3633         undefined, not indefinite.
3634
3635 2002-05-07  Ian Abbott  <abbotti@mev.co.uk>
3636
3637         * cookies.c (cookie_jar_process_set_cookie): Do not store
3638         discarded cookie.
3639
3640 2002-04-21  Hrvoje Niksic  <hniksic@arsdigita.com>
3641
3642         * cookies.c (check_domain_match): Allow cookies to be set for
3643         subdomains of unknown top-level domains under some circumstances.
3644
3645 2002-04-21  Thomas Lussnig  <thomas.lussnig@bewegungsmelder.de>
3646
3647         * gen_ssl.c:
3648         - allow checking of server cert
3649         - allow defining client cert type
3650         - allow limit of ssl protocol
3651         - check more return values
3652         - added debug message on break
3653
3654 2002-04-21  Hrvoje Niksic  <hniksic@arsdigita.com>
3655
3656         * recur.c (download_child_p): Revert order of items in check
3657         number 6 for clarity.
3658
3659 2002-04-20  Hrvoje Niksic  <hniksic@arsdigita.com>
3660
3661         * init.c: Ditto.
3662
3663         * main.c: Ditto.
3664
3665         * http.c: Use the new interface.
3666
3667         * cookies.c: Provide an OO-style "cookie jar" interface to enable
3668         separate cookie jars.
3669
3670         * http.c (http_atotm): Declare argument as const.
3671
3672 2002-04-20  Hrvoje Niksic  <hniksic@arsdigita.com>
3673
3674         * cookies.c (cookie_new): Default to PORT_ANY.
3675         (find_cookie_chain_exact): Only search by DOMAIN.
3676         (find_matching_cookie): Also check that PORT matches.
3677         (store_cookie): Only match the domain.
3678         (set_cookie_header_cb): When a cookie "fakes" a domain, assume it
3679         is valid for that host rather than discarding it completely.
3680         (find_matching_chains): Don't search by PORT.
3681         (matching_cookie): Also match PORT.
3682         (load_cookies): Set the port if specified, otherwise leave it as
3683         ANY.
3684         (save_cookies_mapper): Save the port if specified, otherwise leave
3685         it empty.
3686
3687 2002-04-19  Thomas Lussnig  <thomas.lussnig@bewegungsmelder.de>
3688
3689         * init.c: The option `egdfile' was not in sort order.
3690
3691 2002-04-16  Hrvoje Niksic  <hniksic@arsdigita.com>
3692
3693         * ftp.c (getftp): Treat directories that begin with <letter>: as
3694         absolute.
3695         (getftp): Strip trailing slashes from con->id before merging it
3696         with TARGET.
3697
3698 2002-04-16  Hrvoje Niksic  <hniksic@arsdigita.com>
3699
3700         * http.c (gethttp): If Content-Type is not given, assume
3701         text/html.
3702
3703 2002-04-15  Hrvoje Niksic  <hniksic@arsdigita.com>
3704
3705         * recur.c (download_child_p): Don't ignore rejection of HTML
3706         documents that are themselves leaves of recursion.
3707
3708 2002-04-15  Ian Abbott  <abbotti@mev.co.uk>
3709
3710         Makefile.in: Updated several dependencies for object files to take
3711         account of nested include files.
3712
3713 2002-04-15  Ian Abbott  <abbotti@mev.co.uk>
3714
3715         Makefile.in: The target `connect$o' (connect.o) now depends on
3716         `utils.h'
3717
3718 2002-04-15  Ian Abbott  <abbotti@mev.co.uk>
3719
3720         * host.c (SET_H_ERRNO): New function-like macro to set `h_errno'.
3721         (gethostbyname_with_timeout): Use it.
3722
3723         * utils.c: Don't define `SETJMP()', `run_with_timeout_env' or
3724         `abort_run_with_timeout()' when `USE_SIGNAL_TIMEOUT' is undefined.
3725
3726 2002-04-15  Hrvoje Niksic  <hniksic@arsdigita.com>
3727
3728         * host.c (getaddrinfo_with_timeout): New function.
3729         (gethostbyname_with_timeout): Ditto.
3730         (lookup_host): Use them.
3731
3732 2002-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
3733
3734         * utils.c (number_to_string): Handle the case when n < -INT_MAX.
3735
3736 2002-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
3737
3738         * init.c (comind): Use a marginally faster implementation of
3739         binary search.  To quote Martin Buchholz, "a nanosecond saved is a
3740         nanosecond earned."
3741
3742 2002-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
3743
3744         * main.c (print_help): Document `--post-data' and `--post-file'.
3745
3746 2002-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
3747
3748         * http.c (gethttp): Ditto.
3749
3750         * retr.c (retrieve_url): Initialize variables to appease the
3751         compiler.
3752
3753         * gen_sslfunc.c (ssl_iread): Don't handle EINTR when calling
3754         select_fd.
3755         (ssl_iwrite): Ditto.
3756
3757         * connect.c (select_fd): Rewrite to handle EINTR.  Set errno to
3758         ETIMEDOUT in case of timeout.
3759         (iread): No need to handle EINTR when calling select_fd.
3760         (iwrite): Ditto.
3761
3762 2002-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
3763
3764         * retr.c (retrieve_url): Make sure that POST is not honored for
3765         redirections.
3766
3767         * http.c (gethttp): Send the POST data when requested.
3768         (post_file): New function.
3769         (gethttp): Use it.
3770
3771         * main.c (main): Ditto.
3772
3773         * init.c: Add new options.
3774
3775         * options.h (struct options): New options post_data and
3776         post_file_name.
3777
3778 2002-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
3779
3780         * connect.c (connect_with_timeout): Firing SIGALRM can result in
3781         connect() exiting with EINTR.  Treat EINTR the same as ETIMEDOUT.
3782
3783 2002-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
3784
3785         * connect.c (connect_with_timeout): Use it.
3786
3787         * utils.c (run_with_timeout): New function.
3788
3789 2002-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
3790
3791         * url.c (getproxy): Accept a struct url argument.  This obviates
3792         the need for USE_PROXY_P.
3793
3794         * retr.c (retrieve_url): Allow proxy to be a non-FTP URL.
3795
3796         * ftp.c (getftp): Recognize FWTK-style proxy.
3797
3798 2002-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
3799
3800         * config.h.in: Only define _VA_LIST when compiled with gcc.
3801
3802 2002-04012  Ian Abbott  <abbotti@mev.co.uk>
3803
3804         * http.c (http_loop): Compensate for MS Windows two-second
3805         granularity of file modification time when comparing timestamps.
3806
3807         * ftp.c (ftp_retrieve_list): Ditto.
3808
3809 2002-04-12  Ian Abbott  <abbotti@mev.co.uk>
3810
3811         * utils.c (has_html_suffix_p): New function to test filename for
3812         common html extensions.
3813
3814         * utils.h: Declare it.
3815
3816         * http.c (http_loop): Use it instead of previous test.
3817
3818         * retr.c (retrieve_url): Ditto.
3819
3820         * recur.c (download_child_p): Ditto.
3821
3822 2002-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
3823
3824         * config.h.in: Define _VA_LIST on Solaris to prevent stdio.h from
3825         declaring va_list.
3826         From Kevin Rodgers <kevinr@ihs.com>.
3827
3828 2002-04-12  Ian Abbott  <abbotti@mev.co.uk>
3829
3830         * Makefile.in: Specify libtool mode explicitly when linking.
3831
3832 2002-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
3833
3834         * connect.c (connect_with_timeout): New function.
3835         (connect_to_one): Use it.
3836
3837         * config.h.in: Add stubs for HAVE_SIGSETJMP, HAVE_SIGBLOCK, and
3838         HAVE_SETJMP_H.
3839
3840 2002-04-11  Hrvoje Niksic  <hniksic@arsdigita.com>
3841
3842         * log.c: Set WGET_USE_STDARG if __STDC__ is defined and stdarg.h
3843         is present.
3844
3845 2002-04-11  Hrvoje Niksic  <hniksic@arsdigita.com>
3846
3847         * progress.c (bar_create): If INITIAL is larger than TOTAL, fix
3848         TOTAL.
3849         (bar_finish): Likewise.
3850
3851 2002-04-11  Hrvoje Niksic  <hniksic@arsdigita.com>
3852
3853         * html-url.c (tag_handle_form): New function.  Pick up form
3854         actions and mark them for conversion only.
3855
3856 2002-04-11  Hrvoje Niksic  <hniksic@arsdigita.com>
3857
3858         * progress.c (struct progress_implementation): Use PARAMS when
3859         declaring the parameters of *create, *update, *finish, and
3860         *set_params.
3861
3862         * netrc.c: Ditto.
3863
3864         * http.c: Reformat some function definitions so that ansi2knr can
3865         read them.
3866
3867         * hash.c (struct hash_table): Use the PARAMS macro around
3868         parameters in the declaration of hash_function and test_function.
3869         (prime_size): Spell 2580823717UL and 3355070839UL as (unsigned
3870         long)0x99d43ea5 and (unsigned long)0xc7fa5177 respectively, so
3871         that pre-ANSI compilers can read them.
3872         (find_mapping): Use PARAMS when declaring EQUALS.
3873         (hash_table_put): Ditto.
3874
3875         * ftp.h: Wrap the parameters of ftp_index declaration in PARAMS.
3876
3877         * cookies.c (cookie_new): Use (unsigned long)0 instead of 0UL,
3878         which was unsupported by pre-ANSI compilers.
3879
3880         From Nelson H. F. Beebe <beebe@math.utah.edu>, for the most part.
3881
3882 2002-04-11  Hrvoje Niksic  <hniksic@arsdigita.com>
3883
3884         * url.c (url_filename): Use compose_file_name regardless of
3885         whether opt.dirstruct is set.
3886         (mkstruct): Don't handle the query and the reencoding of DIR; that
3887         is done in compose_file_name.
3888
3889 2002-04-10  Hrvoje Niksic  <hniksic@arsdigita.com>
3890
3891         * wget.h: Ditto for extern char *exec_name.
3892
3893         * options.h: Don't guard against OPTIONS_DEFINED_HERE -- it is
3894         perfectly legal to follow an `extern' with a non-`extern' ones,
3895         provided the types match.
3896
3897         * main.c: Don't define OPTIONS_DEFINED_HERE.
3898
3899 2002-04-10  Hrvoje Niksic  <hniksic@arsdigita.com>
3900
3901         * progress.c (create_image): Revert to calculating ETA based on
3902         average download speed.
3903         (create_image): Don't print ETA until the download has been active
3904         for at least 3 seconds.
3905         (create_image): When ETA is not available, don't print anything.
3906         The previous version would print --:--.
3907
3908 2002-04-10  Hrvoje Niksic  <hniksic@arsdigita.com>
3909
3910         * progress.c (bar_update): Keep updating a subinterval until it
3911         reaches or exceeds a watermark.  That way the measurement will be
3912         guaranteed to span a configurable minimum of time.  The current
3913         default is 3s in 30 100ms intervals.
3914
3915 2002-04-09  Hrvoje Niksic  <hniksic@arsdigita.com>
3916
3917         * progress.c (bar_update): Maintain an array of the time it took
3918         to perform previous 30 network reads.
3919         (create_image): Calculate the download speed and ETA based on the
3920         last 30 reads, not the entire download.
3921         (create_image): Make sure that the ETA is not changed more than
3922         once per second.
3923
3924 2002-04-09  Ian Abbott  <abbotti@mev.co.uk>
3925
3926         * mswindows.c (borland_utime): New function conditionally defined
3927         when `HACK_BCC_UTIME_BUG' is defined.  A reimplementation of
3928         `utime()' as Borland's `utime()' function is broken on Windows 9x
3929         systems.  (Original patch by Chin-yuan Kuo <sr1111111@yahoo.com.tw>.)
3930
3931 2002-04-08  Hrvoje Niksic  <hniksic@arsdigita.com>
3932
3933         * ftp.c (ftp_loop): Propagate the result of ftp_retrieve_glob.
3934
3935 2002-03-26  Ian Abbott  <abbotti@mev.co.uk>
3936
3937         * Makefile.in: Updated several dependencies for object files.
3938
3939 2002-03-20  Ian Abbott  <abbotti@mev.co.uk>
3940
3941         * mswindows.c: Include "utils.h".
3942
3943 2002-03-18  Ian Abbott  <abbotti@mev.co.uk>
3944
3945         * host.h: Don't include netdb.h on windows.
3946
3947 2002-02-19  Hrvoje Niksic  <hniksic@arsdigita.com>
3948
3949         * recur.c (retrieve_tree): Handle the case when start_url doesn't
3950         parse.
3951
3952 2002-02-19  Andreas Damm  <andreas-sourceforge@radab.org>
3953
3954         * wget.h (DO_REALLOC_FROM_ALLOCA): Multiply with sizeof(type) when
3955         calling xmalloc and memcpy.
3956
3957 2002-02-19  Hrvoje Niksic  <hniksic@arsdigita.com>
3958
3959         * host.h: Include Unix-specific includes #ifndef WINDOWS.
3960         Patch originally provided by Christian Lackas.
3961
3962 2002-02-11  Christian Lackas  <delta@lackas.net>
3963
3964         * recur.c: recurive downloading for https fixed.
3965
3966 2002-02-19  Alan Eldridge  <alane@geeksrus.net>
3967
3968         * host.h: Also include <netinet/in.h> and <sys/socket.h>.
3969
3970         * ftp-basic.c: Also include <netinet/in.h>.
3971
3972 2002-02-05  Ian Abbott  <abbotti@mev.co.uk>
3973
3974         * http.c (gethttp): when -c used, mark already fully retrieved
3975         file as successfully retrieved.
3976
3977 2002-02-19  Hrvoje Niksic  <hniksic@arsdigita.com>
3978
3979         * url.c (url_parse): Don't treat '?' as query string separator
3980         when parsing FTP URLs.
3981
3982 2002-02-01  Hrvoje Niksic  <hniksic@arsdigita.com>
3983
3984         * html-url.c (tag_handle_meta): Don't crash on <meta
3985         http-equiv=refresh> where content is missing.
3986
3987 2002-01-31  Herold Heiko  <Heiko.Herold@previnet.it>
3988
3989         * ftp-basic.c, host.c: don't include sys/socket.h, arpa/inet.h,
3990         netdb.h on windows.
3991
3992 2002-01-30  Hrvoje Niksic  <hniksic@arsdigita.com>
3993
3994         * retr.c (retrieve_url): Remove redirection cycle detection.  This
3995         is because some sites legitimately redirect the user back to the
3996         same location, e.g. after an authorization check performed by
3997         another page.  MAX_REDIRECTIONS is still used to prevent infinite
3998         redirection loops.
3999
4000 2002-01-26  Hrvoje Niksic  <hniksic@arsdigita.com>
4001
4002         * http.c (gethttp): Wrap host name in square brackets if it
4003         contains a colon.
4004
4005 2002-01-26  Hrvoje Niksic  <hniksic@arsdigita.com>
4006
4007         * url.c (url_parse): Allow all hex digits, not only decimal ones,
4008         to form an IP address.
4009
4010 2002-01-26  Hrvoje Niksic  <hniksic@arsdigita.com>
4011
4012         * url.c (urlchr_table): Make square braces reserved, so we can
4013         parse http://[::1]/.
4014         (url_parse): Handle host in braces.
4015         (url_string): If url->host contains colons, wrap it in braces.
4016
4017 2002-01-24  Hrvoje Niksic  <hniksic@arsdigita.com>
4018
4019         * connect.c (resolve_bind_address): New function.
4020         (connect_to_one): Use it.
4021         (bindport): Ditto.
4022
4023         * init.c: Don't resolve bind-address here.
4024
4025         * host.c (wget_sockaddr_set_address): Would bug out with ADDR == NULL.
4026
4027 2002-01-24  Hrvoje Niksic  <hniksic@arsdigita.com>
4028
4029         * host.c (lookup_host): Use sizeof(ip4_address) to calculate the
4030         offset.
4031         (address_list_new): Use map_ipv4_to_ip.
4032         (wget_sockaddr_set_address): Convert ADDR to IPv4 before using it
4033         in IPv4 context.
4034
4035 2002-01-24  Hrvoje Niksic  <hniksic@arsdigita.com>
4036
4037         * source: Integrated IPv6 support.
4038         Written by Thomas Lussnig <thomas.lussnig@bewegungsmelder.de>.
4039
4040 2002-01-15  Ian Abbott  <abbotti@mev.co.uk>
4041
4042         * init.c (cmd_file): Change `\' to `/' for Windows (yes, really!)
4043         (cmd_directory): New function. Like cmd_file(), but strips
4044         trailing directory separators.
4045         (commands): Change action for "dirprefix" from `cmd_file' to
4046         `cmd_directory'.
4047
4048         * utils.c (make_directory): Allow intermediate `mkdir' calls to
4049         fail, as not all path components that do not exist should be
4050         directory components, especially under Windows.
4051
4052 2002-01-17  Hrvoje Niksic  <hniksic@arsdigita.com>
4053
4054         * netrc.c (parse_netrc): Skip leading whitespace before testing
4055         whether the line is empty.  Empty lines still contain the line
4056         terminator.
4057
4058 2002-01-15  Hrvoje Niksic  <hniksic@arsdigita.com>
4059
4060         * gen_sslfunc.c (ssl_iread): Call select on the file descriptor
4061         only if no data is pending in SSL buffers.
4062         From tony@bluetail.com.
4063
4064 2002-01-14  Hrvoje Niksic  <hniksic@arsdigita.com>
4065
4066         * headers.c (header_get): Strip trailing whitespace from the
4067         header.
4068
4069 2002-01-14  Hrvoje Niksic  <hniksic@arsdigita.com>
4070
4071         * url.c (parse_uname): URL-decode *USER and *PASSWD.
4072
4073 2002-01-07  Ian Abbott <abbotti@mev.co.uk>
4074
4075         * url.c (uri_merge_1): Deal with "net path" relative URL (one that
4076         starts with "//").
4077
4078 2002-01-14  Hrvoje Niksic  <hniksic@arsdigita.com>
4079
4080         * http.c (gethttp): Invalidate SOCK if get_contents encountered an
4081         error.
4082
4083 2001-12-24  Hrvoje Niksic  <hniksic@arsdigita.com>
4084
4085         * version.c: Wget 1.8.1 is released.
4086
4087 2001-12-19  Hrvoje Niksic  <hniksic@arsdigita.com>
4088
4089         * version.c: Wget 1.8.1-pre3 is released.
4090
4091 2001-12-19  Hrvoje Niksic  <hniksic@arsdigita.com>
4092
4093         * recur.c (retrieve_tree): Enqueue the canonical representation of
4094         start_url, so that the test against dl_url_file_map works.
4095
4096 2001-12-19  Hrvoje Niksic  <hniksic@arsdigita.com>
4097
4098         * log.c (logputs): Check for requested verbosity before printing
4099         anything.
4100
4101 2001-12-19  Hrvoje Niksic  <hniksic@arsdigita.com>
4102
4103         * html-url.c (tag_handle_link): Treat the "shortcut icon" link as
4104         inline.
4105
4106 2001-12-18  Hrvoje Niksic  <hniksic@arsdigita.com>
4107
4108         * recur.c (retrieve_tree): Make a copy of file obtained from
4109         dl_url_file_map because the code calls xfree(file) later.
4110
4111 2001-12-18  Hrvoje Niksic  <hniksic@arsdigita.com>
4112
4113         * recur.c (register_html): Maintain a hash table of HTML files
4114         along with the list.  Disallow duplicates.
4115         (retrieve_tree): Use downloaded_html_set to check whether the file
4116         found in dl_url_file_map is an HTML file, and descend into it if
4117         so.
4118         (convert_all_links): Don't guard against duplicates in
4119         downloaded_html_list, since they are no longer possible.
4120
4121 2001-12-18  Ian Abbott  <abbotti@mev.co.uk>
4122
4123         * recur.c (retrieve_tree): Pass on referring URL when retrieving
4124         recursed URL.
4125
4126 2001-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
4127
4128         * version.c: Wget 1.8.1-pre2 is released.
4129
4130 2001-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
4131
4132         * retr.c (sleep_between_retrievals): Simplify indentation.
4133
4134 2001-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
4135
4136         * gen_sslfunc.c (ssl_init_prng): Use random_number to get a byte
4137         of "randomness" at a time.
4138         (ssl_init_prng): Don't seed the PRNG; random_number will do that.
4139
4140         * retr.c (sleep_between_retrievals): Use it.  Make sure that the
4141         random amount averages in opt.wait.
4142         (sleep_between_retrievals): Don't seed the PRNG; random_number
4143         will do that.
4144
4145         * utils.c (random_number): New function.
4146
4147 2001-12-14  Hrvoje Niksic  <hniksic@arsdigita.com>
4148
4149         * url.c (path_simplify): Move here from utils.c, and make static.
4150
4151 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
4152
4153         * init.c (wgetrc_file_name): Print correct message when loading
4154         getenv("WGETRC") fails.
4155
4156 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
4157
4158         * recur.c (register_download): Don't abort when one URL references
4159         two different files.
4160
4161 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
4162
4163         * http.c (gethttp): Check for conn->scheme, not u->scheme, before
4164         calling ssl_iwrite.
4165
4166 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
4167
4168         * version.c: Wget 1.8.1-pre1 is released.
4169
4170 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
4171
4172         * res.c (matches): Fix broken URL in the docstring.
4173
4174 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
4175
4176         * html-url.c (tag_url_attributes): Mark <embed href=...> as
4177         external.
4178
4179 2001-12-12  Hrvoje Niksic  <hniksic@arsdigita.com>
4180
4181         * url.c (get_urls_file): Cosmetic changes.
4182
4183 2001-12-12  Hrvoje Niksic  <hniksic@arsdigita.com>
4184
4185         * html-url.c (append_one_url): Resurrect warning when unable to
4186         resolve a relative link.
4187
4188 2001-12-12  Hrvoje Niksic  <hniksic@arsdigita.com>
4189
4190         * html-url.c (collect_tags_mapper): Break into several functions.
4191         (tag_url_attributes): Collect <embed href=...>.
4192
4193 2001-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
4194
4195         * host.c: New type ipv4_address.  Use it consistently instead of
4196         `unsigned char[4]' and `unsigned char *'.
4197         (pretty_print_address): Accept a `const void *', to require even
4198         less casting.
4199
4200 2001-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
4201
4202         * ftp-ls.c (ftp_parse_vms_ls): Fix obvious memory leaks.
4203
4204 2001-12-10  Hrvoje Niksic  <hniksic@arsdigita.com>
4205
4206         * main.c (main): Initialize progress after fork_to_background, so
4207         that it knows when to use dots.
4208
4209         * mswindows.c (ws_hangup): Call log_request_redirect_output.
4210
4211         * utils.c (fork_to_background): Print the PID of the child
4212         process.
4213
4214         * log.c (log_request_redirect_output): Set a flag that output
4215         redirection has been requested.  Doing anything else in a signal
4216         handler is unsafe.
4217         (check_redirect_output): New function: check whether redirection
4218         has been requested and, if so, call redirect_output().
4219         (logputs): Call check_redirect_output.
4220         (logprintf): Ditto.
4221         (debug_logprintf): Ditto.
4222         (redirect_output): Print clearer messages.
4223
4224         * main.c (redirect_output_signal): Don't call
4225         redirect_output_signal directly.  Instead, call
4226         log_request_redirect_output.
4227
4228         * utils.c (memfatal): Ditto.
4229
4230         * progress.c (display_image): Use it.
4231
4232         * log.c (log_set_save_context): New function: allow the caller to
4233         turn off saving log context lines.
4234
4235 2001-12-10  Hrvoje Niksic  <hniksic@arsdigita.com>
4236
4237         * host.c (address_list_set_faulty): Uncomment a sanity check.
4238
4239 2001-12-10  Hrvoje Niksic  <hniksic@arsdigita.com>
4240
4241         * utils.c (long_to_string): Return a pointer after where the
4242         number ends.
4243         (long_to_string): Rename to number_to_string.
4244
4245 2001-12-10  Hrvoje Niksic  <hniksic@arsdigita.com>
4246
4247         * utils.c (path_simplify): Correctly handle the unlikely case that
4248         b starts out as path + 1.
4249
4250 2001-12-10  Hrvoje Niksic  <hniksic@arsdigita.com>
4251
4252         * utils.c (path_simplify): Rewrite, with better comments, and
4253         without the use of strcpy to move overlapping blocks.
4254
4255 2001-12-09  Hrvoje Niksic  <hniksic@arsdigita.com>
4256
4257         * init.c (cmd_spec_progress): Resurrect.  Check whether VAL is a
4258         valid progress type before setting it.
4259
4260 2001-12-09  Hrvoje Niksic  <hniksic@arsdigita.com>
4261
4262         * main.c (main): Remove stray debugging message.
4263
4264 2001-12-09  Hrvoje Niksic  <hniksic@arsdigita.com>
4265
4266         * progress.c (create_image): Fix ETA padding when hours are prined.
4267
4268 2001-12-09  Hrvoje Niksic  <hniksic@arsdigita.com>
4269
4270         * version.c: Wget 1.8 is released.
4271
4272 2001-12-09  Hrvoje Niksic  <hniksic@arsdigita.com>
4273
4274         * url.c (reencode_string): Declare static.
4275
4276         * res.c (registered_specs): Declare static.
4277
4278         * progress.c (current_impl_locked): Declare static.
4279
4280         * log.c (flush_log_p): Declare static.
4281         (needs_flushing): Ditto.
4282
4283         * http.c (digest_authentication_encode): Declare static.
4284
4285         * html-url.c (init_interesting): Declare static.
4286
4287         * host.c (host_name_addresses_map): Declare static.
4288
4289         * cookies.c (find_matching_chains): Declare static.
4290
4291         * ftp-ls.c (ftp_parse_vms_ls): Warn about the memory leak
4292         indicated by lint.
4293
4294         * utils.c (path_simplify): Remove unused variable STUB_CHAR.
4295
4296         * host.c (address_list_set_faulty): Document that INDEX is
4297         currently unused.
4298
4299         * url.c (rewrite_shorthand_url): Remove unused variable PATH.
4300
4301 2001-12-08  Hrvoje Niksic  <hniksic@arsdigita.com>
4302
4303         * version.c: Wget 1.8-pre2 is released.
4304
4305 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
4306
4307         * progress.c (progress_handle_sigwinch): Set up the signal again.
4308
4309         * utils.c: Include <sys/termios.h>, where Solaris defines
4310         TIOCGWINSZ.
4311
4312         * progress.c (bar_create): Don't use the last column on the screen.
4313         (create_image): Pad ETA to constant size.  Pad SIZE to nine digits
4314         only until it exceeded them.
4315
4316 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
4317
4318         * version.c: Wget 1.8-pre1 is released.
4319
4320 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
4321
4322         * progress.c (progress_create): Make sure that, when the output is
4323         redirected, the progress implementation gets changed to the
4324         fallback one.
4325         (bar_set_params): Set current_impl_locked to 1 when "force" is
4326         specified.
4327         (progress_create): Don't change the progress implementation if
4328         current_impl_locked is non-zero.
4329
4330         * main.c (redirect_output_signal): Call
4331         progress_schedule_redirect.
4332
4333         * progress.c (progress_schedule_redirect): New function.
4334
4335 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
4336
4337         * log.c (logvprintf): Restructure to allow being called multiple
4338         times.
4339         (logprintf): Call logvprintf in a loop.
4340         (debug_logprintf): Ditto.
4341
4342 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
4343
4344         * gen_sslfunc.c (ssl_init_prng): Allow the user to disable EGD by
4345         setting egd_file it to empty string.
4346
4347         * main.c (main): Change the option name from --sslegdsock to
4348         --egd-file.
4349
4350 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
4351
4352         * gen_sslfunc.c (ssl_init_prng): Make the printed message
4353         translatable.
4354
4355 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
4356
4357         * url.c (scheme_disable): New function.
4358
4359         * main.c (main): Call ssl_init_prng from here rather than from
4360         init_ssl, so that it has a chance to disable support for https
4361         before a URL has been resolved.
4362
4363         * gen_sslfunc.c (ssl_init_prng): Seed with rand() if all else
4364         failed.
4365         (ssl_init_prng): Disable support for https if seeding the PRNG
4366         fails.
4367
4368 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
4369
4370         * utils.c (read_whole_line): Handle lines beginning with \0.
4371
4372 2001-12-05  Hrvoje Niksic  <hniksic@arsdigita.com>
4373
4374         * recur.c (convert_all_links): Guard against duplicates in
4375         downloaded_html_files.
4376         (register_download): Don't invalidate similar-looking URLs.
4377         (match_except_index): New function.
4378
4379 2001-12-05  Hrvoje Niksic  <hniksic@arsdigita.com>
4380
4381         * utils.c (path_simplify): Document with test cases.
4382
4383 2001-12-04  Hrvoje Niksic  <hniksic@arsdigita.com>
4384
4385         * gen_sslfunc.c: Ditto.
4386
4387         * rbuf.c: Include <string.h>.
4388
4389 2001-12-04  Hrvoje Niksic  <hniksic@arsdigita.com>
4390
4391         * recur.c (retrieve_tree): Check whether the URL was already
4392         downloaded before downloading it again.
4393         (descend_child_p): Renamed to download_child_p.
4394         (register_download): When one URL is downloaded to a file already
4395         "owned" by another URL, delete all references that map any URL to
4396         that file.
4397         (register_delete_file): New function.
4398         (retrieve_tree): Use it after deleting a file.
4399
4400         * url.c (url_parse): Re-canonicalize the URL also if the path is
4401         empty, so that e.g. "http://www.server.com" ->
4402         "http://www.server.com/".
4403         (lowercase_str): Use ISUPPER instead of !ISLOWER.
4404
4405         * retr.c (retrieve_url): Use the canonical URL form when calling
4406         register_download().
4407
4408 2001-12-04  Ian Abbott <abbotti@mev.co.uk>
4409
4410         * snprintf.c (dopr): Use `unsigned int' as the second argument to
4411         va_arg when casting to `unsigned short' is intended.
4412
4413 2001-12-04  Herold Heiko  <Heiko.Herold@previnet.it>
4414
4415         * gen_sslfunc.c: on windows provide ssl crypto random
4416           initialization through RAND_screen(); could possibly
4417           be not enough for strong ssl communication (see the
4418           relevant manual page from the openssl package).
4419
4420 2001-12-04  Hrvoje Niksic  <hniksic@arsdigita.com>
4421
4422         * url.c (local_quote_string): Reenable quoting of question marks,
4423         but only when `--html-extension' is used.
4424
4425 2001-12-03  Hrvoje Niksic  <hniksic@arsdigita.com>
4426
4427         * version.c: Wget 1.8-beta3 is released.
4428
4429 2001-12-03  Hrvoje Niksic  <hniksic@arsdigita.com>
4430
4431         * snprintf.c (dopr): Cast the result of va_arg to short int and
4432         short unsigned int where these types are expected to be used.
4433
4434 2001-12-03  Hrvoje Niksic  <hniksic@arsdigita.com>
4435
4436         * snprintf.c (dopr): Replace `short int' and `unsigned short int'
4437         with `int' when using it as the second argument to `va_arg'.
4438
4439 2001-12-03  Hrvoje Niksic  <hniksic@arsdigita.com>
4440
4441         * host.c (address_list_new_one): New function.
4442         (lookup_host): Use it.
4443
4444 2001-12-03  Andre Majorel  <amajorel@teaser.fr>
4445
4446         * host.c (lookup_host): Don't initialize TMPSTORE directly because
4447         it's not legal C.
4448
4449 2001-12-03  Hrvoje Niksic  <hniksic@arsdigita.com>
4450
4451         * ftp-basic.c (ftp_port): Don't return HOSTERR if we fail getting
4452         the socket data.
4453
4454         * ftp.c: Ditto.
4455
4456         * http.c: No need to declare h_errno.
4457
4458         * host.c: Declare h_errno.
4459
4460 2001-12-02  Hrvoje Niksic  <hniksic@arsdigita.com>
4461
4462         * utils.c (file_merge): If BASE doesn't contain a slash, just
4463         return a copy of FILE.
4464
4465 2001-12-02  Hrvoje Niksic  <hniksic@arsdigita.com>
4466
4467         * version.c: Wget 1.8-beta2 is released.
4468
4469 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
4470
4471         * ftp.c (getftp): When PWD fails, assume "/".
4472
4473         * ftp-basic.c (ftp_syst): Fix indentation.
4474
4475 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
4476
4477         * url.c (get_urls_file): If opt.base_href is specified, merge each
4478         URL with the base.
4479
4480 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
4481
4482         * main.c (print_help): Don't document the removed `-nh'.
4483
4484 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
4485
4486         * url.c (url_full_path): Document better.
4487
4488         * http.c (gethttp): Use the full path when creating digest
4489         authorization.
4490
4491 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
4492
4493         * cookies.c (path_matches): Return 0 if PREFIX doesn't begin with
4494         '/'.
4495
4496 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
4497
4498         * cookies.c (path_matches): FULL_PATH doesn't begin with '/', but
4499         PREFIX does.
4500
4501 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
4502
4503         * cookies.c (check_domain_match): Reimplement to match Netscape's
4504         "preliminary specification" for cookies.
4505
4506 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
4507
4508         * url.c (replace_attr_refresh_hack): New function.
4509         (convert_links): Call replace_attr_refresh_hack for Refresh
4510         links.  It will add the "TMOUT; URL=" junk before the link.
4511
4512         * html-url.c (collect_tags_mapper): Set ID to the ID of the
4513         "content" attribute, not "http-equiv".
4514         (collect_tags_mapper): Don't use OFFSET to hack the raw_* values;
4515         instead, store the information that this entry belongs to a
4516         "refresh" link.
4517
4518 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
4519
4520         * version.c: Wget 1.8-beta1 is released.
4521
4522 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
4523
4524         * recur.c (retrieve_tree): Allow -p retrievals to exceed maximum
4525         depth by more than one.
4526
4527 2001-11-30  Hrvoje Niksic  <hniksic@arsdigita.com>
4528
4529         * retr.c (retrieve_url): Don't allow more than 20 redirections.
4530
4531 2001-11-30  Hrvoje Niksic  <hniksic@arsdigita.com>
4532
4533         * recur.c (retrieve_tree): Skip the non-inline entries when
4534         enqueuing the children of a leaf HTML node in -p mode.
4535         (descend_url_p): Ignore opt.no_parent when in -p mode and UPOS is
4536         "inline".
4537
4538         * html-url.c (get_urls_html): Don't accept dash_p_leaf_HTML.
4539         (collect_tags_mapper): When an entry is "inline", mark it as such.
4540
4541         * recur.c (descend_url_p): Fix test when checking for
4542         acceptance/rejection rules.
4543
4544 2001-10-31 Daniel BODEA <dali@dali-designs.com>
4545
4546         * netrc.c (search_netrc): When slack_default is 0, still look for
4547         an account with matching password, just not the "default account".
4548         HTTP Authorization using .netrc should now work as expected.
4549
4550 2001-11-30  T. Bharath  <TBharath@responsenetworks.com>
4551
4552         * http.c (persistent_available_p): Call SHUTDOWN_SSL if
4553         test_socket_open fails.
4554
4555 2001-11-30  Hrvoje Niksic  <hniksic@arsdigita.com>
4556
4557         * progress.c (display_image): Just print one CR to reset the
4558         cursor position.
4559
4560 2001-11-30  Christian Fraenkel  <c.fraenkel@gmx.net>
4561
4562         * init.c: New command `ssl_egd_sock'.
4563
4564         * main.c (main): New option `--sslegdsock'.
4565
4566         * gen_sslfunc.c (ssl_init_prng): Seed the RNG using EGD.
4567
4568 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
4569
4570         * cmpt.c (memmove): Include a simple memmove implementation.
4571
4572 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
4573
4574         * headers: Guard against header files being included twice.
4575
4576 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
4577
4578         * gen-md5.c: Use unsigned char * as the buffer argument to
4579         gen_md5_update.
4580
4581 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
4582
4583         * connect.h: Declare select_fd.
4584
4585 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
4586
4587         * recur.c (descend_url_p): When resolving no_parent, compare with
4588         start_url, not parent url.  Otherwise link from /a/b/ to /a/c/
4589         wouldn't be followed, although the download started from /a/.
4590
4591 2001-01-23  Herold Heiko  <Heiko.Herold@previnet.it>
4592
4593         * config.h.ms, mswindows.h: defined HAVE_ISATTY, use _isatty for
4594         MS VC; somebody with Borland compiler please check and provide
4595         patch if possible;
4596
4597         * cmpt.c: provided a usleep emulation.
4598
4599 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
4600
4601         * host.c (address_list_new): Initialize al->faulty.
4602
4603 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
4604
4605         * http.c (http_process_range): Accept the broken output of
4606         "JavaWebServer/1.1.1".
4607
4608 2001-11-28  Hrvoje Niksic  <hniksic@arsdigita.com>
4609
4610         * progress.c (dot_set_params): If PARAMS is unspecified, use
4611         dot_style, if available.
4612
4613         * init.c: Ditto.
4614
4615         * main.c (main): Resurect --dot-style.
4616
4617         * progress.c (dot_finish): Print the quantity if we're left at the
4618         beginning of a row.
4619
4620 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
4621
4622         * cmpt.c (random): Removed.
4623
4624         * retr.c (sleep_between_retrievals): Use the more portable rand()
4625         instead of random().
4626
4627 2001-11-27  Ian Abbott <abbotti@mev.co.uk>
4628
4629         * retr.c (retrieve_from_file): Initialize `new_file' to NULL to
4630         prevent seg fault.
4631
4632 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
4633
4634         * connect.c (connect_to_many): Use address_list_set_faulty to
4635         prevent the faulty address from being reused.
4636
4637         * host.c (address_list_set_faulty): New function.
4638         (address_list_get_bounds): New function, instead of
4639         address_list_count.
4640
4641 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
4642
4643         * url.c (convert_links): Don't translate %d-%d.
4644
4645         * main.c (print_help): Remove stray HAVE_RANDOM code.
4646
4647 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
4648
4649         * ftp.c (getftp): Improve output after sending PASV.  Don't
4650         attempt to "look up" the IP address we already know; call
4651         connect_to_one directly.
4652
4653 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
4654
4655         * progress.c: Change the default progress implementation to "bar".
4656
4657 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
4658
4659         * progress.c (bar_create): Print two newlines.
4660
4661 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
4662
4663         * cmpt.c (random): New function, a simple-minded replacement for
4664         random() on systems that don't have it.
4665
4666 2001-11-26  Hrvoje Niksic  <hniksic@arsdigita.com>
4667
4668         * config.h.in: Put a HAVE_USLEEP stub.
4669
4670         * cmpt.c (usleep): Replacement implementation of usleep using
4671         select.
4672
4673         * init.c: New option init_rate.
4674
4675         * main.c (main): New option --limit-rate.
4676
4677         * retr.c (limit_bandwidth): New function.
4678         (get_contents): Call it to limit the bandwidth used when
4679         downloading.
4680
4681         * progress.c (dot_update): Would print the wrong download speed on
4682         rows other than the first one when the download was continued.
4683         (dot_finish): Ditto.
4684
4685 2001-11-26  Ian Abbott <abbotti@mev.co.uk>
4686
4687         * http.c (gethttp): fix undeclared variable 'err' when compiled
4688         with HAVE_SSL.
4689
4690 2001-11-26  Hrvoje Niksic  <hniksic@arsdigita.com>
4691
4692         * progress.c: Don't allocate new timers; use the timing data
4693         propagated from the caller.
4694
4695         * retr.c (get_contents): Allocate and use a timer.
4696
4697 2001-11-26  Hrvoje Niksic  <hniksic@arsdigita.com>
4698
4699         * http.c (last_host_ip): Made into an address_list.
4700         (invalidate_persistent): Release pc_last_host_ip.
4701         (register_persistent): Use lookup_host.
4702         (persistent_available_p): Check for equality of hosts using
4703         address_list_match_all.  Call address_list_release.
4704         (http_cleanup): New function.
4705
4706         * ftp.c (getftp): Use lookup_host and connect_to_many.
4707
4708         * http.c (gethttp): Use lookup_host and connect_to_many.
4709
4710         * connect.c (make_connection): Removed.
4711         (connect_to_one): New function.
4712         (connect_to_many): Ditto.
4713         (set_connection_host_name): Ditto.
4714
4715         * host.c (lookup_host): New function; new return type.
4716         (address_list_new): New function.
4717         (address_list_count): Ditto.
4718         (address_list_copy_one): Ditto.
4719         (address_list_delete): Ditto.
4720         (address_list_release): Ditto.
4721         (pretty_print_address): Ditto.
4722
4723 2001-11-26  Hrvoje Niksic  <hniksic@arsdigita.com>
4724
4725         * recur.c (retrieve_tree): In case of followed redirection,
4726         blacklist the pre-redirection URL.
4727
4728 2001-11-26  Hrvoje Niksic  <hniksic@arsdigita.com>
4729
4730         * recur.c (descend_redirect_p): New function.
4731         (retrieve_tree): Make sure redirections are not blindly followed.
4732
4733 2001-11-04  Alan Eldridge  <alane@geeksrus.net>
4734
4735         * config.h.in: added HAVE_RANDOM.
4736
4737         * options.h: added random_wait to struct options.
4738
4739         * main.c (print_help [HAVE_RANDOM], main): added arg parsing, help
4740         for --random-wait.
4741
4742         * retr.c (sleep_between_retrievals) [HAVE_RANDOM]: added
4743         implementation of random wait times.
4744
4745         * init.c (commands): added "randomwait" keyword.
4746
4747 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
4748
4749         * recur.c (descend_url_p): Be more conservative with blacklisting
4750         URLs.
4751         (convert_all_links): Print how many files have been converted, and
4752         how long it took.
4753
4754         * progress.c (create_image): Place the number of downloaded bytes
4755         right after the progress bar.
4756
4757         * utils.c (suffix): Return a pointer into the string.
4758
4759 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
4760
4761         * url.c (convert_links): Handle CO_NULLIFY_BASE.
4762
4763         * recur.c (retrieve_tree): Ignore download-ignorable children.
4764         (convert_all_links): Specify CO_NULLIFY_BASE when link_base_p.
4765
4766         * html-url.c (handle_link): Return the newly created urlpos.
4767         (collect_tags_mapper): When dealing with BASE, store the base
4768         reference and mark it as download-ignorable.
4769
4770 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
4771
4772         * url.c (convert_links): Attempt to quote '?' as "%3F" when
4773         linking to local files.  Given up on the attempt, as it breaks
4774         local browsing.
4775
4776 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
4777
4778         * main.c (private_initialize): Removed.
4779         (main): Don't call private_initialize.
4780
4781         * http.c: Call lookup_host.
4782
4783         * host.c (host_init): Removed.
4784         (add_host_to_cache): Initialize host_name_address_map here, on
4785         demand.
4786         (ngethostbyname): Commented out.
4787
4788         * connect.c (make_connection): Remove dead code; use lookup_host.
4789
4790         * host.c (store_hostaddress): Renamed to lookup_host and reversed
4791         the args.
4792         Removed host_address_name_map and host_slave_master_map.
4793
4794 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
4795
4796         * progress.c (dot_create): Align the "[ skipping ... ]" string
4797         with the dots.
4798
4799         * retr.c (rate): Split into two functions: calc_rate and
4800         retr_rate.
4801
4802         * progress.c (create_image): Draw a dummy progress bar even when
4803         total size is unknown.
4804         (display_image): Place the text cursor at the end of the "image".
4805
4806 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
4807
4808         * url.c (reencode_string): Use unsigned char, not char --
4809         otherwise the hex digits come out wrong for 8-bit chars such as
4810         nbsp.
4811         (lowercase_str): New function.
4812         (url_parse): Canonicalize u->url if needed.
4813         (get_urls_file): Parse each URL, and return only the valid ones.
4814         (free_urlpos): Call url_free.
4815         (mkstruct): Add :port if the port is non-standard.
4816         (mkstruct): Append the query string to the file name, if any.
4817         (urlpath_length): Use strpbrk_or_eos.
4818         (uri_merge_1): Handle the cases where LINK is an empty string,
4819         where LINK consists only of query, and where LINK consists only of
4820         fragment.
4821         (convert_links): Count and report both kinds of conversion.
4822         (downloaded_file): Use a hash table, not a list.
4823         (downloaded_files_free): Free the hash table.
4824
4825         * retr.c (retrieve_from_file): Ditto.
4826
4827         * main.c (main): Call either retrieve_url or retrieve_tree
4828         for each URL, not both.
4829
4830         * retr.c (register_all_redirections): New function.
4831         (register_redirections_mapper): Ditto.
4832         (retrieve_url): Register the redirections.
4833         (retrieve_url): Make the string "Error parsing proxy ..."
4834         translatable.
4835
4836         * res.c (add_path): Strip leading slash from robots.txt paths so
4837         that the path representations are "compatible".
4838         (free_specs): Free each individual path, too.
4839         (res_cleanup): New function.
4840         (cleanup_hash_table_mapper): Ditto.
4841
4842         * recur.c (url_queue_new): New function.
4843         (url_queue_delete): Ditto.
4844         (url_enqueue): Ditto.
4845         (url_dequeue): Ditto.
4846         (retrieve_tree): New function, replacement for recursive_retrieve.
4847         (descend_url_p): New function.
4848         (register_redirection): New function.
4849
4850         * progress.c (create_image): Cosmetic changes.
4851
4852         * init.c (cleanup): Do all those complex cleanups only if
4853         DEBUG_MALLOC is defined.
4854
4855         * main.c: Removed --simple-check and the corresponding
4856         simple_host_check in init.c.
4857
4858         * html-url.c (handle_link): Parse the URL here, and propagate the
4859         parsed URL to the caller, who would otherwise have to parse it
4860         again.
4861
4862         * host.c (xstrdup_lower): Moved to utils.c.
4863         (realhost): Removed.
4864         (same_host): Ditto.
4865
4866 2001-11-24  Hrvoje Niksic  <hniksic@arsdigita.com>
4867
4868         * utils.c (path_simplify): Preserver the (non-)existence of
4869         leading slash.  Return non-zero if changes were made.
4870
4871 2001-11-24  Hrvoje Niksic  <hniksic@arsdigita.com>
4872
4873         * progress.c (bar_update): Don't modify bp->total_length if it is
4874         zero.
4875
4876 2001-11-24  Hrvoje Niksic  <hniksic@arsdigita.com>
4877
4878         * retr.c (retrieve_url): When the redirection URL doesn't parse,
4879         print the correct error message rather than "UNKNOWN".
4880
4881 2001-11-24  Hrvoje Niksic  <hniksic@arsdigita.com>
4882
4883         * progress.c (bar_finish): If the timer didn't record any time
4884         since the download beginning, fake 1ms.
4885
4886 2001-11-24  Hrvoje Niksic  <hniksic@arsdigita.com>
4887
4888         * recur.c (recursive_retrieve): Fix typo.
4889
4890 2001-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
4891
4892         * progress.c (create_image): Don't translate "%ld ".
4893
4894 2001-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
4895
4896         * progress.c (bar_set_params): Allow the user to force the use of
4897         the bar.
4898
4899 2001-11-23  Lemble Gregory  <gregory.lemble@st.com>
4900
4901         * gen_sslfunc.c (ssl_init_prng): New function; seed the SSL RNG.
4902
4903 2001-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
4904
4905         * progress.c: Renamed dp_* functions to dot_* for greater clarity
4906         and consistency with bar_*.
4907         (print_download_speed): Get rid of the unneeded '@' character.
4908         (create_image): Fix download rate geometry.
4909
4910         * progress.c (print_elapsed): Remove spurious space.
4911         (print_elapsed): Renamed to print_download_speed, since that's
4912         what it does.
4913
4914 2001-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
4915
4916         * progress.c (bar_update): If the downloaded amount becomes larger
4917         than the expected amount, adjust the expected amount accordingly.
4918
4919 2001-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
4920
4921         * utils.c (determine_screen_width): New function.
4922
4923         * main.c (main): New option `--progress=TYPE'.
4924         (main): Implement compatibility with the old option `--dot-style'.
4925
4926         * init.c: Removed cmd_spec_dotstyle -- that logic is now in
4927         dp_set_params.
4928         (cmd_spec_progress): New function.
4929
4930         * retr.c (get_contents): Use the progress_* functions instead of
4931         the old show_progress().
4932         (show_progress): Removed.
4933         (rate): Print "xxxx.xx K/s" instead of "KB/s".  Ditto for MB/s,
4934         etc.
4935
4936         * progress.c (set_progress_implementation): New function.
4937         (valid_progress_implementation_p): Ditto.
4938         (progress_create): Ditto.
4939         (progress_update): Ditto.
4940         (progress_finish): Ditto.
4941         (dp_create): Ditto.
4942         (dp_update): Ditto.
4943         (dp_finish): Ditto.
4944         (dp_set_params): Ditto.
4945         (print_elapsed): Ditto.
4946
4947 2001-11-22  Hrvoje Niksic  <hniksic@arsdigita.com>
4948
4949         * retr.c (show_progress): Use it.
4950
4951         * log.c (log_set_flush): New function.
4952
4953 2001-11-22  Hrvoje Niksic  <hniksic@arsdigita.com>
4954
4955         * utils.c (path_simplify): Don't remove trailing slashes.
4956
4957         * ftp.c (ftp_get_listing): Use it.
4958
4959         * utils.c (file_merge): New function.
4960
4961         * url.c (opt_url): Removed.
4962
4963         * recur.c (recursive_retrieve): Inline "opt_url" logic.
4964
4965         * main.c (main): Use xfree(), not free().
4966
4967         * url.c (rewrite_url_maybe): Renamed to rewrite_shorthand_url.
4968
4969         * ftp.c (ccon): Move `ccon' typedef here, since it's only used
4970         internally.
4971
4972         * config.h.in: Include a stub for HAVE_STRPBRK.
4973
4974         * cmpt.c (strpbrk): Include a replacement for systems without
4975         strpbrk().
4976
4977         * ftp.c: Use url_set_dir and url_set_file when modifying the URL.
4978
4979         * url.c (url_set_dir): New function.
4980         (url_set_file): Ditto.
4981
4982         * ftp-basic.c (ftp_process_type): Process FTP type here; the URL
4983         parser makes the URL "params" available, so we can do that in this
4984         function.
4985
4986         * retr.c: Ditto.
4987
4988         * ftp.c: Ditto; pass the local file information in `ccon'.
4989
4990         * http.c: Get rid of the ugly kludge that had URL being replaced
4991         with the proxy URL when proxy retrieval was requested.  Use a
4992         separate parameter to http_loop and gethttp for the proxy URL.
4993
4994         * http.c: Changed to reflect the fact that local file, proxy, and
4995         referer information are no longer stored in struct url.  The local
4996         file information is passed in `struct hstat' now.
4997
4998         * url.c: Reworked URL parsing to be more regular.  Reencode the
4999         URL using reencode_string.
5000         Removed non-URL-related information from struct url.  This
5001         includes fields `proxy', `local', and `referer'.
5002
5003 2001-11-22  Jochen Hein  <jochen@jochen.org>
5004
5005         * main.c (main): Split the copyright notice for easier
5006         translation.
5007
5008 2001-08-21  Dave Turner <dct25@hermes.cam.ac.uk>
5009
5010         * ftp-basic.c (ftp_size): New function to send non-standard SIZE
5011           command to server to request file size.
5012         * ftp.h (ftp_size): Export it.
5013         * ftp.c (getftp): Use new ftp_size function if restoring
5014           transfer of a file with unknown size.
5015
5016 2001-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
5017
5018         * url.c (parseurl): Don't depend on the now-obsolete TYPE.
5019
5020 2001-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
5021
5022         * url.c (getproxy): Handle URL shorthands.
5023
5024 2001-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
5025
5026         * main.c: Remove --wait / --waitretry backwards compatibility
5027         code.
5028
5029 2001-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
5030
5031         * main.c (main): Use it.
5032
5033         * url.c (rewrite_url_maybe): New function.
5034
5035 2001-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
5036
5037         * url.c: Clean up handling of URL schemes.
5038
5039 2001-05-13  Hrvoje Niksic  <hniksic@arsdigita.com>
5040
5041         * url.c: Get rid of `protostrings'.
5042         (skip_proto): Don't use protostrings.
5043         (has_proto): Ditto.
5044
5045 2001-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
5046
5047         * Makefile.in: Conditionally compile getopt.o.
5048
5049 2001-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
5050
5051         * md5.h: Renamed to gnu-md5.h.
5052
5053         * md5.c: Renamed to gnu-md5.c.
5054
5055         * http.c: Ditto.
5056
5057         * ftp-opie.c: Use the new macros.
5058
5059         * sysdep.h: Define md5-related macros.
5060
5061         * config.h.in: Define HAVE_SOLARIS_MD5 or HAVE_BUILTIN_MD5
5062         depending on which md5 implementation is used.
5063
5064 2001-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
5065
5066         * res.c (res_register_specs): Initialize OLD and HP_OLD to appease
5067         the compiler.
5068
5069 2001-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
5070
5071         * http.c (gethttp): Print the whole response line when printing
5072         headers is requested.
5073
5074 2001-05-12  Hrvoje Niksic  <hniksic@arsdigita.com>
5075
5076         * res.c: New file.  Implement all RES-related code here.
5077
5078 2001-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
5079
5080         * version.c: Wget 1.7.1 is released.
5081
5082 2001-11-16  Hrvoje Niksic  <hniksic@arsdigita.com>
5083
5084         * headers.c (header_extract_number): Ignore trailing whitespace.
5085
5086 2001-08-24  Ian Abbott  <abbotti@mev.co.uk>
5087
5088         * html-url.c (collect_tags_mapper): Fix bug converting links
5089         with -k option for tags with multiple link attributes by
5090         handling links in the order they appear.
5091
5092 2001-08-15  Ian Abbott  <abbotti@mev.co.uk>
5093
5094         * ftp.c (ftp_loop_internal): Avoid a potential buffer overflow in
5095           the call to the 'rate' function by moving it past the error
5096           checking for the 'getftp' function return value.
5097
5098 2001-11-16  Hrvoje Niksic  <hniksic@arsdigita.com>
5099
5100         * html-parse.c (advance_declaration): Use 0x22 instead of '"' or
5101         '\"'.  Different compilers' assert macros are broken in different
5102         ways.
5103
5104 2001-09-29  Christian Fraenkel  <c.fraenkel@gmx.net>
5105
5106         * http.c (gethttp): print debug output for errors occuring during
5107         the ssl handshake.
5108
5109 2001-11-16  Chris Seawood  <cls@seawood.org>
5110
5111         * init.c: Ditto.
5112
5113         * host.c: Ditto.
5114
5115         * connect.c: Ditto.
5116
5117         * sysdep.h: Support compilation under BEOS.
5118
5119 2001-06-08  Edward J. Sabol  <sabol@alderaan.gsfc.nasa.gov>
5120
5121         * url.c (url_equal): Fix a memory leak when parseurl returns an
5122         error on the second URL. Also, since url_equal is not used at the
5123         moment, do not compile it.
5124
5125         * url.h: Ditto for the prototype of url_equal.
5126
5127 2001-11-16  Hrvoje Niksic  <hniksic@arsdigita.com>
5128
5129         * html-parse.c (map_html_tags): Support XML-style empty tags.
5130
5131 2001-06-26  Hrvoje Niksic  <hniksic@arsdigita.com>
5132
5133         * wget.h (DO_REALLOC_FROM_ALLOCA): Check for do_realloc_newsize in
5134         loop condition because we're no longer setting SIZEVAR here.
5135
5136 2001-06-26  Hrvoje Niksic  <hniksic@arsdigita.com>
5137
5138         * wget.h (DO_REALLOC_FROM_ALLOCA): Set SIZEVAR after the memcpy()
5139         call because it needs the old value.
5140
5141 2001-06-18  Hrvoje Niksic  <hniksic@arsdigita.com>
5142
5143         * cookies.c (ATTR_NAME_CHAR): Allow almost any character to be in
5144         an attribute name.
5145
5146 2001-06-18  Hrvoje Niksic  <hniksic@arsdigita.com>
5147
5148         * url.c (url_filename): Make sure that slashes that sneak in to
5149         u->file via query string get protected.
5150         (file_name_protect_query_string): New function.
5151
5152 2001-06-14  Hrvoje Niksic  <hniksic@arsdigita.com>
5153
5154         * recur.c (recursive_retrieve): Also check undesirable_urls with
5155         canonicalized URL.
5156
5157 2001-06-14  Hrvoje Niksic  <hniksic@arsdigita.com>
5158
5159         * http.c (gethttp): Search `.netrc' with real host, not the proxy
5160         one.
5161
5162 2001-06-14  Hrvoje Niksic  <hniksic@arsdigita.com>
5163
5164         * sysdep.h (MAP_FAILED): Provide MAP_FAILED for systems that don't
5165         define it.
5166
5167 2001-06-09  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
5168
5169         * ftp.h: Provide correct prototype for ftp_parse_ls().
5170
5171 2001-06-04  Hrvoje Niksic  <hniksic@arsdigita.com>
5172
5173         * version.c: Wget 1.7 is released.
5174
5175 2001-06-03  Karl Eichwalder  <ke@suse.de>
5176
5177         * ftp-ls.c (ftp_parse_ls): Fix typo.
5178
5179 2001-05-27  Hrvoje Niksic  <hniksic@arsdigita.com>
5180
5181         * all: Update copyright information.
5182
5183 2001-05-26  Hrvoje Niksic  <hniksic@arsdigita.com>
5184
5185         * http.c (gethttp): Indicate that the continued download failed
5186         for *this* file.
5187
5188 2001-05-26  Hrvoje Niksic  <hniksic@arsdigita.com>
5189
5190         * version.c: Wget 1.7-pre1 is released.
5191
5192 2001-05-26  Hrvoje Niksic  <hniksic@arsdigita.com>
5193
5194         * version.c: Updated version to 1.7-pre1.
5195
5196 2001-05-14  Hrvoje Niksic  <hniksic@arsdigita.com>
5197
5198         * gen_sslfunc.c: Don't include <sys/time.h> directly.
5199
5200 2001-05-14  Hrvoje Niksic  <hniksic@arsdigita.com>
5201
5202         * http.c (gethttp): Use real URL data for cookies, not the proxy
5203         stuff.
5204
5205 2001-05-12  Hrvoje Niksic  <hniksic@arsdigita.com>
5206
5207         * main.c (print_help): Document `--no-http-keep-alive'.
5208
5209         * utils.c (numdigit): Handle negative numbers *correctly*.
5210
5211         * hash.c (make_nocase_string_hash_table): Use term "nocase" rather
5212         than the confusing "unsigned".
5213
5214         * utils.c (string_set_contains): Renamed from string_set_exists.
5215
5216         * hash.c (hash_table_contains): Renamed from hash_table_exists.
5217
5218         * cookies.c: Move case-insensitive hash tables to hash.c.
5219
5220 2001-05-09  Hrvoje Niksic  <hniksic@arsdigita.com>
5221
5222         * http.c (gethttp): Before concluding that the file is already
5223         fully retrieved, make sure that the file existed and `Range' was
5224         actually requested.
5225
5226 2001-05-09  Hrvoje Niksic  <hniksic@arsdigita.com>
5227
5228         * cookies.c (eliminate_dups): New function.
5229         (build_cookies_request): Use it.
5230         (build_cookies_request): Set chain_store_size after reallocating
5231         all_chains.
5232         (check_domain_match): Annotated for easier future debugging.
5233         (store_cookie): In the debug message, print whether the cookie is
5234         permanent.
5235
5236 2001-05-08  Hrvoje Niksic  <hniksic@arsdigita.com>
5237
5238         * http.c (http_loop): Reset no_truncate before deciding whether to
5239         set it.
5240         (gethttp): Further clarify "-c conflicts with existing file" error
5241         message, based on input from Herold Heiko.
5242
5243 2001-05-07  Hrvoje Niksic  <hniksic@arsdigita.com>
5244
5245         * http.c (http_loop): If restval is set, set no_truncate to 1
5246         unconditionally.
5247
5248 2001-05-02  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
5249
5250         * ftp-ls.c (ftp_parse_winnt_ls): Assure months are being correctly
5251         converted. Pointed out by <Stefan.Weil@de.heidelberg.com>.
5252         (ftp_parse_vms_ls): Ditto.
5253
5254 2001-04-30  Hrvoje Niksic  <hniksic@arsdigita.com>
5255
5256         * init.c (cmd_address): Zero SIN before using it; apparently
5257         needed on *BSD.
5258
5259 2001-04-29  Hrvoje Niksic  <hniksic@arsdigita.com>
5260
5261         * ftp.c (ftp_loop_internal): Don't set NO_TRUNCATE if the file is
5262         empty.
5263
5264 2001-04-29  Hrvoje Niksic  <hniksic@arsdigita.com>
5265
5266         * main.c (main): Make `--cookies' respect its argument.
5267
5268 2001-04-28  Hrvoje Niksic  <hniksic@arsdigita.com>
5269
5270         * main.c (main): Removed undocumented option `--email-address'.
5271
5272         * netrc.c: Use the latest read_whole_line.
5273
5274         * init.c (defaults): Set opt.ftp_pass to "-wget@".
5275
5276         * mswindows.c (pwd_cuserid): Ditto.
5277
5278         * utils.c (pwd_cuserid): Removed.
5279
5280         * host.c (ftp_getaddress): Removed.
5281
5282 2001-04-28  Hrvoje Niksic  <hniksic@arsdigita.com>
5283
5284         (http_loop): Allocate space for filename_plus_orig_suffix with
5285         alloca; this is more efficient and removes the need to free it
5286         before each and every return.
5287
5288 2001-04-28  Hrvoje Niksic  <hniksic@arsdigita.com>
5289
5290         * http.c (gethttp): Return RETRUNNEEDED when the retrieval is
5291         unneeded because the file is already there and fully downloaded,
5292         and -c is specified.
5293         (http_loop): Handle RETRUNNEEDED.
5294
5295         * wget.h (uerr_t): New value RETRUNNEEDED.
5296
5297         * http.c (http_loop): Set no_truncate for files that both exist
5298         and are non-empty.
5299         (gethttp): Consider the download finished when restval >= contlen,
5300         not only when restval==contlen.
5301         (gethttp): Handle redirection before giving up due to -c.
5302         (gethttp): Clarify error message which explains that -c will not
5303         truncate the file.
5304         (gethttp): When returning CONTNOTSUPPORTED, don't forget to free
5305         the stuff that needs freeing and release the socket.
5306
5307 2001-04-27  Hrvoje Niksic  <hniksic@arsdigita.com>
5308
5309         * main.c (print_help): Wget booleans accept "off", not "no".
5310
5311 2001-04-27  Hrvoje Niksic  <hniksic@arsdigita.com>
5312
5313         * http.c (http_loop): If allow_cache is zero, always disable
5314         caching, not only when retrieving through proxy.
5315
5316         * init.c: Ditto.
5317
5318         * options.h (struct options): Rename proxy_cache to allow_cache.
5319
5320 2001-04-27  Hrvoje Niksic  <hniksic@arsdigita.com>
5321
5322         * http.c (mktime_from_utc): Improve documentation.
5323         (http_atotm): Put format strings into a separate array.
5324
5325 2001-04-27  Hrvoje Niksic  <hniksic@arsdigita.com>
5326
5327         * safe-ctype.h: Instead of throwing #error when isalpha is
5328         defined, redefine it to something that will throw a compile-time
5329         error if actually *used*.  Do the same for the rest of the
5330         standard C macros.
5331
5332 2001-04-26  Hrvoje Niksic  <hniksic@arsdigita.com>
5333
5334         * url.c (getproxy): Ignore empty proxy vars.
5335
5336 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
5337
5338         * http.c (http_loop): Would load cookies every time.
5339
5340         * cookies.c (load_cookies): Handle cookies whose values contain
5341         embedded spaces.
5342
5343 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
5344
5345         * utils.c: Define each DIGITS_* in one line.
5346
5347 2001-04-25  Roger L. Beeman  <beeman@cisco.com>
5348
5349         * http.c (http_atotm): Initialize t.tm_isdst to 0.
5350         (mktime_from_utc): Prevent mktime() from having discontinuities at
5351         DST transition points.
5352
5353 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
5354
5355         * html-url.c (get_urls_html): Fix documentation.
5356
5357 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
5358
5359         * url.c (UNSAFE_CHAR): Reimplement using a static table.
5360         (url_init): Removed.
5361         (init_unsafe_char_table): Removed.
5362
5363 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
5364
5365         * snprintf.c (dopr): Replace ISDIGIT with '0' <= ch && ch <= '9'.
5366
5367 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
5368
5369         * utils.c: Document timer functions.
5370
5371         * retr.c (rate): Use it.
5372         (rate): Print in GB/s if transfer rate exceeds 1 GB/s.
5373
5374         * utils.c (wtimer_granularity): New function.
5375
5376 2001-04-24  Hrvoje Niksic  <hniksic@arsdigita.com>
5377
5378         * retr.c (show_progress): Ditto.
5379
5380         * ftp.c (getftp): Ditto.
5381
5382         * http.c (gethttp): Use new timer functions.
5383
5384         * utils.c (wtimer_allocate): New function.
5385         (wtimer_new): Ditto.
5386         (wtimer_delete): Ditto.
5387         (wtimer_reset): Ditto.
5388         (wtimer_elapsed): Ditto.
5389
5390 2001-04-24  Hrvoje Niksic  <hniksic@arsdigita.com>
5391
5392         * utils.c (long_to_string): New, faster version.  Favors smaller
5393         numbers; much of the calculation is now done at compile-time.
5394
5395 2001-04-24  Hrvoje Niksic  <hniksic@arsdigita.com>
5396
5397         * utils.c (numdigit): Handle negative numbers.
5398
5399 2001-04-23  Hrvoje Niksic  <hniksic@arsdigita.com>
5400
5401         * retr.c (show_progress): Print the download rate even when the
5402         percentages are not available.
5403
5404 2001-04-21  Hrvoje Niksic  <hniksic@arsdigita.com>
5405
5406         * ftp.c (getftp): Adjust expected_bytes if the length is
5407         authoritative.
5408
5409 2001-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
5410
5411         * url.c: Don't declare `construct'.
5412
5413         * hash.c (grow_hash_table): Speed up rehashing; inline storing of
5414         mappings to new locations.
5415         (hash_table_new): Make resize_threshold a field in the hash table,
5416         so we don't have to recalculate it in each hash_table_put.
5417         (grow_hash_table): Update resize_threshold.
5418         (MAX): Remove unused macro.
5419         (prime_size): Made static.
5420
5421 2001-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
5422
5423         * retr.c (retrieve_url): Call uri_merge, not url_concat.
5424
5425         * html-url.c (collect_tags_mapper): Call uri_merge, not
5426         url_concat.
5427
5428         * url.c (mkstruct): Use encode_string instead of xstrdup followed
5429         by URL_CLEANSE.
5430         (path_simplify_with_kludge): Deleted.
5431         (contains_unsafe): Deleted.
5432         (construct): Renamed to uri_merge_1.
5433         (url_concat): Renamed to uri_merge.
5434
5435 2001-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
5436
5437         * url.c (str_url): Use encode_string instead of the unnecessary
5438         CLEANDUP.
5439         (encode_string_maybe): New function, returns input string if no
5440         encoding is needed.
5441         (encode_string): Call encode_string_maybe to do the dirty work,
5442         xstrdup if no work needed.
5443
5444 2001-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
5445
5446         * wget.h (XDIGIT_TO_xchar): Define here.
5447
5448         * url.c (decode_string): Use new name.
5449         (encode_string): Ditto.
5450
5451         * http.c (XDIGIT_TO_xchar): Rename HEXD2asc to XDIGIT_TO_xchar.
5452         (dump_hash): Use new name.
5453
5454         * wget.h: Rename ASC2HEXD and HEXD2ASC to XCHAR_TO_XDIGIT and
5455         XDIGIT_TO_XCHAR respectively.
5456
5457 2001-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
5458
5459         * init.c: Include cookies.h.
5460
5461         * cookies.h: Declare cookies_cleanup.
5462
5463         * cookies.c (check_domain_match): Remove unused variable.
5464         (save_cookies): Remove extraneous argument from debug statement.
5465
5466         * host.c (same_host): Don't call skip_url.
5467
5468         * url.c (skip_url): Removed.  Removed its calls from various
5469         functions in url.c.
5470
5471 2001-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
5472
5473         * cookies.c (unsigned_string_hash): Use the new code in
5474         string_hash as reference.
5475
5476         * hash.c (hash_table_map): Allow deletion and change of the
5477         element processed by MAPFUN.
5478         (string_hash): Use the function from glib.
5479
5480 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
5481
5482         * config.h.in: Include #undef stub.
5483
5484         * hash.c (hash_table_remove): Rewrite to actually clear deleted
5485         entries instead of just marking them as deleted.
5486
5487 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
5488
5489         * hash.h: Declare hash_table_get_pair and hash_table_count.
5490
5491 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
5492
5493         * cookies.c: Declare http_atotm.
5494
5495 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
5496
5497         * ftp-ls.c (ftp_parse_unix_ls): Use octal constants for
5498         permissions.  A compiler that doesn't accept octal constants is
5499         seriously broken and shouldn't be used -- octal constants were
5500         present in K&R C!
5501
5502 2001-01-20  Karl Eichwalder  <ke@suse.de>
5503
5504         * Makefile.in: Provide and use DESTDIR according to the Coding
5505         Standards.
5506
5507 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
5508
5509         * ftp-ls.c (ftp_parse_vms_ls): Make seconds optional in time
5510         specification.
5511
5512 2001-04-11  Hrvoje Niksic  <hniksic@arsdigita.com>
5513
5514         * url.c (parseurl): Don't strip trailing slash when u->dir is "/"
5515         because that strips the *leading* slash, thus forcing relative
5516         FTP retrieval.
5517
5518 2001-04-10  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
5519
5520         * ftp.c (getftp): Convert initial FTP directory from VMS to UNIX
5521         notation for VMS servers.
5522         (ftp_retrieve_dirs): Do not prepend '/' to f->name when
5523         odir is an empty string.
5524
5525 2001-04-10  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
5526
5527         * ftp-ls.c (ftp_parse_winnt_ls): Made the fix for AM/PM more
5528         effective. Suggested by Edward J. Sabol.
5529
5530 2001-04-10  Hrvoje Niksic  <hniksic@arsdigita.com>
5531
5532         * cookies.c (build_cookies_request): Use and sort cookies from all
5533         matching domains.
5534         (build_cookies_request): Check for duplicates before generating
5535         the `Cookies' header.
5536
5537         * main.c (main): Don't load cookies here.
5538         (main): Make loadcookies and savecookies call the correct command.
5539
5540         * http.c (http_loop): Load cookies on-demand.
5541
5542 2001-04-09  Hrvoje Niksic  <hniksic@arsdigita.com>
5543
5544         * http.c (gethttp): Fix indentation of SSL ifdef.
5545
5546 2001-04-09  Hrvoje Niksic  <hniksic@arsdigita.com>
5547
5548         * ftp.c (ftp_retrieve_dirs): Don't forcibly prepend "/" to u->dir;
5549         that hack is no longer necessary.
5550         (getftp): Prepend initial directory to *non*-absolute u->dir's.
5551
5552 2001-04-09  Hrvoje Niksic  <hniksic@arsdigita.com>
5553
5554         * init.c (cmd_file): New function.
5555         (enable_tilde_expansion): New variable.
5556         (run_wgetrc): Use it.
5557         (cmd_file): Use it.
5558
5559 2001-04-08  Hrvoje Niksic  <hniksic@arsdigita.com>
5560
5561         * init.c: Include cookie-related options.
5562
5563         * main.c (main): Include cookie-specific options.
5564         (main): Load cookies before download is finished.
5565         (main): Save cookies when done.
5566
5567         * http.c (gethttp): Process the `Set-Cookie' header.
5568         (gethttp): Include cookies in the response.
5569
5570         * cookies.c: New file.
5571
5572 2001-04-08  Hrvoje Niksic  <hniksic@arsdigita.com>
5573
5574         * utils.c (datetime_str): New function.
5575
5576 2001-04-08  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
5577
5578         * ftp-ls.c (ftp_parse_winnt_ls): The AM/PM change did assume
5579         12:01PM == 00:01, which was obviously wrong. Taken care of this
5580         anomaly.
5581
5582         * ChangeLog: Removed an excess conflict marker. Reformatted the
5583         entry by Philipp Thomas from 2001-03-09.
5584
5585         * ftp-ls.c (ftp_parse_winnt_ls): Ensure that adjusted PM hours lay
5586         between 0 and 23. Elminate unused variable `sec'.
5587
5588 2001-04-08  Hrvoje Niksic  <hniksic@arsdigita.com>
5589
5590         * hash.c (hash_table_count): New function.
5591
5592 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
5593
5594         * utils.c (read_file): Cast MAP_FAILED to char *.  Enforced by
5595         Digital Unix cc.
5596
5597 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
5598
5599         * config.h.in: Oops, do the namespace tweaks only on systems we
5600         know about.
5601
5602 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
5603
5604         * hash.c: Include <string.h>.
5605
5606 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
5607
5608         * config.h.in: Define "compilation environment" options that work
5609         under Linux and Solaris.  To be reviewed on other OS'es.
5610
5611 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
5612
5613         * http.c (gethttp): Prepend literal newline with `\n\'.
5614
5615 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
5616
5617         * sysdep.h: Don't define VERY_LONG_FORMAT.
5618
5619         * utils.c (very_long_to_string): New function.
5620         (legible_very_long): Use it; don't use VERY_LONG_FORMAT.
5621
5622 2001-04-04  Christian Fraenkel  <christian.fraenkel@gmx.net>
5623
5624         * url.c (parse_uname): Would run past the end of the string if the
5625         username was present, but the URL did not contain a slash, e.g.
5626         http://foo:bar@myhost.
5627
5628 2001-04-03  KOJIMA Hajime  <kjm@rins.ryukoku.ac.jp>
5629
5630         * http.c (http_atotm): Use %A instead of %a to match full
5631         weekday.  (On most systems there is no difference.)
5632
5633 2001-04-03  Paul Bludov  <paul@ozero.net>
5634
5635         * mswindows.c (sleep): Use SleepEx() instead of Sleep().
5636         (ws_changetitle): Use alloca() instead of malloc() to avoid memory
5637         leak.
5638         (ws_mypath): Use GetModuleFileName instead of argv[0].
5639         (ws_startup): Use data.wVersion for comparison.
5640
5641 2001-04-02  Hrvoje Niksic  <hniksic@arsdigita.com>
5642
5643         * http.c (http_loop): Ditto.
5644
5645         * ftp.c (ftp_loop_internal): Made the check whether to continue
5646         retrieval `-O'-friendly.
5647
5648 2001-04-02  Hrvoje Niksic  <hniksic@arsdigita.com>
5649
5650         * netrc.c (parse_netrc): Don't trim the line endings explicitly;
5651         they will be handled as whitespace.
5652         (parse_netrc): Correctly handle lines that end with whitespace.
5653
5654 2001-04-02  Hrvoje Niksic  <hniksic@arsdigita.com>
5655
5656         * retr.c (retrieve_url): New variable global_download_count used
5657         to identify first retrieval.
5658
5659         * ftp.c (getftp): Ditto.
5660
5661         * http.c (gethttp): Rewind opt.dfp only on first retrieval.
5662
5663 2001-04-02  Hrvoje Niksic  <hniksic@arsdigita.com>
5664
5665         * init.c (cmd_address): Heap-allocate the address that gets stored
5666         to CLOSURE.  Old code would simply assign an address on the stack.
5667
5668 2001-04-01  Nicolas Lichtmaier <nick@debian.org>
5669
5670         * ftp.c (ftp_get_listing): Propagate error status.
5671         (ftp_retrieve_glob): Use it.
5672         (ftp_loop): Ditto.
5673
5674 2001-04-01  Nicolas Lichtmaier <nick@debian.org>
5675
5676         * main.c (main): Add -C to the string that is the third arg to
5677         getopt_long().
5678
5679 2001-04-01  Hrvoje Niksic  <hniksic@arsdigita.com>
5680
5681         * ftp.c (getftp): Don't start the download from scratch if `-c'
5682         was specified, but the file is already fully downloaded.
5683
5684         * http.c (gethttp): Don't truncate a pre-existing file if `-c' was
5685         specified and the server doesn't support continued download.
5686         (gethttp): Don't start the download from scratch if `-c' was
5687         specified, but the file is already fully downloaded.
5688
5689 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
5690
5691         (recursive_retrieve): Don't clear the hash tables at this point at
5692         all; it interferes with the normal operation of register_download.
5693
5694 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
5695
5696         * recur.c (recursive_retrieve): Clear the hash tables only when
5697         they are defined.
5698
5699 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
5700
5701         * http.c (gethttp): Make sure the socket is closed with
5702         CLOSE_INVALIDATE before we have drained the body.
5703
5704 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
5705
5706         * retr.c (retrieve_url): Call register_download() for downloaded
5707         files and register_html() for downloaded HTML files.
5708
5709         * recur.c (register_download): New function; register here that a
5710         file has been downloaded, rather than in recursive_retrieve().
5711         (register_html): New function; enqueue the location of HTML files
5712         here rather than in recursive_retrieve().
5713
5714 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
5715
5716         * main.c (print_help): Use multiple fputs instead of a single ugly
5717         printf().
5718         (main): Consistently assign numbers >128 to options without a
5719         corresponding character.
5720
5721 2001-03-09  Philipp Thomas  <pthomas@suse.de>
5722
5723         * safe-ctype.h: New file. Locale independent ctype.h replacement
5724         taken from libiberty.
5725
5726         * safe-ctype.c: New file. Tables for above.
5727
5728         * Makefile.in: Add safe-ctype$o to OBJS.  Add dependencies for
5729         safe-ctype$o.
5730
5731         * cmpt.c: Remove include of ctype.h. Use ISSPACE instead of
5732         isspace.
5733
5734         * ftp-basic.c: Don't include ctype.h.
5735
5736         * ftp-ls.c: Likewise.
5737
5738         * ftp.c: Likewise.
5739
5740         * headers.c: Likewise.
5741
5742         * host.c: Likewise.
5743
5744         * html-parse.c: Likewise.
5745
5746         * html-url.c: Likewise.
5747
5748         * http.c: Likewise.
5749
5750         * init.c: Likewise.
5751
5752         * main.c: Likewise. Set LC_CTYPE along with LC_MESSAGES.
5753
5754         * netrc.c: Likewise.
5755
5756         * recur.c: Likewise.
5757
5758         * retr.c: Likewise.
5759
5760         * snprintf.c: Replace ctype.h with safe-ctype.h. Use ISDIGIT
5761         instead of isdigit.
5762
5763         * sysdep.h: Remove defines of ctype macros as they aren't needed
5764         for safe-ctype-h.
5765
5766         * url.c: Don't include ctype.h.
5767
5768         * utils.c: Likewise.
5769
5770         * wget.h: Include safe-ctype.h.
5771
5772 2001-03-27  Dan Harkless  <wget@harkless.org>
5773
5774         * Makefile.in: Moved top_builddir out of "User configuration
5775         section" of top Makefile and analogous spot in this one.
5776
5777 2001-03-17  Dan Harkless  <wget@harkless.org>
5778
5779         * Makefile.in: Include @SSL_INCLUDES@ substition in INCLUDES.
5780         Define top_builddir.  Link wget with libtool so the user doesn't
5781         have to supply a bunch of custom environment variables to
5782         correctly link with the OpenSSL shared libraries.
5783
5784 2001-03-06  Hack Kampbjorn  <hack@hackdata.com>
5785
5786         * http.c (gethttp): skip :port in host header if it is the
5787         DEFAULT_HTTPS_PORT when using SSL.
5788
5789         * url.c: move the #define of DEFAULT_HTTP_PORT, DEFAULT_FTP_PORT
5790         and DEFAULT_HTTPS_PORT to the header file so it can be use in the
5791         rest of the code.
5792         * url.h: Ditto
5793
5794 2001-03-01  Jonas Jensen  <bones@huleboer.dk>
5795
5796         * retr.c (show_progress): Correctly calculate the number of bytes
5797         in the first line of the download that have been actually
5798         downloaded in this run.
5799
5800 2001-02-23  Dan Harkless  <wget@harkless.org>
5801
5802         * main.c (print_help): --help documentation for -N said it would
5803         re-download files if they had the _same_ timestamp on server.
5804         (print_help): -nr belongs in "FTP options" section of --help
5805         output, not "Recursive retrieval" section.  Alphabetized FTP
5806         options by long option name.
5807
5808 2001-02-16  Dan Harkless  <wget@harkless.org>
5809
5810         * init.c (commands): Hack Kampbjørn <hack@hackdata.com> discovered
5811         that "httpsproxy" had been inserted into commands[] out of
5812         alphabetical order, causing "BUG: unknown command `httpuser'".
5813
5814 2001-02-13  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
5815
5816         * ftp-ls.c (ftp_parse_ls): Added support of ST_MACOS (Unix-like
5817         listing without correct permissons).
5818
5819         * ftp.h (stype): Added ST_MACOS to identify the NetPresenz MacOS
5820         FTP server.
5821
5822         * ftp.c (ftp_retrieve_list): New mirroring logic: A remote file
5823         shall be donwloaded only when it's newer than the local copy or
5824         when it has the same timeestamp but its size is different. ST_VMS
5825         and ST_MACOS as special cases that lie about file size.
5826
5827         * ftp-ls.c (ftp_parse_ls): Support for ST_MACOS.
5828
5829         * Makefile.in: Removed dependency on ftpparse library due to unclear
5830         copyright issues and absence of any feedback to our queries.
5831
5832         * ftp-ls.c: Removed dependency on ftpparse library due to unclear
5833         copyright issues and absence of any feedback to our queries.
5834         (ftp_parse_ls): Added a warning message when remote server system
5835         does not seem to be suported by wget.
5836         (ftp_parse_vms_ls): New function for parsing VMS ftp
5837         server listing output.
5838         (clean_line): New function responsible for removing
5839         end-of-line characters from FTP listing texts.
5840
5841         * ftp.c (getftp): Global variables pwd and host_type are now
5842         member of the ccon structure under names ccon.id and ccon.rs.
5843
5844         * ftp.h (struct ccon): Added formed global variables from ftp.c,
5845         enum stype rs (remote system identification) and char *id (initial
5846         working directory), as suggested by Hrvoje.
5847
5848         * url.c (parse_uname): Added support for passwords containing '@'
5849         characters.
5850         (skip_uname): Ditto.
5851
5852 2001-02-11  Hrvoje Niksic  <hniksic@arsdigita.com>
5853
5854         * ftp.c (ftp_loop): Reset con.
5855
5856 2001-01-06  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
5857
5858         * url.c (parse_uname): Added support for passwords containing '@'
5859         characters.
5860         (skip_uname): Ditto.
5861
5862 2001-02-11  Hack Kampbjørn  <hack@hackdata.com>
5863
5864         * url.c (parseurl): Debug-print u->ftp_type.
5865
5866 2001-02-11  Hrvoje Niksic  <hniksic@arsdigita.com>
5867
5868         * ftp.c (ftp_loop_internal): Disable padding.
5869         (getftp): Ditto.
5870
5871         * http.c (http_loop): Disable padding.
5872
5873         * retr.c (show_progress): Use it to enable padding.
5874
5875         * retr.c (rate): Optional parameter PAD for padding the rate.
5876
5877 2001-02-10  Hrvoje Niksic  <hniksic@arsdigita.com>
5878
5879         * retr.c (show_progress): Make sure that the last output line
5880         includes progress.
5881
5882 2001-02-10  Jonas Jensen  <bones@huleboer.dk>
5883
5884         * retr.c (show_progress): Print the download rate along with the
5885         percentages.
5886         Along with Anders Thorsby <anders@thorsby.dk>.
5887
5888 2001-02-10  Tim Mooney  <mooney@dogbert.cc.ndsu.NoDak.edu>
5889
5890         * ftp.h: Rename enums `command' to `wget_ftp_command' and
5891         `fstatus' to `wget_ftp_status' because old names clash with Tru64
5892         net/if.h.
5893
5894 2001-02-08  Christian Fraenkel <christian.fraenkel@gmx.net>
5895
5896         * gen_sslfunc.c: verify_callback is now static
5897
5898         * gen_sslfunc.c (init_ssl): load certificate if specified
5899
5900         * gen_sslfunc.c (ssl_printerr): new function
5901
5902         * init.c: added new --sslcertfile and --sslcertkey switches
5903
5904         * main.c: ditto
5905
5906         * options.h: ditto
5907
5908         * http.c (gethttp): abort when init_ssl fails
5909
5910 2001-01-23  Herold Heiko  <Heiko.Herold@previnet.it>
5911
5912         * mswindows.h: Include <malloc.h>; it's needed for alloca().
5913
5914 2001-01-10  Dan Harkless  <wget@harkless.org>
5915
5916         * url.c (str_url): Clarified this function's comment header after
5917         Hrvoje answered my question on the list as to when hide != 1.
5918         Also Hrvoje pointed out I need to use xstrdup() on the string literal.
5919
5920 2001-01-06  Hrvoje Niksic  <hniksic@arsdigita.com>
5921
5922         * connect.c (bindport): Declare addrlen as int.  Diagnosed by
5923         Drazen Kacar <dave@arsdigita.com>.
5924         (conaddr): Ditto.
5925
5926 2001-01-09  Dan Harkless  <wget@harkless.org>
5927
5928         * html-url.c: A bunch of fixup of `--page-requisites'-related
5929         comments to reflect Hrvoje's changes to my code when transplanting
5930         it into this new file, to fix spelling mistakes, to clarify, etc.
5931
5932         * url.c (write_backup_file): Clarified a comment.
5933         (str_url): Henrik van Ginhoven pointed out on the list that we
5934         shouldn't give away the number of characters in the password by
5935         replacing each character with a 'x'.  Use "<password>" instead.
5936
5937         * ftp.c (ftp_retrieve_dirs): The bug where recursion into FTP
5938         directories didn't work if logging in put you in a directory other
5939         than "/" is fixed now.  Removed the comment here warning of the bug.
5940
5941         * main.c (print_help): --continue's description was misleading.
5942         We don't "restart", we "resume".  Also, better to say
5943         "partially-downloaded file" rather than just "existing file".
5944
5945 2001-01-06  Dan Harkless  <wget@harkless.org>
5946
5947         * ChangeLog: The '[Not in 1.6 branch.]'s were decided not to be
5948         the best way to go about my aim.  Removed them in favor of:
5949
5950         * ChangeLog-branches/1.6_branch.ChangeLog: New file.
5951
5952 2001-01-04  Hrvoje Niksic  <hniksic@arsdigita.com>
5953
5954         * url.c (replace_attr): New function, to be used by both
5955         TO_COMPLETE and TO_RELATIVE case in convert_links.
5956         (find_fragment): New function for finding URL fragments.
5957         (replace_attr): Better handle the case where the original string
5958         is not quoted.  Use find_fragment.
5959         (convert_links): Use replace_attr().
5960
5961 2000-12-31  Dan Harkless  <wget@harkless.org>
5962
5963         * ChangeLog: Since this flat file doesn't have multiple branches,
5964         looking at the dates would make you think that things went into
5965         1.6 that actually just went into the 1.7-dev branch.  Added "[Not
5966         in 1.6 branch.]" where appropriate to clarify.
5967
5968 2000-12-30  Dan Harkless  <wget@harkless.org>
5969
5970         * ftp.c, http.c:  Applied Hack Kampbjørn <hack@hackdata.com>'s
5971         patch to deal with h_errno not being defined in netdb.h under Cygwin.
5972
5973 2000-12-18  Csaba Raduly  <csaba.raduly@sophos.com>
5974
5975         * sysdep.h: Include <malloc.h> and <io.h> under Watcom.
5976
5977 2000-12-17  Igor Khristophorov  <igor@atdot.org>
5978
5979         * http.c (check_end): Fix test for '+' or '-'.
5980
5981 2000-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
5982
5983         * url.c (parseurl): Rename inner loop var from i to ind to avoid
5984         clash with the function top-level-declared variable i.
5985         (str_url): Likewise, rename inner-loop i to j.
5986
5987         * recur.c (parse_robots): Don't declare LEN at top of function.
5988         (robots_match): Renamed parameter FORBIDDEN to avoid hiding of
5989         global variable.
5990
5991         * main.c (main): Change erroneous use of bitwise and to logical.
5992
5993         * init.c (cmd_address): Don't heap-allocate `sin'; it can be on
5994         the stack because it will be copied to closure.
5995
5996         Thanks to Csaba Raduly's run of PC-LINT over the sources.
5997
5998 2000-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
5999
6000         * http.c (basic_authentication_encode): Use xmalloc(), not
6001         malloc().  Thanks to Csaba Raduly's run of PC-LINT over the
6002         sources.
6003
6004 2000-12-17  Csaba Raduly  <csaba.raduly@sophos.com>
6005
6006         * sysdep.h: Test for __EMX__ rather than for EMXOS2 for OS/2
6007         compilation.
6008
6009 2000-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
6010
6011         * mswindows.c: Include <errno.h>.
6012
6013         * gen_sslfunc.c: Include <errno.h>.
6014
6015         * ftp-basic.c: Don't attempt to declare errno or h_errno because
6016         they're not used.
6017
6018         * main.c: Include <errno.h> because errno is used.
6019
6020         * ftp.c: Ditto.
6021
6022         * http.c: Include <netdb.h> for h_errno.
6023
6024 2000-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
6025
6026         * html-parse.c (advance_declaration): MSVC assert() chokes on
6027         '\"'.  Use '"' instead.
6028
6029 2000-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
6030
6031         * utils.c (xfree_real): Removed.
6032         (xfree_debug): Just call free().
6033
6034         * wget.h (xfree): Make it an alias for free.
6035
6036 2000-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
6037
6038         * http.c (http_loop): Furthermore, touch output_document only if
6039         it is known to be an existing regular file.
6040
6041 2000-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
6042
6043         * ftp.c (ftp_retrieve_list): Ditto.
6044
6045         * http.c (http_loop): Touch output_document if that is used for
6046         output.
6047
6048 2000-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
6049
6050         * http.c: Include gen_sslfunc.h after including Wget's headers.
6051         (persistent_available_p): Needed coma before `int ssl'.
6052
6053 2000-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
6054
6055         * ftp.c (ftp_loop_internal): Ditto.
6056
6057         * http.c (http_loop): Use it.
6058
6059         * retr.c (sleep_between_retrievals): New function that handles the
6060         logic of opt.wait and opt.waitretry.
6061
6062 2000-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
6063
6064         * rbuf.h: Implement only a single version of RBUF_READCHAR, using
6065         rbuf_read_bufferful when the buffer is depleted.
6066
6067         * rbuf.c (rbuf_read_bufferful): New function.
6068
6069 2000-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
6070
6071         * gen_sslfunc.h: Use ansi2knr style function declarations.
6072
6073         * gen_sslfunc.c: Reformat according to the GNU coding standards.
6074         More should be done.
6075
6076         * http.c (persistent_available_p): Place the cheap SSL test nearer
6077         the top of the function.
6078         (CLOSE_FINISH, CLOSE_INVALIDATE): Define only one version of each.
6079
6080 2000-12-05  Hrvoje Niksic  <hniksic@arsdigita.com>
6081
6082         * url.c (init_unsafe_char_table): Reinstate space as an unsafe
6083         char.
6084
6085 2000-12-03  Christian Fraenkel <christian.fraenkel@gmx.net>
6086
6087         * Makefile.in: added gen_sslfunc object
6088         * config.h.in: added HAVE_SSL define
6089         * connect.c: changed select_fd from static int to int
6090         * connect.h: ditto
6091         * gen_sslfunc.h: New file
6092         * gen_sslfunc.c: ditto
6093         * http.c: added HTTPS fuctionality
6094         * retrc.c: ditto
6095         * url.c: ditto
6096         * init.c: added opt.httpsproxy
6097         * options.h: ditto
6098         * rbuf.h: added alternate rbuf struct
6099         * wget.h: added CONSSLERR
6100         * rbuf.c: ditto
6101
6102         * http.c: Added HTTPS fuctionality.
6103
6104         * retrc.c: Ditto.
6105
6106         * url.c: Ditto.
6107
6108         * init.c: Added opt.httpsproxy.
6109
6110         * options.h: Ditto.
6111
6112         * rbuf.h: Added alternate rbuf struct.
6113
6114         * wget.h: Added CONSSLERR.
6115
6116         * rbuf.c: Ditto.
6117
6118 2000-11-30  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
6119
6120         * ftp-ls.c (ftp_parse_unix_ls): Added second parameter
6121         "ignore_perms" to ignore file and directory permissions for
6122         Windows NT FTP server listings.
6123         (ftp_parse_winnt_ls): New function.
6124         (ftp_parse_ls): Parses UNIX and Windows NT listings
6125         separately. Simple heuristics for distinguishing between UNIX and
6126         MS-DOS-like FTP listing provided by Windows NT FTP service.
6127
6128 2000-11-18  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
6129
6130         * ftpparse.c, ftpparse.h: New files.
6131
6132         * ftp-ls.c (ftp_parse_ls): Use ftp_parse_unix_ls for UNIX servers
6133         only. Use ftp_parse_nonunix_ls otherwise.
6134         (ftp_parse_nonunix_ls): Stub to the ftpparse library handling all
6135         exotic FTP servers.
6136
6137         * ftp.h (stype): New enum, distinguishes UNIX, VMS, and "other"
6138         FTP servers.
6139
6140         * ftp.c: New static wariables host_type, pwd, and pwd_len.
6141         (getftp): Support for VMS. Support for FTP servers that do not
6142         place you in the root directory after login.
6143         (ftp_retrieve_list): VMS is silent about the real file size, issue
6144         a more appropriate message.
6145         (ftp_get_listing): Pass host_type to ftp_parse_ls.
6146
6147         * ftp-basic.c (ftp_pwd, ftp_syst): New functions.
6148
6149 2000-11-30  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
6150
6151         * ftp-ls.c (ftp_parse_unix_ls): Added second parameter
6152         "ignore_perms" to ignore file and directory permissions for
6153         Windows NT FTP server listings.
6154         (ftp_parse_winnt_ls): New function.
6155         (ftp_parse_ls): Parses UNIX and Windows NT listings
6156         separately. Simple heuristics for distinguishing between UNIX
6157         and MS-DOS-like FTP listing provided by Windows NT FTP service.
6158
6159 2000-11-29  John Summerfield  <summer@OS2.ami.com.au>
6160
6161         * netrc.c (parse_netrc): Get rid of line ending.
6162
6163 2000-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
6164
6165         * ftp.c (ftp_retrieve_list): Undo typo "fix" until resolution by
6166         Dan.
6167
6168 2000-11-24  Karl Eichwalder  <ke@suse.de>
6169
6170         * main.c (print_help): Untabify.
6171
6172 2000-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
6173
6174         * utils.c (xrealloc_debug): Do the unregister/register thing only
6175         if the pointer has actually changed.
6176         (xmalloc_real): Declare `static' in DEBUG_MALLOC builds.
6177         (xfree_real): Ditto.
6178         (xrealloc_real): Ditto.
6179         (xstrdup_real): Ditto.
6180
6181 2000-11-22  Hrvoje Niksic  <hniksic@arsdigita.com>
6182
6183         * ftp.c (getftp): ftp_getaddress() returns a malloc'ed copy of the
6184         string; no need to strdup() it.
6185         (getftp): Make pwd_len a local variable.
6186         (ftp_loop): Free PWD before returning.
6187
6188         * init.c (cleanup): Free opt.ftp_pass only if it's non-NULL.
6189
6190 2000-11-22  Hrvoje Niksic  <hniksic@arsdigita.com>
6191
6192         * all: Use xfree() instead of free.
6193
6194         * utils.c (xfree): New function.
6195
6196 2000-11-21  Hrvoje Niksic  <hniksic@arsdigita.com>
6197
6198         * url.c (convert_links): HTML-quote the converted string.
6199
6200         * utils.c (html_quote_string): Move here from ftp-ls.c
6201         (html_quote_string): Make non-static; declare in utils.h.
6202         (html_quote_string): Convert SP to &#32;.
6203
6204 2000-11-21  Hrvoje Niksic  <hniksic@arsdigita.com>
6205
6206         * ftp.c (getftp): Reformat Jan's code according to GNU coding
6207         standards; remove (debugging?) printf's; use '\0' for the ASCII
6208         zero character.  Use alloca() instead of malloc() for
6209         inter-function temporary allocations.
6210
6211 2000-11-18  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
6212
6213         * ftpparse.c, ftpparse.h: New files.
6214
6215         * ftp-ls.c (ftp_parse_ls): Use ftp_parse_unix_ls for UNIX servers
6216         only. Use ftp_parse_nonunix_ls otherwise.
6217         (ftp_parse_nonunix_ls): Stub to the ftpparse library handling all
6218         exotic FTP servers.
6219
6220         * ftp.h (stype): New enum, distinguishes UNIX, VMS, and "other"
6221         FTP servers.
6222
6223         * ftp.c: New static wariables host_type, pwd, and pwd_len.
6224         (getftp): Support for VMS. Support for FTP servers that do not
6225         place you in the root directory after login.
6226         (ftp_retrieve_list): VMS is silent about the real file size, issue
6227         a more appropriate message.
6228         (ftp_get_listing): Pass host_type to ftp_parse_ls.
6229
6230         * ftp-basic.c (ftp_pwd, ftp_syst): New functions.
6231
6232 2000-11-21  Hrvoje Niksic  <hniksic@arsdigita.com>
6233
6234         * hash.c (hash_table_put): Don't overwrite deleted mappings.
6235
6236 2000-11-21  Hrvoje Niksic  <hniksic@arsdigita.com>
6237
6238         * hash.c (find_mapping): New function.
6239         (hash_table_get): Use it.
6240         (hash_table_get_pair): Ditto.
6241         (hash_table_exists): Ditto.
6242         (hash_table_remove): Ditto.
6243         (hash_table_remove): Really delete the entry if the mapping
6244         following LOCATION is empty.
6245
6246         * utils.c (string_set_add): Check whether the element has existed
6247         before.
6248
6249         * hash.c (hash_table_get_pair): New function.
6250
6251 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
6252
6253         * http.c (http_process_type): Ignore trailing whitespace; use
6254         strdupdelim().
6255
6256         * recur.c (recursive_retrieve): Use the new `convert' field.
6257         (convert_all_links): Ditto.
6258         (convert_all_links): Don't respect meta_disallow_follow.
6259
6260         * html-url.c (handle_link): Fill out link_relative_p and
6261         link_complete_p.
6262
6263         * url.h (struct _urlpos): Make elements more readable.
6264
6265         * recur.c (recursive_retrieve): Call slist_prepend instead of
6266         slist_append.
6267         (convert_all_links): Call slist_nreverse before iterating through
6268         urls_html.
6269
6270         * utils.c (slist_prepend): New function.
6271         (slist_nreverse): Ditto.
6272
6273 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
6274
6275         * http.c (check_end): Constify.
6276
6277 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
6278
6279         * http.c (http_loop): If username and password are known, try the
6280         `Basic' authentication scheme by default.
6281
6282         * connect.h: Declare test_socket_open.
6283
6284 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
6285
6286         * version.c: Bump version from 1.5.3+dev to 1.7-dev.
6287
6288 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
6289
6290         * http.c (gethttp): Don't use the return value of sprintf().
6291         (gethttp): Inhibit keep-alive if opt.http_keep_alive is 0.
6292
6293 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
6294
6295         * recur.c (recursive_retrieve): Print the "so we don't load"
6296         debugging message only if we really don't load.
6297
6298         * http.c (gethttp): Inhibit keep-alive if proxy is being used.
6299         (gethttp): Don't request keep-alive if keep-alive is inhibited.
6300
6301 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
6302
6303         * http.c (gethttp): Make the HTTP persistent connections more
6304         robust.
6305
6306 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
6307
6308         * retr.c (get_contents): If use_expected, make sure that the
6309         appropriate amount of data is being read.
6310
6311         * http.c (gethttp): Check for both `Keep-Alive: ...' and
6312         `Connection: Keep-Alive'.
6313
6314         * wget.h (DEBUGP): Call debug_logprintf only if opt.debug is
6315         turned on.
6316
6317 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
6318
6319         * http.c (connection_available_p): Use it.
6320
6321         * connect.c (test_socket_open): New function.
6322
6323         * http.c (gethttp): Support persistent connections.  Based on the
6324         ideas, and partly on code, by Sam Horrocks <sam@daemoninc.com>.
6325         (register_persistent): New function.
6326         (connection_available_p): Ditto.
6327         (invalidate_connection): Ditto.
6328
6329 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
6330
6331         * url.c (convert_links): Handle UREL2ABS case.
6332
6333         * recur.c (recursive_retrieve): Instead of the list
6334         urls_downloaded, use hash tables dl_file_url_map and
6335         dl_url_file_map.
6336         (convert_all_links): Use them to retrieve data.
6337
6338         * host.c (clean_hosts): Free the hash tables.
6339
6340         * main.c (private_initialize): Call host_init().
6341
6342         * host.c (store_hostaddress): Use a saner, hash table-based data
6343         model.
6344         (realhost): Ditto.
6345         (host_init): Initialize the hash tables.
6346
6347 2000-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
6348
6349         * utils.c (slist_append): Eviscerate NOSORT.  Hash tables are now
6350         used for what the sorted slists used to be used for.
6351         (slist_contains): Don't rely on the list being sorted.
6352         (slist_append): Simplify the code.
6353
6354         * recur.c (recursive_cleanup): Use free_string_set.
6355
6356         * utils.c (string_set_add, string_set_exists, string_set_free):
6357         New functions for easier freeing of hash tables whose keys are
6358         strdup'ed strings.
6359
6360         * recur.c (recursive_retrieve): Use the hash table functions for
6361         storing undesirable URLs.
6362
6363         * hash.c: New file.
6364
6365 2000-11-17  Hrvoje Niksic  <hniksic@arsdigita.com>
6366
6367         * main.c (private_initialize): Call url_init.
6368         (main): Call private_initialize.
6369
6370         * url.c (unsafe_char_table): New table.
6371         (UNSAFE_CHAR): Use it.
6372         (init_unsafe_char_table): New function.
6373         (url_init): New function; call init_unsafe_char_table.
6374
6375 2000-11-16  Hrvoje Niksic  <hniksic@arsdigita.com>
6376
6377         * mswindows.h: Define snprintf and vsnprintf to _snprintf and
6378         _vsnprintf respectively.
6379
6380 2000-11-15  Hrvoje Niksic  <hniksic@arsdigita.com>
6381
6382         * config.h.in: Do the _XOPEN_SOURCE and _SVID_SOURCE things only
6383         on Linux.
6384
6385 2000-11-15  Hrvoje Niksic  <hniksic@arsdigita.com>
6386
6387         * html-url.c (handle_link): Handle HTML fragment identifiers.
6388
6389         * recur.c (recursive_retrieve): If norobot info is respected and
6390         the file is specified not to be followed by robots, respect that.
6391
6392         * html-url.c (collect_tags_mapper): Handle <meta name=robots
6393         content=X>.  For us the important cases are where X is NONE or
6394         where X contains NOFOLLOW.
6395         (get_urls_html): Propagate that information to the caller.
6396
6397 2000-11-13  Hrvoje Niksic  <hniksic@arsdigita.com>
6398
6399         * url.c (convert_links): Unlink the file we might be reading from
6400         before writing to it.
6401         (convert_links): Use alloca instead of malloc for
6402         filename_plus_orig_suffix.
6403
6404 2000-11-12  Hrvoje Niksic  <hniksic@arsdigita.com>
6405
6406         * host.c (realhost): Add HOST to the list with quality==0 only if
6407         it wasn't already there.
6408         Based on analysis by Lu Guohan <feng@public.bjnet.edu.cn>.
6409
6410 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
6411
6412         * url.c (get_urls_file): Ditto.
6413         (convert_links): Ditto.
6414
6415         * html-url.c (get_urls_html): Use read_file() instead of
6416         load_file().
6417
6418         * utils.c (read_file): New function, instead of the old
6419         load_file().
6420         (read_file_free): Ditto.
6421
6422         * url.c (findurl): Search only for the supported protocols.
6423         (convert_links): Use fwrite() when writing out a region of
6424         characters.
6425
6426 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
6427
6428         * ftp-ls.c: Move html_quote_string and ftp_index here.
6429
6430         * url.c: Remove get_urls_html, since that's now in html-url.c.
6431
6432         * html-url.c: New file.
6433
6434         * html-parse.c: New file.
6435
6436 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
6437
6438         * init.c (run_wgetrc): Don't bother killing off '\r' since
6439         pars_line() skips whitespace at end of line anyway.
6440         (parse_line): Oops, it didn't.  Now it does.
6441
6442         * recur.c (parse_robots): Ditto here.
6443
6444         * ftp-ls.c (ftp_parse_unix_ls): Kill off the newline character
6445         manually because read_whole_line no longer does.
6446
6447         * utils.c (read_whole_line): Rewrite to: a) use less memory
6448         (reallocates to needed size after work), b) work faster -->
6449         fgets() instead of getc, c) be more correct --> doesn't kill the
6450         newline character at the end of line.
6451
6452 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
6453
6454         * init.c (comind): Initialize MAX to array size - 1.
6455
6456 2000-11-08  Hrvoje Niksic  <hniksic@arsdigita.com>
6457
6458         * url.c (construct): Changed last_slash[-1] to *(last_slash - 1).
6459         Suggested by Edward J. Sabol.
6460
6461 2000-11-08  Hrvoje Niksic  <hniksic@arsdigita.com>
6462
6463         * url.c (construct): Handle the case where host name is not
6464         followed by a slash.
6465
6466 2000-11-06  Hrvoje Niksic  <hniksic@arsdigita.com>
6467
6468         * init.c: commands[] need to be sorted!  ("base" wasn't.)
6469
6470 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
6471
6472         * wget.h (DO_REALLOC_FROM_ALLOCA): Use braces to disambiguate
6473         `if'.
6474
6475 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
6476
6477         * url.c (construct): Insert unneeded initialization for the
6478         compiler to shut up.
6479
6480         * config.h.in: Define _XOPEN_SOURCE to 500 to get the prototype
6481         for strptime() (*duh*).  Define _SVID_SOURCE to get S_IFLNK which
6482         otherwise gets lost when you define _XOPEN_SOURCE.
6483
6484         * utils.c (touch): Include the file name in the error message.
6485         From Debian.
6486
6487 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
6488
6489         * log.c (logvprintf): Use vsnprintf() in all cases.  If necessary,
6490         resize the buffer to fit the formated message.  That way, messages
6491         of arbitrary size may be printed.
6492         (logvprintf): Use saved_append() to optionally log the last
6493         several lines of output.
6494         (logputs): Ditto.
6495         (log_close): Adapt to new data structures.
6496         (log_dump): Ditto.
6497         (redirect_output): Print messages to stderr, not to stdout.
6498
6499         * log.c (saved_append_1): New function.  Replaces the old logging
6500         system ("log all output until 10M characters") with a new, much
6501         more reasonable one ("log last screenful of text").
6502         (saved_append): New function; call saved_append_1.
6503         (free_log_line): New function.
6504
6505 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
6506
6507         * url.c (construct): Fix comment.
6508         (find_last_char): Document.
6509
6510 2000-11-04  Hrvoje Niksic  <hniksic@arsdigita.com>
6511
6512         * snprintf.c: New file.
6513
6514 2000-11-03  Hrvoje Niksic  <hniksic@arsdigita.com>
6515
6516         * wget.h: If HAVE_STDARG_H is not defined, don't declare argument
6517         types to logprintf() and debug_logprintf().
6518
6519 2000-11-02  Hrvoje Niksic  <hniksic@arsdigita.com>
6520
6521         * ftp.c (ftp_loop_internal): Hide the password from the URL when
6522         printing non-verbose.  Problem spotted by Dariusz Mlynarczyk
6523         <darekm@bydg.lomac.com.pl>.
6524
6525 2000-11-02  Junio Hamano  <junio@twinsun.com>
6526
6527         * ftp-basic.c (ftp_login): Make comparison case-insensitive.
6528
6529 2000-11-02  Tyler Riddle  <triddle@liquidmarket.com>
6530
6531         * http.c (known_authentication_scheme_p): Recognize NTML
6532         authentication.
6533         (create_authorization_line): Treat NTML the same as `Basic'.
6534
6535 2000-11-02  Hrvoje Niksic  <hniksic@arsdigita.com>
6536
6537         * retr.c (retrieve_url): Free url before returning.
6538         (retrieve_url): Free mynewloc before returning.
6539         Spotted by Mark A. Mankins <Mankins_Mark@prc.com>.
6540
6541 2000-11-02  Hrvoje Niksic  <hniksic@arsdigita.com>
6542
6543         * url.c (parseurl): Remove possible reading past the end of
6544         sup_protos[].  Spotted by Mark A. Mankins <Mankins_Mark@prc.com>.
6545
6546 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
6547
6548         * main.c (main): In case of opt.downloaded overflowing, print
6549         <overflow> instead of a totally bogus random value.
6550
6551         * retr.c (retrieve_from_file): Ditto.
6552
6553         * recur.c (recursive_retrieve): Ditto.
6554
6555         * main.c (main): Ditto.
6556
6557         * http.c (http_loop): Ditto.
6558
6559         * ftp.c (ftp_loop_internal): Use downloaded_increase() instead of
6560         `+=', and downloaded_exceeds_quota() instead of the simple-minded
6561         check.
6562         (ftp_retrieve_list): Ditto.
6563         (ftp_retrieve_dirs): Ditto.
6564         (ftp_retrieve_glob): Ditto.
6565
6566         * retr.c (downloaded_increase): New function.  Notice overflows of
6567         opt.downloaded.
6568         (downloaded_exceeds_quota): Make sure that opt.downloaded is not
6569         used if it overflowed.
6570
6571         * options.h (struct options): New member downloaded_overflow.
6572
6573 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
6574
6575         * wget.h (enum): Remove extra space after last enumeration.
6576
6577 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
6578
6579         * main.c (main): Use legible_very_long() for printing
6580         opt.downloaded.
6581
6582         * utils.c (legible_1): New function that operates on strings and
6583         does the brunt of legible()'s work.
6584         (legible): Use legible_1().
6585         (legible_very_long): New function; dump the argument with
6586         sprintf(), and call legible_1().
6587
6588         * options.h (struct options): Use VERY_LONG_TYPE for
6589         opt.downloaded.
6590
6591         * sysdep.h (VERY_LONG_TYPE): Define it to have a 64-bit or greater
6592         type.
6593
6594         * config.h.in: Make sure that SIZEOF_LONG and SIZEOF_LONG_LONG get
6595         defined.  Define HAVE_LONG_LONG if long long is available.
6596
6597 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
6598
6599         * utils.c (long_to_string): Update with a later, better version.
6600
6601 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
6602
6603         * url.c (path_simplify_with_kludge): New function.
6604         (path_simplify_with_kludge): Disable it.  Instead...
6605         (parse_dir): ...make sure that at this point the right thing is
6606         done, i.e. that "query" part of the URL (?...) is always assigned
6607         to the file, never to the directory portion of the path.
6608
6609 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
6610
6611         * retr.c (retrieve_url): Detect redirection cycles.
6612
6613 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
6614
6615         * url.c (get_urls_html): Decode HTML entities using
6616         html_decode_entities.
6617
6618         * html.c (htmlfindurl): Don't count the `#' in numeric entities
6619         (&#NNN;) as an HTML fragemnt.
6620         (html_decode_entities): New function.
6621
6622 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
6623
6624         * html.c (htmlfindurl): Fix recognition of # HTML fragments.
6625
6626 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
6627
6628         * url.c (construct): Rewritten for clarity.  Avoids the
6629         unnecessary copying and stack-allocation the old version
6630         performed.
6631
6632 2000-10-31  Hrvoje Niksic  <hniksic@arsdigita.com>
6633
6634         * ftp.c (getftp): Ditto.
6635
6636         * http.c (gethttp): Rewind the stream when retrying from scratch.
6637
6638 2000-10-31  Hrvoje Niksic  <hniksic@arsdigita.com>
6639
6640         * retr.c (retrieve_url): Use url_concat() to handle relative
6641         redirections instead of /ad hoc/ code.
6642
6643         * url.c (url_concat): New function encapsulating weird
6644         construct().
6645         (urllen_http_hack): New function.
6646         (construct): When constructing new URLs, recognize that `?' does
6647         not form part of the file name in HTTP.
6648
6649 2000-10-13  Adrian Aichner  <adrian@xemacs.org>
6650
6651         * retr.c: Add msec timing support for WINDOWS.
6652         * retr.c (reset_timer): GetSystemTime() on WINDOWS.
6653         * retr.c (elapsed_time): Calculate delta time to msec on WINDOWS.
6654
6655 2000-10-27  Dan Harkless  <wget@harkless.org>
6656
6657         * retr.c (retrieve_url): Manually applied T. Bharath
6658         <TBharath@responsenetworks.com>'s patch to get wget to grok
6659         illegal relative URL redirects.  Reformatted and re-commented it.
6660
6661 2000-10-23  Dan Harkless  <wget@harkless.org>
6662
6663         * connect.c (make_connection and bindport): Manually applied Rob
6664         Mayoff <mayoff@dqd.com>'s 1.5.3 patch to add --bind-address,
6665         changing coding style to GNU's.
6666
6667         * ftp.c (ftp_loop_internal): --delete-after wasn't implemented for
6668         files downloaded via FTP.  Per a comment, .listing files were not
6669         counted towards number of bytes and files downloaded because they're
6670         deleted anyway.  Well, they aren't under -nr, so count them then.
6671
6672         * init.c: Manually applied Rob Mayoff's 1.5.3 patch to add
6673         --bind-address, alphabetizing, changing coding style to GNU's,
6674         commenting, and renaming cmd_ip_address() to cmd_address() to
6675         imply hostnames also okay.
6676
6677         * main.c (main): --delete-after didn't delete the root of the
6678         tree.  Ignore --convert-links if --delete-after was specified.
6679         Manually applied Rob Mayoff's 1.5.3 patch to add --bind-address,
6680         fixing duplicate use of added-since-1.5.3 case value.
6681         (print_help): Clarified that --delete-after deletes local files.
6682         Rob forgot to add a line for his new --bind-address option.
6683
6684         * options.h (struct options): Manually applied Rob Mayoff's patch
6685         to add --bind-address (bind_address structure member).
6686
6687         * recur.c (recursive_retrieve): Improved comment; added DEBUGP().
6688         Ignore --convert-links if --delete-after was specified.
6689
6690         * retr.c (retrieve_from_file): Just added a DEBUGP().
6691
6692 2000-10-19  Dan Harkless  <wget@harkless.org>
6693
6694         * ftp.c (ftp_loop_internal): downloaded_file() enumerators changed.
6695         (getftp): Applied Piotr Sulecki <Piotr.Sulecki@ios.krakow.pl>'s
6696         patch to work around FTP servers that incorrectly respond to the
6697         "REST" command with the remaining size rather than the total file size.
6698
6699         * http.c (gethttp): Improved a comment and added code to tack on
6700         ".html" to text/html files without that extension when -E specified.
6701         (http_loop): Use new downloaded_file() enumerators and deal with
6702         the case of gethttp() called xrealloc() on u->local.
6703
6704         * init.c (commands): Added new "htmlextension" command.
6705         Also renamed John Daily's cmd_quad() to the more descriptive
6706         cmd_lockable_boolean(), alpha-sorted the CMD_DECLARE()s and
6707         removed duplicate cmd_boolean() declaration.
6708
6709         * main.c (print_help): Added my new -E / --html-extension option.
6710         (main): Undocumented --email-address option previously used -E synonym.
6711         Stole it away for the much more deserving --html-extension's use.
6712
6713         * options.h (struct options): Added html_extension field.
6714
6715         * url.c (convert_links): URL X that we saved as X.html locally due
6716         to -E needs to be backed up as X.orig, not X.html.orig.  Added comments.
6717         (downloaded_file): Now remembers if we added .html extension to a file.
6718
6719         * url.h (downloaded_file_t): Added extra enumerators to support above.
6720         (downloaded_file): Now takes and returns a downloaded_file_t.
6721
6722         * wget.h (unnamed "dt" enum): Added ADDED_HTML_EXTENSION enumerator.
6723
6724 2000-10-09  Dan Harkless  <wget@harkless.org>
6725
6726         * html.c (htmlfindurl): Added unneeded initialization to quiet warning.
6727
6728         * main.c (print_help): Clarified what --retr-symlinks does.
6729
6730 2000-09-15  John Daily  <jdaily@cyberdude.com>
6731
6732         * init.c: Add support for "always" and "never" values to allow
6733         .wgetrc to override commandline (useful e.g. with .pm files
6734         calling `wget --passive-ftp' when your firewall doesn't allow that).
6735
6736         * ftp.c (getftp): passive_ftp is first option to support always/never.
6737
6738 2000-08-30  Dan Harkless  <wget@harkless.org>
6739
6740         * ftp.c (ftp_retrieve_list): Use new INFINITE_RECURSION #define.
6741
6742         * html.c: htmlfindurl() now takes final `dash_p_leaf_HTML' parameter.
6743         Wrapped some > 80-column lines.  When -p is specified and we're at a
6744         leaf node, do not traverse <A>, <AREA>, or <LINK> tags other than
6745         <LINK REL="stylesheet">.
6746
6747         * html.h (htmlfindurl): Now takes final `dash_p_leaf_HTML' parameter.
6748
6749         * init.c: Added new -p / --page-requisites / page_requisites option.
6750
6751         * main.c (print_help): Clarified that -l inf and -l 0 both allow
6752         infinite recursion.  Changed the unhelpful --mirrior description
6753         to simply give the options it's equivalent to.  Added new -p option.
6754         (main): Added some comments; handle new -p / --page-requisites.
6755
6756         * options.h (struct options): Added new page_requisites field.
6757
6758         * recur.c: Changed "URL-s" to "URLs" and "HTML-s" to "HTMLs".
6759         Calculate and pass down new `dash_p_leaf_HTML' parameter to
6760         get_urls_html().  Use new INFINITE_RECURSION #define.
6761
6762         * retr.c: Changed "URL-s" to "URLs".  get_urls_html() now takes
6763         final `dash_p_leaf_HTML' parameter.
6764
6765         * url.c: get_urls_html() and htmlfindurl() now take final
6766         `dash_p_leaf_HTML' parameter.
6767
6768         * url.h (get_urls_html): Now takes final `dash_p_leaf_HTML' parameter.
6769
6770         * wget.h: Added some comments and new INFINITE_RECURSION #define.
6771
6772 2000-08-23  Dan Harkless  <wget@harkless.org>
6773
6774         * main.c (print_help): -B / --base was not mentioned.
6775
6776 2000-08-22  Dan Harkless  <wget@harkless.org>
6777
6778         * main.c (print_help): Modified -nc description to mention that it
6779         also prevents the creation of multiple versions of the same file
6780         with ".<number>" suffixes.
6781
6782 2000-07-14  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
6783
6784         * retr.c (retrieve_url): Consistently strdup opt.referer when
6785         setting u->referer.
6786
6787 2000-06-09  Dan Harkless  <wget@harkless.org>
6788
6789         * main.c (print_help): --help output for --waitretry was over 80 cols.
6790
6791 2000-06-09  Hrvoje Niksic  <hniksic@iskon.hr>
6792
6793         * url.c (encode_string): Fix comment.
6794         Suggested by Herold Heiko <Heiko.Herold@previnet.it>.
6795
6796 2000-06-01  Const Kaplinsky  <const@ce.cctpu.edu.ru>
6797
6798         * ftp.c (ftp_retrieve_list): Change permissions only on plain
6799         files.
6800
6801 2000-06-01  Hrvoje Niksic  <hniksic@iskon.hr>
6802
6803         * url.c (str_url): Print the port number only if it's different
6804         from the default port number for that protocol.
6805
6806 2000-05-22  Dan Harkless  <wget@harkless.org>
6807
6808         * main.c (print_help): Added --help line for Damir Dzeko
6809         <ddzeko@zesoi.fer.hr>'s until-now-undocumented --referer option.
6810         Removed comments that --referer and --waitretry were undocumented.
6811         Changed "`.wgetrc' command" to "`.wgetrc'-style command" on --help
6812         line for --execute.
6813
6814 2000-05-18  Hrvoje Niksic  <hniksic@iskon.hr>
6815
6816         * ftp.c (getftp): Ditto.
6817
6818         * http.c (gethttp): Check for return value of fclose/fflush.
6819
6820 2000-04-12  Hrvoje Niksic  <hniksic@iskon.hr>
6821
6822         * host.c (store_hostaddress): Instead of shifting ADDR, start
6823         copying from the correct address.
6824
6825 2000-04-12  Hrvoje Niksic  <hniksic@iskon.hr>
6826
6827         * http.c (gethttp): Don't free REQUEST -- it was allocated with
6828         alloca().
6829         Pointed out by Gisle Vanem <gvanem@eunet.no>.
6830
6831 2000-04-04  Dan Harkless  <wget@harkless.org>
6832
6833         * host.c (store_hostaddress): R. K. Owen's patch introduces a
6834         "left shift count >= width of type" warning on 32-bit
6835         architectures.  Got rid of it by tricking the compiler w/ a variable.
6836
6837         * url.c (UNSAFE_CHAR): The macro didn't include all the illegal
6838         characters per RFC1738, namely everything above '~'.  It also
6839         generated a warning on OSes where char =~ unsigned char.  Fixed.
6840
6841 1998-10-17  Hrvoje Niksic  <hniksic@srce.hr>
6842
6843         * http.c (http_process_type): Removed needless strdup(), a memory
6844         leak.
6845
6846 1998-09-25  Hrvoje Niksic  <hniksic@srce.hr>
6847
6848         * html.c (htmlfindurl): Set PH to the first occurrence of `#'.
6849
6850 1998-09-25  Simon Munton  <simonm@m4data.co.uk>
6851
6852         * init.c (wgetrc_file_name): Don't free HOME under Windows.
6853
6854 1998-12-01  "R. K. Owen"  <rkowen@Nersc.GOV>
6855
6856         * host.c (store_hostaddress): Fix for big endian 64-bit machines.
6857
6858 1998-12-01  Hrvoje Niksic  <hniksic@srce.hr>
6859
6860         * url.c (UNSAFE_CHAR): New macro.
6861         (contains_unsafe): Use it.
6862         (encode_string): Ditto.
6863
6864 1998-12-01  Hrvoje Niksic  <hniksic@srce.hr>
6865
6866         * main.c (i18n_initialize): Use LC_MESSAGES only if available.
6867
6868 2000-03-31  Hrvoje Niksic  <hniksic@srce.hr>
6869
6870         * Use TOUPPER/TOLOWER.
6871
6872 1998-12-22  Alexander V. Lukyanov  <lav@yars.free.net>
6873
6874         * ftp-opie.c (btoe): Zero-terminate OSTORE.
6875
6876 2000-03-21  Hrvoje Niksic  <hniksic@iskon.hr>
6877
6878         * wget.h (DO_REALLOC_FROM_ALLOCA): Ditto.
6879
6880         * sysdep.h (ISALNUM): New macro.
6881         (TOLOWER): Ditto.
6882         (TOUPPER): Ditto.
6883
6884 2000-03-10  Dan Harkless  <wget@harkless.org>
6885
6886         * html.c (idmatch): Implemented checking of my new --follow-tags
6887         and --ignore-tags options.
6888
6889         * init.c (commands): Added comment reminding people adding new
6890         entries doing allocation to add corresponding freeing in cleanup().
6891         (commands): Added new followtags and ignoretags commands.
6892         (cleanup): Free storage for new followtags and ignoretags.
6893
6894         * main.c: Use of "comma-separated list" was random -- normalized
6895         it.  Did some alphabetization.  Added comments pointing out
6896         "Options without arguments" and "Options accepting an argument"
6897         sections of long_options[].  Added new options --follow-tags and
6898         -G / --ignore-tags.  Added comment that Damir's --referer is
6899         currently undocumented.  Added comment that Heiko's --waitretry is
6900         partially undocumented (mentioned in --help but not in
6901         wget.texi).  Moved improperly sorted 24, 129, and 'G' cases.
6902
6903         * options.h (struct options): Added new fields follow_tags and
6904         ignore_tags.
6905
6906         * wget.h: Added "#define EQ 0" so we can say "strcmp(a, b) == EQ".
6907
6908 2000-03-02  Dan Harkless  <wget@harkless.org>
6909
6910         * ftp.c (ftp_loop_internal): Heiko introduced "suggest explicit
6911         braces to avoid ambiguous `else'" warnings.  Eliminated them.
6912
6913         * http.c (gethttp): Dan Berger's query string patch is totally
6914         bogus.  If you have two different URLs, gen_page.cgi?page1 and
6915         get_page.cgi?page2, they'll both be saved as get_page.cgi and the
6916         second will overwrite the first.  Also, parameters to implicit
6917         CGIs, like "http://www.host.com/db/?2000-03-02" cause the URLs to
6918         be printed with trailing garbage characters, and could seg fault.
6919         Backing out the patch, which Dan B. informed me by email was just
6920         a kludge to download StarOffice from Sun made necessary due to
6921         wget's unconditional escaping of certain characters (room for an
6922         option there?).
6923         (http_loop): Heiko introduced "suggest explicit braces to avoid
6924         ambiguous `else'" warnings.  Eliminated them.
6925
6926         * main.c: Heiko's --wait / --waitretry backwards compatibility
6927         code looks to have been totally untested -- automatic variable
6928         'wr' was used without being initialized, and a long int was passed
6929         into setval()'s char* val parameter.
6930
6931         * recur.c (parse_robots): Applied Edward J. Sabol
6932         <sabol@alderaan.gsfc.nasa.gov>'s patch for Guan Yang's reported
6933         problem with "User-agent:<space>*<space>" lines in robots.txt.
6934
6935         * url.c (parseurl, str_url): Removing Dan Berger's code (see
6936         http.c above for explanation).
6937
6938 1999-08-25  Heiko Herold  <Heiko.Herold@previnet.it>
6939
6940         * ftp.c: Respect new option waitretry.
6941
6942 2000-01-30  Damir Dzeko  <ddzeko@zesoi.fer.hr>
6943
6944         * http.c (gethttp): Send custom Referer, if required.
6945
6946 1999-09-24  Charles G Waldman  <cgw@fnal.gov>
6947
6948         * netrc.c (parse_netrc): Allow passwords to contain spaces.
6949
6950         * netrc.c (parse_netrc): New function.
6951
6952 1999-09-17  Dan Berger  <dberger@ix.netcom.com>
6953
6954         * http.c (gethttp): Send it.
6955
6956         * url.c (parseurl): Detect query string in HTTP URL-s.
6957         (str_url): Print it.
6958
6959 2000-03-02  HIROSE Masaaki  <hirose31@t3.rim.or.jp>
6960
6961         * html.c (html_allow): Add <link href=...> and <script src=...>.
6962
6963 1999-05-02  andrew deryabin  <djsf@softhome.net>
6964
6965         * http.c (gethttp): Specify port in `Host' header only if it's
6966         different from 80.
6967
6968 1998-11-03  Edward J. Sabol  <sabol@alderaan.gsfc.nasa.gov>
6969
6970         * recur.c (recursive_retrieve): If a finite maximum depth is
6971         specified, and we're are already at that depth, don't download the
6972         HTML file for parsing.
6973
6974 2000-03-01  Dan Harkless  <wget@harkless.org>
6975
6976         * ftp.c (ftp_loop_internal): Call new downloaded_file() function,
6977         even though we don't do conversion on HTML files retrieved via
6978         FTP, so _current_ usage of downloaded_file() makes this call unneeded.
6979         (ftp_retrieve_list): Added a comment saying where we need to
6980         stat() a .orig file if FTP'd HTML file conversion is ever implemented.
6981         (ftp_retrieve_list): "Local file '%s' is more recent," is sometimes
6982         a lie -- reworded as "Server file no newer than local file '%s' --".
6983
6984         * http.c (http_loop): Fixed a typo and clarified a comment.
6985         (http_loop): When -K and -N are specified together, compare size
6986         and timestamp of server file X against local file X.orig (if
6987         extant) rather than converted local file X.
6988         (http_loop): "Local file '%s' is more recent," is sometimes a lie
6989         -- reworded as "Server file no newer than local file '%s' --".
6990         (http_loop): Call new downloaded_file() function to prevent
6991         wrongful overwriting of .orig file when -N is specified.
6992
6993         * url.c (convert_links): When -K specified, only rename X to
6994         X.orig if downloaded_file() returns TRUE.  Otherwise when we skip
6995         file X due to -N, we clobber an X.orig from a previous invocation.
6996         (convert_links): Call the failsafe xstrdup(), not the real strdup().
6997         (convert_links): Added a note asking anyone who understands how
6998         multiple URLs can correspond to a single file to comment it.
6999         (downloaded_file): Added this new function.
7000
7001         * url.h (downloaded_file): Added prototype for this new function
7002         as well as its downloaded_file_t enum type.
7003
7004         * wget.h (boolean): Added this new typedef and TRUE and FALSE #defines.
7005
7006 2000-02-29  Dan Harkless  <wget@harkless.org>
7007
7008         * version.c: Upped version to developer-only "1.5.3+dev".
7009
7010 2000-02-18  Dan Harkless  <wget@harkless.org>
7011
7012         * init.c (backup_converted): Added this new option.
7013
7014         * main.c (-K / --backup-converted): Added this new option.
7015
7016         * options.h (backup_converted): Added this new option.
7017
7018         * url.c (convert_links): When backup_converted is specified, save
7019         file X as X.orig before converting.
7020
7021         * url.h (urlpos): Fixed typo -- said "Rekative" instead of "Relative".
7022
7023 1998-09-21  Hrvoje Niksic  <hniksic@srce.hr>
7024
7025         * version.c: Wget 1.5.3 is released.
7026
7027 1998-09-21  Hrvoje Niksic  <hniksic@srce.hr>
7028
7029         * host.c (ftp_getaddress): Don't warn when reverse-lookup of local
7030         address doesn't yield FQDN.
7031
7032 1998-09-21  Andreas Schwab  <schwab@issan.informatik.uni-dortmund.de>
7033
7034         * cmpt.c (strerror): Fix declaration of sys_errlist.
7035
7036 1998-09-11  Hrvoje Niksic  <hniksic@srce.hr>
7037
7038         * main.c (main): Don't use an array subscript as the first
7039         argument to STRDUP_ALLOCA.
7040         From Kaveh R. Ghazi.
7041
7042 1998-09-11  Szakacsits Szabolcs  <szaka@sienet.hu>
7043
7044         * html.c (htmlfindurl): Download table background.
7045
7046 1998-09-11  Hans Grobler  <grobh@conde.ee.sun.ac.za>
7047
7048         * init.c (parse_line): Would free *com before allocating it.
7049         (parse_line): Would free com instead of *com.
7050
7051 1998-09-10  Howard Gayle  <howard@fjst.com>
7052
7053         * url.c (get_urls_html): Would drop the last character of the
7054         link.
7055
7056 1998-09-10  Hrvoje Niksic  <hniksic@srce.hr>
7057
7058         * http.c (http_loop): Don't print status code if quiet.
7059
7060 1998-09-10  Kaveh R. Ghazi  <ghazi@caip.rutgers.edu>
7061
7062         * log.c: Use <stdarg.h> only when __STDC__.
7063
7064 1998-09-10  Adam D. Moss  <adam@foxbox.org>
7065
7066         * html.c (htmlfindurl): Download <layer src=...>.
7067
7068 1998-09-10  Howard Gayle  <howard@fjst.com>
7069
7070         * ftp.c (ftp_retrieve_list): Don't update the time stamp of a file
7071         not retrieved.
7072
7073 1998-06-27  Hrvoje Niksic  <hniksic@srce.hr>
7074
7075         * utils.c: Include <libc.h> on NeXT.
7076
7077 1998-06-26  Heinz Salzmann  <heinz.salzmann@intermetall.de>
7078
7079         * url.c (get_urls_html): Fix calculation of URL position.
7080
7081 1998-06-23  Hrvoje Niksic  <hniksic@srce.hr>
7082
7083         * version.c: Wget 1.5.2 is released.
7084
7085 1998-06-23  Dave Love  <d.love@dl.ac.uk>
7086
7087         * ftp.c, init.c, netrc.c: Include errno.h.
7088
7089         * http.c: Include errno.h and time header.
7090
7091         * Makefile.in (exext): Define.
7092         (install.bin, uninstall.bin): Use it.
7093
7094 1998-06-21  Hrvoje Niksic  <hniksic@srce.hr>
7095
7096         * http.c (http_loop): Don't attempt to compare local and remote
7097         sizes if the remote size is unknown.
7098
7099 1998-06-16  Hrvoje Niksic  <hniksic@srce.hr>
7100
7101         * url.c (get_urls_html): Use malloc() instead of alloca in the
7102         loop.
7103
7104 1998-06-13  Hrvoje Niksic  <hniksic@srce.hr>
7105
7106         * version.c: Wget 1.5.2-b4 is released.
7107
7108 1998-06-13  Hrvoje Niksic  <hniksic@srce.hr>
7109
7110         * url.c (get_urls_html): Ignore spaces before and after the URI.
7111
7112 1998-06-08  Wanderlei Antonio Cavassin  <cavassin@conectiva.com.br>
7113
7114         * ftp.c (getftp): Translate `done'.
7115
7116 1998-06-06  Hrvoje Niksic  <hniksic@srce.hr>
7117
7118         * version.c: Wget 1.5.2-b3 is released.
7119
7120 1998-06-06  Alexander Kourakos  <awk@bnt.com>
7121
7122         * init.c (cleanup): Close dfp, don't free it.
7123
7124 1998-06-06  Hrvoje Niksic  <hniksic@srce.hr>
7125
7126         * utils.c (make_directory): Twiddle.
7127
7128         * config.h.in: Added template for access().
7129
7130 1998-06-05  Mathieu Guillaume  <mat@cythere.com>
7131
7132         * html.c (htmlfindurl): Download <input src=...>
7133
7134 1998-06-03  Hrvoje Niksic  <hniksic@srce.hr>
7135
7136         * utils.c (file_exists_p): Use access() with two arguments.
7137
7138 1998-05-27  Martin Kraemer  <Martin.Kraemer@mch.sni.de>
7139
7140         * netrc.c (parse_netrc): Correct logic.
7141
7142 1998-05-27  Hrvoje Niksic  <hniksic@srce.hr>
7143
7144         * ftp.c (getftp): Added `break'; suggested by Lin Zhe Min
7145         <ljm@ljm.wownet.net>.
7146
7147 1998-05-24  Hrvoje Niksic  <hniksic@srce.hr>
7148
7149         * version.c: Wget 1.5.2-b2 is released.
7150
7151 1998-05-18  Juan Jose Rodriguez  <jcnsoft@jal1.telmex.net.mx>
7152
7153         * mswindows.h: Don't translate mkdir to _mkdir under Borland.
7154
7155 1998-05-17  Hrvoje Niksic  <hniksic@srce.hr>
7156
7157         * retr.c (elapsed_time): Return correct value when
7158         HAVE_GETTIMEOFDAY is undefined.
7159
7160 1998-05-13  Hrvoje Niksic  <hniksic@srce.hr>
7161
7162         * version.c: Wget 1.5.2-b1 is released.
7163
7164 1998-05-08  Hrvoje Niksic  <hniksic@srce.hr>
7165
7166         * getopt.c (_getopt_internal): Use exec_name instead of argv[0].
7167         (_getopt_internal): Don't translate `#if 0'-ed strings.
7168
7169 1998-05-06  Douglas E. Wegscheid  <wegscd@whirlpool.com>
7170
7171         * mswindows.c (ws_handler): Use fork_to_background().
7172
7173 1998-05-05  Hrvoje Niksic  <hniksic@srce.hr>
7174
7175         * version.c: Wget 1.5.1 is released.
7176
7177 1998-05-05  Hrvoje Niksic  <hniksic@srce.hr>
7178
7179         * http.c (parse_http_status_line): Avoid `minor' and `major'
7180         names.
7181
7182 1998-05-02  Hrvoje Niksic  <hniksic@srce.hr>
7183
7184         * utils.c (mkdirhier): Renamed to make_directory.
7185
7186 1998-05-01  Hrvoje Niksic  <hniksic@srce.hr>
7187
7188         * mswindows.c (fork_to_background): Define under Windows.
7189
7190         * utils.c (fork_to_background): New function.
7191
7192         * html.c (htmlfindurl): Removed rerdundant casts.
7193
7194 1998-05-01  Douglas E. Wegscheid  <wegscd@whirlpool.com>
7195
7196         * mswindows.c (ws_mypath): Cache the path.
7197
7198 1998-04-30  Douglas E. Wegscheid  <wegscd@whirlpool.com>
7199
7200         * ftp.h: Prefix enum ftype members with FT_.
7201
7202         * ftp-ls.c, ftp.c, html.h: Adjust accordingly.
7203
7204         * mswindows.h: Use stat under Borland, _stat under MSVC.
7205
7206 1998-04-28  Hrvoje Niksic  <hniksic@srce.hr>
7207
7208         * http.c (known_authentication_scheme_p): New function.
7209         (gethttp): Handle authorization more correctly.
7210
7211         * ftp-basic.h: Removed.
7212
7213         * cmpt.h: Removed.
7214
7215         * utils.c: Include <unistd.h> before <pwd.h>; needed under SunOS
7216         with gcc 2.8.
7217         (numdigit): Use `while' loop.
7218
7219         * http.c (create_authorization_line): Detect authentication
7220         schemes case-insensitively.
7221
7222         * http.c (extract_header_attr): Use strdupdelim().
7223         (digest_authentication_encode): Move declaration of local
7224         variables to smaller scope.
7225         (digest_authentication_encode): Reset REALM, OPAQUE and NONCE.
7226         (create_authorization_line): Detect authentication schemes
7227         case-insensitively.
7228
7229         * utils.c (touch): Constify.
7230
7231         * http.c (gethttp): Report a nicer error when no data is received.
7232
7233         * rbuf.h (RBUF_READCHAR): Ditto.
7234
7235         * ftp-basic.c (ftp_response): Use sizeof.
7236
7237 1998-04-27  Hrvoje Niksic  <hniksic@srce.hr>
7238
7239         * retr.c (print_percentage): EXPECTED is long, not int.
7240         (print_percentage): Use floating-point arithmetic to avoid
7241         overflow with large files' sizes multiplied with 100.
7242
7243 1998-04-27  Gregor Hoffleit  <flight@mathi.uni-heidelberg.de>
7244
7245         * config.h.in: Added pid_t stub.
7246
7247         * sysdep.h (S_ISREG): Moved here from mswindows.h (NeXT doesn't
7248         define it).
7249
7250 1998-04-20  Hrvoje Niksic  <hniksic@srce.hr>
7251
7252         * version.c: Wget 1.5.0 is released.
7253
7254 1998-04-18  Hrvoje Niksic  <hniksic@srce.hr>
7255
7256         * url.c (str_url): Ditto.
7257
7258         * ftp-basic.c (ftp_rest): Use new name.
7259
7260         * utils.c (long_to_string): Renamed from prnum().
7261
7262 1998-04-16  Hrvoje Niksic  <hniksic@srce.hr>
7263
7264         * version.c: Wget 1.5-b17 is released.
7265
7266 1998-04-08  Hrvoje Niksic  <hniksic@srce.hr>
7267
7268         * headers.c (header_get): New argument FLAGS.
7269
7270         * http.c (gethttp): If request is malformed, bail out of the
7271         header loop.
7272         (gethttp): Check for empty header *after* the status line checks.
7273         (gethttp): Disallow continuations for status line.
7274
7275 1998-04-08  Hrvoje Niksic  <hniksic@srce.hr>
7276
7277         * version.c: Wget 1.5-b16 is released.
7278
7279 1998-04-08  Hrvoje Niksic  <hniksic@srce.hr>
7280
7281         * init.c (commands): Renamed `always_rest' to `continue'.
7282
7283 1998-04-05  Hrvoje Niksic  <hniksic@srce.hr>
7284
7285         * all: Use it.
7286
7287         * log.c (logputs): New argument.
7288         (logvprintf): Ditto.
7289         (logprintf): Ditto.
7290
7291 1998-04-04  Hrvoje Niksic  <hniksic@srce.hr>
7292
7293         * http.c (http_atotm): Update comment.
7294
7295         * main.c (i18n_initialize): Set LC_MESSAGES, not LC_ALL.
7296
7297         * wget.h: Renamed ENABLED_NLS to HAVE_NLS.
7298
7299         * main.c (i18n_initialize): New function.
7300         (main): Use it.
7301
7302         * log.c: Include <unistd.h>.
7303
7304         * retr.c (show_progress): Cast alloca to char *.
7305
7306 1998-04-04  Hrvoje Niksic  <hniksic@srce.hr>
7307
7308         * version.c: Wget 1.5-b15 is released.
7309
7310 1998-04-04  Hrvoje Niksic  <hniksic@srce.hr>
7311
7312         * utils.h: Declare file_non_directory_p().
7313
7314 1998-04-03  Hrvoje Niksic  <hniksic@srce.hr>
7315
7316         * main.c (main): It's `tries', not `numtries' now.
7317
7318 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
7319
7320         * init.c (getperms): Removed.
7321
7322 1998-04-01  Tim Charron  <tcharron@interlog.com>
7323
7324         * log.c (logvprintf): Don't use ARGS twice.
7325
7326 1998-04-01  John  <john@futuresguide.com>
7327
7328         * mswindows.c: Cleaned up.
7329
7330 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
7331
7332         * version.c: Wget 1.5-b14 is released.
7333
7334 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
7335
7336         * ftp-opie.c (STRLEN4): New macro.
7337         (btoe): Use it.
7338
7339 1998-04-01  Junio Hamano  <junio@twinsun.com>
7340
7341         * http.c: Document all the Digest functions.
7342
7343 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
7344
7345         * utils.c (file_non_directory_p): Renamed from isfile().
7346
7347         * mswindows.h (S_ISREG): New macro, suggested by Tim Adam.
7348
7349 1998-03-31  Hrvoje Niksic  <hniksic@srce.hr>
7350
7351         * utils.c (mkdirhier): Use 0777 instead of opt.dirmode.
7352
7353         * init.c (cmd_spec_dotstyle): Use 48 dots per line for binary
7354         style.
7355         (cmd_permissions): Removed.
7356
7357         * config.h.in: Add template for WORDS_BIGENDIAN.
7358
7359 1998-03-31  Junio Hamano  <junio@twinsun.com>
7360
7361         * http.c (HEXD2asc): New macro.
7362         (dump_hash): Use it.
7363
7364 1998-03-31  Hrvoje Niksic  <hniksic@srce.hr>
7365
7366         * version.c: Wget 1.5-b13 is released.
7367
7368 1998-03-31  Hrvoje Niksic  <hniksic@srce.hr>
7369
7370         * main.c (main): Don't try to use `com'.
7371
7372 1998-03-30  Hrvoje Niksic  <hniksic@srce.hr>
7373
7374         * init.c (cmd_permissions): New function.
7375
7376 1998-03-30  Hrvoje Niksic  <hniksic@srce.hr>
7377
7378         * version.c: Wget 1.5-b12 is released.
7379
7380 1998-03-30  Hrvoje Niksic  <hniksic@srce.hr>
7381
7382         * init.c (commands): Renamed `numtries' to `tries'.
7383         (cmd_spec_debug): Removed.
7384         (home_dir): Under Windows, return `C:\' if HOME is undefined.
7385
7386 1998-03-29  Hrvoje Niksic  <hniksic@srce.hr>
7387
7388         * config.h.in: Define _XOPEN_SOURCE.
7389
7390         * init.c (check_user_specified_header): New function.
7391         (cmd_spec_header): Use it.
7392         (cmd_spec_useragent): New function.
7393
7394 1998-03-29  Hrvoje Niksic  <hniksic@srce.hr>
7395
7396         * version.c: Wget 1.5-b11 is released.
7397
7398 1998-03-28  Hrvoje Niksic  <hniksic@srce.hr>
7399
7400         * wget.h: Include <libintl.h> only if NLS is enabled.
7401
7402 1998-03-26  Hrvoje Niksic  <hniksic@srce.hr>
7403
7404         * options.h (struct options): Made `wait' a long.
7405         (struct options): Ditto for `timeout'.
7406
7407 1998-03-19  Hrvoje Niksic  <hniksic@srce.hr>
7408
7409         * utils.c (exists): Renamed to file_exists_p.
7410         (file_exists_p): Use access() if available.
7411
7412 1998-03-17  Hrvoje Niksic  <hniksic@srce.hr>
7413
7414         * utils.c (memfatal): Set save_log_p to 0 to avoid potential
7415         infloop.
7416
7417         * log.c: do_logging -> save_log_p.
7418
7419         * config.h.in: Added template for HAVE_VSNPRINTF.
7420
7421 1998-03-16  Hrvoje Niksic  <hniksic@srce.hr>
7422
7423         * init.c: Ditto.
7424
7425         * http.c: Protect declaration against non-ANSI compiler.
7426
7427         * log.c (logvprintf): Use vsnprintf() if available.
7428
7429         * getopt.c (main): Don't translate test stuff.
7430
7431 1998-03-16  Hrvoje Niksic  <hniksic@srce.hr>
7432
7433         * version.c: Wget 1.5-b10 is released.
7434
7435 1998-03-11  Hrvoje Niksic  <hniksic@srce.hr>
7436
7437         * ftp.c (getftp): Don't translate "CWD %s".
7438
7439         * wget.h (GCC_FORMAT_ATTR): Renamed from FORMAT_ATTR.
7440
7441 1998-03-07  Hrvoje Niksic  <hniksic@srce.hr>
7442
7443         * ftp-opie.c (btoe): Use memcpy() instead of strncat().
7444
7445         * log.c (logputs): New function.
7446         (logvprintf): Renamed from vlogmsg; use logputs().
7447
7448         * retr.c (show_progress): Print `[100%]' when the retrieval is
7449         finished.
7450
7451         * init.c (run_wgetrc): Use FILE, not PATH.
7452         (wgetrc_file_name): Ditto.
7453
7454 1998-03-07  Tim Adam  <tma@osa.com.au>
7455
7456         * recur.c (parse_robots): Correctly reset `entries' on empty
7457         disallow.
7458
7459 1998-03-07  Hrvoje Niksic  <hniksic@srce.hr>
7460
7461         * init.c (cmd_spec_debug): Use cmd_boolean().
7462
7463 1998-02-23  Hrvoje Niksic  <hniksic@srce.hr>
7464
7465         * http.c (gethttp): Create proxy-authorization correctly.
7466
7467 1998-02-22  Hrvoje Niksic  <hniksic@srce.hr>
7468
7469         * md5.c: Ditto.
7470
7471         * getopt.c: Use ANSI function definitions.
7472
7473         * ftp-opie.c: New file.
7474
7475         * options.h: Don't redefine EXTERN.
7476
7477         * init.c: Sort it correctly.
7478
7479 1998-02-22  Hrvoje Niksic  <hniksic@srce.hr>
7480
7481         * version.c: Wget 1.5-b9 is released.
7482
7483 1998-02-22  Hrvoje Niksic  <hniksic@srce.hr>
7484
7485         * recur.c (recursive_retrieve): Reset `first_time'.
7486
7487         * ftp.c (getftp): Added `default' clause to switches of uerr_t.
7488
7489         * rbuf.c (rbuf_peek): Simplified.
7490         (rbuf_flush): Use MINVAL.
7491
7492         * wget.h (MINVAL): Moved from url.h.
7493
7494         * rbuf.h (RBUF_FD): New macro.
7495
7496         * url.c (add_url): Add to the head of the list.
7497
7498         * ftp.c (ftp_retrieve_list): Set the permissions to downloaded
7499         file.
7500         (getftp): Set the default permissions to 0600.
7501
7502 1998-02-21  Hrvoje Niksic  <hniksic@srce.hr>
7503
7504         * url.c (get_urls_html): Ditto.
7505         (convert_links): Ditto.
7506
7507         * recur.c (parse_robots): Ditto.
7508
7509         * html.c (ftp_index): Ditto.
7510
7511         * ftp-ls.c (ftp_parse_unix_ls): Open file as binary.
7512
7513         * init.c (defaults): Initialize `opt' to zero via memset.
7514
7515         * http.c (digest_authentication_encode): goto considered harmful.
7516
7517 1998-02-19  Hrvoje Niksic  <hniksic@srce.hr>
7518
7519         * ftp.c (delelement): Simplify and fix leak.
7520
7521 1998-02-18  Hrvoje Niksic  <hniksic@srce.hr>
7522
7523         * http.c (dump_hash): Use HEXD2ASC instead of home-grown stuff.
7524
7525         * url.h (HEXD2ASC): Removed warning.
7526
7527         * init.c (comind): Use binary search.
7528         (commands): Reorganized.
7529         (setval): Ditto.
7530         (cmd_boolean): New function.
7531         (cmd_number): Ditto.
7532         (cmd_number_inf): Ditto.
7533         (cmd_string): Ditto.
7534         (cmd_vector): Ditto.
7535         (cmd_directory_vector): Ditto.
7536         (cmd_bytes): Ditto.
7537         (cmd_time): Ditto.
7538         (cmd_spec_debug): Ditto.
7539         (cmd_spec_dirmode): Ditto.
7540         (cmd_spec_dirstruct): Ditto.
7541         (cmd_spec_dotstyle): Ditto.
7542         (cmd_spec_header): Ditto.
7543         (cmd_spec_htmlify): Ditto.
7544         (cmd_spec_mirror): Ditto.
7545         (cmd_spec_outputdocument): Ditto.
7546         (cmd_spec_recursive): Ditto.
7547         (settime): Merged with cmd_time().
7548         (setbytes): Merged with cmd_bytes().
7549         (setonoff): Merged with cmd_boolean().
7550         (onoff): Ditto.
7551
7552 1998-02-17  Hrvoje Niksic  <hniksic@srce.hr>
7553
7554         * Makefile.in (distclean): Remove `config.h'.
7555
7556 1998-02-17  Hrvoje Niksic  <hniksic@srce.hr>
7557
7558         * version.c: Wget 1.5-b8 is released.
7559
7560 1998-02-17  Hrvoje Niksic  <hniksic@srce.hr>
7561
7562         * http.c (digest_authentication_encode): New function.
7563         (create_authorization_line): Use it.
7564         (dump_hash): New function.
7565         (digest_authentication_encode): Use it.
7566
7567         * fnmatch.c: Renamed from `mtch.c'.
7568
7569 1998-02-15  Karl Eichwalder  <ke@suse.de>
7570
7571         * main.c (main): Tag "Written by..." string as translatable.
7572
7573 1998-02-15  Hrvoje Niksic  <hniksic@srce.hr>
7574
7575         * wget.h (FREE_MAYBE): New macro.
7576
7577         * http.c (create_authorization_line): Don't use ANSI C string
7578         concatenation feature.
7579         (basic_authentication_encode): Use alloca() for temporary
7580         variables.
7581
7582         * recur.h: Ditto.
7583
7584         * http.c: Ditto.
7585
7586         * headers.h: Ditto.
7587
7588         * ftp-basic.c: Protect declaration against non-ANSI compiler.
7589
7590         * http.c (create_authorization_line): Cast `unsigned char *' to
7591         `char *' for sprintf, to shut up the noisy Digital Unix cc.
7592
7593 1998-02-15  Hrvoje Niksic  <hniksic@srce.hr>
7594
7595         * version.c: Wget 1.5-b7 is released.
7596
7597 1998-02-15  Hrvoje Niksic  <hniksic@srce.hr>
7598
7599         * cmpt.c (strstr): Synched with glibc-2.0.6.
7600
7601         * ftp-basic.c (calculate_skey_response): Ditto.
7602         (calculate_skey_response): Use alloca().
7603
7604         * http.c (create_authorization_line): Work with FSF's version of
7605         md5.c.
7606
7607         * md5.c: New file, from GNU libc.
7608
7609 1998-02-14  Hrvoje Niksic  <hniksic@srce.hr>
7610
7611         * url.h (URL_CLEANSE): Name the temporary variable more carefully.
7612
7613 1998-02-13  Hrvoje Niksic  <hniksic@srce.hr>
7614
7615         * http.c (basic_authentication_encode): New function, instead of
7616         the macro.
7617
7618 1998-02-13  Junio Hamano  <junio@twinsun.com>
7619
7620         * http.c: Add HTTP-DA support.
7621         * ftp-basic.c: Add Opie/S-key support.
7622         * config.h.in, Makefile.in: Add HTTP-DA and Opie/S-key support.
7623         * md5.c, md5.h: New files.
7624
7625 1998-02-13  Hrvoje Niksic  <hniksic@srce.hr>
7626
7627         * http.c (http_process_range): Renamed from hprocrange().
7628         (http_process_range): Parse the whole header.
7629
7630         * headers.c: New file.
7631         (header_process): New function.
7632         (header_get): Renamed from fetch_next_header.
7633
7634         * all: Include utils.h only where necessary.
7635
7636         * wget.h: Declare xmalloc(), xrealloc() and xstrdup() here.
7637
7638         * wget.h: Add provisions for dmalloc.
7639
7640 1998-02-12  Hrvoje Niksic  <hniksic@srce.hr>
7641
7642         * version.c: Wget 1.5-b6 is released.
7643
7644 1998-02-12  Hrvoje Niksic  <hniksic@srce.hr>
7645
7646         * ftp.c (ftp_loop): Determine `filename' more precisely.
7647
7648         * init.c (setval): Don't set `opt.quiet' if output-document is
7649         `-'.
7650
7651         * log.c (log_init): Print to STDERR instead of STDOUT.
7652         (vlogmsg): Use STDERR by default.
7653         (logflush): Ditto.
7654
7655 1998-02-11  Simon Josefsson  <jas@pdc.kth.se>
7656
7657         * host.c: Use addr_in again.
7658
7659 1998-02-08  Karl Eichwalder  <karl@suse.de>
7660
7661         * http.c (gethttp): Fixed typo.
7662
7663 1998-02-08  Hrvoje Niksic  <hniksic@srce.hr>
7664
7665         * version.c: Wget 1.5-b5 is released.
7666
7667 1998-02-08  Hrvoje Niksic  <hniksic@srce.hr>
7668
7669         * retr.c (show_progress): Use it.
7670
7671         * log.c (logflush): New function.
7672
7673         * wget.h: Utilize __attribute__ if on gcc.
7674
7675 1998-02-07  Hrvoje Niksic  <hniksic@srce.hr>
7676
7677         * http.c (base64_encode_line): New argument LENGTH.
7678         (BASIC_AUTHENTICATION_ENCODE): Use it.
7679         (BASIC_AUTHENTICATION_ENCODE): Take length of HEADER into account.
7680
7681         * main.c (main): Fixed fprintf() format mismatch.
7682
7683 1998-02-06  Hrvoje Niksic  <hniksic@srce.hr>
7684
7685         * version.c: Wget 1.5-b4 is released.
7686
7687 1998-02-03  Simon Josefsson  <jas@pdc.kth.se>
7688
7689         * host.c: use sockaddr_in instead of addr_in.
7690
7691 1998-02-04  Hrvoje Niksic  <hniksic@srce.hr>
7692
7693         * init.c (cleanup): Use it.
7694
7695         * recur.c (recursive_cleanup): New function.
7696
7697         * retr.c (retrieve_from_file): Ditto.
7698
7699         * main.c (main): Use it.
7700
7701         * recur.c (recursive_reset): New function.
7702
7703         * retr.c (retrieve_from_file): Ditto.
7704
7705         * main.c (main): Simplify call to recursive_retrieve().
7706
7707         * recur.c (recursive_retrieve): Removed FLAGS argument.
7708
7709         * http.c (gethttp): Changed call to iwrite().
7710
7711 1998-02-03  Hrvoje Niksic  <hniksic@srce.hr>
7712
7713         * url.c (get_urls_html): Ditto.
7714         (free_urlpos): Ditto.
7715         (mkstruct): Ditto.
7716         (construct): Ditto.
7717
7718         * retr.c (retrieve_url): Move declaration of local variables to
7719         smaller scope.
7720
7721         * url.c (urlproto): Use it.
7722         (parseurl): Ditto.
7723         (str_url): Ditto.
7724         (get_urls_html): Ditto.
7725
7726         * utils.h (ARRAY_SIZE): New macro.
7727
7728         * url.c (proto): Moved from url.h.
7729
7730         * url.h (URL_CLEANSE): Reformatted.
7731         (USE_PROXY_P): Renamed from USE_PROXY.
7732
7733         * ftp-basic.c: Adjust to the new interface of iwrite().
7734
7735         * ftp-basic.c (ftp_port): Use alloca().
7736
7737 1998-02-03  Hrvoje Niksic  <hniksic@srce.hr>
7738
7739         * version.c: Wget 1.5-b3 is released.
7740
7741         * host.c (ftp_getaddress): Don't print to stderr directly.
7742
7743         * init.c (setbytes): Support `g' for gigabytes.
7744         (cmdtype): New specification CTIME.
7745         (setval): Use it with settime().
7746         (commands): Use it for WAIT and TIMEOUT.
7747
7748 1998-02-02  Hrvoje Niksic  <hniksic@srce.hr>
7749
7750         * http.c (BASIC_AUTHENTICATION_ENCODE): New macro.
7751         (gethttp): Use it.
7752
7753         * utils.c (unique_name_1): Moved from url.c.
7754         (unique_name): Ditto.
7755
7756         * url.c (url_filename): Ditto.
7757
7758         * log.c (redirect_output): Changed call to unique_name().
7759
7760         * url.c (unique_name_1): Renamed from unique_name().
7761         (unique_name): Changed interface.
7762
7763         * init.c (enum cmdid): Moved from init.h.
7764         (cmdtype): Ditto.
7765         (struct cmd): Ditto.
7766
7767         * main.c (main): Use it.
7768         (main): Moved `--backups' to not have a short option.
7769
7770         * options.h (struct options): New member BACKGROUND.
7771
7772         * main.c (print_help): Rearranged.
7773         (main): New long options for -n* short options: --no-directories,
7774         --no-host-directories, --non-verbose, --no-host-lookup and
7775         --dont-remove-listing.
7776
7777 1998-02-01  Hrvoje Niksic  <hniksic@srce.hr>
7778
7779         * main.c (main): Use log_close().
7780
7781         * log.c: New variable LOGFP.
7782         (vlogmsg): Use it.
7783         (redirect_output): Don't open /dev/null; set LOGFP to stdin
7784         instead.
7785         (log_close): New function.
7786
7787         * options.h (struct options): Removed LFILE.
7788
7789         * log.c (log_enable): Removed.
7790
7791         * main.c (main): Use it.
7792
7793         * log.c (log_init): New function.
7794
7795         * url.c (get_urls_html): Removed needless assignment to BASE.
7796
7797         * host.c (add_hlist): Don't set CMP needlessly.
7798
7799         * utils.c (match_backwards): Ditto.
7800         (in_acclist): Ditto.
7801
7802         * url.c (findurl): Ditto.
7803
7804         * netrc.c (parse_netrc): Ditto.
7805
7806         * log.c (log_dump): Ditto.
7807
7808         * html.c (html_quote_string): Ditto.
7809
7810         * ftp-basic.c (ftp_request): Made static.
7811
7812         * connect.c: Made global variables static.
7813
7814         * url.c (construct): Ditto.
7815
7816         * init.c (init_path): Avoid assignment inside `if'-condition.
7817
7818         * ftp.c: Don't include in.h or winsock.h.
7819
7820         * ftp.c (ftp_loop): Use SZ.
7821
7822         * connect.c (bindport): Cast &addrlen to int *.
7823         (conaddr): Ditto.
7824
7825         * init.c (initialize): Don't use SYSTEM_WGETRC unconditionally.
7826
7827 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
7828
7829         * ftp.c (getftp): Initialize opt.ftp_pass here.
7830         (ftp_retrieve_dirs): Use alloca().
7831
7832         * init.c (defaults): Don't initialize opt.ftp_pass.
7833
7834         * sysdep.h (S_ISLNK): Declare for OS/2; ditto for lstat.
7835         From Ivan F. Martinez <ivanfm@ecodigit.com.br>.
7836
7837 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
7838
7839         * recur.c (parse_robots): Check for comments more correctly.
7840
7841         * host.c (ftp_getaddress): Use STRDUP_ALLOCA.
7842         (ftp_getaddress): Add diagnostics when reverse-lookup yields only
7843         hostname.
7844
7845 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
7846
7847         * version.c: Wget 1.5-b2 is released.
7848
7849         * netrc.c (NETRC_FILE_NAME): Moved from netrc.h.
7850
7851         * utils.c (proclist): Pass FNM_PATHNAME to fnmatch().
7852
7853         * ftp-basic.c (ftp_pasv): Avoid unnecessary casting to unsigned
7854         char.
7855
7856         * log.c: Don't attempt to hide arguments from ansi2knr.
7857
7858         * cmpt.c: Synched strptime() and mktime() with glibc-2.0.6.
7859
7860         * ansi2knr.c: Use a later version, from fileutils-3.16l alpha.
7861
7862         * ftp.c (getftp): Ditto.
7863
7864         * http.c (gethttp): Use it.
7865
7866         * retr.c (get_contents): New argument EXPECTED; pass it to
7867         show_progress().
7868         (show_progress): New argument EXPECTED; use it to display
7869         percentages.
7870
7871         * init.c (setval): Ditto.
7872
7873         * http.c (gethttp): Ditto.
7874         (http_loop): Ditto.
7875
7876         * ftp.c (getftp): Ditto.
7877         (ftp_loop_internal): Ditto.
7878
7879         * ftp-ls.c (ftp_parse_unix_ls): Use abort() instead of assert(0).
7880
7881         * sysdep.h (CLOSE): Simplify; use DEBUGP.
7882
7883         * netrc.c (search_netrc): Use alloca().
7884
7885         * init.c (defaults): Initialize no_flush.
7886
7887         * log.c (vlogmsg): Don't flush if no_flush.
7888
7889         * options.h (struct options): New variable no_flush.
7890
7891         * main.c (main): Don't play games with buffering.
7892
7893         * log.c (vlogmsg): Flush the output after every message.
7894
7895 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
7896
7897         * init.c (parse_line): Ditto.
7898
7899         * url.c (get_urls_html): Ditto.
7900
7901         * main.c (main): Don't cast to unsigned char.
7902
7903         * init.c (run_wgetrc): Don't cast to unsigned char.
7904         (parse_line): Accept char instead of unsigned char.
7905
7906         * html.c (htmlfindurl): Use char instead of unsigned char.
7907
7908         * all: Use them.
7909
7910         * sysdep.h: Add wrappers to ctype macros to make them
7911         eight-bit-clean:
7912
7913 1998-01-30  Hrvoje Niksic  <hniksic@srce.hr>
7914
7915         * html.c (htmlfindurl): Download <img lowsrc=...>
7916
7917         * main.c (main): Ignore SIGPIPE.
7918
7919         * connect.c (select_fd): New argument WRITEP.
7920         (iwrite): Call select_fd().
7921
7922 1997-02-27  Fila Kolodny <fila@ibi.com>
7923
7924         * ftp.c (ftp_retrieve_list): If retrieving symlink and the proper
7925         one already exists, just skip it.
7926
7927 1998-01-30  Hrvoje Niksic  <hniksic@srce.hr>
7928
7929         * http.c (gethttp): Cosmetic changes.
7930
7931         * http.c (check_end): Allow `+D...' instead of `GMT'.
7932         From Fabrizio Pollastri <pollastri@cstv.to.cnr.it>.
7933
7934         * url.c (process_ftp_type): New function.
7935         (parseurl): Use it.
7936
7937         * connect.c (iwrite): Allow writing in a few chunks.
7938         (bindport): Made SRV static, so addr can point to it.
7939         (select_fd): Removed HPUX kludge.
7940
7941         * host.c (free_hlist): Incorporated into clean_hosts().
7942
7943 1998-01-29  Hrvoje Niksic  <hniksic@srce.hr>
7944
7945         * host.c (hlist): Made static.
7946         (search_address): Cosmetic change.
7947
7948 1998-01-29  Hrvoje Niksic  <hniksic@srce.hr>
7949
7950         * version.c: Wget v1.5-b1 is released.
7951
7952         * http.c (hgetlen): Use sizeof() to get the header length.
7953         (hgetrange): Ditto.
7954         (hgettype): Ditto.
7955         (hgetlocation): Ditto.
7956         (hgetmodified): Ditto.
7957         (haccepts_none): Ditto.
7958
7959         * main.c (main): Updated `--version' and `--help' output, as per
7960         Francois Pinard's suggestions.
7961
7962         * main.c: Include locale.h; call setlocale(), bindtextdomain() and
7963         textdomain().
7964
7965         * config.h.in: Define stubs for I18N3.
7966
7967         * wget.h: Include libintl.h.
7968
7969 1998-01-28  Hrvoje Niksic  <hniksic@srce.hr>
7970
7971         * url.c (mkstruct): Check for opt.cut_dirs.
7972         (mkstruct): alloca()-te more, xmalloc() less.
7973
7974         * utils.c (load_file): Check for ferror().
7975
7976         * url.c (get_urls_file): Close only the files we opened.
7977         (get_urls_html): Ditto.
7978         (count_slashes): New function.
7979
7980         * http.h: Removed.
7981
7982         * http.c (gethttp): Respect username and password provided by
7983         proxy URL.
7984         (base64_encode_line): Write into an existing buffer instead of
7985         malloc-ing a new one.
7986         (struct http_stat): Moved from http.h
7987
7988         * retr.c (retrieve_url): Free SUF.
7989
7990         * all: Removed lots of unnecessary .h dependencies.
7991
7992         * html.c (global_state): Made static.
7993
7994         * utils.h (ALLOCA_ARRAY): New macro.
7995
7996         * main.c (main): New option `--cut-dirs'.
7997
7998         * url.c (construct): Use alloca() for T.
7999
8000         * utils.c (mkdirhier): Use STRDUP_ALLOCA.
8001
8002         * host.c (_host_t): Moved from host.h.
8003         (struct host): Renamed from _host_t.
8004         (store_hostaddress): Use STRDUP_ALLOCA for INET_S.
8005         (realhost): Ditto.
8006
8007         * host.h: Don't include url.h.
8008
8009         * ftp.c (LIST_FILENAME): Moved from ftp.h.
8010
8011         * init.c (DEFAULT_FTP_ACCT): Moved from ftp.h.
8012
8013         * main.c (main): Enable log if the output goes to a TTY.
8014
8015         * connect.h: Removed unused constant `BACKLOG'.
8016
8017         * config.h.in: Check for isatty().
8018
8019         * Makefile.in (LINK): Use CFLAGS when linking.
8020
8021 1998-01-27  Hrvoje Niksic  <hniksic@srce.hr>
8022
8023         * mswindows.c (ws_hangup): Use redirect_output().
8024
8025         * main.c (redirect_output_signal): New function; use
8026         redirect_output().
8027
8028         * log.c (redirect_output): New function, based on hangup(), which
8029         is deleted.
8030
8031         * log.c (vlogmsg): New function.
8032
8033         * wget.h (DEBUGP): Use debug_logmsg().
8034
8035         * main.c (hangup): Use it.
8036
8037         * log.c (log_dump): New function.
8038
8039         * utils.h (DO_REALLOC): Use `long' for various sizes.
8040
8041         * http.c (hskip_lws): Use `while', for clarity.
8042         (HTTP_DYNAMIC_LINE_BUFFER): New constant.
8043         (fetch_next_header): Use it instead of DYNAMIC_LINE_BUFFER.
8044
8045         * ftp-basic.c (FTP_DYNAMIC_LINE_BUFFER): New constant.
8046         (ftp_response): Use it instead of DYNAMIC_LINE_BUFFER.
8047
8048         * utils.c (DYNAMIC_LINE_BUFFER): Moved from utils.c.
8049         (LEGIBLE_SEPARATOR): Ditto.
8050         (FILE_BUFFER_SIZE): Ditto.
8051
8052         * retr.c (BUFFER_SIZE): Moved from retr.h.
8053
8054         * log.c: New file.
8055         (logmsg): Moved from utils.c.
8056         (debug_logmsg): New function.
8057
8058         * mswindows.h: Include it here.
8059
8060         * init.c: Ditto.
8061
8062         * utils.c: Don't include <windows.h>.
8063
8064 1998-01-25  Hrvoje Niksic  <hniksic@srce.hr>
8065
8066         * host.c (ftp_getaddress): Ditto.
8067
8068         * main.c (main): Use it.
8069
8070         * utils.h (STRDUP_ALLOCA): New macro.
8071
8072         * init.c: Prepend `wget: ' to error messages printed on stderr.
8073
8074         * utils.c (mkdirhier): Renamed from mymkdir.
8075         (touch): Renamed from my_touch.
8076         (pwd_cuserid): Renamed from my_cuserid().
8077
8078 1998-01-24  Andy Eskilsson  <andy.eskilsson@telelogic.se>
8079
8080         * utils.c (accdir): Process wildcards.
8081         (proclist): New function.
8082         (accdir): Use it to avoid code repetition.
8083
8084 1998-01-24  Hrvoje Niksic  <hniksic@srce.hr>
8085
8086         * recur.c (parse_robots): Respect opt.useragent; use alloca().
8087
8088         * http.c (gethttp): Construct useragent accordingly.
8089
8090         * version.c: Changed version string to numbers-only.
8091
8092         * main.c (print_help): List all the options.
8093
8094         * mswindows.c (windows_main_junk): Initialize argv0 here.
8095
8096 1998-01-24  Karl Heuer  <kwzh@gnu.org>
8097
8098         * netrc.c (search_netrc): Initialize `l' only after processing
8099         netrc.
8100
8101         * main.c (main): Don't trap SIGHUP if it's being ignored.
8102
8103 1998-01-24  Hrvoje Niksic  <hniksic@srce.hr>
8104
8105         * all: Use logmsg().
8106
8107         * utils.c (time_str): Moved from retr.c.
8108         (logmsg): New function.
8109         (logmsg_noflush): Ditto.
8110
8111         * rbuf.c: New file, moved buf_* functions here.
8112
8113         * ftp.c (ftp_expected_bytes): Moved from ftp-basic.c.
8114
8115         * ftp-basic.c (ftp_rest): Use prnum().
8116
8117         * ftp-basic.c: Ditto.
8118
8119         * ftp.c: Use the new reading functions and macros.
8120
8121         * retr.c (buf_initialize): New function.
8122         (buf_initialized_p): Ditto.
8123         (buf_uninitialize): Ditto.
8124         (buf_fd): Ditto.
8125
8126         * http.c (fetch_next_header): Use the BUF_READCHAR macro for
8127         efficiency.
8128         (gethttp): Use alloca() where appropriate.
8129
8130         * retr.c (buf_readchar): Use it.
8131         (buf_peek): Use rstreams.
8132
8133         * retr.h (BUF_READCHAR): New macro.
8134
8135         * init.c (home_dir): Rewritten for clarity.
8136         (init_path): Ditto.
8137
8138         * mswindows.c (ws_backgnd): Made static.
8139         (read_registry): Ditto.
8140         (ws_cleanup): Ditto.
8141         (ws_handler): Ditto.
8142
8143 1998-01-23  Hrvoje Niksic  <hniksic@srce.hr>
8144
8145         * alloca.c: New file.
8146
8147         * Makefile.in (ALLOCA): Define.
8148
8149         * mswindows.c (ws_help): Constify.
8150         (ws_help): Use alloca.
8151
8152         * mswindows.c: Reformat.
8153
8154         * all: Added _(...) annotations for I18N snarfing and translation.
8155
8156         * host.c (ftp_getaddress): Nuke SYSINFO.
8157         (ftp_getaddress): Don't use getdomainname().
8158         (ftp_getaddress): Use uname(), where available.
8159
8160         * http.c (gethttp): Protect a stray fprintf().
8161
8162         * init.c (settime): New function.
8163         (setval): Treat WAIT specially, allowing suffixes like `m' for
8164         minutes, etc.
8165
8166 1998-01-21  Hrvoje Niksic  <hniksic@srce.hr>
8167
8168         * url.c (get_urls_html): Use alloca() for TEMP.
8169
8170 1998-01-21  Jordan Mendelson  <jordy@wserv.com>
8171
8172         * url.c (rotate_backups): New function.
8173
8174         * http.c (gethttp): Ditto.
8175
8176         * ftp.c (getftp): Rotate backups.
8177
8178 1997-12-18  Hrvoje Niksic  <hniksic@srce.hr>
8179
8180         * all: Renamed nmalloc(), nrealloc() and nstrdup() to xmalloc(),
8181         xrealloc() and xstrdup().  Use the new functions.
8182
8183         * url.c (decode_string): Made static.
8184         (has_proto): Ditto.
8185         (parse_dir): Ditto.
8186         (parse_uname): Ditto.
8187         (mkstruct): Ditto.
8188         (construct): Ditto.
8189         (construct_relative): Ditto.
8190
8191         * retr.c (show_progress): Made static.
8192
8193         * recur.c (robots_url): Made static.
8194         (retrieve_robots): Ditto.
8195         (parse_robots): Ditto.
8196         (robots_match): Ditto.
8197
8198         * main.h: Removed.
8199
8200         * main.c (printhelp): Made static.
8201         (hangup): Ditto.
8202
8203         * init.c (comind): Made static.
8204         (defaults): Ditto.
8205         (init_path): Ditto.
8206         (run_wgetrc): Ditto.
8207         (onoff): Ditto.
8208         (setonoff): Ditto.
8209         (setnum): Ditto.
8210         (myatoi): Ditto.
8211         (getperms): Ditto.
8212         (setbytes): Ditto.
8213
8214         * http.c (fetch_next_header): Made static.
8215         (hparsestatline): Ditto.
8216         (hskip_lws): Ditto.
8217         (hgetlen): Ditto.
8218         (hgetrange): Ditto.
8219         (hgettype): Ditto.
8220         (hgetlocation): Ditto.
8221         (hgetmodified): Ditto.
8222         (haccepts_none): Ditto.
8223         (gethttp): Ditto.
8224         (base64_encode_line): Ditto.
8225         (mktime_from_utc): Ditto.
8226         (http_atotm): Ditto.
8227
8228         * html.c (idmatch): Made static.
8229
8230         * host.c (search_host): Made static.
8231         (search_address): Ditto.
8232         (free_hlist): Ditto.
8233
8234         * ftp.c (getftp): Made static.
8235         (ftp_loop_internal): Ditto.
8236         (ftp_get_listing): Ditto.
8237         (ftp_retrieve_list): Ditto.
8238         (ftp_retrieve_dirs): Ditto.
8239         (ftp_retrieve_glob): Ditto.
8240         (freefileinfo): Ditto.
8241         (delelement): Ditto.
8242
8243         * ftp-ls.c (symperms): Made static.
8244         (ftp_parse_unix_ls): Ditto.
8245
8246         * connect.c (select_fd): Made static.
8247
8248         * utils.c (xmalloc): Renamed from nmalloc.
8249         (xrealloc): Renamed from nrealloc.
8250         (xstrdup): Renamed from nstrdup.
8251
8252         * getopt.c (exchange): Use alloca.
8253
8254         * mswindows.c (mycuserid): Use strncpy.
8255
8256         * New files mswindows.c, mswindows.h, sysdep.h.  winjunk.c,
8257         systhings.h, windecl.h and winjunk.h removed.
8258
8259         * mswindows.c (sleep): New function.
8260
8261         * utils.c: Include <windows.h> under Windows.
8262
8263 1997-06-12  Darko Budor  <dbudor@zesoi.fer.hr>
8264
8265         * url.h (URL_UNSAFE): Change default under Windows.
8266
8267         * retr.c (retrieve_from_file): Respect opt.delete_after.
8268
8269         * main.c (main): Call ws_help on Windows.
8270
8271         * winjunk.c (windows_main_junk): New function.
8272
8273         * main.c (main): Junk-process argv[0].
8274
8275         * http.c (mktime_from_utc): Return -1 if mktime failed.
8276
8277         * http.c (http_loop): Ditto.
8278
8279         * ftp.c (ftp_loop_internal): Change title on Windows when using a
8280         new URL.
8281
8282         * winjunk.c (getdomainname): Lots of functions.
8283
8284 1997-06-12  Hrvoje Niksic  <hniksic@srce.hr>
8285
8286         * cmpt.c (strptime_internal): Handle years more correctly for
8287         `%y'.
8288
8289 1997-06-09  Mike Thomas <mthomas@reality.ctron.com>
8290
8291         * http.c (gethttp): Allocate enough space for
8292         `Proxy-Authorization' header.
8293
8294 1997-05-10  Hrvoje Niksic  <hniksic@srce.hr>
8295
8296         * version.c: Wget/1.4.5 is released.
8297
8298 1997-05-10  Hrvoje Niksic  <hniksic@srce.hr>
8299
8300         * retr.c (get_contents): Check return value of fwrite more
8301         carefully.
8302
8303 1997-03-30  Andreas Schwab  <schwab@issan.informatik.uni-dortmund.de>
8304
8305         * cmpt.c (strptime_internal) [case 'Y']: Always subtract 1900 from
8306         year, regardless of century.
8307
8308 1997-03-30  Hrvoje Niksic  <hniksic@srce.hr>
8309
8310         * utils.c (isfile): Use `lstat' instead of `stat'.
8311
8312 1997-03-29  Hrvoje Niksic  <hniksic@srce.hr>
8313
8314         * utils.c (numdigit): Use explicit test.
8315
8316 1997-03-21  Hrvoje Niksic  <hniksic@srce.hr>
8317
8318         * http.c (http_loop): Always use `url_filename' to get u->local.
8319
8320 1997-03-20  Hrvoje Niksic  <hniksic@srce.hr>
8321
8322         * url.c: Recognize https.
8323
8324 1997-03-13  Hrvoje Niksic  <hniksic@srce.hr>
8325
8326         * recur.c (recursive_retrieve): Lowercase just the host name.
8327
8328 1997-03-09  Hrvoje Niksic  <hniksic@srce.hr>
8329
8330         * url.c (get_urls_file): Use the correct test.
8331         (get_urls_html): Ditto.
8332
8333 1997-03-07  Hrvoje Niksic  <hniksic@srce.hr>
8334
8335         * connect.c: Reverted addrlen to int.
8336
8337         * init.c (parse_line): Check for -1 instead of NONE.
8338
8339         * version.c: Changed version to 1.4.5.
8340
8341 1997-02-17  Hrvoje Niksic  <hniksic@srce.hr>
8342
8343         * init.c: New option netrc.
8344         (initialize): Don't parse .netrc.
8345
8346         * cmpt.c (recursive): Return rp.
8347         (strptime_internal): Match the long strings first, the abbreviated
8348         second.
8349
8350 1997-02-16  Hrvoje Niksic  <hniksic@srce.hr>
8351
8352         * http.c (check_end): New function.
8353         (http_atotm): Use it.
8354
8355 1997-02-13  gilles Cedoc  <gilles@cedocar.fr>
8356
8357         * http.c (gethttp): Use them.
8358
8359         * init.c: New options proxy_user and proxy_passwd.
8360
8361 1997-02-14  Hrvoje Niksic  <hniksic@srce.hr>
8362
8363         * ftp.c (ftp_retrieve_list): Create links even if not relative.
8364
8365 1997-02-10  Hrvoje Niksic  <hniksic@srce.hr>
8366
8367         * recur.c (recursive_retrieve): Lowercase the host name, if the
8368         URL is not "optimized".
8369
8370         * host.c (realhost): Return l->hostname, even if it matches with
8371         host.
8372
8373 1997-02-10  Marin Purgar  <pmc@asgard.hr>
8374
8375         * connect.c: Make addrlen size_t instead of int.
8376         (conaddr): Ditto.
8377
8378 1997-02-09  Gregor Hoffleit  <flight@mathi.uni-heidelberg.DE>
8379
8380         * systhings.h: Define S_ISLNK on NeXT too.
8381
8382 1997-02-09  Hrvoje Niksic  <hniksic@srce.hr>
8383
8384         * version.c: Released 1.4.3.
8385
8386         * url.c: Futher update to list of protostrings.
8387         (skip_proto): Skip `//' correctly for FTP and HTTP.
8388
8389         * url.c (get_urls_html): Handle bogus `http:' things a little
8390         different.
8391
8392         * main.c (main): Removed `follow-ftp' from `f'.
8393         (main): Dumped the `prefix-files' and `file-prefix' options and
8394         features; old and bogus.
8395         (main): Exit on failed setval() in `-e'.
8396
8397         * http.c (fetch_next_header): Use it to detect header continuation
8398         correctly.
8399
8400         * retr.c (buf_peek): New function.
8401
8402 1997-02-08  Hrvoje Niksic  <hniksic@srce.hr>
8403
8404         * wget.h: Include time.h and stuff.
8405
8406 1997-02-08  Roger Beeman  <beeman@cisco.com>
8407
8408         * ftp.c: Include <time.h>
8409
8410 1997-02-07  Hrvoje Niksic  <hniksic@srce.hr>
8411
8412         * url.c (findurl): Would read over buffer limits.
8413
8414 1997-02-06  Hrvoje Niksic  <hniksic@srce.hr>
8415
8416         * ftp-ls.c (ftp_parse_unix_ls): Allow spaces in file names.
8417
8418 1997-02-05  Hrvoje Niksic  <hniksic@srce.hr>
8419
8420         * http.c (http_atotm): Initialize tm.is_dst.
8421
8422 1997-02-02  Hrvoje Niksic  <hniksic@srce.hr>
8423
8424         * http.c (gethttp): Don't print the number of retrieved headers.
8425
8426         * main.c (main): New option `--no-clobber', alias for `-nc'.
8427
8428         * url.c: Recognize `https://'.
8429
8430 1997-02-01  Hrvoje Niksic  <hniksic@srce.hr>
8431
8432         * host.c (herrmsg): Don't use h_errno.
8433
8434 1997-01-30  Hrvoje Niksic  <hniksic@srce.hr>
8435
8436         * host.c (accept_domain): Use it.
8437
8438         * main.c (main): New option `--exclude-domains'.
8439
8440         * retr.c (retrieve_url): Use it.
8441         (retrieve_url): Bail out when an URL is redirecting to itself.
8442
8443         * url.c (url_equal): New function.
8444
8445 1997-01-29  Hrvoje Niksic  <hniksic@srce.hr>
8446
8447         * connect.c: Include arpa/inet.h instead of arpa/nameser.h.
8448
8449         * http.c (mk_utc_time): New function.
8450         (http_atotm): Use it; handle time zones correctly.
8451
8452 1997-01-28  Hrvoje Niksic  <hniksic@srce.hr>
8453
8454         * http.c: Ditto.
8455
8456         * ftp-basic.c: Use it instead of WRITE.
8457
8458         * connect.c (iwrite): New function.
8459
8460 1997-01-27  Hrvoje Niksic  <hniksic@srce.hr>
8461
8462         * cmpt.c (mktime): New function.
8463
8464         * netrc.c: Include <sys/types.h>.
8465
8466         * main.c (main): Wouldn't recognize --spider.
8467
8468         * retr.c (rate): Use `B', `KB' and `MB'.
8469         (reset_timer,elapsed_time): Moved from utils.c.
8470
8471         * ftp.c (ftp_retrieve_list): Ditto.
8472
8473         * http.c (http_loop): Don't touch the file if opt.dfp.
8474
8475 1997-01-24  Hrvoje Niksic  <hniksic@srce.hr>
8476
8477         * cmpt.c: New file.
8478
8479         * ftp.c (ftp_retrieve_glob): New argument semantics.
8480         (ftp_retrieve_dirs): Use it.
8481         (ftp_loop): Ditto.
8482
8483         * html.c (htmlfindurl): Recognize `'' as the quote char.
8484
8485 1997-01-23  Hrvoje Niksic  <hniksic@srce.hr>
8486
8487         * ftp.c (ftp_loop_internal): Use it.
8488
8489         * utils.c (remove_link): New function.
8490
8491 1997-01-22  Hrvoje Niksic  <hniksic@srce.hr>
8492
8493         * retr.c (retrieve_url): Require STRICT redirection URL.
8494
8495         * url.c (parseurl): New argument STRICT.
8496
8497         * http.c (hparsestatline): Be a little-bit less strict about
8498         status line format.
8499
8500 1997-01-21  Hrvoje Niksic  <hniksic@srce.hr>
8501
8502         * http.c (gethttp): Use it.
8503
8504         * main.c (main): Don't use '<digit>' as options.
8505
8506         * init.c: New option ignore_length.
8507
8508         * http.c (gethttp): Ditto.
8509         (http_loop): Check for redirection without Location:.
8510         (gethttp): Don't print Length unless RETROKF.
8511
8512         * ftp.c (getftp): Use it.
8513
8514         * url.c (mkalldirs): New function.
8515
8516         * utils.c (mymkdir): Don't check for existing non-directory.
8517
8518         * url.c (mkstruct): Don't create the directory.
8519
8520 1997-01-20  Hrvoje Niksic  <hniksic@srce.hr>
8521
8522         * init.c (setval): Removed NO_RECURSION checks.
8523
8524 1997-01-19  Hrvoje Niksic  <hniksic@srce.hr>
8525
8526         * version.c: "Released" 1.4.3-pre2.
8527
8528         * recur.c (recursive_retrieve): Bypass host checking only if URL
8529         is ftp AND parent URL is not ftp.
8530
8531         * ftp-basic.c (ftp_request): Print out Turtle Power.
8532
8533         * ftp.c (ftp_loop): Call ftp_retrieve_glob with 0 if there's no
8534         wildcard.
8535         (ftp_retrieve_glob): Call ftp_loop_internal even on empty list, if
8536         not glob.
8537
8538         * http.c (gethttp): Be a little bit smarter about status codes.
8539
8540         * recur.c (recursive_retrieve): Always reset opt.recursive when
8541         dealing with FTP.
8542
8543 1997-01-18  Hrvoje Niksic  <hniksic@srce.hr>
8544
8545         * retr.c (retrieve_url): New variable location_changed; use it for
8546         tests instead of mynewloc.
8547         (retrieve_url): Allow heuristic adding of html.
8548
8549         * url.c (url_filename): Don't use the `%' in Windows file names.
8550
8551         * http.c (http_loop): Always time-stamp the local file.
8552
8553         * http.c (http_loop): Ditto.
8554
8555         * ftp.c (ftp_retrieve_list): Use it.
8556
8557         * utils.c (my_touch): New function.
8558
8559         * ftp.c (ftp_retrieve_list): Use #ifdef HAVE_STRUCT_UTIMBUF
8560         instead of #ifndef NeXT.
8561
8562         * utils.c (strptime): New version, by Ulrich Drepper.
8563
8564 1997-01-17  Hrvoje Niksic  <hniksic@srce.hr>
8565
8566         * http.c (haccepts_none): Renamed from `haccepts_bytes'.
8567         (gethttp): If haccepts_none(), disable ACCEPTRANGES.
8568         (http_loop): Would remove ACCEPTRANGES.
8569
8570         * ftp.c (getftp): Call ftp_list with NULL.
8571
8572 1997-01-15  Hrvoje Niksic  <hniksic@srce.hr>
8573
8574         * html.c (ftp_index): Don't print minutes and seconds if we don't
8575         know them; beautify the output.
8576
8577         * ftp.c (getftp): Don't close the socket on FTPNSFOD.
8578
8579 1997-01-14  Hrvoje Niksic  <hniksic@srce.hr>
8580
8581         * utils.c (strptime): New function.
8582         (strptime): Don't use get_alt_number.
8583         (strptime): Don't use locale.
8584         (match_string): Made it a function.
8585
8586 1997-01-12  Hrvoje Niksic  <hniksic@srce.hr>
8587
8588         * http.c (http_atotm): New function.
8589         (http_loop): Use it.
8590
8591         * atotm.c: Removed from the distribution.
8592
8593         * http.c (base64_encode_line): Rewrite.
8594
8595 1997-01-09  Hrvoje Niksic  <hniksic@srce.hr>
8596
8597         * ftp.c (getftp): Use ftp_expected_bytes; print size.
8598
8599         * ftp-basic.c (ftp_response): Use ftp_last_respline.
8600         (ftp_expected_bytes): New function.
8601
8602         * ftp.c (getftp): Print the unauthoritative file length.
8603
8604         * ftp-ls.c: Renamed from ftp-unix.c.
8605         (ftp_parse_ls): Moved from ftp.c.
8606         (ftp_parse_unix_ls): Recognize seconds in time spec.
8607         (ftp_parse_unix_ls): Recognize year-less dates of the previous
8608         year.
8609
8610 1997-01-08  Hrvoje Niksic  <hniksic@srce.hr>
8611
8612         * ftp-basic.c: Don't declare errno if #defined.
8613
8614         * host.c (ftp_getaddress): Check for sysinfo legally.
8615
8616 1997-01-08  Darko Budor  <dbudor@diana.zems.fer.hr>
8617
8618         * connect.c (iread): Use READ.
8619
8620 1996-12-23  Hrvoje Niksic  <hniksic@srce.hr>
8621
8622         * url.c: Recognize finger, rlogin, tn3270, mid and cid as valid
8623         schemes.
8624
8625 1996-12-22  Hrvoje Niksic  <hniksic@srce.hr>
8626
8627         * host.c (ftp_getaddress): Allow `.' in hostname.
8628
8629 1996-12-26  Darko Budor <dbudor@zems.fer.hr>
8630
8631         * wget.h: READ and WRITE macros for use instead of read and write
8632         on sockets, grep READ *.c, grep WRITE *.c
8633
8634         * wsstartup.c: new file - startup for winsock
8635
8636         * wsstartup.h: new file
8637
8638         * win32decl.h: new file - fixup for <errno.h> and winsock trouble
8639
8640         * configure.bat: Configure utility for MSVC
8641
8642         * src/Makefile.ms,config.h.ms: new files for use with MSVC 4.x
8643
8644 1996-12-22  Hrvoje Niksic  <hniksic@srce.hr>
8645
8646         * version.c: Released 1.4.3-pre.
8647
8648         * utils.c (prnum): Accept long.
8649         (legible): Use prnum().
8650
8651         * connect.c (make_connection): Accept port as short.
8652         (bindport): Ditto.
8653
8654         * http.c (gethttp): Use search_netrc.
8655
8656 1996-12-21  Hrvoje Niksic  <hniksic@srce.hr>
8657
8658         * ftp.c (getftp): Use search_netrc.
8659
8660         * netrc.c (free_netrc): New function.
8661
8662         * init.c (home_dir): New function.
8663
8664         * url.c (convert_links): Allow REL2ABS changes.
8665
8666 1996-12-21  Gordon Matzigkeit  <gord@gnu.ai.mit.edu>
8667
8668         * netrc.c: New file.
8669         (parse_netrc, maybe_add_to_list): New functions.
8670
8671 1996-12-17  Hrvoje Niksic  <hniksic@srce.hr>
8672
8673         * retr.c (retrieve_url): Reset opt.recursion before calling
8674         ftp_loop if it is reached through newloc.
8675
8676         * init.c (run_wgetrc): Print the wgetrc path too, when reporting
8677         error; don't use "Syntax error", since we don't know if it is
8678         really a syntax error.
8679
8680 1996-12-16  Hrvoje Niksic  <hniksic@srce.hr>
8681
8682         * utils.c (acceptable): Extract the filename part of the path.
8683
8684         * recur.c (recursive_retrieve): Call acceptable() with the right
8685         argument; would bug out on wildcards.
8686
8687         * init.c (parse_line): Likewise.
8688
8689         * html.c (htmlfindurl): Cast to char * when calling stuff.
8690
8691 1996-12-15  Hrvoje Niksic  <hniksic@srce.hr>
8692
8693         * ftp.c (getftp): Use ftp_pasv.
8694
8695         * ftp-basic.c (ftp_request): Accept NULL value.
8696         (ftp_pasv): New function.
8697
8698         * options.h (struct options): Add passive FTP option.
8699
8700 1996-12-15  Hrvoje Niksic  <hniksic@srce.hr>
8701
8702         * url.c (parseurl): Debug output.
8703
8704         * utils.c (path_simplify): New one, adapted from bash's
8705         canonicalize_pathname().
8706
8707 1996-12-14  Hrvoje Niksic  <hniksic@srce.hr>
8708
8709         * ftp.c (getftp): Don't discard the buffer.
8710
8711         * retr.c (get_contents): New parameter nobuf.
8712
8713 1996-12-13  Shawn McHorse  <riffraff@txdirect.net>
8714
8715         * html.c (htmlfindurl): Recognize <meta contents="d; URL=...".
8716
8717         * init.c (setval): Strip the trailing slashes on CVECDIR.
8718
8719 1996-12-13  Hrvoje Niksic  <hniksic@srce.hr>
8720
8721         * init.c: Make excludes and includes under CVECDIR instead of
8722         CVEC.
8723
8724 1996-12-13  Shawn McHorse  <riffraff@txdirect.net>
8725
8726         * url.c (get_urls_html): Skip "http:".
8727
8728 1996-12-13  Hrvoje Niksic  <hniksic@srce.hr>
8729
8730         * utils.c (strcasecmp): From glibc.
8731         (strncasecmp): Also.
8732         (strstr): Also.
8733
8734         * url.c: Added javascript: to the list of URLs prefixes.
8735
8736 1996-12-12  Shawn McHorse  <riffraff@txdirect.net>
8737
8738         * recur.c (retrieve_robots): Print the warning message only if
8739         verbose.
8740
8741 1996-12-12  Gregor Hoffleit  <flight@mathi.uni-heidelberg.DE>
8742
8743         * ftp.c (ftp_retrieve_list): Use NeXT old utime interface.
8744
8745 1996-12-12  Hrvoje Niksic  <hniksic@srce.hr>
8746
8747         * systhings.h: New file.
8748
8749         * ../configure.in: Check for utime.h
8750
8751         * ftp.c: Check whether we have unistd.h.
8752
8753 1996-11-27  Hrvoje Niksic  <hniksic@srce.hr>
8754
8755         * recur.c (recursive_retrieve): Send the canonical URL as referer.
8756         (recursive_retrieve): Call get_urls_html with the canonical URL.
8757
8758 1996-12-13  Kaveh R. Ghazi  <ghazi@caip.rutgers.edu>
8759
8760         * (configure.in, config.h.in, src/Makefile.in, src/*.[ch]): Add
8761         ansi2knr support for compilers which don't support ANSI style
8762         function prototypes and signatures.
8763
8764         * (aclocal.m4, src/ansi2knr.c, src/ansi2knr.1): New files.
8765
8766 1996-11-26  Hrvoje Niksic  <hniksic@srce.hr>
8767
8768         * url.c: Use it; Recognize paths ending with "." and ".." as
8769         directories.
8770         (url_filename): Append .n whenever file exists and could be a
8771         directory.
8772
8773         * url.h (ISDDOT): New macro.
8774
8775         * init.c (parse_line): Use unsigned char.
8776
8777         * url.c (get_urls_html): Cast to unsigned char * when calling
8778         htmlfindurl.
8779
8780         * html.c (htmlfindurl): Use unsigned char.
8781
8782         * version.c: Changed version to 1.4.3.
8783
8784 1996-11-25  Hrvoje Niksic  <hniksic@srce.hr>
8785
8786         * version.c: Released 1.4.2.
8787
8788         * ftp.c (getftp): Simplified assertion.
8789         (ftp_loop_internal): Remove symlink before downloading.
8790         (ftp_retrieve_list): Unlink the symlink name before attempting to
8791         create a symlink!
8792
8793         * options.h (struct options): Renamed print_server_response to
8794         server_response.
8795
8796         * ftp.c (rel_constr): Removed.
8797         (ftp_retrieve_list): Don't use it.
8798         (ftp_retrieve_list): Use opt.retr_symlinks.
8799
8800 1996-11-24  Hrvoje Niksic  <hniksic@srce.hr>
8801
8802         * main.c (main): New option retr_symlinks.
8803
8804         * url.c (convert_links): Print verbose message.
8805
8806 1996-11-24  Hrvoje Niksic  <hniksic@srce.hr>
8807
8808         * http.c (http_loop): Reset newloc in the beginning of function;
8809         would cause FMR in retrieve_url.
8810
8811 1996-11-23  Hrvoje Niksic  <hniksic@srce.hr>
8812
8813         * recur.c (convert_all_links): Find the URL of each HTML document,
8814         and feed it to get_urls_html; would bug out.
8815         (convert_all_links): Check for l2 instead of dl; removed dl.
8816
8817         * url.c (convert_links): Don't refer to freed newname.
8818
8819         * recur.c (recursive_retrieve): Add this_url to urls_downloaded.
8820
8821         * main.c (main): Print the OS_TYPE in the debug output, too.
8822
8823         * recur.c (recursive_retrieve): Check for opt.delete_after.
8824
8825         * main.c (main): New option delete-after.
8826
8827         * init.c (setval): Cleaned up.
8828
8829 1996-11-21  Hrvoje Niksic  <hniksic@srce.hr>
8830
8831         * Makefile.in (wget): Make `wget' the default target.
8832
8833         * ftp.c (ftp_loop_internal): Move noclobber checking out of the
8834         loop.
8835         (ftp_retrieve_list): Warn about non-matching sizes.
8836
8837         * http.c (http_loop): Made -nc non-dependent on opt.recursive.
8838
8839         * init.c (setnum): Renamed from setnuminf; New argument flags.
8840         (setval): Use it.
8841
8842         * main.c (main): Sorted the options.
8843         (main): New option --wait.
8844
8845 1996-11-21  Shawn McHorse  <riffraff@txdirect.net>
8846
8847         * html.c (htmlfindurl): Reset s->in_quote after getting out of
8848         quotes.
8849
8850 1996-11-20  Hrvoje Niksic  <hniksic@srce.hr>
8851
8852         * version.c: Changed version to 1.4.2.
8853
8854 1996-11-20  Hrvoje Niksic  <hniksic@srce.hr>
8855
8856         * version.c: Released 1.4.1.
8857
8858         * html.c (html_quote_string): New function.
8859         (ftp_index): Use it.
8860         (htmlfindurl): A more gentle ending debug message.
8861
8862         * ftp.c (ftp_loop): Check for opt.htmlify.
8863
8864         * init.c: New command htmlify.
8865
8866         * ftp.c (getftp): Nicer error messages, with `'-encapsulated
8867         strings.
8868         (ftp_loop): Print size of index.html.
8869
8870         * init.c (setval): Implement "styles".
8871
8872         * main.c (main): New option dotstyle.
8873
8874 1996-11-19  Hrvoje Niksic  <hniksic@srce.hr>
8875
8876         * ftp.c (getftp): Close the master socket in case of errors, after
8877         bindport().
8878
8879         * connect.c (bindport): Initialize msock to -1.
8880
8881         * ftp.c (getftp): Initialize dtsock to -1.
8882
8883         * connect.c (closeport): Don't close sock if sock == -1.
8884
8885 1996-11-18  Hrvoje Niksic  <hniksic@srce.hr>
8886
8887         * init.c (setnuminf): Nuked default value -- just leave unchanged.
8888         (setval): Don't send default values.
8889         (defaults): Use DEFAULT_TIMEOUT -- aaargh.
8890
8891         * options.h (struct options): Use long for dot_bytes.
8892
8893         * init.c (setquota): Renamed to setbytes.
8894         (setval): Use setbytes on DOTBYTES.
8895
8896 1996-11-17  Hrvoje Niksic  <hniksic@srce.hr>
8897
8898         * ftp.c (getftp): Initialize con->dltime.
8899
8900         * recur.c (recursive_retrieve): Use same_host instead of
8901         try_robots; simply load robots_txt whenever the host is changed.
8902         (recursive_retrieve): Free forbidden before calling parse_robots.
8903
8904 1996-11-16  Hrvoje Niksic  <hniksic@srce.hr>
8905
8906         * retr.c (show_progress): Use them.
8907
8908         * options.h (struct options): New options dot_bytes, dots_on_line
8909         and dot_spacing.
8910
8911 1996-11-16  Mark Boyns  <boyns@sdsu.edu>
8912
8913         * recur.c (recursive_retrieve): Retrieve directories regardless of
8914         acc/rej rules; check for empty u->file.
8915
8916 1996-11-14  Hrvoje Niksic  <hniksic@srce.hr>
8917
8918         * init.c (setval): Use it.
8919
8920         * utils.c (merge_vecs): New function.
8921
8922         * init.c (setval): Reset the list-type functions when encountering
8923         "".
8924
8925 1996-11-14  Shawn McHorse  <riffraff@txdirect.net>
8926
8927         * recur.c (recursive_retrieve): Use base_url instead of this_url
8928         for no_parent.
8929
8930 1996-11-14  Shawn McHorse  <riffraff@txdirect.net>
8931
8932         * html.c (htmlfindurl): Reset s->in_quote after exiting the quote.
8933
8934 1996-11-13  Hrvoje Niksic  <hniksic@srce.hr>
8935
8936         * utils.c (sepstring): Rewrote; don't use strtok.
8937
8938         * recur.c (recursive_retrieve): Enter assorted this_url to slist
8939         when running the first time.
8940         (retrieve_robots): Warn to ignore errors when robots are loaded.
8941
8942         * utils.c (load_file): Moved from url.c.
8943
8944         * http.c: Made static variables const too in h* functions.
8945
8946         * main.c (main): Renamed --continue-ftp to --continue.
8947
8948         * recur.c (recursive_retrieve): Use it.
8949
8950         * utils.c (frontcmp): New function.
8951
8952         * url.c (accdir): New function.
8953
8954         * html.c (htmlfindurl): Recognize <area href=...>.
8955
8956         * ftp.c (ftp_retrieve_dirs): Implemented opt.includes.
8957
8958         * init.c (setval): Free the existing opt.excludes and
8959         opt.includes, if available.
8960
8961         * main.c (main): New option -I.
8962
8963 1996-11-12  Hrvoje Niksic  <hniksic@srce.hr>
8964
8965         * ftp.c (ftp_retrieve_glob): Do not weed out directories.
8966
8967         * version.c: Changed version to 1.4.1.
8968
8969 1996-11-11  Hrvoje Niksic  <hniksic@srce.hr>
8970
8971         * version.c: Released 1.4.0.
8972
8973 1996-11-10  Hrvoje Niksic  <hniksic@srce.hr>
8974
8975         * main.c (main): Free com and val after parse_line.
8976         (printhelp): Reorder the listing.
8977
8978         * http.c: More robust header parsing.
8979
8980         * http.c: Allow any number of spaces, or no spaces, precede ':'.
8981         (hskip_lws): New function.
8982         (haccepts_bytes): New function.
8983         (gethttp): Use it.
8984
8985         * init.c (setval): Check header sanity.
8986         (setval): Allow resetting of headers.
8987
8988 1996-11-10  Hrvoje Niksic  <hniksic@srce.hr>
8989
8990         * http.c (http_loop): Don't use has_wildcards.
8991
8992         * http.c (gethttp): Free all_headers -- would leak.
8993
8994         * recur.c (recursive_retrieve): Initialize depth to 1 instead of
8995         0 -- this fixes a long-standing bug in -rl.
8996
8997 1996-11-09  Hrvoje Niksic  <hniksic@srce.hr>
8998
8999         * ftp.c: Use -1 as "impossible" value for con->fd.
9000
9001         * url.h (URL_SEPARATOR): Don't treat `*' and `+' as separators.
9002
9003         * init.c (parse_line): Use isalpha.
9004
9005         * ftp-unix.c: Use HAVE_UNISTD_H.
9006
9007         * mtch.c (has_wildcards): Don't match \.
9008
9009         * http.c (http_loop): Warn on HTTP wildcard usage.
9010
9011 1996-11-08  Hrvoje Niksic  <hniksic@srce.hr>
9012
9013         * url.c (url_filename): Do not create numbered suffixes if
9014         opt.noclobber -- would bug out on -nc.
9015
9016 1996-11-07  Hrvoje Niksic  <hniksic@srce.hr>
9017
9018         * recur.c (parse_robots): Don't chuck out the commands without
9019         arguments (`Disallow:<empty>' didn't work).
9020         (parse_robots): Compare versions lowercase.
9021         (parse_robots): Match on base_version, not version_string!
9022         (parse_robots): Handle comments properly.
9023         (parse_robots): Match versions in a sane way.
9024
9025         * init.c: Print nicer error messages.
9026
9027         * version.c: Changed version to 1.4.0.
9028
9029 1996-11-06  Hrvoje Niksic  <hniksic@srce.hr>
9030
9031         * version.c: Released 1.4.0-test2.
9032
9033         * init.c (run_wgetrc): Close fp.
9034
9035         * ftp.c (ftp_retrieve_dirs): Allocate the correct length for
9036         u->dir.
9037
9038 1996-11-06  Hrvoje Niksic  <hniksic@srce.hr>
9039
9040         * init.c (setquota): Allow inf as quota specification.
9041
9042 1996-11-05  Hrvoje Niksic  <hniksic@srce.hr>
9043
9044         * ftp.c (ftp_retrieve_dirs): Return QUOTEXC if quota exceeded.
9045         (ftp_retrieve_glob): Return QUOTEXC on quota exceeded.
9046
9047         * main.c (main): Check for quota by comparison with downloaded
9048         stuff, not from status.
9049
9050         * connect.c (select_fd): Should compile on HPUX without warnings now.
9051
9052         * ftp.c (ftp_get_listing): Check whether ftp_loop_internal
9053         returned RETROK.
9054
9055 1996-11-04  Hrvoje Niksic  <hniksic@srce.hr>
9056
9057         * ftp.c (ftp_retrieve_glob): Print the pattern nicely.
9058         (getftp): Return FTPRETRINT on control connection error.
9059
9060         * html.c (htmlfindurl): Recognize <embed src=...> and
9061         <bgsound src=...>.
9062         (ftp_index): Handle username and password correctly.
9063
9064         * main.c (main): Made `-np' a synonim for --no-parent.
9065
9066 1996-11-02  Hrvoje Niksic  <hniksic@srce.hr>
9067
9068         * ftp.c (ftp_loop): Check for opt.ftp_glob too before calling
9069         ftp_retrieve_glob.
9070
9071         * version.c: Changed version to 1.4.0-test2.
9072
9073 1996-11-02  Hrvoje Niksic  <hniksic@srce.hr>
9074
9075         * version.c: Released 1.4.0-test1.
9076
9077         * url.c (str_url): Don't use sprintf when creating %2F-prefixed
9078         directory.
9079         (convert_links): Removed definition of make_backup.
9080
9081         * http.h: Removed definition of MAX_ERROR_LENGTH.
9082
9083         * host.c (ftp_getaddress): Check for "(none)" domains.
9084
9085         * ftp.c (ftp_retrieve_dirs): Docfix.
9086
9087         * http.c (gethttp): Use ou->referer instead of u->referer.
9088
9089         * retr.c (retrieve_url): Reset u to avoid freeing pointers twice;
9090         this was known to cause coredumps on Linux.
9091
9092         * html.c (ftp_index): Cast the argument to local_time to time_t *.
9093
9094 1996-11-01  Hrvoje Niksic  <hniksic@srce.hr>
9095
9096         * connect.c (select_fd): Use exceptfds -- once and for all.
9097
9098         * retr.c (retrieve_from_file): Free filename after
9099         recursive_retrieve.
9100         (retrieve_from_file): Send RFIRST_TIME to recursive_retrieve on
9101         first-time retrieval.
9102         (retrieve_from_file): Return uerr_t; new argument, count.
9103         (retrieve_from_file): Break on QUOTEXC.
9104
9105         * init.c (setquota): Fixed a bug that caused rejection of
9106         non-postfixed values..
9107
9108 1996-10-30  Hrvoje Niksic  <hniksic@srce.hr>
9109
9110         * version.c: Changed name to wget.
9111
9112         * connect.c (iread): Smarter use of select.
9113         (select_fd): Set errno on timeout.  If not timeout, return 1
9114         instead of 0.
9115
9116 1996-10-29  Hrvoje Niksic  <hniksic@srce.hr>
9117
9118         * ftp.c (ftp_loop_internal): Don't use con->cmd before
9119         establishing it.
9120
9121 1996-10-26  Hrvoje Niksic  <hniksic@srce.hr>
9122
9123         * http.c (gethttp): Send correct referer when using proxy.
9124         (gethttp): Use struct urlinfo ou to access the relevant data; send
9125         correct authorization in all cases.
9126
9127         * host.c (same_host): Use skip_uname to skip username and
9128         password.
9129
9130         * url.c (skip_uname): New function.
9131         (parseurl): Use it.
9132
9133         * host.c (same_host): Do not assume HTTP -- same_host should now
9134         be totally foolproof.
9135
9136         * url.c (skip_proto): New function.
9137         (parse_uname): Use it.
9138
9139         * http.c (gethttp): Create local user and passwd from what is
9140         given.
9141
9142         * url.c (parseurl): Check for HTTP username and password too.
9143
9144 1996-10-25  Hrvoje Niksic  <hniksic@srce.hr>
9145
9146         * config.h.in: Removed #define gethostbyname R...
9147
9148 1996-10-22  Hrvoje Niksic  <hniksic@srce.hr>
9149
9150         * version.c: Changed version to 1.4.0-test1.
9151
9152 1996-10-21  Hrvoje Niksic  <hniksic@srce.hr>
9153
9154         * version.c: "Released" 1.4b29.
9155
9156         * recur.c (recursive_retrieve): Check for no_parent.
9157
9158         * init.c (setval): Option update.
9159
9160         * main.c (main): New option no-parent.
9161
9162         * options.h (struct options): New variable no_parent.
9163
9164         * recur.c (recursive_retrieve): Only files are checked for
9165         opt.accepts and opt.rejects.
9166         (recursive_retrieve): Check directories for opt.excludes.
9167         (recursive_retrieve): Make the dir absolute when checking
9168         opt.excludes.
9169
9170         * html.c (htmlfindurl): Recognize <applet code=...> and <script
9171         src=...>
9172
9173 1996-10-18  Hrvoje Niksic  <hniksic@srce.hr>
9174
9175         * ftp.c (getftp): Do not line-break assert entries at all.
9176         (ftp_retrieve_dirs): docfix.
9177
9178         * connect.c (select_fd): Use fd + 1 as nfds.
9179
9180         * version.c: Changed version to 1.4b29.
9181
9182 1996-10-18  Hrvoje Niksic  <hniksic@srce.hr>
9183
9184         * version.c: "Released" 1.4b28.
9185
9186         * ftp.c (ftp_loop_internal): Check whether f->size == len and
9187         don't continue the loop if it is.
9188         (ftp_get_listing): Remove list_filename on unsuccesful loop.
9189
9190 1996-10-17  Hrvoje Niksic  <hniksic@srce.hr>
9191
9192         * ftp.c (ftp_loop_internal): Use strcpy to initialize tmp.
9193         (getftp): Do not use multiline assert.
9194
9195         * http.c (hparsestatline): Use mjr and mnr instead of major and
9196         minor, which don't compile on Ultrix.
9197         (http_loop): Use strcpy() to initialize tmp.
9198
9199         * all: Geturl -> Fetch
9200
9201 1996-10-17  Hrvoje Niksic  <hniksic@srce.hr>
9202
9203         * recur.c (parse_robots): Fixed an off-by-one bug when looking for
9204         ':'.
9205
9206         * html.c (htmlfindurl): Fixed several possible off-by-one bugs by
9207         moving `bufsize &&' to the beginning of each check in for-loops.
9208
9209         * recur.c (parse_robots): Close fp on exit.
9210
9211         * url.c (mymkdir): Check for each directory before creating.
9212
9213 1996-10-16  Hrvoje Niksic  <hniksic@srce.hr>
9214
9215         * version.c: Changed version to 1.4b28.
9216
9217 1996-10-16  Hrvoje Niksic  <hniksic@srce.hr>
9218
9219         * version.c: "Released" 1.4b27.
9220
9221         * init.c (parse_line): Use isspace.
9222         (parse_line): Free *com on all errors.
9223
9224         * ftp.c (ftp_loop): Change FTPOK to RETROK before exiting.
9225         (delelement): Use next instead of f->next and prev instead of
9226         f->prev.
9227         (delelement): Free the members of the deleted element.
9228
9229         * http.c (http_loop): Do not return RETROK on code != 20x.
9230
9231         * init.c (cleanup): Free opt.user_header.
9232         (cleanup): Free opt.domains.
9233
9234         * url.c (freelists): Moved to cleanup().
9235
9236         * http.c (hparsestatline): Docfix.
9237
9238         * main.c (main): Return with error status on unsuccesful
9239         retrieval.
9240
9241         * init.c (setval): Do not remove listing when mirroring.
9242
9243         * url.c (url_filename): Use opt.fileprefix.
9244
9245         * ftp.c (ftp_get_listing): Use url_filename to get filename for
9246         .listing.
9247
9248         * main.c (main): New option: -rn.
9249
9250 1996-10-15  Hrvoje Niksic  <hniksic@srce.hr>
9251
9252         * Makefile.in (RM): Added RM = rm -f.
9253
9254         * host.c (clean_hosts): New function.
9255         (free_hlist): Just free the list, no reset.
9256
9257         * version.c: Changed version to 1.4b27.
9258
9259 1996-10-13  Hrvoje Niksic  <hniksic@srce.hr>
9260
9261         * version.c: "Released" 1.4b26.
9262
9263         * retr.c (retrieve_from_file): If call get_urls_html with
9264         opt.spider to make it silent in spider mode.
9265
9266         * url.c (str_url): Use CLEANDUP instead of URL_CLEANSE.
9267
9268         * url.h (CLEANDUP): New macro.
9269
9270         * http.c (gethttp): Fixed a bug that freed location only when it
9271         was NULL.
9272
9273         * retr.c (retrieve_url): Free url if it will not be stored,
9274         i.e. newloc is NULL.
9275
9276         * html.c (htmlfindurl): Handle exiting from quotes correctly; the
9277         old version would bug out on <a href="x#a"href="y">.
9278
9279         * html.h (state_t): New member in_quote.
9280
9281         * html.c (htmlfindurl): Free s->attr at the beginning of
9282         attr-loop.
9283
9284         * recur.c (recursive_retrieve): Recognize RCLEANUP.
9285         (tried_robots): Make hosts a global variable.
9286         (recursive_retrieve): Free constr after URL host optimization.
9287         (tried_robots): Free urlinfo before exiting.
9288
9289         * utils.c (free_slist): New function.
9290
9291         * recur.c (recursive_retrieve): Use flags to add cleanup
9292         possibility.
9293
9294         * main.c (main): Free filename after recursive_retrieve.
9295
9296         * http.c (gethttp): Store successful responses too.
9297
9298 1996-10-12  Hrvoje Niksic  <hniksic@srce.hr>
9299
9300         * all: Constified the whole source.  This required some minor
9301         changes in many functions in url.c, possibly introducing bugs -- I
9302         hope not.
9303
9304         * ftp-basic.c: Removed last_respline.
9305
9306         * http.c (gethttp): Free type.
9307
9308         * host.c (same_host): Free real1 and real2.
9309
9310         * main.c (main): New option --spider.
9311
9312         * retr.c (get_contents): Don't reset errno.
9313
9314         * main.c (main): Sorted the options.
9315
9316         * connect.c (iread): Set errno to ETIMEDOUT only if it was left
9317         uninitialized by select().
9318
9319         * http.c (http_loop): Print the time when the connection is
9320         closed.
9321         (gethttp): Debug-print the HTTP request.
9322
9323 1996-10-11  Hrvoje Niksic  <hniksic@srce.hr>
9324
9325         * connect.c (iread): Do not try reading after timeout.
9326
9327         * main.c (main): Would bug out on -T.
9328
9329         * connect.c (select_fd): Do not use exceptfds.
9330         (iread): Set ETIMEDOUT on select_fd <= 0.
9331
9332         * version.c: Changed version to 1.4b26.
9333
9334 1996-10-10  Hrvoje Niksic  <hniksic@srce.hr>
9335
9336         * version.c: "Released" 1.4b25.
9337
9338         * ftp-unix.c (ftp_parse_unix_ls): Ignore lines without file name
9339         or link name.
9340
9341         * http.c (gethttp): Add errcode to struct hstat.
9342         (http_loop): Use it.
9343
9344         * url.c (no_proxy_match): Simplify using char** for no_proxy.
9345
9346         * options.h (struct options): Make opt.no_proxy a vector.
9347
9348         * utils.c (sepstring): Use !*s instead of !strlen(s).
9349
9350         * init.c (setval): Set opt.maxreclevel to 0 on --mirror.
9351         (getperms): Use ISODIGIT instead of isdigit.
9352
9353         * ftp.c (getftp): Print time.
9354
9355         * main.c (main): Use legible output of downloaded quantity.
9356
9357         * ftp.c (getftp): Use elapsed_time().
9358         (ftp_loop_internal): Use rate().
9359
9360         * http.c (http_loop): Add download ratio output; Use rate().
9361
9362         * utils.c (rate): New function.
9363
9364 1996-10-09  Hrvoje Niksic  <hniksic@srce.hr>
9365
9366         * http.c (http_loop): Use timer.
9367
9368         * ftp.c: Split to ftp-basic.c and ftp.c
9369
9370         * utils.c (reset_timer): New function.
9371         (elapsed_time): New function.
9372
9373         * retr.c (show_progress): Make bytes_in_line and offs long; should
9374         work on 16-bit machines.
9375
9376 1996-10-08  Hrvoje Niksic  <hniksic@srce.hr>
9377
9378         * url.c (in_acclist): New argument backward.
9379
9380         * ftp.c (ftp_retrieve_glob): Use acceptable() to determine whether
9381         a file should be retrieved according to suffix.
9382         (ftp_get_listing): Check the return value of unlink; Do not call
9383         ftp_retrieve_dirs if depth reached maxreclevel.
9384         (ftp_retrieve_dirs): Check whether the directory is in
9385         exclude-list.
9386
9387         * main.c (main): Print the version number at the beginning of
9388         DEBUG output.
9389         (main): Use strrchr when creating exec_name.
9390
9391         * ftp.c (ftp_retrieve_glob): Do not close control connection.
9392
9393         * version.c: Changed version to 1.4b25.
9394
9395 1996-10-07  Hrvoje Niksic  <hniksic@srce.hr>
9396
9397         * version.c: "Released" 1.4b24.
9398
9399         * Makefile.in: Rewrite.
9400
9401         * ftp.c (ftp_loop_internal): Likewise.
9402
9403         * retr.c (time_str): Check for failed time().
9404
9405         * html.c (htmlfindurl): Recognize <fig src> and <overlay src> from
9406         HTML3.0.
9407
9408         * retr.c (time_str): Return time_t *.
9409
9410         * connect.c (bindport): Close msock on unsuccesful bind.
9411         (bindport): The same for getsockname and listen.
9412
9413         * retr.c (retrieve_url): Allow any number of retries on
9414         proxy.
9415
9416         * http.c (gethttp): Do not treat errno == 0 as timeout.
9417         (http_loop): Likewise.
9418         (http_loop): Cosmetic changes.
9419
9420         * connect.c (iread): Set errno to ETIMEDOUT in case of timeout.
9421
9422         * retr.c (get_contents): Reset errno.
9423
9424         * ftp.c (getftp): Minor fixes.
9425
9426 1996-10-06  Hrvoje Niksic  <hniksic@srce.hr>
9427
9428         * http.c: Do not use backups.
9429
9430         * geturl.1 (WARNING): Warn that man-page could be obsolete.
9431
9432         * getopt.c (getopt_long): Moved to getopt.c
9433
9434         * geturl.texi: Enhanced.
9435
9436         * main.c (main): Use it.
9437
9438         * recur.c (convert_all_links): New function.
9439
9440         * utils.c (add_slist): New argument flags.
9441
9442         * recur.c (recursive_retrieve): Update a list of downloaded URLs.
9443         (parse_robots): Do not chuck out empty value fields.
9444         (parse_robots): Make yourself welcome on empty Disallow.
9445
9446         * version.c: Changed version to 1.4b24.
9447
9448 1996-10-06  Hrvoje Niksic  <hniksic@srce.hr>
9449
9450         * version.c: "Released" 1.4b23.
9451
9452         * ftp.c (ftp_loop_internal): Get the time after getftp.
9453
9454         * Makefile.in (install.info): New target.
9455         (install): Use it.
9456
9457         * http.c (http_loop): Fix output when doing -O.
9458
9459 1996-10-05  Hrvoje Niksic  <hniksic@srce.hr>
9460
9461         * geturl.texi: New file.
9462
9463         * main.c (main): Do not print the warnings and download summary if
9464         opt.quiet is set.
9465
9466         * version.c: Changed version to 1.4b23.
9467
9468 1996-10-05  Hrvoje Niksic  <hniksic@srce.hr>
9469
9470         * "Released" 1.4b22.
9471
9472         * atotm.c (atotm): Use True and False instead of TRUE and FALSE,
9473         to avoid redefinition warnings.
9474
9475         * host.c (store_hostaddress): Use memcpy() to copy the address
9476         returned by inet_addr.
9477
9478         * version.c: Changed version to 1.4b22.
9479
9480 1996-10-04  Hrvoje Niksic  <hniksic@srce.hr>
9481
9482         * version.c: "Released" 1.4b21.
9483
9484         * ftp-unix.c (ftp_parse_ls): Renamed to ftp_parse_unix_ls.
9485
9486         * ftp.c (ftp_port): Use conaddr.
9487         (getftp): Print the file length.
9488         (ftp_retrieve_list): Check the stamps of plain files only.
9489
9490         * connect.c (closeport): Do not call shutdown().
9491         (conaddr): New function.
9492
9493         * html.c (ftp_index): Made it dfp-aware.
9494
9495         * init.c (cleanup): New name of freemem. Close opt.dfp.
9496
9497         * ftp.c (getftp): Use opt.dfp if it is set.
9498
9499         * ftp-unix.c (ftp_parse_ls): Recognize time in h:mm format.
9500
9501         * ftp.c (ftp_retrieve_dirs): Fixed a bug that caused incorrect
9502         CWDs to be sent with recursive FTP retrievals.
9503
9504 1996-10-03  Hrvoje Niksic  <hniksic@srce.hr>
9505
9506         * recur.c (parse_robots): Made it more compliant with "official"
9507         specifications.
9508
9509         * http.c: New function.
9510
9511         * ftp-unix.c (ftp_parse_ls): Added better debug output.
9512
9513         * ftp.c (getftp): Print out the LIST in case of
9514         opt.print_server_response.
9515
9516         * version.c: Changed version to 1.4b21.
9517
9518 1996-10-01  Hrvoje Niksic  <hniksic@srce.hr>
9519
9520         * version.c: "Released" 1.4b20.
9521
9522         * README: Update.
9523
9524         * http.c (gethttp): Preset lengths of various headers instead of
9525         calculating them dynamically.
9526         (gethttp): Check for 206 partial contents.
9527
9528 1996-09-30  Hrvoje Niksic  <hniksic@srce.hr>
9529
9530         * configure.in: Set SYSTEM_GETURLRC to $libdir/geturlrc
9531
9532         * http.c (gethttp): Send the port number in the Host: header.
9533
9534 1996-09-29  Hrvoje Niksic  <hniksic@srce.hr>
9535
9536         * http.c (gethttp): Send host: header.
9537         (gethttp): Add the possibility of user-defined headers.
9538         (gethttp): Move decision about pragma: no-cache to http_loop,
9539         where it belongs.
9540         (gethttp): Pass a struct instead of enormous argument list.
9541         (http_loop): Use a new, fancier display format.
9542         (ftp_loop): Likewise.
9543
9544         * main.c: (hangup): Turn off buffering of the new log file.
9545
9546         * install-sh: Likewise.
9547
9548         * config.sub: Replace with the one in autoconf-2.10
9549
9550         * geturl.1: Update.
9551
9552         * init.c: New options httpuser and httppasswd.
9553
9554         * http.c: (base64_encode_line): New function.
9555         (gethttp): Send authentication.
9556
9557         * connect.c (make_connection): Use store_hostaddress.
9558
9559 1996-09-28  Hrvoje Niksic  <hniksic@srce.hr>
9560
9561         * host.c (store_hostaddress): New function.
9562
9563         * NEWS: Update.
9564
9565         * http.c (hgetrange): New function.
9566         (gethttp): Use ranges.
9567
9568         * utils.c (numdigit): Accept long instead of int.
9569
9570         * http.c (http_loop): Add restart capabilities.
9571
9572         * ftp.c (ftp_retrieve_glob): Fixed a bug that could cause matchres
9573         being used uninitialized.
9574         (ftp_retrieve_list): Similar fix.
9575
9576         * host.c (add_hlist): Fixed a bug that could cause cmp being used
9577         uninitialized.
9578
9579         * url.c (construct_relative): New function.
9580
9581         * recur.c (recursive_retrieve): Use it.
9582
9583         * retr.c (convert_links): New function.
9584
9585 1996-09-27  Hrvoje Niksic  <hniksic@srce.hr>
9586
9587         * url.c (free_urlpos): New function.
9588
9589         * recur.c (recursive_retrieve): Adapt.
9590
9591         * url.c (get_urls_html): Return a linked list instead of a vector.
9592
9593         * url.c (get_urls_file): Return a linked list instead of a vector.
9594
9595         * geturl.1: Update.
9596
9597         * http.c (gethttp): Implement it.
9598
9599         * init.c (setval): New option: SAVEHEADERS
9600
9601         * ftp.c (ftp_loop_internal): Do not set restval if listing is to
9602         be retrieved. Lack of this test caused bugs when the connection
9603         was lost during listing.
9604
9605         * retr.c (retrieve_url): Fixed a bug that caused
9606         coredumps. *newloc is now reset by default.
9607         (retrieve_url): Lift the twenty-tries limit on proxies.
9608
9609         * version.c: Changed version to 1.4b20.
9610
9611 1996-09-20  Hrvoje Niksic  <hniksic@srce.hr>
9612
9613         * version.c: "Released" 1.4b19.
9614
9615 1996-09-19  Hrvoje Niksic  <hniksic@srce.hr>
9616
9617         * ftp.c (ftp_loop_internal): Renamed from ftp_1fl_loop.
9618         (getftp): Changed prototype to accept ccon *.
9619
9620 1996-09-17  Hrvoje Niksic  <hniksic@srce.hr>
9621
9622         * ftp.c (ftp_retrieve_list): Fixed a bug that caused setting
9623         incorrect values to files pointed to by symbolic links.
9624         (ftp_1fl_loop): Do not count listings among the downloaded URL-s.
9625
9626 1996-09-16  Hrvoje Niksic  <hniksic@srce.hr>
9627
9628         * url.c (mkstruct): Do not prepend "./" in front of a pathname.
9629
9630         * main.c (main): New option: --user-agent.
9631
9632         * geturl.1: Ditto.
9633
9634         * init.h: Ditto.
9635
9636         * init.c (setval): Ditto.
9637
9638         * main.c (main): Rename "server-headers" to "server-response".
9639
9640         * ftp-unix.c (ftp_parse_ls): Check for asterisks at the end of
9641         executables in 'ls -F' listings.
9642
9643 1996-09-15  Hrvoje Niksic  <hniksic@srce.hr>
9644
9645         * url.c (parseurl): Remove realloc() and sprintf().
9646         (str_url): Get rid of sprintf().
9647
9648         * recur.c (recursive_retrieve): Enable FTP recursion through proxy
9649         servers.
9650
9651         * url.h (URL_CLEANSE): Made it else-resistant.
9652         (USE_PROXY): New macro.
9653
9654 1996-09-14  Hrvoje Niksic  <hniksic@srce.hr>
9655
9656         * NEWS: Update.
9657
9658         * version.c: Changed version to 1.4b19.
9659
9660 1996-09-14  Hrvoje Niksic  <hniksic@srce.hr>
9661
9662         * version.c: "Released" 1.4b18.
9663
9664         * url.c: Made it reallocate space exponentially.
9665
9666 1996-09-14  Drazen Kacar  <dave@fly.cc.fer.hr>
9667
9668         * html.c (htmlfindurl): Added <frame src> and <iframe src> among
9669         the list of stuff to fetch.
9670
9671 1996-09-13  Hrvoje Niksic  <hniksic@srce.hr>
9672
9673         * url.c (get_urls_html): Fixed a bug that caused SIGSEGV's with
9674         -Fi.
9675
9676         * html.c (htmlfindurl): Rewrite.
9677
9678         * http.c (gethttp): Use opt.proxy_cache.
9679
9680         * main.c (main): Added --cache option.
9681
9682         * ftp.c (ftp_response): Print server response if opt.print_server
9683         response is set.
9684         (getftp): Print newlines after each request if the server response
9685         is to be printed.
9686         (ftp_response): Copy the last response line to last_respline.
9687
9688         * http.c (gethttp): Add Pragma: nocache for retried
9689         proxy-retrievals.
9690
9691         * ftp.c (getftp): Use it.
9692
9693         * retr.c (buf_discard): New function.
9694
9695         * ftp.c (ftp_response): Use buf_readchar().
9696         (getftp): Flush the control connection buffer before calling
9697         get_contents().
9698
9699         * retr.c (buf_readchar): New function.
9700         (buf_flush): New function.
9701         (get_contents): Use buf_readchar() instead of read(x, x, 1).
9702         (get_contents): Use buf_flush.
9703
9704 1996-09-12  Hrvoje Niksic  <hniksic@srce.hr>
9705
9706         * ftp.c: Incorporate changes to ftp_response.
9707
9708         * ftp.c (ftp_response): Allocate the server response dynamically,
9709         as in read_whole_line and fetch_next_header.
9710
9711         * utils.c (read_whole_line): Fixed a bug that prevented reading
9712         the last line if it is not \n-terminated. Also fixed a possible
9713         memory overflow.
9714
9715         * http.c (fetch_next_header): Return malloc-ed string as large as
9716         needed.
9717         (gethttp): Use new fetch_next_header.
9718
9719 1996-09-12  Hrvoje Niksic  <hniksic@srce.hr>
9720
9721         * http.c (hgetlen): Compute the header length the first time only.
9722         (hgettype): Ditto.
9723         (hgetlocation): Ditto.
9724         (hgetmodified): Ditto.
9725
9726 1996-09-11  Hrvoje Niksic  <hniksic@srce.hr>
9727
9728         * sample.geturlrc: Update.
9729
9730 1996-09-10  Hrvoje Niksic  <hniksic@srce.hr>
9731
9732         * http.c (http_loop): Ditto.
9733
9734         * ftp.c (getftp): Open the output file as binary.
9735
9736         * version.c: Changed version to 1.4b18.
9737
9738 1996-09-10  Hrvoje Niksic  <hniksic@srce.hr>
9739
9740         * version.c: "Released" 1.4b17.
9741
9742         * ftp-unix.c (ftp_parse_ls): If unable to open file, return NULL
9743         instead of failed assertion.
9744
9745 1996-09-09  Hrvoje Niksic  <hniksic@srce.hr>
9746
9747         * ftp.c (ftp_get_listing): Add a numbered suffix to LIST_FILENAME
9748         if a file of that name already exists.
9749
9750 1996-09-05  Hrvoje Niksic  <hniksic@srce.hr>
9751
9752         * ftp.c (ftp_1fl_loop): Handler FTPPORTERR and FOPENERR correctly.
9753
9754         * config.h.in: Define gethostbyname as Rgethostbyname when using
9755         Socks.
9756
9757         * configure.in: Check for -lresolv if using Socks.
9758
9759         * version.c: Changed version to 1.4b17.
9760
9761 1996-07-15  Hrvoje Niksic  <hniksic@srce.hr>
9762
9763         * version.c: "Released" 1.4b16.
9764
9765         * http.c (gethttp): More intelligent check for first line of HTTP
9766         response.
9767         (gethttp): Would bug out on time-stamping.
9768
9769         * version.c: Changed version to 1.4b16.
9770
9771 1996-07-11  Hrvoje Niksic  <hniksic@srce.hr>
9772
9773         * version.c: Released 1.4b15.
9774
9775         * http.c (http_loop): Print \n after the loop entry, not before.
9776
9777         * url.c (url_filename): Use ISDOT.
9778
9779         * url.h (ISDOT): New macro.
9780
9781         * recur.c (recursive_retrieve): Change only opt.recursive for
9782         following FTP.
9783
9784 1996-07-11  Antonio Rosella <antonio.rosella@agip.it>
9785
9786         * socks/geturl.cgi: Fixed version No.
9787
9788         * socks/download-netscape.html: Ditto.
9789
9790         * socks/download.html: Changed socks.html to download.html.
9791
9792 1996-07-11  Hrvoje Niksic  <hniksic@srce.hr>
9793
9794         * url.c (url_filename): Check for opt.dirstruct instead for
9795         opt.recursive && opt.dirstruct.
9796
9797         * init.c (defaults): Ditto.
9798         (defaults): Reset dirstruct by default.
9799         (setval): Set opt.dirstruct whenever setting recursive.
9800
9801         * init.h: Removed FORCEDIRHIER.
9802
9803         * INSTALL: Added -L to socks-description.
9804
9805         * version.c: Changed version to 1.4b15.
9806
9807 1996-07-10  Hrvoje Niksic  <hniksic@srce.hr>
9808
9809         * version.c: "Released" 1.4b14.
9810
9811         * geturl.1: Update AUTHOR to include Rosella as contributor.
9812
9813         * NEWS: Update.
9814
9815         * socks/geturl.cgi: Simplified command creation, nuked <blink>.
9816
9817         * socks/geturl.cgi: Wrap nutscape extensions within if $netscape.
9818         (cal_time): Fix == to eq.
9819
9820         * socks/geturl.cgi: GPL-ized with permission of A. Rosella.
9821
9822         * geturl.1 (hostname): Moved URL CONVENTIONS to the beginning.
9823
9824         * Makefile.in: Use @VERSION@.
9825
9826         * configure.in: Check version from version.c.
9827
9828         * socks/geturl.cgi: Changed /pub/bin/perl to /usr/bin/perl.
9829
9830         * socks/download.html: Created from download-netscape.html, made
9831         HTML-2.0 compliant.
9832
9833         * recur.c (recursive_retrieve): Set opt.force_dir_hier when
9834         following FTP links from recursions.
9835
9836 1996-07-09  Hrvoje Niksic  <hniksic@srce.hr>
9837
9838         * url.c (mymkdir): Fixed a bug that prevented mymkdir() to create
9839         absolute directories correctly.
9840
9841         * version.c: Changed version to 1.4b14.
9842
9843 1996-07-09  Hrvoje Niksic  <hniksic@srce.hr>
9844
9845         * version.c: "Released" 1.4b13.
9846
9847         * url.c (make_backup): New function.
9848
9849         * http.c (http_loop): Make a backup copy of the local file (using
9850         rename(2)) before opening it.
9851
9852         * main.c (main): Added --backups.
9853
9854         * host.c (ftp_getaddress): Bail out on failed mycuserid().
9855         (ftp_getaddress): Check for leading dot on MY_DOMAIN.
9856         (ftp_getaddress): Check for empty, null or (null) domain.
9857
9858         * url.c (get_urls_html): If this_url is NULL, the base must have a
9859         protocol.
9860         (parseurl): Use has_proto.
9861
9862         * retr.c (retrieve_url): Warn when proxy is used with more than 20
9863         retries.
9864
9865         * url.c (mkstruct): Create the directory (calling mymkdir()) only
9866         if it is not already there.
9867         (has_proto): New function.
9868         (get_urls_html): Eliminate the remaining call to findurl -- use
9869         has_proto.
9870
9871         * geturl.1: Ditto.
9872
9873         * main.c: Change -X to -x.
9874
9875         * url.c (url_filename): Simplify creation of filename if
9876         prefix_files is set.
9877         (url_filename): Simplify everything. And I do mean *everything*.
9878         (mkstruct): Add dir_prefix before hostname.
9879         (path_simplify): Fixed a bug that caused writing outside the path
9880         string in case of "." and ".." path strings.
9881
9882 1996-07-06  Hrvoje Niksic  <hniksic@srce.hr>
9883
9884         * init.c: Added --mirror.
9885
9886         * main.c (main): Added -X to force saving of directory hierarchy.
9887
9888         * ftp.c (ftp_retrieve_list): Added recursion depth counter.
9889         (ftp_retrieve_list): Check whether quota is exceeded.
9890
9891         * url.c (get_urls_html): Skip leading blanks for absolute URIs.
9892
9893         * http.c (gethttp): Use referer if present.
9894
9895         * recur.c (recursive_retrieve): Set u->referer before calling
9896         retrieve_url.
9897
9898         * url.c (newurl): Use memset to nullify the struct members.
9899         (freeurl): Free the referer field too.
9900
9901         * url.h: Added referer to urlinfo.
9902
9903         * geturl.1: Updated the manual to document some of the new features.
9904
9905         * utils.c (numdigit): Moved from url.c.
9906
9907         * README: Rewritten.
9908
9909         * config.h.in: Add the support for socks.
9910
9911         * configure.in: Add the support for socks.
9912
9913         * url.c (url_filename): If the dir_prefix is ".", work with just
9914         the file name.
9915         (url_filename): Do not look for .n extensions if timestamping if
9916         turned on.
9917
9918         * retr.c (show_progress): Skip the over-abundant restval data, and
9919         print the rest of it with ',' instead of '.'.
9920
9921 1996-07-05  Hrvoje Niksic  <hniksic@srce.hr>
9922
9923         * retr.c (show_progress): Changed second arg. to long (as it
9924         should be).
9925         (show_progress): Moved to retr.c.
9926         (get_contents): Moved to retr.c.
9927
9928         * version.c: Change version to 1.4b13.
9929
9930 1996-07-05  Hrvoje Lacko <hlacko@fly.cc.fer.hr>
9931
9932         * url.c (in_acclist): Would return after the first suffix.
9933
9934 1996-07-04  Hrvoje Niksic  <hniksic@srce.hr>
9935
9936         * version.c: "Released" 1.4b12.
9937
9938         * url.c (path_simplify): More kludgifications.
9939         (get_urls_html): Use new parameters for htmlfindurl.
9940
9941         * html.c: Removed memorizing "parser states", since the new
9942         organization does not require them.
9943
9944         * init.c (run_geturlrc): Use read_whole_line.
9945
9946         * ftp-unix.c (ftp_parse_ls): Use read_whole_line.
9947
9948         * recur.c (parse_robots): Use read_whole_line.
9949
9950         * utils.c (read_whole_line): New function.
9951
9952         * recur.c (tried_robots): Use add_slist/in_slist, *much* cleaner.
9953
9954         * host.c (ngethostbyname): Call inet_addr just once. Yet to be
9955         tested on OSF and Ultrix.
9956         (add_hlist): New function.
9957         (free_hlist): New function.
9958         (search_host): New function.
9959         (search_address): New function.
9960         (realhost): Use search_host, search_address and add_hlist.
9961         (same_host): Replaced realloc() with strdupdelim(), made
9962         case-insensitive, fixed a memory leak.
9963
9964         * html.c (ftp_index): Fixed tm_min and tm_sec to be tm_hour and
9965         tm_min, like intended.
9966
9967         * version.c: Change user agent information to
9968         Geturl/version.
9969
9970 1996-07-03  Hrvoje Niksic  <hniksic@srce.hr>
9971
9972         * utils.c: Renamed nmalloc.c to utils.c, .h likewise.
9973
9974         * url.c (acceptable): Always accept directories.
9975
9976         * ftp-unix.c (ftp_parse_ls): Support brain-damaged "ls -F"-loving
9977         servers by stripping trailing @ from symlinks and trailing / from
9978         directories.
9979
9980         * ftp.c (ftp_loop): Debugged the "enhanced" heuristics. :-)
9981
9982         * url.c (skip_url): Use toupper instead of UCASE.
9983
9984         * host.c (sufmatch): Made it case-insensitive.
9985
9986         * url.c (match_backwards_or_pattern): Fixed i == -1 to j == -1.
9987         (match_backwards): New function, instead of
9988         match_backwards_or_pattern.
9989
9990         * recur.c (recursive_retrieve): Increased performance by
9991         introducing inl, which reduces number of calls to in_slist to only
9992         one.
9993
9994         * ftp.c (ftp_loop): Enhanced the heuristics that decides which
9995         routine to use.
9996
9997         * main.c (printhelp): Removed the warranty stuff.
9998
9999 1996-07-02  Hrvoje Niksic  <hniksic@srce.hr>
10000
10001         * url.c (add_slist): Simplify.
10002         (match_backwards_or_pattern): New function.
10003         (in_acclist): Use match_backwards_or_pattern.
10004         (matches): Remove.
10005
10006 1996-06-30  Hrvoje Niksic  <hniksic@srce.hr>
10007
10008         * ftp.c (ftp_loop): Call ftp_index on empty file names, if not
10009         recursive.
10010
10011         * html.c (ftp_index): Fixed to work. Beautified the output.
10012
10013         * ftp.c (ftp_retrieve_glob): Another argument to control whether
10014         globbing is to be used.
10015         (ftp_retrieve_list): Compare the time-stamps of local and remote
10016         files to determine whether to download.
10017
10018 1996-06-29  Hrvoje Niksic  <hniksic@srce.hr>
10019
10020         * ftp.c (rel_constr): New function.
10021
10022         * retr.c (retrieve_from_file): Check for text/html before
10023         retrieving recursively.
10024
10025         * main.c (main): Check whether the file is HTML before going into
10026         recursive HTML retrieving.
10027
10028         * ftp.c (ftp_retrieve_list): Manage directories.
10029         (ftp_retrieve_glob): Pass all the file-types to ftp_retrieve_list.
10030         (ftp_1fl_loop): Fixed a bug that caused con->com to be incorrectly
10031         initialized, causing bugchecks in getftp to fail.
10032
10033         * configure.in: Check for symlink.
10034
10035         * ftp.c (ftp_retrieve_list): Added support for symlinks.
10036
10037         * version.c: "Released" 1.4b10.
10038
10039         * atotm.c (atotm): Redeclared as time_t.
10040
10041         * init.c: New variable "timestamping".
10042
10043         * main.c (main): New option 'N'.
10044
10045         * http.c (hgetlocation): Case-insensitive match.
10046         (hgetmodified): New function.
10047         (http_loop): Implement time-stamping.
10048
10049 1996-06-28  Hrvoje Niksic  <hniksic@srce.hr>
10050
10051         * version.c: Changed version to 1.4b10
10052
10053         * atotm.c: New file, from phttpd.
10054
10055         * options.h (struct options): New parameter timestamping.
10056
10057         * version.c: 1.4b9 "released".
10058
10059         * recur.c (recursive_retrieve): Used linked list (ulist) for
10060         faster storing of URLs.
10061
10062         * url.c (get_urls_html): Removed the old kludge with comparing the
10063         outputs of htmlfindurl and findurl.
10064         (get_urls_html): Added better protocol support here.
10065         (create_hash): Removed, as well as add_hash and in_hash.
10066         (addslist): New function.
10067         (in_slist): ditto
10068
10069         * version.c: Released 1.4b8, changed version to b9.
10070
10071 1996-06-27  Hrvoje Niksic  <hniksic@srce.hr>
10072
10073         * ftp.c (freefileinfo): New function.
10074         (delelement): New function.
10075
10076         * everywhere: GPL!
10077
10078         * ftp.c (ftp_loop): Use ccon.
10079         (ftp_retrieve_glob): Likewise.
10080
10081         * ftp.h: Define ccon, to define status of control connection.
10082
10083         * ftp.c (ftp_get_listing): New function.
10084         (ftp_retrieve_more): New function.
10085         (ftp_retrieve_glob): New function.
10086
10087 1996-06-25  Hrvoje Niksic  <hniksic@srce.hr>
10088
10089         * configure.in: Removed the search for cuserid().
10090
10091         * init.c (getmode): Renamed to getperms.
10092
10093 1996-06-24  Hrvoje Niksic  <hniksic@srce.hr>
10094
10095         * version.c: New version.
10096
10097         * main.c (hangup): New function, that handles hangup. Hangup
10098         signal now causes geturl to stop writing on stdout, and to write
10099         to a log file.
10100
10101         * ftp.c (getftp): "Released" 1.4b7.
10102
10103         * html.c (htmlfindurl): Ignore everything inside <head>...</head>.
10104         (ftp_index): Use fileinfo/urlinfo.
10105
10106         * ftp-unix.c (ftp_parse_ls): New function.
10107         (symperms): New function.
10108
10109         * ftp.c (ftp_1fl_loop): New function, to handle 1-file loops.
10110
10111         * retr.c (retrieve_url): Added FTP support.
10112
10113 1996-06-23  Hrvoje Niksic  <hniksic@srce.hr>
10114
10115         * geturl.h: Removed NOTFTP2HTML enum.
10116         Added DO_LOGIN, DO_CWD and DO_LIST. LIST_ONLY is obsolete.
10117
10118         * ftp.c (getftp): Resynched with urlinfo.
10119         (getftp): Removed HMTL-ization of index.html from getftp.
10120
10121         * version.c: 1.4b6 "released".
10122
10123         * options.h (options): New struct, to keep options in.
10124
10125         * http.c (http_loop,gethttp): Synched with proxy.
10126
10127         * retr.c (retrieve_url): Implemented proxy retrieval.
10128
10129         * main.c (main): Use retrieve_from_file.
10130
10131 1996-06-22  Hrvoje Niksic  <hniksic@srce.hr>
10132
10133         * retr.c (retrieve_from_file): New function.
10134
10135         * url.c (parseurl): Modified to return URLOK if all OK. Protocol
10136         can be found in u->proto.
10137
10138         * ftp.c (ftp_response): Fixed to accept multi-line responses as
10139         per RFC 959.
10140
10141         * recr.c (recursive_retrieve): Take newloc from retrieve_url.
10142
10143         * url.c (mymkdir): Removed the file of the same name, if one
10144         exists.
10145         (isfile): New function.
10146         (mkstruct): Fixed the '/' glitches.
10147         (path_simplify): Hacked to treat something/.. correctly.
10148
10149 1996-06-21  Hrvoje Niksic  <hniksic@srce.hr>
10150
10151         * http.c (gethttp): Close the socket after error in headers.
10152         (http_loop): HEOF no longer a fatal header.
10153
10154         * loop.c (retrieve_url): When dt is NULL, do not modify it. This
10155         simplifies the syntax of calling retrieve_url.
10156
10157         * recr.c (recursive_retrieve): Modified to use get_urls_html.
10158
10159         * url.c (get_urls_file): New function.
10160         (get_urls_html): New function.
10161
10162         * recr.c (recursive_retrieve): Patched up to conform to the
10163         standards.
10164
10165         * http.c (gethttp): Synched with the rest...
10166         (gethttp): Treat only CONREFUSED specially, with connection
10167         errors.
10168
10169         * init.c,geturl.1,http.c (http_loop): Removed kill_error.
10170
10171 1996-06-20  Hrvoje Niksic  <hniksic@srce.hr>
10172
10173         * http.c (http_loop): New function.
10174
10175         * loop.c: Removed *lots* of stuff from retrieve_url.
10176
10177         * url.c (parseurl): Changed to work with urlinfo. Integrated
10178         username finding and path parsing.
10179         (newurl): New function.
10180         (freeurl): New function.
10181         (mkstruct): Removed the old bogosities, made it urlinfo-compliant.
10182         (url_filename): Likewise.
10183         (path_simplify): Accept relative paths too.
10184         (opt_url): Made urlinfo-compliant, removed bogosities.
10185         (path_simplify): Expanded to accept relative paths.
10186         (str_url): A replacement for hide_url
10187         (decode_string): Fixed a bug that caused malfunctioning when
10188         encountering an illegal %.. combination.
10189         (opt_url): Removed the argument. Dot-optimizations are now default.
10190
10191         * nmalloc.c (strdupdelim): New function.
10192
10193         * url.h: Added the urlinfo structure
10194
10195 1996-06-19  Hrvoje Niksic  <hniksic@srce.hr>
10196
10197         * url.c (hide_url): Thrown out the protocol assertion. Do not
10198         change the URL if the protocol if not recognized.
10199         (findurl): Put continue instead of break.
10200
10201 1996-06-18  Hrvoje Niksic  <hniksic@srce.hr>
10202
10203         * sample.geturlrc: Changed the defaults to be commented out and
10204         harmless (previous defaults caused pains if copied to
10205         ~/.geturlrc).
10206
10207         * http.c (gethttp): Print the HTTP request in debug mode.
10208
10209         * connect.c (iread): Added EINTR check loop to select-ing
10210         too. EINTR is now correctly handled with select().
10211
10212         * TODO: new file
10213
10214 1996-05-07  Hrvoje Niksic  <hniksic@srce.hr>
10215
10216         * host.c (same_host): Made the function a little bit more
10217         intelligent regarding diversified URL syntaxes.
10218
10219         * url.c (skip_url): Spaces are now skipped after URL:
10220
10221         * Released 1.3.1 with the patch to prevent crashing when sending
10222         NULL to robot* functions and the patch to compile "out of the box"
10223         on AIX.
10224
10225         * recr.c (recursive_retrieve): Added checking whether this_url is
10226         NULL when calling the robot functions.
10227
10228         * ChangeLog: New file.