sjero.net Git - wget/blob - src/ChangeLog

   1 2005-06-27  Hrvoje Niksic  <hniksic@xemacs.org>
   2
   3         * config-post.h (alloca): Amend alloca declaration to take care of
   4         all Win32 compilers, not just MSVC and MinGW.
   5
   6 2005-06-27  Hrvoje Niksic  <hniksic@xemacs.org>
   7
   8         * utils.c (get_grouping_data): Force separator to "." rather than
   9         " " when "," is taken.
  10
  11 2005-06-27  Hrvoje Niksic  <hniksic@xemacs.org>
  12
  13         * wget.h (PTR_FORMAT): Cast the result of sizeof to int before
  14         passing it to printf's %*.
  15
  16         * retr.h: Declare output_stream and output_stream_regular.
  17
  18         * ftp.h: Declare ftp_last_respline.
  19
  20         * convert.h: Declare dl_url_file_map.
  21
  22         * http.h: New file.
  23
  24 2005-06-27  Hrvoje Niksic  <hniksic@xemacs.org>
  25
  26         * cookies.c: Make cookies_now static.
  27
  28 2005-06-27  Hrvoje Niksic  <hniksic@xemacs.org>
  29
  30         * utils.c (human_readable): Remove intermediary cast to long; MSVC
  31         has problems casting *unsigned* __int64 to double.
  32
  33 2005-06-27  Hrvoje Niksic  <hniksic@xemacs.org>
  34
  35         * sysdep.h: Use the system-provided fnmatch by default.
  36
  37 2005-06-27  Hrvoje Niksic  <hniksic@xemacs.org>
  38
  39         * http.c (mktime_from_utc): Renamed to timegm and moved to cmpt.c.
  40         Don't compile it if GNU timegm is available.
  41         (http_atotm): Use timegm.
  42
  43 2005-06-27  Hrvoje Niksic  <hniksic@xemacs.org>
  44
  45         * http.c (http_atotm): Correctly query the old locale value.
  46
  47 2005-06-27  Hrvoje Niksic  <hniksic@xemacs.org>
  48
  49         * config-post.h (alloca): Don't #define alloca under MinGW32,
  50         which defines it in malloc.h, included from mswindows.h.
  51
  52 2005-06-27  Hrvoje Niksic  <hniksic@xemacs.org>
  53
  54         * utils.c (get_grouping_data): Force the use of separators in C
  55         locale.
  56
  57 2005-06-27  Hrvoje Niksic  <hniksic@xemacs.org>
  58
  59         * main.c (i18n_initialize): Set all locale categories.
  60
  61         * http.c (http_atotm): Temporarily set locale to "C".
  62
  63 2005-06-27  Hrvoje Niksic  <hniksic@xemacs.org>
  64
  65         * http.c (gethttp): Improve "POST data file missing" error
  66         message.
  67
  68 2005-06-27  Hrvoje Niksic  <hniksic@xemacs.org>
  69
  70         * progress.c (set_progress_implementation): Type COLON as const
  71         char *.
  72
  73 2005-06-27  Hrvoje Niksic  <hniksic@xemacs.org>
  74
  75         * utils.c (with_thousand_seps): Handle negative numbers.
  76
  77 2005-06-26  Hrvoje Niksic  <hniksic@xemacs.org>
  78
  79         * progress.c (create_image): Mark the "eta" string for translation.
  80
  81 2005-06-26  Hrvoje Niksic  <hniksic@xemacs.org>
  82
  83         * html-url.c (get_urls_file): Don't explicitly set entry->next to
  84         NULL since entry is already zeroed out.
  85
  86 2005-06-26  Gisle Vanem  <giva@bgnett.no>
  87
  88         * mswindows.h: Define gai_strerror under MinGW.
  89
  90 2005-06-26  Hrvoje Niksic  <hniksic@xemacs.org>
  91
  92         * utils.c (with_thousand_seps): Correctly implement thousand seps
  93         consisting of more than one character.
  94
  95 2005-06-26  Hrvoje Niksic  <hniksic@xemacs.org>
  96
  97         * main.c (secs_to_human_time): Ditto.
  98
  99         * progress.c (create_image): Print more exact duration of very
 100         short downloads.
 101
 102         * main.c (secs_to_human_time): Don't translate time suffixes "h",
 103         "m", and "s", which are not strictly SI, but are "accepted for use
 104         with SI".
 105         (secs_to_human_time): Print really small intervals as 0s, not
 106         0.00s.
 107
 108 2005-06-26  Hrvoje Niksic  <hniksic@xemacs.org>
 109
 110         * config-post.h: Replace the alloca declaration with the one from
 111         the latest Autoconf manual.  This should remove a warning with GCC
 112         on AIX.
 113
 114 2005-06-26  Hrvoje Niksic  <hniksic@xemacs.org>
 115
 116         * ftp.c (getftp): Always invoke SIZE, not only when continuing a
 117         download.
 118
 119         * main.c (main): Ditto here.
 120
 121         * progress.c (create_image): When the download is finished, print
 122         how long it took.
 123
 124 2005-06-26  Hrvoje Niksic  <hniksic@xemacs.org>
 125
 126         * main.c (main): Print the downloaded and quota amounts with the
 127         "human_readable" function.
 128
 129         * ftp.c (print_length): Ditto.
 130
 131         * http.c (gethttp): Don't display thousand separators.
 132
 133         * utils.c (with_thousand_seps): Rewritten to respect locale
 134         settings and to be type size agnostic.
 135
 136 2005-06-25  Hrvoje Niksic  <hniksic@xemacs.org>
 137
 138         * utils.c (human_readable): Divide with 1024 instead of shifting
 139         so the operation can work with non-integer N.
 140
 141 2005-06-25  Hrvoje Niksic  <hniksic@xemacs.org>
 142
 143         * progress.c (eta_to_human): New logic for more human-readable
 144         ETA.
 145
 146 2005-06-25  Hrvoje Niksic  <hniksic@xemacs.org>
 147
 148         * utils.c (with_thousand_seps_sum): Decrease buffer size so it
 149         cannot overrun add_thousand_seps's buffer.
 150
 151 2005-06-25  Hrvoje Niksic  <hniksic@xemacs.org>
 152
 153         * utils.c (SPRINTF_WGINT): The correct format is %I64d, not just
 154         %I64.
 155
 156 2005-06-25  Hrvoje Niksic  <hniksic@xemacs.org>
 157
 158         * http.c (http_loop): Don't warn about wildcards in HTTP URLs if
 159         globbing isn't requested in the first place.
 160
 161         * retr.c (retrieve_url): Temporarily turn off globbing when
 162         processing HTTP->FTP redirects.
 163
 164 2005-06-25  Hrvoje Niksic  <hniksic@xemacs.org>
 165
 166         * utils.c (with_thousand_seps_sum): Now defined only if
 167         SUM_SIZE_INT is double.
 168
 169         * wget.h (SUM_SIZE_INT): Instead of bothering with long, long
 170         long, __int64, and friends, simply either use wgint or double, end
 171         of story.  Since we know how to print either, we no longer need
 172         LARGE_INT_FMT.
 173
 174         * sysdeps.h (LARGE_INT): Renamed to SUM_SIZE_INT to better reflect
 175         its intent, and moved to wget.h.
 176
 177 2005-06-25  Hrvoje Niksic  <hniksic@xemacs.org>
 178
 179         * Makefile.in: No need to clean .libs.
 180
 181 2005-06-25  Hrvoje Niksic  <hniksic@xemacs.org>
 182
 183         * cookies.c (parse_set_cookies): Cast pointer subtraction to int
 184         before using it with %d; AIX compiler warns on this.
 185         Reported by Jens Schleusener.
 186
 187 2005-06-24  Hrvoje Niksic  <hniksic@xemacs.org>
 188
 189         * http.c (gethttp): Don't prepend / here.
 190
 191         * cookies.c (cookie_handle_set_cookie): Prepend / to PATH.
 192         (cookie_header): Ditto.
 193
 194 2005-06-24  Hrvoje Niksic  <hniksic@xemacs.org>
 195
 196         * init.c: opt.verbose must be declared as int.
 197
 198 2005-06-23  Hrvoje Niksic  <hniksic@xemacs.org>
 199
 200         * cmpt.c (strpbrk): Removed.
 201         (mktime): Removed.
 202         Include <time.h>.
 203
 204 2005-06-23  Hrvoje Niksic  <hniksic@xemacs.org>
 205
 206         * utils.c (read_file): Ditto.
 207
 208         * main.c (main): Use struct_fstat.
 209
 210         * mswindows.h (struct_fstat): Define a struct_fstat to deal with
 211         the fact that Borland 5.5 has 64-bit stat, but not 64-bit fstat!
 212
 213 2005-06-23  Hrvoje Niksic  <hniksic@xemacs.org>
 214
 215         * sysdep.h: Remove code that deals with Watcom.
 216
 217 2005-06-22  Hrvoje Niksic  <hniksic@xemacs.org>
 218
 219         * all: Use bool instead of int and false/true instead of 0/non-0
 220         for boolean variables and values.
 221
 222 2005-06-22  Hrvoje Niksic  <hniksic@xemacs.org>
 223
 224         * sysdep.h: Include the stdbool.h/_Bool/bool blurb from Autoconf.
 225
 226 2005-06-22  Hrvoje Niksic  <hniksic@xemacs.org>
 227
 228         * init.c (cmd_lockable_boolean): Removed.
 229
 230 2005-06-22  Hrvoje Niksic  <hniksic@xemacs.org>
 231
 232         * cookies.c (struct cookie): Use 1-bit bitfields for booleans
 233         which makes the structure takes less space at no cost in
 234         complexity.
 235
 236 2005-06-22  Hrvoje Niksic  <hniksic@xemacs.org>
 237
 238         * Makefile.in ($(OBJ)): Add the config.h dependency.
 239
 240 2005-06-22  Hrvoje Niksic  <hniksic@xemacs.org>
 241
 242         * openssl.c, connect.c, host.c: Replace instances of #ifdef
 243         ENABLE_DEBUG if (opt.debug) {...} #endif with IF_DEBUG {...}.
 244
 245         * main.c: Rename the IF_DEBUG defined here to WHEN_DEBUG.
 246
 247         * wget.h (IF_DEBUG): New macro.
 248         (DEBUGP): Define in terms of IF_DEBUG.
 249
 250 2005-06-22  Hrvoje Niksic  <hniksic@xemacs.org>
 251
 252         * http.c (gethttp): Only handle --set-cookies (and assert that
 253         cookie jar exists) if opt.cookies is true.  Failure to do so
 254         triggered the assert when --no-cookies was used and the server
 255         sent a Set-Cookie header.  Ouch!
 256
 257 2005-06-22  Hrvoje Niksic  <hniksic@xemacs.org>
 258
 259         * connect.c (select_fd): Expect select() to exist.
 260
 261         * utils.c (xsleep): Always use select() as sleep fallback on
 262         non-Windows platforms.
 263
 264         * ptimer.c: Delete the implementation of PTIMER_TIME.
 265
 266         * main.c: Assume existence of signal(), test for different signal
 267         names instead.
 268
 269         * cmpt.c: Better document reasons why certain functions are
 270         included.
 271
 272 2005-06-22  Hrvoje Niksic  <hniksic@xemacs.org>
 273
 274         * Makefile.in: Remove the manually maintained dependency list;
 275         make all object files depend on every header.
 276
 277 2005-06-20  Hrvoje Niksic  <hniksic@xemacs.org>
 278
 279         * hash.c: Rename "mapping" to "cell" to avoid confusion with the
 280         term "mapping" (or "map") sometimes being used for the entire hash
 281         table.  Also rename "non-empty" to "occupied" for easier reading
 282         of if (!NON_EMPTY (...)) ... .
 283
 284 2005-06-20  Hrvoje Niksic  <hniksic@xemacs.org>
 285
 286         * main.c, ptimer.c, sysdep.h, utils.c: Use #elif to simplify reading of
 287         chained if-else-else-else-... statements.
 288
 289 2005-06-20  Hrvoje Niksic  <hniksic@xemacs.org>
 290
 291         * all: Return type of signal handlers is `void'.  Include signal.h
 292         unconditionally.
 293
 294         * all: Don't explicitly cast values returned by malloc.  We no
 295         longer support ancient compilers that don't declare malloc, and we
 296         never supported C++ builds.
 297
 298 2005-06-19  Hrvoje Niksic  <hniksic@xemacs.org>
 299
 300         * all: Don't declare errno.  Include both time.h and sys/time.h,
 301         as long as sys/time.h exists.  Don't dereference function pointers
 302         when invoking the functions they point to.
 303
 304         * cmpt.c (memmove): Remove function mandated by C89.
 305         (strerror): Ditto.
 306         (strstr): Ditto.
 307
 308         * all: Undo the K&R-ization changes from 2005-05-03.
 309
 310         * all: Remove support for K&R compilers: use C89 function
 311         declarations, remove definition of PARAMS, remove support for
 312         varargs, and remove ansi2knr.  Assume the presence of time.h,
 313         string.h, and other headers mandated by C89.
 314
 315 2005-06-19  Hrvoje Niksic  <hniksic@xemacs.org>
 316
 317         * init.c (cmd_lockable_boolean): Don't recognize literal "2" and
 318         "-1" values; unlike 0 and 1, those should never be exposed to the
 319         user.  Update the error message to be more self-consistent, as
 320         proposed by Benno Schulenberg.
 321
 322 2005-06-18  Hrvoje Niksic  <hniksic@xemacs.org>
 323
 324         * http.c (gethttp): Don't free "head" before using it to save
 325         headers.
 326
 327 2005-06-18  Hrvoje Niksic  <hniksic@xemacs.org>
 328
 329         * http.c (gethttp): When -E is in use, check for file existence
 330         after appending ".html" to the name and modify the file name if
 331         necessary.
 332
 333 2005-06-17  Hrvoje Niksic  <hniksic@xemacs.org>
 334
 335         * connect.c (socket_has_inet6): Removed.
 336
 337         * host.c (lookup_host): Don't use the AI_ADDRCONFIG getaddrinfo
 338         hint.
 339
 340 2005-06-16  Hrvoje Niksic  <hniksic@xemacs.org>
 341
 342         * init.c (cmd_lockable_boolean): Improve the error message so it
 343         lists the more useful values first.
 344
 345 2005-06-15  Hrvoje Niksic  <hniksic@xemacs.org>
 346
 347         * http.c (gethttp): Also report the system error when the POST
 348         data file is missing.
 349
 350 2005-06-15  Benno Schulenberg  <benno@nietvergeten.nl>
 351
 352         * ftp.c, http.c, connect.c, cookies.c, html-url.c, init.c, res.c:
 353         Gettext-ize messages that were previously missed.
 354
 355 2005-06-15  Hrvoje Niksic  <hniksic@xemacs.org>
 356
 357         * host.h (ip_address): Remove the trailing comma from the type
 358         enum in the no-IPv6 case.
 359
 360         * main.c (struct cmdline_option): Remove the trailing comma from
 361         the enum.
 362
 363         Reported by Jens Schleusener.
 364
 365 2005-05-30  Hrvoje Niksic  <hniksic@xemacs.org>
 366
 367         * url.c (strpbrk_or_eos): Check for a recent GCC version before
 368         using the statement-as-expression extension.
 369
 370 2005-05-30  Hrvoje Niksic  <hniksic@xemacs.org>
 371
 372         * http.c (gethttp): Don't attempt to "skip short body" if we're
 373         issuing a HEAD request (in which case the response head is not
 374         followed by a body).
 375
 376 2005-05-30  Hrvoje Niksic  <hniksic@xemacs.org>
 377
 378         * init.c (cmd_spec_header): Don't split the string along the
 379         commas using cmd_vector; just append the new value using
 380         vec_append instead.
 381
 382         * utils.c (vec_append): New function.
 383
 384 2005-05-27  Andreas Beckmann  <debian@abeckmann.de>
 385
 386         * html-url.c (tag_handle_link): Mark the content from the <link
 387         src="..."> tag as expecting HTML.
 388
 389 2005-05-24  Hrvoje Niksic  <hniksic@xemacs.org>
 390
 391         * http.c (http_atotm): Document the origin of the "cookie date"
 392         format.
 393
 394 2005-05-21  Hrvoje Niksic  <hniksic@xemacs.org>
 395
 396         * init.c (setval_internal): Report exact command name alongside
 397         the "display name".
 398
 399 2005-05-18  Hrvoje Niksic  <hniksic@xemacs.org>
 400
 401         * cookies.c (update_cookie_field): Explicitly cast -1 to time_t to
 402         cope with systems where time_t is unsigned.
 403
 404         * cookies.c: Remove unnecessary casts to time_t from values
 405         already of that type.
 406
 407 2005-05-17  Hrvoje Niksic  <hniksic@xemacs.org>
 408
 409         * ftp.c (ftp_loop_internal): Same here.
 410
 411         * http.c (http_loop): Don't clobber the file when -c is specified
 412         and the first attempt to retrieve the file fails.
 413
 414 2005-05-16  Hrvoje Niksic  <hniksic@xemacs.org>
 415
 416         * openssl.c (ssl_check_certificate): Print all issues with a
 417         certificate.
 418
 419 2005-05-16  Hrvoje Niksic  <hniksic@xemacs.org>
 420
 421         * ftp-basic.c: Don't xfree() the line returned by ftp_response if
 422         the returned code is not FTPOK.
 423
 424 2005-05-16  Hrvoje Niksic  <hniksic@xemacs.org>
 425
 426         * init.c (cleanup): Don't free the non-existent opt.ftp_acc.  Free
 427         the SSL-related stuff.
 428
 429 2005-05-16  Hrvoje Niksic  <hniksic@xemacs.org>
 430
 431         * ftp.c (print_length): Consistently print \n at end of the
 432         "Length" line.
 433
 434 2005-05-14  Hrvoje Niksic  <hniksic@xemacs.org>
 435
 436         * openssl.c (ssl_connect): Announce the beginning and the end of
 437         the SSL handshake when in debug mode.
 438
 439         * wget.h (PTR_FORMAT): New macro for easier printing of pointer
 440         values.  Use %0*lx along with PTR_FORMAT instead of %p.
 441
 442 2005-05-14  Hrvoje Niksic  <hniksic@xemacs.org>
 443
 444         * http.c (gethttp): Would forget to close the connection when
 445         keep_alive was not used.
 446
 447 2005-05-13  Hrvoje Niksic  <hniksic@xemacs.org>
 448
 449         * openssl.c (pattern_match): Document the code that decides
 450         whether "*" matches ".".
 451
 452 2005-05-12  Hrvoje Niksic  <hniksic@xemacs.org>
 453
 454         * ftp-ls.c (ftp_index): Use %d to print the port number, which is
 455         now int.
 456         From Steven M. Schweda's VMS patches.
 457
 458 2005-05-12  Hrvoje Niksic  <hniksic@xemacs.org>
 459
 460         * url.c (rewrite_shorthand_url): Don't rewrite "https://host" to
 461         "ftp://https//host" when SSL is not used.
 462
 463 2005-05-11  Hrvoje Niksic  <hniksic@xemacs.org>
 464
 465         * openssl.c (ssl_check_server_identity): Renamed to
 466         ssl_check_certificate because it does more than just checking the
 467         server's identity.
 468         (ssl_check_certificate): Tell the user about
 469         --no-check-certificate.
 470
 471 2005-05-11  Hrvoje Niksic  <hniksic@xemacs.org>
 472
 473         * openssl.c (ssl_init): Always use SSL_VERIFY_NONE, so that the
 474         handshake finishes even if the certificate is invalid.  That way
 475         ssl_check_server_identity can provide better diagnostics on why
 476         the verification failed.
 477
 478 2005-05-11  Hrvoje Niksic  <hniksic@xemacs.org>
 479
 480         * openssl.c (pattern_match): New function.
 481         (ssl_check_server_identity): Treat peer certificate common name as
 482         wildcard.
 483
 484 2005-05-10  Hrvoje Niksic  <hniksic@xemacs.org>
 485
 486         * openssl.c (ssl_check_server_identity): Print certificate subject
 487         and issuer.
 488
 489 2005-05-10  Hrvoje Niksic  <hniksic@xemacs.org>
 490
 491         * res.c (res_register_specs): Correctly pass pointers to
 492         hash_table_get_pair.
 493
 494 2005-05-10  Hrvoje Niksic  <hniksic@xemacs.org>
 495
 496         * http.c (gethttp): Call ssl_check_server_identity.
 497
 498         * openssl.c (ssl_check_server_identity): New function, verifies
 499         that the host name in the certificate matches the actual host
 500         name.
 501         (verify_cert_callback): Removed, since it didn't do anything
 502         except returning the preverify_ok argument.
 503
 504         * connect.c (fd_transport_context): Allow retrieval of the context
 505         pointer registered with fd_register_transport.
 506
 507 2005-05-09  Hrvoje Niksic  <hniksic@xemacs.org>
 508
 509         * openssl.c (verify_cert_callback): Renamed from verify_callback.
 510         Always return the received "ok" value.  Print the X509 name in
 511         debug mode.
 512         (ssl_init): Enable partial writes in SSL context.
 513
 514 2005-05-08  Hrvoje Niksic  <hniksic@xemacs.org>
 515
 516         * http.c (http_loop): Check for wildcards in the URL path
 517         component, not in the whole URL.
 518
 519         * ftp.c (ftp_loop): Check for wildcards in URL path before
 520         unescaping, so the users can escape globbing metacharacters with %
 521         escapes.
 522
 523 2005-05-08  Hrvoje Niksic  <hniksic@xemacs.org>
 524
 525         * init.c (run_command): Correctly interpret the return value of
 526         parse_line.
 527         (commands): Re-alphabetize.
 528
 529 2005-05-08  Hrvoje Niksic  <hniksic@xemacs.org>
 530
 531         * netrc.c (parse_netrc): Explicitly check for assignment != NULL
 532         to silence warning from Borland C.
 533
 534         * url.c (sync_path): Don't unnecessarily increment p.
 535         (url_parse): Don't unnecessarily set url_encode to NULL just
 536         prior to return from the function.
 537
 538 2005-05-08  Hrvoje Niksic  <hniksic@xemacs.org>
 539
 540         * log.c (escnonprint_internal): Place variable declarations
 541         before other statements.
 542
 543 2005-05-08  Hrvoje Niksic  <hniksic@xemacs.org>
 544
 545         * html-url.c: Include recur.h.
 546
 547         * http.c (request_new): Define as accepting no args.
 548
 549 2005-05-07  Hrvoje Niksic  <hniksic@xemacs.org>
 550
 551         * url.c (strpbrk_or_eos): Made inline.  Use strchr(s, '\0') for
 552         finding the NUL char position.
 553
 554 2005-05-07  Hrvoje Niksic  <hniksic@xemacs.org>
 555
 556         * url.c (decide_copy_method): Renamed to char_needs_escaping.
 557         Since it now returns only two possible values, change it to return
 558         boolean (int).
 559
 560 2005-05-07  Hrvoje Niksic  <hniksic@xemacs.org>
 561
 562         * ftp-basic.c (ftp_request): Prevent newlines in VALUE causing
 563         inadvertent sending of multiple FTP commands.
 564
 565 2005-05-07  Hrvoje Niksic  <hniksic@xemacs.org>
 566
 567         * url.c (decide_copy_method): Never cause reencode_escapes to
 568         decode % escapes; it is too intrusive and breaks some servers.
 569
 570 2005-05-07  Hrvoje Niksic  <hniksic@xemacs.org>
 571
 572         * http.c (gethttp): When tunnelling SSL traffic over proxy with
 573         CONNECT, we're really talking to the remote server directly.
 574         Because of this, the request-line argument must be the URL path
 575         rather than the whole URL, as it would be when using regular
 576         proxies.
 577         Reported by Charles Lane.
 578
 579 2005-05-06  Hrvoje Niksic  <hniksic@xemacs.org>
 580
 581         * init.c (cmd_spec_useragent): Allow empty User-Agent.
 582
 583         * http.c (gethttp): Don't print "unknown authentication scheme"
 584         for failed Basic authentication.
 585         (SET_USER_AGENT): Don't set user-agent if opt.useragent is empty.
 586         (gethttp): Use alloca for allocation of www_authenticate.
 587
 588 2005-05-06  Hrvoje Niksic  <hniksic@xemacs.org>
 589
 590         * main.c (print_help): Fix wording of --secure-protocol help text.
 591
 592 2005-05-06  Hrvoje Niksic  <hniksic@xemacs.org>
 593
 594         * cmpt.c (strstr): Updated from glibc 2.3.5.
 595
 596 2005-05-05  Hrvoje Niksic  <hniksic@xemacs.org>
 597
 598         * http.c (http_atotm): Zero out the whole struct tm being passed
 599         to strptime.
 600
 601 2005-05-05  Hrvoje Niksic  <hniksic@xemacs.org>
 602
 603         * main.c (main): Propagate option name to setoptval.
 604
 605         * init.c (setoptval): Accept another argument, OPTNAME.  Propagate
 606         that argument as the option name independently of the actual
 607         command, determined by command_by_name(com).
 608
 609 2005-05-05  Hrvoje Niksic  <hniksic@xemacs.org>
 610
 611         * init.c (parse_line): Make the return value indicate whether
 612         there was a syntax error or a setter failed.
 613         (run_wgetrc): Return an indication on whether an error has been
 614         encountered.
 615         (initialize): Abort if there have been errors running either
 616         .wgetrc file.
 617
 618 2005-05-05  Hrvoje Niksic  <hniksic@xemacs.org>
 619
 620         * log.c (copy_and_escape): Slightly reduce code repetition between
 621         the two loops.
 622
 623 2005-05-05  Charles C.Fu  <ccwf@bacchus.com>
 624
 625         * utils.c (proclist): Strip leading slash when calling fnmatch
 626         too, otherwise wildcard comparisons always fail.
 627
 628 2005-05-05  Hrvoje Niksic  <hniksic@xemacs.org>
 629
 630         * utils.c (touch): Set access time to current time.
 631
 632 2005-05-05  Hrvoje Niksic  <hniksic@xemacs.org>
 633
 634         * url.c (url_unescape): Don't unescape %00, it effectively
 635         truncates the string.
 636
 637 2005-05-05  Hrvoje Niksic  <hniksic@xemacs.org>
 638
 639         * log.c (copy_and_escape): Replace the FOR_URI argument with a
 640         slightly more general mechanism for specifying different kinds of
 641         escape.
 642
 643 2005-05-05  Hrvoje Niksic  <hniksic@xemacs.org>
 644
 645         * ftp-basic.c (ftp_response): Fix printing FTP server response.
 646
 647 2005-05-05  Hrvoje Niksic  <hniksic@xemacs.org>
 648
 649         * retr.c (limit_bandwidth_reset): Reset sleep_adjust.
 650         (limit_bandwidth): Don't allow huge "adjustment" values that
 651         result from being suspended for a while.
 652
 653 2005-05-04  Hrvoje Niksic  <hniksic@xemacs.org>
 654
 655         * wget.h: If gettext was found but libtintl.h wasn't, declare
 656         gettext's return type to avoid type mismatches.
 657
 658 2005-05-03  Hrvoje Niksic  <hniksic@xemacs.org>
 659
 660         * url.c (url_parse): Rename label `error' to avoid conflict with
 661         identifier.
 662
 663         * retr.c (fd_read_body): Rename label `out' to avoid conflict with
 664         identifier.
 665         (fd_read_hunk): Use explicit double constant.
 666         (retrieve_from_file): Don't use string concatenation.
 667         (sleep_between_retrievals): Make sure xsleep is called with a
 668         `double' argument.
 669         (no_proxy_match): Define as static, like it is declared.
 670
 671         * progress.c (bar_create): Use 0.0 instead of 0 because K&R
 672         compilers can't automatically promote it.
 673
 674         * http-ntlm.c (ntlm_output): Replace \xHH sequences with \OOO for
 675         the sake of old compilers.
 676
 677         * ftp.c (ftp_loop_internal): Don't use string concatenation.
 678
 679         * http.c (request_send): Use explicit double constants when
 680         calling fd_read and fd_write.
 681         (post_file): Ditto.
 682         (gethttp): Ditto.
 683         (skip_short_body): Ditto.
 684
 685         * ftp-basic.c: When calling fd_write, specify the last argument as
 686         a `double' constant for the sake of K&R compilers which don't see
 687         the prototype and therefore can't promote it to double
 688         automatically.
 689
 690         * cookies.c (cookie_jar_load): Rename abort label to abort_cookie
 691         to avoid name conflict in K&R compilers.
 692
 693 2005-04-29  Hrvoje Niksic  <hniksic@xemacs.org>
 694
 695         * ptimer.c (posix_init): Since we allow _POSIX_MONOTONIC_CLOCK==0,
 696         it is not enough to check for _POSIX_MONOTONIC_CLOCK-0, we must
 697         also check for defined(_POSIX_MONOTONIC_CLOCK).
 698
 699 2005-04-28  Hrvoje Niksic  <hniksic@xemacs.org>
 700
 701         * ftp.c, hash.c, connect.c, host.c, http.c: Remove unreached code,
 702         such as "break" following return or abort.
 703
 704 2005-04-28  Hrvoje Niksic  <hniksic@xemacs.org>
 705
 706         * init.c (commands): Wrap the use of opt.random_file in #ifdef
 707         HAVE_SSL.
 708
 709 2005-04-28  Hrvoje Niksic  <hniksic@xemacs.org>
 710
 711         * http.c (gethttp): Correctly set the user agent.
 712
 713 2005-04-27  Hrvoje Niksic  <hniksic@xemacs.org>
 714
 715         * init.c (cmd_spec_useragent): Free the old value of
 716         opt.useragent before setting the new one.
 717
 718 2005-04-27  Mauro Tortonesi  <mauro@ferrara.linux.it>
 719
 720         * main.c: Map --ftp-password, --http-password and --proxy-password to
 721         the new ftppassword, httppassword and proxypassword commands
 722         respectively.  Document the --user and --password options in the help
 723         string.
 724
 725 2005-04-27  Mauro Tortonesi  <mauro@ferrara.linux.it>
 726
 727         * ftp.c: Add support for --user and --password.
 728
 729         * http.c: Add support for --user and --password.
 730
 731         * init.c: Deprecated ftppasswd, httppasswd, login, passwd and
 732         proxypasswd commands.  Added ftppassword, ftpuser, httppassword,
 733         password, proxypassword and user commands.
 734
 735         * main.c: Renamed --ftp-passwd to --ftp-password.  Added --ftp-user,
 736         --http-password, --password, --proxy-password and --user.  Deprecated
 737         --http-passwd and --proxy-passwd.  Added documentation for new options
 738         and removed documentation for deprecated options in the help string.
 739
 740         * options.h (struct options): Added user and passwd members to handle
 741         --user and --password respectively.  Renamed ftp_acc and ftp_pass
 742         members to ftp_user and ftp_passwd for consistency.
 743
 744 2005-04-27  Hrvoje Niksic  <hniksic@xemacs.org>
 745
 746         * main.c (print_help): Advertise "DER", not "ASN1".
 747
 748 2005-04-27  Hrvoje Niksic  <hniksic@xemacs.org>
 749
 750         * openssl.c (init_prng): Disable the weak random seed by default.
 751
 752         * http.c (gethttp): Simplify SSL initialization; disable SSL when
 753         anything goes wrong with the initialization.
 754
 755         * options.h (struct options): New option opt.random_file.
 756
 757 2005-04-27  Hrvoje Niksic  <hniksic@xemacs.org>
 758
 759         * init.c: Wrap private key commands in IF_SSL.
 760
 761 2005-04-27  Hrvoje Niksic  <hniksic@xemacs.org>
 762
 763         * openssl.c (ssl_init): Ditto.
 764
 765         * options.h (struct options): Allow separate specification of key
 766         type and certificate type.
 767
 768         * init.c (cmd_spec_cert_type): Provide a "der" synonym for "asn1"
 769         certificate encoding.
 770
 771 2005-04-26  Hrvoje Niksic  <hniksic@xemacs.org>
 772
 773         * openssl.c: Renamed "gen_sslfunc.c" to "openssl.c" and
 774         "gen_sslfunc.h" to "openssl.h".  This reflects the intent of
 775         openssl.c encapsulating the OpenSSL-specific code.
 776
 777 2005-04-26  Hrvoje Niksic  <hniksic@xemacs.org>
 778
 779         * init.c: Renamed "closure" (a synonym for context in some
 780         cultures) to "place", which more accurately reflects the usage.
 781
 782 2005-04-26  Hrvoje Niksic  <hniksic@xemacs.org>
 783
 784         * gen_sslfunc.c (ssl_init): Use default locations for loading the
 785         certificate bundles.
 786         (ssl_init_prng): Disable the cryptographically weak PRNG
 787         initialization fallback.
 788
 789         * init.c: Renamed SSL command-line arguments and wgetrc commands.
 790         (defaults): Check the server certificate by default.
 791
 792 2005-04-26  Hrvoje Niksic  <hniksic@xemacs.org>
 793
 794         * cookies.c (cookie_handle_set_cookie): Delete the part of the
 795         path after the trailing slash.
 796
 797         * http.c (gethttp): Call cookie_handle_set_cookie with path that
 798         begins with '/'.
 799
 800 2005-04-26  Hrvoje Niksic  <hniksic@xemacs.org>
 801
 802         * http.c (gethttp): Call skip_short_body only if keep_alive is in
 803         use.
 804         (gethttp): Send the User-Agent header with the CONNECT request as
 805         well.
 806
 807 2005-04-25  Hrvoje Niksic  <hniksic@xemacs.org>
 808
 809         * main.c (option_data): Removed support for the undocumented flag
 810         --use-proxy.
 811
 812 2005-04-25  Hrvoje Niksic  <hniksic@xemacs.org>
 813
 814         * main.c (option_data): Don't treat -Y as a boolean switch; treat
 815         it as a value switch instead, so "-Y off" continues to work.
 816
 817 2005-04-24  Hrvoje Niksic  <hniksic@xemacs.org>
 818
 819         * utils.c (aprintf): Delete unreachable statement.
 820
 821 2005-04-24  Hrvoje Niksic  <hniksic@xemacs.org>
 822
 823         * host.c (cmp_prefer_ipv4): New function.
 824         (cmp_prefer_ipv6): New function.
 825         (lookup_host): Use the appropriate comparator according to
 826         opt.prefer_family.
 827
 828         * init.c: New option prefer_family.
 829
 830         * host.c (is_valid_ipv6_address): Spell NS_* constants in lower
 831         case to avoid clash with system headers.
 832         (lookup_host): Reorder the addresses so that IPv4 ones come first.
 833
 834         * utils.c (stable_sort): New function.
 835
 836 2005-04-24  Hrvoje Niksic  <hniksic@xemacs.org>
 837
 838         * connect.c (retryable_socket_connect_error): Return 0 for
 839         ENETUNREACH and EHOSTUNREACH.
 840
 841 2005-04-23  Hrvoje Niksic  <hniksic@xemacs.org>
 842
 843         * cmpt.c: Reenable the memmove implementation for systems that
 844         lack it.
 845
 846         * http.c (gethttp): Store the "authorized" state of the persistent
 847         connection.
 848         (request_remove_header): New function.
 849         (gethttp): Don't send the "Basic" authentication if the connection
 850         is already authorized.
 851
 852 2005-04-23  Hrvoje Niksic  <hniksic@xemacs.org>
 853
 854         * utils.c (base64_encode): Treat input as unsigned chars.
 855         Required for correct encoding of binary stuff.
 856
 857 2005-04-23  Hrvoje Niksic  <hniksic@xemacs.org>
 858
 859         * http-ntlm.c: Format the function definitions in an
 860         ansi2knr-friendly fashion.
 861
 862 2005-04-22  Hrvoje Niksic  <hniksic@xemacs.org>
 863
 864         * http.c (gethttp): Handle multiple WWW-Authentication headers,
 865         only one of which is recognized.  Those are sent by IIS with NTLM
 866         authorization.
 867         (create_authorization_line): Propagate information whether
 868         authorization is finished.
 869         (gethttp): Only stop authorization when it's really finished, not
 870         after fixed two steps.
 871
 872 2005-04-21  Hrvoje Niksic  <hniksic@xemacs.org>
 873
 874         * gen_sslfunc.c (ssl_init): Fix warning message text; mark the
 875         message as translatable.
 876
 877 2005-04-21  Hrvoje Niksic  <hniksic@xemacs.org>
 878
 879         * main.c (print_help): Print the EGD option outside the cluster of
 880         SSL options.
 881
 882 2005-04-21  Hrvoje Niksic  <hniksic@xemacs.org>
 883
 884         * http-ntlm.c (ntlm_output): Fix setting the domain.
 885         Suggested by Sami Krank.
 886
 887 2005-04-20  Mauro Tortonesi  <mauro@ferrara.linux.it>
 888
 889         * connect.c: Set IPV6_V6ONLY socket option when -6 switch is used.
 890
 891 2005-04-20  FUJISHIMA Satsuki  <sf@FreeBSD.org>
 892
 893         * http.c (request_set_header): Fix the check whether a new header
 894         needs to be allocated.
 895
 896 2005-04-18  Hrvoje Niksic  <hniksic@xemacs.org>
 897
 898         * utils.c (base64_encode): Use the parameter order that makes more
 899         sense.  Return the length of the base64 written.  Updated all
 900         callers.
 901
 902 2005-04-17  Hrvoje Niksic  <hniksic@xemacs.org>
 903
 904         * http.c (request_set_header): Free NAME when VALUE is NULL and
 905         freeing the header name is requested.
 906
 907 2005-04-17  Hrvoje Niksic  <hniksic@xemacs.org>
 908
 909         * snprintf.c (fmtstr): Declare VALUE as const char *.
 910         Based on patch by Russ Allbery.
 911
 912 2005-04-17  Hrvoje Niksic  <hniksic@xemacs.org>
 913
 914         * snprintf.c (fmtfp): More correct handling of significant digit
 915         count with %g -- 0.002 has one significant digit, not three.
 916
 917 2005-04-16  Hrvoje Niksic  <hniksic@xemacs.org>
 918
 919         * retr.c (fd_read_body): Respect read timeout with non-interactive
 920         or no progress gauge -- treat ETIMEDOUT specially only when
 921         progress_interactive.
 922         Reported by FUJISHIMA Satsuki.
 923
 924 2005-04-16  FUJISHIMA Satsuki  <sf@FreeBSD.org>
 925
 926         * http.c (gethttp): Don't use HTTP/1.0 persistent connections over
 927         proxy.
 928
 929 2005-04-16  Hrvoje Niksic  <hniksic@xemacs.org>
 930
 931         * snprintf.c: Use the PARAMS macro to handle prototypes.  Write
 932         function definitions in the ansi2knr-friendly way.
 933         (fmtstr): If string precision is specified, don't read VALUE past
 934         it.
 935         (dopr): Actually print %g and %e formats.
 936         (fmtfp): Fix a bug that caused 0.01 to be printed as 0.1.
 937         (fmtfp): Use LLONG in floating point conversions to be able to
 938         convert more digits.
 939         (fmtfp): Interpret precision as number of significant digits with
 940         %g.
 941         (fmtfp): Omit trailing decimal zeros with %g.
 942
 943         * snprintf.c: Don't include <ctype.h> because none of it is used.
 944         Include strings.h/string.h, as per Autoconf.
 945
 946 2005-04-15  Hrvoje Niksic  <hniksic@xemacs.org>
 947
 948         * ptimer.c: Use _POSIX_TIMERS - 0 > 0, which handles the case when
 949         _POSIX_TIMERS is defined but empty, as well as the case when it is
 950         undefined.  Do the same with the check for _POSIX_MONOTONIC_CLOCK.
 951         Suggested by Larry Jones.
 952
 953 2005-04-15  Hrvoje Niksic  <hniksic@xemacs.org>
 954
 955         * ptimer.c: Check that _POSIX_TIMERS is defined as well as > 0.
 956         Problem reported by Steven M. Schweda.
 957
 958 2005-04-14  Hrvoje Niksic  <hniksic@xemacs.org>
 959
 960         * http.c (skip_short_body): Print the skipped body data in debug
 961         mode.
 962         (skip_short_body): Don't skip more than 4k of body data.
 963         (skip_short_body): Return whether the skipping was successful.
 964         (gethttp): If skip_short_body failed, invalidate the connection.
 965
 966 2005-04-12  Gisle Vanem  <giva@bgnett.no>
 967
 968         * ftp.c (getftp): Ditto.
 969
 970         * http.c (gethttp): Open the output file in binary mode.
 971
 972 2005-04-11  Hrvoje Niksic  <hniksic@xemacs.org>
 973
 974         * hash.c: Conditionalize including config.h on HAVE_CONFIG_H
 975         instead of on STANDALONE.
 976
 977 2005-04-11  Hrvoje Niksic  <hniksic@xemacs.org>
 978
 979         * gen_sslfunc.c (ssl_print_errors): Made static.
 980         (ssl_print_errors): Eliminate potentially dangerous fixed-size
 981         error buffer.  Passing NULL to ERR_error_string causes it to use
 982         its own static buffer, which is fine for our purposes.
 983
 984         * gen_sslfunc.c: Include gen_sslfunc.h.  Make the declarations of
 985         ssl_init and ssl_conect match the actual definitions.
 986         (ssl_connect): Simply return a boolean, the SSL context is no
 987         longer useful as a return value.
 988
 989         * retr.c: Don't include SSL headers; we don't need them.
 990
 991 2005-04-11  Hrvoje Niksic  <hniksic@xemacs.org>
 992
 993         * config-post.h: Don't define _VA_LIST under Solaris; it breaks
 994         compilation with GCC 3.4 under Solaris 10.  (It was defined to
 995         avoid a warning with previous versions of GCC.)
 996
 997 2005-04-11  Hrvoje Niksic  <hniksic@xemacs.org>
 998
 999         * xmalloc.c (register_ptr): Warn the user to increase SZ prior to
1000         aborting.
1001
1002 2005-04-11  Hrvoje Niksic  <hniksic@xemacs.org>
1003
1004         * convert.c (convert_cleanup): Free converted_files.
1005
1006 2005-04-10  Hrvoje Niksic  <hniksic@xemacs.org>
1007
1008         * wget.h (DEBUGP): Use __builtin_expect to give a hint to GCC that
1009         opt.debug is false in the vast majority of cases.
1010
1011 2005-04-10  Hrvoje Niksic  <hniksic@xemacs.org>
1012
1013         * config-post.h: Declare alloca as void *, not char *.
1014
1015 2005-04-09  Hrvoje Niksic  <hniksic@xemacs.org>
1016
1017         * recur.c (download_child_p): When -p is used, (temporarily)
1018         ignore accept/reject rules for HTMLs, even when they are at the
1019         maximum recursion depth.  That is because with -p we are, if
1020         necessary, overstepping the max. depth to get the requisites.
1021
1022 2004-06-12  Larry Jones <lawrence.jones@ugsplm.com>
1023
1024         * recur.c (download_child_p): Correct the logic in check number 6:
1025         test opt.reclevel (not DEPTH) against INFINITE_RECURSION.
1026
1027 2005-04-09  Hrvoje Niksic  <hniksic@xemacs.org>
1028
1029         * url.c: Use "static const" in preference to "const static".
1030         Sun's cc warns that "storage class after type is obsolescent".
1031
1032         * url.c (urlchr_table): Don't mark ~ as unsafe, too many broken
1033         web sites are confused when ~ is changed to %7E.  Their servers
1034         redirect /%7Efoo/ to /~foo/, which Wget again accesses using %7E,
1035         causing further redirections, therefore looping infinitely.  See
1036         Debian bug #301624 for an example.
1037
1038 2005-04-09  Hrvoje Niksic  <hniksic@xemacs.org>
1039
1040         * alloca.c: Include wget.h to be able to use xmalloc.  In addition
1041         to defining malloc to xmalloc, also define free to xfree.
1042
1043 2005-04-09  Hrvoje Niksic  <hniksic@xemacs.org>
1044
1045         * http-ntlm.c (ntlm_output): Use "char", not "unsigned char" for
1046         ntlmbuf.  Our base64 functions accept char anyway.
1047         (ntlm_output): Join up the format string, since we nominally
1048         support K&R compilers.
1049         (ntlm_output): Ditto.
1050
1051 2005-04-08  Hrvoje Niksic  <hniksic@xemacs.org>
1052
1053         * ptimer.c: Use Windows timers under Cygwin, whose POSIX timer
1054         implementation is incomplete.
1055
1056 2005-04-08  Hrvoje Niksic  <hniksic@xemacs.org>
1057
1058         * ptimer.c (struct ptimer): Remove the unused initialized field.
1059
1060         * ptimer.c: Renamed function parameters from WT (which used to
1061         stand for wget_timer or wtimer) to PT.
1062
1063 2005-04-08  Hrvoje Niksic  <hniksic@xemacs.org>
1064
1065         * ptimer.c (posix_init): Be smarter about choosing clocks.  In
1066         decreasing order of preference, use CLOCK_MONOTONIC,
1067         CLOCK_HIGHRES, and CLOCK_REALTIME.
1068         (ptimer_allocate): Removed.
1069
1070         * ptimer.c: Refactor the code by cleanly separating the
1071         architecture-dependent code from the architecture-independent
1072         code.
1073
1074 2005-04-08  Hrvoje Niksic  <hniksic@xemacs.org>
1075
1076         * ptimer.c (ptimer_init): Explicitly check that
1077         _POSIX_MONOTONIC_CLOCK is *both* defined and >=0.  (Undefined
1078         symbols are >=0.)
1079
1080 2005-04-08  Hrvoje Niksic  <hniksic@xemacs.org>
1081
1082         * ptimer.c (ptimer_diff): Fix typo affecting Windows build.
1083
1084 2005-04-08  Hrvoje Niksic  <hniksic@xemacs.org>
1085
1086         * ptimer.c (ptimer_init): In fact, _POSIX_MONOTONIC_CLOCK needs to
1087         be >= 0.
1088
1089         * ptimer.c (ptimer_init): Check whether _POSIX_MONOTONIC_CLOCK is
1090         defined instead of whether it's greater than 0.  glibc defines it
1091         to 0, but still makes it available via sysconf.
1092
1093 2005-04-08  Hrvoje Niksic  <hniksic@xemacs.org>
1094
1095         * mswindows.c (str_to_int64): Rename OVERFLOW and UNDERFLOW to
1096         INT64_OVERFLOW and INT64_UNDERFLOW, since those names are used.
1097
1098 2005-04-07  Hrvoje Niksic  <hniksic@xemacs.org>
1099
1100         * ptimer.c: New file.  Move the "wtimer" functions from utils.c to
1101         this file and rename them to ptimer_.
1102
1103 2005-04-07  Hrvoje Niksic  <hniksic@xemacs.org>
1104
1105         * host.c (NO_ADDRESS): Define NO_ADDRESS only after the system
1106         headers have been included.
1107
1108 2005-04-06  Hrvoje Niksic  <hniksic@xemacs.org>
1109
1110         * http.c (pconn): Include NTLM data, which is per-connection.
1111         (known_authentication_scheme_p): Recognize NTLM authorization.
1112         (create_authorization_line): Call ntlm_input and ntlm_output.
1113
1114         * http-ntlm.c: New file, donated by Daniel Stenberg and originally
1115         written for curl, heavily modified for Wget.
1116
1117         * utils.c (base64_encode): Relocated from http.c, since it is now
1118         used by http-ntlm.c, and will possibly be used elsewhere.
1119         (base64_decode): New function, originally based on code from GNU
1120         recode.
1121
1122 2005-04-02  Hrvoje Niksic  <hniksic@xemacs.org>
1123
1124         * ftp.c (ftp_loop): Ditto.
1125
1126         * ftp-basic.c (ftp_pasv): Use the xzero shorthand for memset(0).
1127         (ftp_lpsv): Ditto.
1128
1129 2005-04-05  Mauro Tortonesi  <mauro@ferrara.linux.it>
1130
1131         * Makefile.in: removed string_t.c from list of source files.
1132
1133 2005-04-04  Mauro Tortonesi  <mauro@ferrara.linux.it>
1134
1135         * string_t.c: Removed.
1136
1137         * string_t.h: Removed.
1138
1139 2005-04-02  Hrvoje Niksic  <hniksic@xemacs.org>
1140
1141         * url.c (rewrite_shorthand_url): Only accept recognized schemes.
1142         That way "foo:80" will correctly be rewritten to "http://foo:80"
1143         instead of left unchanged and ultimately rejected because of
1144         "unsupported scheme foo".
1145
1146 2005-03-31  Hrvoje Niksic  <hniksic@xemacs.org>
1147
1148         * utils.c (number_to_string): Avoid explicit 64-bit constants;
1149         construct them by multiplication at compile-time.
1150
1151         * utils.c, elsewhere: Don't append "L" to 32-bit integer
1152         constants; we aren't really compilable on 16-bit systems anyway.
1153
1154         * hash.c (prime_size): Remove primes larger than 2^31, but include
1155         2^31-1, which is prime.
1156
1157 2005-03-30  Hrvoje Niksic  <hniksic@xemacs.org>
1158
1159         * utils.c (string_set_to_array): New function.
1160
1161         * convert.c: Replace the use of "slists" with sets/hash-tables,
1162         which in fact suit the intended purpose much better.
1163         downloaded_html_list is removed altogether.
1164
1165 2005-03-29  Hrvoje Niksic  <hniksic@xemacs.org>
1166
1167         * ftp.h (enum): Rename GLOBALL, GETALL, and GETONE to
1168         GLOB_GLOBALL, GLOB_GETALL, and GLOB_GETONE to avoid conflict with
1169         Linux headers.
1170
1171 2005-03-29  Hrvoje Niksic  <hniksic@xemacs.org>
1172
1173         * utils.c (numdigit): More correct handling of negative numbers.
1174
1175 2005-03-21  Hrvoje Niksic  <hniksic@xemacs.org>
1176
1177         * http.c (gethttp): Print the human-readable size.
1178
1179         * ftp.c (getftp): Print the human-readable size of the file to be
1180         downloaded.
1181
1182         * utils.c (human_readable): New function.
1183
1184         * utils.c: Renamed "legible" to "with_thousand_seps",
1185         "legible_large_int" to "with_thousand_seps_large", and "legible_1"
1186         to "add_thousand_seps".
1187
1188 2005-03-21  Hrvoje Niksic  <hniksic@xemacs.org>
1189
1190         * http.c (gethttp): Inhibit persistent connections when talking to
1191         proxies, as mandated by RFC 2068.
1192
1193 2005-03-20  Hrvoje Niksic  <hniksic@xemacs.org>
1194
1195         * url.c (unescape_single_char): New function.
1196         (url_escape_dir): Use it to unescape slashes in directory
1197         components.
1198         (url_string): Escape unsafe chars in host name, except for the ':'
1199         charaters, which can appear in IPv6 addresses.
1200
1201         * main.c (main): Don't access the cookie jar directly.
1202
1203         * log.c (escnonprint_internal): Correctly calculate the needed
1204         string size.  Don't forget the buffer's new size after having
1205         reallocated it.
1206         (log_cleanup): New function.  Free the escnonprint ring data.
1207
1208         * init.c (cleanup): Don't free the cookie jar explicitly, it is
1209         now done by http_cleanup.
1210         (cleanup): opt.user_headers is now a vector, free it with
1211         free_vec.
1212
1213         * http.c (gethttp): Make sure to free the request data, the status
1214         message, and the response data before returning from the function.
1215         (save_cookies): New function.
1216         (http_cleanup): Free the cookie jar here.
1217
1218         * hash.c: Renamed string_hash to hash_string and ptrhash to
1219         hash_pointer.  Exported hash_pointer.
1220
1221         * xmalloc.c: Organized malloc_table (previously malloc_debug) as a
1222         simple EQ hash table.  register_ptr and unregister_ptr are now of
1223         O(1) complexity.
1224
1225         * xmalloc.c: Renamed "*_debug" to debugging_* and "*_real" to
1226         checking_*.
1227
1228 2005-03-12  Hrvoje Niksic  <hniksic@xemacs.org>
1229
1230         * utils.c (debug_test_md5): Moved to gen-md5.c.
1231
1232         * mswindows.h: Don't declare inet_ntop, since we don't use it.
1233
1234         * mswindows.h: For consistency, also wrap closesocket, it being
1235         a Winsock call.
1236
1237         * mswindows.h: Don't declare sleep and usleep; we're defining
1238         xsleep now.
1239
1240         * mswindows.h (mkdir): Don't special-case Borland C, _mkdir
1241         works there as well.
1242
1243         * host.c: Don't include winsock header files; the correct ones
1244         are already included by mswindows.h.
1245
1246         * mswindows.c (xsleep): Round toward the nearest millisecond
1247         in an attempt to avoid average short sleeps.
1248
1249         * utils.c (wtimer_granularity): Report correct values for
1250         Windows timers and for high-resolution timers.
1251
1252         * utils.c (wtimer_initialize_once): New function, called to
1253         initialize the timer frequency.
1254
1255         * utils.c: Replace the use of GetSystemTime with high-resolution
1256         counters under Windows.  When high-resolution counters are
1257         unavailable, use GetTickCount().
1258
1259 2005-03-15  Hrvoje Niksic  <hniksic@xemacs.org>
1260
1261         * retr.c (fd_read_body): Undo the 2004-11-18 change.  Instead,
1262         always be "exact".
1263
1264 2005-03-17  Hrvoje Niksic  <hniksic@xemacs.org>
1265
1266         * ftp-basic.c (ftp_login): Don't free the string if ftp_response
1267         returned an error status because the line didn't get allocated in
1268         the first place.
1269
1270 2005-03-15  Hrvoje Niksic  <hniksic@xemacs.org>
1271
1272         * http.c (read_http_response_head): Limit the response size to 64k
1273         bytes.
1274
1275         * retr.c (fd_read_hunk): Accept a MAXSIZE argument that limits the
1276         number of bytes the function is allowed to allocate.
1277         (fd_read_line): Limit the line to 4096 bytes.
1278
1279 2005-03-12  Hrvoje Niksic  <hniksic@xemacs.org>
1280
1281         * wget.h: Include options.h after wgint has been defined.
1282
1283         * options.h (struct options): Declare options processed with
1284         cmd_bytes as wgint, not long.
1285
1286 2005-03-18  Hrvoje Niksic  <hniksic@xemacs.org>
1287
1288         * init.c (cmd_file): Use concat_strings.
1289
1290         * http.c (basic_authentication_encode): Use concat_strings.
1291
1292         * ftp-ls.c (ftp_index): Use concat_strings.
1293
1294         * ftp-basic.c (ftp_request): Use concat_strings.
1295
1296         * utils.c (concat_strings): New function.
1297
1298 2005-03-12  Hrvoje Niksic  <hniksic@xemacs.org>
1299
1300         * init.c (simple_atof): Handle negative numbers; skip whitespace
1301         before the number.
1302         (simple_atoi): Ditto.  Also, check for overflow and underflow.
1303         (cmd_number): Bail out on negative numbers.
1304         (parse_bytes_helper): Ditto.
1305
1306 2005-03-06  Hrvoje Niksic  <hniksic@xemacs.org>
1307
1308         * http.c (gethttp): Handle multiple Set-Cookie headers sent by
1309         remote server.
1310
1311 2005-03-06  Hrvoje Niksic  <hniksic@xemacs.org>
1312
1313         * init.c (defaults): Use passive FTP by default.
1314
1315 2005-03-06  Hrvoje Niksic  <hniksic@xemacs.org>
1316
1317         * mswindows.c: Provide wrappers to Winsock functions that set
1318         errno to WSAGetLastError() in case of failure.  Also provide a
1319         Windows-specific version of strerror.
1320
1321         * mswindows.h: Wrap calls to socket, bind, connect, recv, send,
1322         select, getsockname, getpeername, and setsockopt.
1323
1324 2005-03-06  Hrvoje Niksic  <hniksic@xemacs.org>
1325
1326         * url.c (url_parse): Reject port numbers larger than 65535.  We
1327         also check for overflow while parsing port numbers.
1328
1329 2005-03-06  Hrvoje Niksic  <hniksic@xemacs.org>
1330
1331         * utils.c (read_file): Don't use wgint for file size; LFS won't
1332         work since the file is mmap'ed as a whole.
1333
1334         * options.h: Don't include stdio.h.
1335
1336         * log.c: Ditto.
1337
1338         * init.c: Disambiguate assignment from non-zero test to avoid
1339         Borland C warning.
1340
1341         * http.c (response_new): Don't needlessly post-increment count.
1342
1343         * hash.c: Include stdio.h.
1344
1345         * gnu-md5.h: Don't include stdio.h.
1346
1347         * getopt.h (struct option): Always use const.
1348
1349         * ftp.c (getftp): Avoid unnecessary assignment to RES to avoid
1350         Borland C warning.
1351
1352         * ftp-ls.c: Disambiguate assignment from non-zero test to avoid
1353         Borland C warning.
1354
1355         * cmpt.c (strptime_internal): Don't initialize rp_backup when
1356         !_NL_CURRENT to avoid Borland C warning.
1357
1358 2005-03-06  Hrvoje Niksic  <hniksic@xemacs.org>
1359
1360         * utils.c (fopen_excl): Fix parse error when O_BINARY is
1361         available.
1362
1363 2005-03-05  Hrvoje Niksic  <hniksic@xemacs.org>
1364
1365         * url.c (url_file_name): Don't allow hosts named ".." to be
1366         appended as path elements.
1367
1368 2005-03-03  Hrvoje Niksic  <hniksic@xemacs.org>
1369
1370         * retr.c (retrieve_url): Escape location header.
1371
1372         * http.c (print_server_response_1): Escape server response when
1373         printing it.
1374         (gethttp): Escape host name, status message, location header, and
1375         content type.
1376         (http_loop): Escape error message from server.
1377
1378         * host.c (lookup_host): Escape host name when printing it.
1379
1380         * ftp.c (getftp): Escape user name when printing it.
1381         (getftp): Escape remote file and directory for printing.
1382         (getftp): Escape server listing when printing it.
1383         (ftp_retrieve_list): Escape link name and file name.
1384         (ftp_retrieve_glob): Escape file name.
1385
1386         * ftp-basic.c (ftp_response): Escape server response when printing
1387         it.
1388
1389         * cookies.c (parse_set_cookies): Escape the cookie field when
1390         printing it.
1391         (parse_set_cookies): Escape contents of remote header.
1392         (cookie_handle_set_cookie): Escape host name and cookie domain.
1393
1394         * connect.c (connect_to_ip): Escape the host name.
1395
1396         * log.c (escnonprint): New function, used for printing strings
1397         coming from the server that possibly contain non-ASCII characters.
1398         (escnonprint_uri): Ditto.
1399
1400 2005-02-24  Hrvoje Niksic  <hniksic@xemacs.org>
1401
1402         * ftp.c (getftp): Ditto.
1403
1404         * http.c (gethttp): When we're not supposed to overwrite files,
1405         use fopen_excl to open the file and recompute the file name.
1406
1407         * log.c (redirect_output): Use unique_create to avoid a race
1408         condition.
1409
1410         * mswindows.c (fake_fork_child): Use unique_create.
1411
1412         * utils.c (fopen_excl): New function that opens a stdio stream
1413         with the O_EXCL flag (where available).
1414         (unique_create): New function, like unique_name, but also creating
1415         the file and returning a file pointer.
1416         (fork_to_background): Use unique_create to create the file
1417         immediately to avoid race condition with multiple instances of
1418         wget -b.
1419
1420 2005-02-24  Hrvoje Niksic  <hniksic@xemacs.org>
1421
1422         * host.c (lookup_host): Test for AI_ADDRCONFIG directly, instead
1423         of checking for HAVE_GETADDRINFO_AI_ADDRCONFIG.
1424
1425 2005-02-23  Hrvoje Niksic  <hniksic@xemacs.org>
1426
1427         * host.c (is_valid_ipv6_address): Move here from url.c.
1428         (lookup_host): If the address is numeric, don't print the
1429         "resolving..." line, don't set up DNS timeouts, and set the
1430         AI_NUMERICHOST hint, where available.
1431
1432 2005-02-26  Gisle Vanem  <giva@bgnett.no>
1433
1434         * utils.c: Use the nnnLL syntax under GCC.  Define struct_stat to
1435         struct _stati64 under __MINGW32__ as well as under MS VC.
1436
1437 2005-02-26  Hrvoje Niksic  <hniksic@xemacs.org>
1438
1439         * utils.c: Use the nnnI64 syntax for __int64 constants under all
1440         Windows compilers.
1441         (SPRINTF_WGINT): Use "%I64" under all Windows compilers.
1442
1443         * mswindows.h (WGINT_MAX): Use the nnnI64 syntax for
1444         __int64 constants under all Windows compilers.
1445         (struct_stat): Use `struct stati64' under Borland C.
1446         (fstat): Don't redefine to _fstati64 under Borland.
1447
1448         * mswindows.c: Define str_to_int64 under Borland C as well as
1449         under (older) Visual C.
1450
1451 2005-02-25  Hrvoje Niksic  <hniksic@xemacs.org>
1452
1453         * ftp.c (getftp): Initialize err to suppress compiler warning.
1454
1455 2005-02-24  Hrvoje Niksic  <hniksic@xemacs.org>
1456
1457         * ftp.c (ftp_expected_bytes): Fix bug that caused infloop because
1458         of not correctly skipping the '(' character.
1459
1460 2005-02-24  Hrvoje Niksic  <hniksic@xemacs.org>
1461
1462         * mswindows.c (wget_ftello): Removed.
1463
1464         * mswindows.h: Remove bogus definition of stat.
1465         (wget_ftello): Remove the leftover ftello replacement.
1466
1467 2005-02-20  Hrvoje Niksic  <hniksic@xemacs.org>
1468
1469         * mswindows.c (wget_ftello): Wget's replacement for ftello.
1470
1471         * utils.c (file_size): Use ftello where available.
1472
1473         * ftp-ls.c (ftp_parse_unix_ls): Use str_to_wgint to parse the file
1474         size.
1475         (ftp_parse_winnt_ls): Ditto.
1476
1477         * ftp-basic.c (ftp_size): Use str_to_wgint to convert number to
1478         wgint; pass 10 instead of 0 as the BASE argument.
1479
1480         * ftp.c (ftp_expected_bytes): Use str_to_wgint to parse the file
1481         size.
1482
1483         * sysdep.h (LARGE_INT_FMT): Use __int64 as LARGE_INT on
1484         MSVC/Windows; print it with "%I64".
1485
1486         * wget.h: Define a `wgint' type, normally aliased to (the possibly
1487         64-bit variant of) off_t.
1488
1489         * all: Use `wgint' instead of `long' for numeric variables that
1490         can hold file sizes.
1491
1492         * utils.c (number_to_string): Support printing of `wgint'
1493         argument.
1494         (number_to_static_string): New function.
1495
1496         * all: Replace printf("%ld", long_value) with printf("%s",
1497         number_to_static_string(wgint_value)).
1498
1499 2005-02-18  Mauro Tortonesi <mauro@ferrara.linux.it>
1500
1501         * main.c: Added the --ftp-passwd command line option.
1502
1503         * init.c: Renamed command passwd to ftppasswd.
1504
1505 2005-02-11  Mauro Tortonesi <mauro@ferrara.linux.it>
1506
1507         * string_t.c: Fixed a bug in do_escape and triggered escape of
1508         backslashes in string_escape to avoid ambiguities in the result
1509         string.
1510
1511 2005-02-10  Mauro Tortonesi <mauro@ferrara.linux.it>
1512
1513         * string.h: Renamed to string_t.h to fix a compilation conflict
1514         with the string.h header in the standard C library.
1515
1516         * string.c: Renamed to string_t.c for consistency with string.h.
1517
1518         * string_t.c: Ditto.
1519
1520         * string_t.h: Ditto.
1521
1522 2004-12-31  Mauro Tortonesi <mauro@ferrara.linux.it>
1523
1524         * string.c: New file.
1525
1526         * string.h: New file.
1527
1528         * Makefile.in: Added string.c to the list of modules to compile.
1529
1530         * main.c: Updated copyright.
1531
1532 2004-11-18  Ulf Harnhammar <ulf.harnhammar.9485@student.uu.se>
1533
1534         * ftp-ls.c: Fixed a problem in ftp_parse_winnt_ls that could allow a
1535         malicious remote FTP server to crash wget.
1536
1537 2004-11-18  Hans-Andreas Engel <engel@node.ch>
1538
1539         * http.c: Enable --convert-links (-k) when a single page is downloaded
1540         via --output-document (-O).
1541
1542 2004-11-18  Mauro Tortonesi <mauro@deepspace6.net>
1543
1544         * connect.c: Minor correction to the comment in front of fd_peek.
1545
1546 2004-11-18  Leonid Petrov <nouser@lpetrov.net>
1547
1548         * retr.c: Fix a timeout problem in fd_read_body when using http_proxy.
1549
1550 2004-11-15  YAMAZAKI Makoto <Yamazaki.Makoto@fujixerox.co.jp>
1551
1552         * netrc.c: Fix termination by assertion bug in netrc parsing.
1553
1554 2004-05-09  David Fritz  <zeroxdf@att.net>
1555
1556         * mswindows.c (fake_fork): Pass entire command line to the child
1557         process.
1558
1559 2004-03-31  Hrvoje Niksic  <hniksic@xemacs.org>
1560
1561         * http.c (gethttp): Fix typo: SCHEME_SSL -> SCHEME_HTTPS.
1562
1563 2004-03-30  Hrvoje Niksic  <hniksic@xemacs.org>
1564
1565         * http.c (gethttp): Send the Proxy-Authorization header over
1566         non-SSL connections too.
1567
1568 2004-03-25  David Fritz  <zeroxdf@att.net>
1569
1570         * mswindows.c (fake_fork_child): Ignore error code when
1571         OpenFileMapping() fails; assume it failed because the object does
1572         not exist.
1573
1574 2004-03-24  David Fritz  <zeroxdf@att.net>
1575
1576         * mswindows.c (fake_fork): New function.
1577
1578         * mswindows.c (fork_to_background): Use it.
1579
1580 2004-03-19  David Fritz  <zeroxdf@att.net>
1581
1582         * mswindows.c (ws_hangup): Incorporate old fork_to_background()
1583         code.  Add event name argument.
1584         (fork_to_backgorund): Now a simple wrapper around ws_hangup().
1585         (ws_handler): Correctly handle the case when neither CTRLC_BACKGND
1586         nor CTRLBREAK_BACKGND are defined.  Don't bother handling close,
1587         logoff, or shutdown events.  Call ws_hangup() with the correct
1588         event name; don't assume it was CTRL+Break.
1589
1590 2004-03-19  Hrvoje Niksic  <hniksic@xemacs.org>
1591
1592         * url.c (url_parse): Decode %HH sequences in host name.
1593
1594 2004-03-04  Hrvoje Niksic  <hniksic@xemacs.org>
1595
1596         * convert.c (local_quote_string): Quote "#" as "%23" and "%" as
1597         "%25" when creating links to local files.
1598
1599 2004-03-02  David Fritz  <zeroxdf@att.net>
1600
1601         * mswindows.c (ws_percenttitle): Guard against future changes by
1602         doing nothing if the proper variables have not been initialized.
1603         Clamp percentage value.
1604
1605 2004-03-04  Gisle Vanem  <giva@bgnett.no>
1606
1607         * retr.c (fd_read_body): Don't change console title if quiet.
1608
1609 2004-02-25  David Fritz  <zeroxdf@att.net>
1610
1611         * mswindows.c (set_sleep_mode): Remove argument and return value.
1612         Call GetModuleHandle() instead of LoadLibrary()/FreeLibrary() for
1613         kernel32.dll.  Use typedef for function-pointer.  Don't cast
1614         l-value.  Don't use dereference operator when calling through
1615         function-pointer.
1616         (ws_startup): Update call to set_sleep_mode().
1617         (ws_cleanup): Remove call to set_sleep_mode().
1618
1619 2004-02-23  David Fritz  <zeroxdf@att.net>
1620
1621         * http.c (http_loop): Ditto.
1622
1623         * ftp.c (ftp_loop_internal): Update call to ws_changetitle().
1624
1625         * main.c (main): Don't bother calling ws_changetitle().
1626
1627         * mswindows.h (ws_changetitle): Update prototype.
1628
1629         * mswindows.c (ws_changetitle): Remove second argument.  Use
1630         xfree_null().
1631         (ws_percenttitle): Only update title when percentage has changed.
1632
1633 2004-02-23  David Fritz  <zeroxdf@att.net>
1634
1635         * mswindows.h: Ditto.
1636
1637         * mswindows.c: Misc. formatting/comment tweaks throughout.
1638
1639 2004-02-20  David Fritz  <zeroxdf@att.net>
1640
1641         * main.c (print_help): Remove call to ws_help().
1642
1643         * mswindows.c (ws_help): Remove.
1644
1645         * mswindows.h (ws_help): Remove.
1646
1647 2004-02-16  David Fritz  <zeroxdf@att.net>
1648
1649         * init.c (home_dir): Use aprintf() instead of xmalloc()/sprintf().
1650         Under Windows, if $HOME is not defined, use the directory that
1651         contains the Wget binary instead of hard-coded `C:\'.
1652         (wgetrc_file_name): Under Windows, look for $HOME/.wgetrc then, if
1653         not found, look for wget.ini in the directory of the Wget binary.
1654
1655         * mswindows.c (ws_mypath): Employ slightly more robust methodology.
1656         Strip trailing path separator.
1657
1658 2004-02-06  Hrvoje Niksic  <hniksic@xemacs.org>
1659
1660         * http.c (gethttp): Respect --ignore-length.
1661         (gethttp): Inhibit keep-alive if --ignore-length is specified.
1662
1663 2004-02-06  Hrvoje Niksic  <hniksic@xemacs.org>
1664
1665         * connect.c (sockaddr_set_data): Zero out
1666         sockaddr_in/sockaddr_in6.  Apparently BSD-derived stacks need this
1667         when binding a socket to local address.
1668
1669 2004-02-04  Hrvoje Niksic  <hniksic@xemacs.org>
1670
1671         * hash.c: Make the file compilable outside Wget source tree when
1672         -DSTANDALONE is used.
1673
1674 2004-01-29  Hrvoje Niksic  <hniksic@xemacs.org>
1675
1676         * utils.c (determine_screen_width): Return 0 if not running on
1677         Windows or on a TIOCGWINSZ-capable system.
1678
1679 2004-01-28  David Fritz  <zeroxdf@att.net>
1680
1681         * utils.c (determine_screen_width): Correctly determine console
1682         width under Windows.
1683
1684 2004-01-28  Christian Biere  <christianbiere@gmx.de>
1685
1686         * progress.c (bar_set_params): Fixed syntax error when HAVE_ISATTY
1687         was undefined.
1688
1689         * ftp.c (ftp_loop_internal): Allocate a larger buffer in case
1690         "try" gets translated to something large.  Ditto in http_loop in
1691         http.c.
1692
1693         * http.c (response_header_copy): Don't write to buf[BUFSIZE].
1694
1695         * ftp-opie.c (skey_response): Eliminate unnecessary string
1696         concatenation; just call gen_md5_update twice.
1697
1698 2004-01-25  Hrvoje Niksic  <hniksic@xemacs.org>
1699
1700         * utils.c (xsleep): Don't call usleep with values larger than
1701         1,000,000.
1702
1703 2003-12-16  Hrvoje Niksic  <hniksic@xemacs.org>
1704
1705         * http.c (gethttp): Fix generation of `Content-Length'.
1706
1707 2003-12-15  Gisle Vanem  <giva@bgnett.no>
1708
1709         * url.c (url_skip_credentials): Fixed return value; 'url' if no
1710         credentials.
1711
1712 2003-12-14  Hrvoje Niksic  <hniksic@xemacs.org>
1713
1714         * url.c (url_skip_credentials): Return a pointer directly.
1715
1716 2003-12-14  Hrvoje Niksic  <hniksic@xemacs.org>
1717
1718         * url.c (url_file_name): Ditto.
1719         (parse_errors): Ditto.
1720
1721         * retr.c (retr_rate): Ditto.
1722
1723         * progress.c (create_image): Ditto.
1724
1725         * netrc.c (parse_netrc): Ditto.
1726
1727         * main.c (struct cmdline_option): Ditto.
1728         (redirect_output_signal): Ditto.
1729
1730         * init.c (commands): Ditto.
1731
1732         * ftp-ls.c (ftp_index): Ditto.
1733
1734         * cookies.c (check_domain_match): Declare the pointer to a literal
1735         string as `const'.
1736
1737 2003-12-12  Hrvoje Niksic  <hniksic@xemacs.org>
1738
1739         * retr.c (fd_read_body): Pass total size to progress_create, not
1740         the remaining amount.
1741
1742 2003-12-12  Hrvoje Niksic  <hniksic@xemacs.org>
1743
1744         * retr.c (fd_read_body): Don't fiddle with "interactive timeout"
1745         if read timeout is unset.
1746
1747 2003-12-12  Hrvoje Niksic  <hniksic@xemacs.org>
1748
1749         * connect.c (bind_local): Don't set the IPV6_V6ONLY option on the
1750         socket.
1751
1752 2003-12-06  Hrvoje Niksic  <hniksic@xemacs.org>
1753
1754         * url.c (url_file_name): Respect the setting of
1755         opt.protocol_directories.
1756
1757         * main.c (main): Only check for ret=='?' when longindex is unset.
1758         (option_data): New option --protocol-directories.
1759
1760 2003-12-06  Hrvoje Niksic  <hniksic@xemacs.org>
1761
1762         * ftp.c (getftp): Ditto.
1763
1764         * http.c (gethttp): Correctly calculate bandwidth as total data
1765         read divided with download time.
1766
1767         * retr.c (fd_read_body): Separate the return values for data
1768         written and read.
1769
1770 2003-12-05  Hrvoje Niksic  <hniksic@xemacs.org>
1771
1772         * http.c (H_REDIRECTED): Respect the HTTP/1.1 "303 See Other"
1773         response code.
1774         Suggested by Dan Razzell.
1775
1776 2003-11-30  Hrvoje Niksic  <hniksic@xemacs.org>
1777
1778         * retr.c (fd_read_body): Report the amount of data *written* as
1779         amount_read.  This is not entirely logical, but that's what the
1780         callers expect, and it's not easy to change.
1781
1782         * ftp.c (ftp_loop_internal): Ditto.
1783
1784         * http.c (http_loop): Be smarter about assigning restval; if we're
1785         in the nth pass of a download, simply use the information we have
1786         about how much data has been retrieved as restval.
1787
1788         * ftp.c (getftp): Ditto for FTP "REST" command.
1789
1790         * http.c (gethttp): When the server doesn't respect range, skip
1791         the first RESTVAL bytes of the read body.  Never truncate the
1792         output file.
1793
1794         * retr.c (fd_read_body): Support skipping initial STARTPOS octets.
1795
1796 2003-11-30  Hrvoje Niksic  <hniksic@xemacs.org>
1797
1798         * http.c (skip_short_body): Renamed skip_body to skip_short_body;
1799         don't bother calling fd_read_body.
1800
1801 2003-11-30  Hrvoje Niksic  <hniksic@xemacs.org>
1802
1803         * retr.c (fd_read_body): Sanitize arguments and document them
1804         better.  Make sure the timer is created and updated only if
1805         necessary.  Updated callers.
1806
1807 2003-11-30  Hrvoje Niksic  <hniksic@xemacs.org>
1808
1809         * http.c (skip_body): New function.
1810         (gethttp): Use it to skip the body of the responses we don't care
1811         to download.  That allows us to reuse the connection.
1812         (gethttp): Trust that the HEAD requests will not generate body
1813         data.
1814
1815         * retr.c (fd_read_body): Don't write to OUT if it's NULL.
1816
1817 2003-11-29  Hrvoje Niksic  <hniksic@xemacs.org>
1818
1819         * http.c (gethttp): Initialize SSL only the first time when SSL
1820         URL is downloaded.
1821
1822 2003-11-29  Hrvoje Niksic  <hniksic@xemacs.org>
1823
1824         * cookies.c (cookie_header): Only generate the contents of the
1825         header, not the leading "Cookie: " or the trailing "\r\n".
1826
1827         * http.c (gethttp): When adding headers specified with `--header',
1828         allow them to override the headers generated by Wget.
1829
1830         * init.c (cmd_spec_header): Made opt.user_headers a vector.
1831
1832         * http.c (request_new): New function.  Returns a request structure
1833         which can be modified in various ways, most notably by adding HTTP
1834         headers to the request.
1835         (request_set_header): New function for adding the header to the
1836         request.  If the header is already available, it gets replaced.
1837         (request_send): Construct and send the request.
1838         (gethttp): Use the request_* functions to generate the request.
1839
1840 2003-11-28  Hrvoje Niksic  <hniksic@xemacs.org>
1841
1842         * http.c (gethttp): Don't include the Proxy-Authorization header
1843         in the request tunneled through proxy.
1844
1845 2003-11-28  Hrvoje Niksic  <hniksic@xemacs.org>
1846
1847         * http.c (gethttp): Use the CONNECT handle to establish SSL
1848         passthrough through non-SSL proxies.
1849
1850 2003-11-28  Hrvoje Niksic  <hniksic@xemacs.org>
1851
1852         * init.c: Don't #include netinet/Winsock stuff.
1853
1854 2003-11-28  Hrvoje Niksic  <hniksic@xemacs.org>
1855
1856         * http.c: Deleted the old functions header_process,
1857         header_extract_number, header_exists, header_strdup,
1858         http_process_range, http_process_none, http_process_type, and
1859         http_process_connection.
1860
1861         * http.c (response_new): New function.
1862         (response_header_bounds): Ditto.
1863         (response_header_copy): Ditto.
1864         (response_header_strdup): Ditto.
1865         (response_status): Ditto.
1866         (gethttp): Use the new response_* functions to parse the response.
1867         Support HTTP/0.9 responses.
1868
1869 2003-11-27  Hrvoje Niksic  <hniksic@xemacs.org>
1870
1871         * progress.c (create_image): Don't calculate ETA if nothing has
1872         been downloaded yet, because it causes division by zero.
1873
1874 2003-11-27  Hrvoje Niksic  <hniksic@xemacs.org>
1875
1876         * connect.c (bind_local): Rename sa_len to addrlen because IRIX
1877         headers define sa_len as a macro.
1878
1879 2003-11-26  Hrvoje Niksic  <hniksic@xemacs.org>
1880
1881         * html-parse.c (convert_and_copy): Remove embedded newlines when
1882         AP_TRIM_BLANKS is specified.
1883
1884 2003-11-26  Hrvoje Niksic  <hniksic@xemacs.org>
1885
1886         * ftp.c: Set con->csock to -1 where rbuf_uninitialize was
1887         previously used.
1888
1889 2003-11-26  Hrvoje Niksic  <hniksic@xemacs.org>
1890
1891         * Makefile.in (http$o): Added the trailing backslash that was
1892         missing.
1893
1894 2003-11-21  Hrvoje Niksic  <hniksic@xemacs.org>
1895
1896         * headers.c: Removed.  The file is no longer relevant, now that no
1897         special handling of headers is done by the rbuf code.  Moved
1898         portions to http.c.
1899
1900 2003-11-21  Hrvoje Niksic  <hniksic@xemacs.org>
1901
1902         * rbuf.c: Removed.
1903
1904         * ftp-basic.c (ftp_response): Use fd_read_line.  No longer use
1905         struct rbuf.  Updated all callers.
1906
1907         * http.c (gethttp): Use fd_read_head to read all the headers in
1908         one go.
1909         (next_header): New function.
1910
1911         * retr.c (fd_read_line): New function: reads a line from FD,
1912         leaving the rest of the data unread.
1913         (fd_read_head): New function.
1914
1915         * connect.c (fd_peek): New function, implements peeking.
1916         (poll_internal): New function.
1917         (fd_read): Use it.
1918         (fd_write): Ditto.
1919         (fd_peek): Ditto.
1920         (fd_register_transport): Allow registering a "peeker" callback.
1921
1922 2003-11-20  Hrvoje Niksic  <hniksic@xemacs.org>
1923
1924         * connect.c: Renamed xread/xwrite/xclose to
1925         fd_read/fd_write/fd_close.  The "x" prefix is not appropriate
1926         because the semantics have diverged from read/write/close too
1927         significantly.  Updated all callers.
1928
1929 2003-11-20  Hrvoje Niksic  <hniksic@xemacs.org>
1930
1931         * connect.c (sock_write): It's not necessary to initialize RES.
1932
1933 2003-11-19  Hrvoje Niksic  <hniksic@xemacs.org>
1934
1935         * main.c (main): Don't reference opt.ipv4_only and opt.ipv6_only
1936         if IPv6 is disabled.
1937
1938 2003-11-19  Hrvoje Niksic  <hniksic@xemacs.org>
1939
1940         * connect.c (socket_has_inet6): Only compile it if IPv6 is enabled
1941         and AI_ADDRCONFIG is missing.
1942
1943 2003-11-18  Hrvoje Niksic  <hniksic@xemacs.org>
1944
1945         * gen_sslfunc.c (ssl_init_prng): Warn the user when using a weak
1946         random seed.
1947
1948 2003-11-18  Hrvoje Niksic  <hniksic@xemacs.org>
1949
1950         * host.c (address_list_contains): Renamed address_list_find to
1951         address_list_contains because its result is boolean.
1952
1953 2003-11-18  Hrvoje Niksic  <hniksic@xemacs.org>
1954
1955         * connect.c (select_fd): Return 1 if select is not available.
1956
1957 2003-11-17  Hrvoje Niksic  <hniksic@xemacs.org>
1958
1959         * connect.c (connect_to_host): Don't reference address list after
1960         releasing it.
1961
1962 2003-11-17  Hrvoje Niksic  <hniksic@xemacs.org>
1963
1964         * main.c (print_help): Fix alignment of FTP options output.
1965
1966 2003-11-17  Hrvoje Niksic  <hniksic@xemacs.org>
1967
1968         * host.c (lookup_host): Check for the ability to create IPv6
1969         sockets here.
1970
1971         * init.c (defaults): Don't auto-set --inet4-only on IPv6-less
1972         systems.
1973
1974 2003-11-16  Hrvoje Niksic  <hniksic@xemacs.org>
1975
1976         * main.c (print_help): Fix typo in `-O' help message.  Fix docs of
1977         -Y/--proxy.  Fix docs of `--cookies' and `--glob'.  Improve docs
1978         of --convert-links.  Fix docs of SSL options.
1979
1980 2003-11-16  Hrvoje Niksic  <hniksic@xemacs.org>
1981
1982         * ftp-basic.c: Don't include <arpa/inet.h> and others because
1983         they're no longer needed.
1984
1985 2003-11-16  Hrvoje Niksic  <hniksic@xemacs.org>
1986
1987         * main.c (main): Don't allow setting of both opt.ipv4_only and
1988         opt.ipv6_only.
1989
1990         * init.c (defaults): Mark opt.ipv4_only specially when set
1991         automatically.
1992
1993 2003-11-15  Hrvoje Niksic  <hniksic@xemacs.org>
1994
1995         * host.c (lookup_host): Use AI_ADDRCONFIG only if the family is
1996         unspecified.  This ensures that specifying `--no-inet4' on systems
1997         where IPv6 resolves, but doesn't work behaves the same regardless
1998         of the availability of AI_ADDRCONFIG.
1999
2000 2003-11-15  Hrvoje Niksic  <hniksic@xemacs.org>
2001
2002         * host.c: Don't refer to the now-removed function
2003         forget_host_lookup in the documentation of lookup_host.
2004
2005 2003-11-15  Hrvoje Niksic  <hniksic@xemacs.org>
2006
2007         * http.c (persistent_available_p): Correctly specify the endpoint
2008         argument to socket_ip_address.
2009         (gethttp): When printing the "reusing connection to..." message,
2010         specify the host name of the reused connection, not the current
2011         host name.  That makes more sense because it provides a useful
2012         piece of information -- we know to which host we're supposed to
2013         connect anyway!
2014
2015 2003-11-15  Hrvoje Niksic  <hniksic@xemacs.org>
2016
2017         * init.c: Make sure the options are in alphabetic order!
2018
2019         * host.c (lookup_host): Merge lookup_host_passive and lookup_host
2020         after all -- having both would result in some code duplication.
2021         (lookup_host): Set hints.ai_family to AF_INET if ipv4_only is
2022         requested.  Likewise, set it to AF_INET6 for ipv6_only.  Specify
2023         AI_ADDRCONFIG where available.
2024         (lookup_host): New flag LH_REFRESH that specifies that a cached
2025         entry for HOST should be refreshed.
2026         (cache_query): New function.
2027         (cache_store): Ditto.
2028         (cache_remove): Ditto.
2029         (forget_host_lookup): No longer necessary, replaced with static
2030         function cache_remove.
2031
2032 2003-11-14  Hrvoje Niksic  <hniksic@xemacs.org>
2033
2034         * main.c: Enable -4 and -6 only if IPv6 is enabled.
2035
2036 2003-11-14  Hrvoje Niksic  <hniksic@xemacs.org>
2037
2038         * connect.c (register_transport): Renamed from register_extended.
2039         Explain the intended usage.
2040
2041 2003-11-14  Hrvoje Niksic  <hniksic@xemacs.org>
2042
2043         * url.c (uri_merge): Merging "foo" and "bar" should result in
2044         "bar", not in "foo/bar".
2045         (path_simplify): Don't remove empty path elements; don't
2046         special-case leading slash.
2047         (path_simplify): Don't swallow ".."'s at the beginning of string.
2048         E.g. simplify "foo/../../bar" as "../bar", not as "bar".
2049         (append_uri_pathel): Defang ".." path element upon encountering
2050         it.
2051
2052 2003-11-13  Hrvoje Niksic  <hniksic@xemacs.org>
2053
2054         * http.c (persistent_available_p): Don't attempt to talk to two
2055         different SSL sites over the same secure connection.
2056
2057 2003-11-13  Hrvoje Niksic  <hniksic@xemacs.org>
2058
2059         * http.c (gethttp): Ditto.
2060
2061         * ftp.c (getftp): Use retryable_socket_connect_error instead of
2062         CONNECT_ERROR.
2063
2064         * wget.h (CONNECT_ERROR): Removed.
2065
2066         * connect.c (retryable_socket_connect_error): New function instead
2067         of unsupported_socket_family_error.
2068
2069 2003-11-13  Hrvoje Niksic  <hniksic@xemacs.org>
2070
2071         * wget.h (CONNECT_ERROR): Use it.
2072
2073         * connect.c (unsupported_socket_family_error): New function.
2074
2075 2003-11-13  Hrvoje Niksic  <hniksic@xemacs.org>
2076
2077         * connect.c (bind_local): Renamed bindport to bind_local; return
2078         the socket directly.  Updated callers.
2079         (accept_connection): Renamed acceptport to accept_connection;
2080         return the created socket directly.  Updated callers.
2081
2082 2003-11-13  Hrvoje Niksic  <hniksic@xemacs.org>
2083
2084         * init.c (defaults): Turn on opt.ipv4_only if we're compiling with
2085         IPv6, and AI_ADDRINFO is not available, and AF_INET6 sockets can't
2086         be created.
2087
2088 2003-11-13  Hrvoje Niksic  <hniksic@xemacs.org>
2089
2090         * host.c (lookup_host): Document the fact that the addresses are
2091         returned in order.
2092
2093 2003-11-12  Hrvoje Niksic  <hniksic@xemacs.org>
2094
2095         * utils.c: Use limits.h only where available.
2096
2097         * hash.c: Use INVALID_PTR and INVALID_PTR_BYTE.  Include limits.h.
2098
2099 2003-11-11  Hrvoje Niksic  <hniksic@xemacs.org>
2100
2101         * main.c: Added options --inet4-only and --inet6-only.
2102
2103 2003-11-11  Hrvoje Niksic  <hniksic@xemacs.org>
2104
2105         * host.c (host_errstr): Use the more standard message "Unknown
2106         host".
2107
2108 2003-11-10  Hrvoje Niksic  <hniksic@xemacs.org>
2109
2110         * connect.c (connect_to_host): Use that flag to decide whether to
2111         re-resolve the host name.
2112
2113         * host.c (struct address_list): Added a flag that maintains
2114         whether the connection worked at some point.
2115
2116 2003-11-10  Hrvoje Niksic  <hniksic@xemacs.org>
2117
2118         * host.c (lookup_host): Special-case the numeric addresses only in
2119         the non-IPv6 case.
2120
2121 2003-11-10  Hrvoje Niksic  <hniksic@xemacs.org>
2122
2123         * connect.c (resolve_bind_address): Call lookup_host_passive.
2124         Make sure that opt.bind_address is resolved only once.
2125
2126         * host.c (lookup_host_passive): New function, handles "passive"
2127         lookups.
2128         (lookup_host): Remove the passive flags.  Remove the
2129         family-related flags -- use ip_default_family instead.
2130
2131 2003-11-09  Hrvoje Niksic  <hniksic@xemacs.org>
2132
2133         * html-url.c: Get URLs from <object data="...">.
2134
2135 2003-11-09  Hrvoje Niksic  <hniksic@xemacs.org>
2136
2137         * main.c (option_data): Specify the command to use for --mirror.
2138
2139 2003-11-08  Hrvoje Niksic  <hniksic@xemacs.org>
2140
2141         * cookies.c (cookie_handle_set_cookie): Specify exact match for
2142         unspecified domains.
2143
2144 2003-11-08  Hrvoje Niksic  <hniksic@xemacs.org>
2145
2146         * main.c (main): Removed one-letter options `-C', `-g', `-G', and
2147         `-s'.
2148
2149 2003-11-08  Hrvoje Niksic  <hniksic@xemacs.org>
2150
2151         * main.c (main): Add --dont-remove-listing for backward
2152         compatibility with previous versions.
2153         (print_help): Fix typo, spotted by Dennis Smit.
2154
2155 2003-11-08  Gisle Vanem  <giva@bgnett.no>
2156
2157         * ftp-basic.c: Support Windows-2000 ftp servers. Win-2000 *is*
2158         Win-NT 5.0 so calling it ST_WINNT is okay I guess.
2159
2160 2003-11-08  Hrvoje Niksic  <hniksic@xemacs.org>
2161
2162         * progress.c (update_speed_ring): Clear the speed ring when the
2163         download stalls.
2164
2165         * retr.c (get_contents): Specify 0.95s read timeout, so that the
2166         progress gauge can be updated even when data arrives very slowly
2167         or stalls.
2168
2169 2003-11-08  Hrvoje Niksic  <hniksic@xemacs.org>
2170
2171         * utils.c (wtimer_allocate): Bless the use of wtimer_read on a
2172         timer that has merely been allocated because get_contents() does
2173         that.
2174         (wtimer_update): Abort if the timer is not initialized.
2175
2176 2003-11-08  Hrvoje Niksic  <hniksic@xemacs.org>
2177
2178         * retr.c (get_contents): Pass the timer to limit_bandwidth().
2179
2180         * utils.c (wtimer_update): New function instead of wget_elapsed;
2181         just update the timer, but don't return anything.
2182         (wtimer_read): Read and return the last known value of the timer.
2183
2184 2003-11-08  Hrvoje Niksic  <hniksic@xemacs.org>
2185
2186         * http.c (persistent_available_p): Instead of matching all the
2187         addresses of HOST and last host, determine the peer's IP address
2188         with socket_ip_address and see if that address is one of those
2189         HOST resolves to.
2190
2191         * host.c (address_list_match_all): Removed.
2192         (address_list_find): New function, finds an IP address in the
2193         address list.
2194
2195         * ftp.c (ftp_do_pasv): Get the peer's address here, and pass it to
2196         ftp_epsv so it doesn't need to call getpeername.
2197
2198         * ftp-basic.c (ftp_port): Use socket_ip_address instead of
2199         getpeername.
2200         (ftp_lprt): Ditto.
2201
2202         * connect.c (socket_ip_address): Replaces conaddr, generalized to
2203         either get peer's or local address.
2204         (sockaddr_get_data): Made local to this file.
2205
2206 2003-11-08  Hrvoje Niksic  <hniksic@xemacs.org>
2207
2208         * hash.c (HASH_POSITION): Explicitly accept the hash function.
2209         (grow_hash_table): Extract ht->hash_function outside the loop.
2210         (hash_table_remove): Ditto.
2211         (hash_table_clear): Fill entries with 0xff to clear them.
2212         (hash_table_remove): Mark entries as deleted with the correct
2213         marker.
2214
2215 2003-11-08  Hrvoje Niksic  <hniksic@xemacs.org>
2216
2217         * http.c (persistent_available_p): No reason for the host lookup
2218         to be silent -- it's a lookup like any other.
2219
2220 2003-11-08  Hrvoje Niksic  <hniksic@xemacs.org>
2221
2222         * connect.c (register_extended): Check that fd >= 0.
2223
2224 2003-11-07  Hrvoje Niksic  <hniksic@xemacs.org>
2225
2226         * connect.c (LAZY_RETRIEVE_INFO): Set LAST_INFO.
2227
2228 2003-11-07  Hrvoje Niksic  <hniksic@xemacs.org>
2229
2230         * hash.c (NON_EMPTY): Use the all-bit-set value as the marker that
2231         the field is empty.  This allows NULL pointer and 0 value to be
2232         used as keys, which is necessary for the connect.c code to work
2233         when fd==0.
2234         (hash_table_new): Fill mappings with 0xff.
2235         (grow_hash_table): Ditto.
2236
2237 2003-11-07  Hrvoje Niksic  <hniksic@xemacs.org>
2238
2239         * url.c (url_parse): Allow empty ports.
2240
2241 2003-11-07  Hrvoje Niksic  <hniksic@xemacs.org>
2242
2243         * main.c (print_help): Break the help string into multiple chunks.
2244         (cmdline_option): New option handler OPT_FUNCALL.  Generalized
2245         HANDLE_CMD to generic DATA.
2246         (option_data): Use the new OPT_FUNCALL feature.
2247
2248 2003-11-06  Hrvoje Niksic  <hniksic@xemacs.org>
2249
2250         * log.h: Declare log_init, log_close, and
2251         log_request_redirect_output here.
2252
2253 2003-11-05  Dennis Smit  <ds@nerds-incorporated.org>
2254
2255         * main.c: (main): added --preserve-permissions option.
2256
2257         * ftp.c (ftp_retrieve_list): added support for
2258         --preserve-permissions option.
2259
2260         * init.c: added support for --preserve-permission option.
2261
2262         * option.h: added support for --preserve-permission option.
2263
2264 2003-11-06  Hrvoje Niksic  <hniksic@xemacs.org>
2265
2266         * main.c (init_switches): New function.  Convert option_data to
2267         long_options and short_options, which can be fed to getopt_long.
2268         (main): Execute command-line options by consulting option_data.
2269
2270 2003-11-06  Hrvoje Niksic  <hniksic@xemacs.org>
2271
2272         * gen_sslfunc.c (ssl_read): Implement a more correct check for
2273         EINTR.
2274         (ssl_write): Ditto.
2275         (init_ssl): Use a global SSL context.
2276
2277 2003-11-06  Hrvoje Niksic  <hniksic@xemacs.org>
2278
2279         * connect.c (xclose): Free INFO even if it doesn't provide a
2280         closer.
2281
2282 2003-11-06  Hrvoje Niksic  <hniksic@xemacs.org>
2283
2284         * connect.c: Updated all callers of
2285         iread/ssl_iread/iwrite/ssl_iwrite to use xread and xwrite instead.
2286
2287         * rbuf.h (struct rbuf): Removed the SSL member because SSL is
2288         handled automatically by xread.
2289
2290         * hash.c (ptrhash): Made private.
2291         (ptrcmp): Ditto.
2292         (inthash): Removed.
2293
2294         * connect.c (select_fd): Don't set errno, leave it to the caller.
2295
2296         * gen_sslfunc.c (connect_ssl): Use register_extended to register
2297         SSL callbacks for communication with SSL-enabled endpoints.
2298         (ssl_read): New function.
2299         (ssl_write): Ditto.
2300         (ssl_poll): Ditto.
2301         (ssl_close): Ditto.
2302
2303         * connect.c (register_extended): New function -- register
2304         callbacks for basic socket operations.
2305         (xread): Ditto.
2306         (xwrite): Ditto.
2307         (xclose): Ditto.
2308         (sock_read): New function, default implementation for reading.
2309         (sock_write): Ditto for writing.
2310         (sock_poll): Ditto for polling.
2311         (sock_close): Ditto for closing.
2312
2313 2003-11-05  Hrvoje Niksic  <hniksic@xemacs.org>
2314
2315         * connect.c (bindport): Fix compilation under pre-C99 compilers.
2316
2317 2003-11-05  Hrvoje Niksic  <hniksic@xemacs.org>
2318
2319         * connect.c (connect_to_ip): More compact error checking.
2320         (bindport): Don't treat failed setsockopt as a fatal error.
2321
2322 2003-11-05  Hrvoje Niksic  <hniksic@xemacs.org>
2323
2324         * connect.c (resolve_bind_address): Use a more accurate error
2325         message -- we're not binding to ANY, we're disabling bind
2326         altogether.
2327
2328 2003-11-05  Hrvoje Niksic  <hniksic@xemacs.org>
2329
2330         * cookies.c (save_cookies_mapper): Respect the setting of
2331         keep-session-cookies.
2332         (cookie_jar_load): Import session cookies.
2333         Based on code submitted by Nicolas Schodet.
2334
2335         * utils.c (datetime_str): Use information in TM when it's
2336         non-NULL.
2337
2338         * main.c (main): New option `--keep-session-cookies'.
2339
2340 2003-11-04  Hrvoje Niksic  <hniksic@xemacs.org>
2341
2342         * Makefile.in (realclean): Delete config.h.in.
2343
2344 2003-11-04  Hrvoje Niksic  <hniksic@xemacs.org>
2345
2346         * config-post.h: New file, included from now autogenerated
2347         config.h.in.
2348
2349 2003-11-04  Hrvoje Niksic  <hniksic@xemacs.org>
2350
2351         * progress.c (progress_handle_sigwinch): Don't call
2352         determine_screen_width() from the signal handler.  Instead, just
2353         set a volatile variable.
2354         (bar_create): Check whether SIGWINCH was received.
2355         (bar_update): Ditto.
2356
2357         * sysdep.h: Define SYSTEM_FNMATCH only if HAVE_FNMATCH_H is true.
2358
2359 2003-11-03  Hrvoje Niksic  <hniksic@xemacs.org>
2360
2361         * utils.c (xsleep): New function.  Uses nanosleep where available,
2362         resuming sleeps interrupted by signals.  Updated callers of sleep
2363         and usleep to use xsleep.
2364
2365 2003-11-03  Hrvoje Niksic  <hniksic@xemacs.org>
2366
2367         * ftp-basic.c (ftp_login): Remove shadowing (and bogus)
2368         declaration of SEED.
2369
2370 2003-11-03  Hrvoje Niksic  <hniksic@xemacs.org>
2371
2372         * log.c (logvprintf): Documented better.  Renamed to
2373         log_vprintf_internal to avoid confusion with the public API
2374         functions logprintf and logputs.
2375
2376 2003-11-03  Hrvoje Niksic  <hniksic@xemacs.org>
2377
2378         * wget.h (N_): Don't parenthesize argument.
2379
2380 2003-11-03  Hrvoje Niksic  <hniksic@xemacs.org>
2381
2382         * host.h (ADDRESS_IPV4_DATA): Don't take the address of in.s_addr
2383         because that doesn't work on machines that define it as bitfield.
2384
2385 2003-11-03  Hrvoje Niksic  <hniksic@xemacs.org>
2386
2387         * connect.c (select_fd): Generalize the third argument into WAIT,
2388         so that the caller can request waiting for both read and write.
2389         Updated callers.
2390
2391 2003-11-02  Hrvoje Niksic  <hniksic@xemacs.org>
2392
2393         * html-url.c (cleanup_html_url): Destroy the hash tables, don't
2394         just call free on them.
2395         (init_interesting): Use hash_table_put instead of string_set_add
2396         because we don't need the strdup that the latter function
2397         performs.
2398
2399         * init.c (cleanup): Don't pass NULL to cookie_jar_delete.
2400
2401         * xmalloc.c (xfree_real): Abort when passed a NULL pointer.
2402         (xfree_debug): Print at the file and line of the offending call to
2403         free.
2404
2405 2003-11-02  Hrvoje Niksic  <hniksic@xemacs.org>
2406
2407         * wget.h: Retired the `boolean' type.  Moved the DEFAULT_LOGFILE
2408         define to log.h.  Moved the INFINITE_RECURSION define to recur.h.
2409
2410         * xmalloc.h: Renamed FREE_MAYBE to xfree_null and moved the
2411         definition from wget.h to xmalloc.h.
2412
2413 2003-11-02  Hrvoje Niksic  <hniksic@xemacs.org>
2414
2415         * html-parse.c (decode_entity): New function; split the decoding
2416         of entities here.
2417         (convert_and_copy): Use it to decode entities.
2418         (decode_entity): Handle the &apos entity.
2419         (decode_entity): Don't decode Latin 1 numeric entities.  Don't
2420         decode &#0.
2421
2422 2003-11-01  Hrvoje Niksic  <hniksic@xemacs.org>
2423
2424         * ftp-opie.c (calculate_skey_response): Use uint32_t instead of
2425         `unsigned long' for the cheksum array.  Document the function.
2426
2427 2003-11-01  Hrvoje Niksic  <hniksic@xemacs.org>
2428
2429         * connect.c (acceptport): Don't call select_fd when timeout is not
2430         requested.
2431
2432 2003-11-01  Hrvoje Niksic  <hniksic@xemacs.org>
2433
2434         * host.c: Removed the ip_default_family global variable.
2435
2436         * host.c (lookup_host): Document the function.  Fixed declaration
2437         of VEC.
2438
2439 2003-10-31  Hrvoje Niksic  <hniksic@xemacs.org>
2440
2441         * various: Use new macros xnew, xnew0, xnew_array, and xnew0_array
2442         in various places.
2443
2444 2003-10-31  Hrvoje Niksic  <hniksic@xemacs.org>
2445
2446         * wget.h: Move declarations of malloc and logging code to
2447         xmalloc.h and log.h respectively to unclutter this file.
2448         (STRDUP_ALLOCA): Made it side-effect free.
2449
2450         * xmalloc.h: New files.  Define macros xnew, xnew0, xnew_array,
2451         and xnew0_array.
2452
2453         * xmalloc.c: New file.  Move the xmalloc routines here.
2454
2455 2003-10-31  Hrvoje Niksic  <hniksic@xemacs.org>
2456
2457         * connect.c (sockaddr_set_data): Remove the broken code that
2458         checked for NULL address.
2459
2460 2003-10-31  Hrvoje Niksic  <hniksic@xemacs.org>
2461
2462         * host.c (address_list_from_single): Removed.
2463         (address_list_from_ipv4_addresses): Renamed from
2464         address_list_from_vector.
2465
2466 2003-10-31  Hrvoje Niksic  <hniksic@xemacs.org>
2467
2468         * sysdep.h (CLOSE): Don't call close on file descriptors less than
2469         0, i.e. on uncreated sockets.
2470
2471         * connect.c (resolve_bind_address): Work on struct sockaddr
2472         directly.
2473         (connect_to_host): Replacement for connect_to_many.  Resolve HOST
2474         and connect to any of its addresses.  If we can't connect and the
2475         host name lookup was cached, try to resolve it again.  This should
2476         fix problems with hosts behind dynamic DNS.  Updated all callers.
2477         (connect_to_ip): Replacement for connect_to_one.  Removed SILENT;
2478         added the argument PRINT instead.  Updated all callers.
2479         (set_connection_host_name): Removed.
2480
2481         * host.c (address_list_address_at): New function instead of
2482         address_list_copy_one. It returns a pointer to ip_address *, so
2483         it's not necessary to copy the data.
2484         (address_list_cached_p): New function.
2485         (forget_host_lookup): Ditto.
2486
2487         * connect.c: Got rid of the MSOCK global variable.  Made bindport
2488         return the local socket it creates.  Added a new argument to
2489         acceptport, the socket to call accept on.  Updated callers.
2490         (closeport): Removed.
2491
2492         * connect.c: Moved the sockaddr code from host.c to this file,
2493         because most of that stuff is used for connecting, and has nothing
2494         to do with host names anyway.
2495         (sockaddr_set_data, sockaddr_get_data): New functions, replace the
2496         old sockaddr_set_address, sockaddr_set_port, sockaddr_get_address,
2497         and sockaddr_get_port.
2498
2499 2003-10-30  Hrvoje Niksic  <hniksic@xemacs.org>
2500
2501         * sysdep.h: Use `S >= 8' rather than `S == 8' when looking for
2502         large integers.
2503
2504 2003-10-30  Hrvoje Niksic  <hniksic@xemacs.org>
2505
2506         * url.c (append_uri_pathel): New argument ESCAPED_P that says
2507         whether [B, E) is to be treated as URL-escaped or not.  If
2508         ESCAPED_P is false, don't unescape the region.
2509         (url_file_name): u->file is not URL-escaped.
2510
2511 2003-10-30  Hrvoje Niksic  <hniksic@xemacs.org>
2512
2513         * retr.c (retrieve_from_file): Use retrieve_tree for
2514         page-requisites.
2515
2516         * main.c (main): Don't define opt.recursive when -p is used.
2517         Instead, make sure that recursion is used for HTTP in that case.
2518
2519 2003-10-29  Hrvoje Niksic  <hniksic@xemacs.org>
2520
2521         * host.h: Defined accessors for elements of ip_address.  Updated
2522         all callers.
2523         (address_list_match_all): Use memcmp in the non-IPv6 case.
2524
2525         * wget.h (CONNECT_ERROR): Don't retry connecting if connect()
2526         returned EAFNOSUPPORT.
2527
2528 2003-10-27  Mauro Tortonesi <mauro@deepspace6.net>
2529
2530         * connect.h: changed bindport prototype and added the related
2531         BIND_ON_IPV4_ONLY and BIND_ON_IPV6_ONLY flags.
2532
2533         * connect.c: changed bindport and resolve_bind_address to allow
2534         protocol-version specific DNS resolution. modified conaddr,
2535         acceptport and connect_to_one to make use of struct
2536         sockaddr_storage and of the new ip_address structure.
2537
2538         * ftp-basic.c: added LPRT/LPSV (RFC1639) support, refactored
2539         PORT/PASV (RFC959) and EPRT/EPSV (RFC2428) support code.
2540
2541         * ftp.c: added the ftp_do_port and ftp_do_pasv functions to
2542         handle FTP over IPv6.
2543
2544         * ftp.h: changed prototype of ftp_epsv and added prototypes for
2545         ftp_lpsv, ftp_lprt and ftp_eprt.
2546
2547         * host.c: renamed the
2548         wget_sockaddr_set_address and wget_sockaddr_get_addr, and
2549         wget_sockaddr_{s,g}et_port couples to sockaddr_{s,g}et_address and
2550         sockaddr_{g,s}et_port respectively.  changed
2551         address_list_match_all, address_list_from_addrinfo sockaddr_len,
2552         pretty_print_address, lookup_host, sockaddr_{s,g}et_address and
2553         sockaddr_{g,s}et_port to make use of struct sockaddr_storage and
2554         of the new ip_address structure.  removed map_ipv4_to_ip and
2555         map_ip_to_ipv4.
2556
2557         * host.h: redefined structure ip_address and removed structure
2558         wget_sockaddr.
2559
2560 2003-10-26  Hrvoje Niksic  <hniksic@xemacs.org>
2561
2562         * sysdep.h: Include inttypes.h where available.
2563
2564         * host.c: Switch from u_int32_t to uint32_t.
2565
2566 2003-10-26  Hrvoje Niksic  <hniksic@xemacs.org>
2567
2568         * netrc.c (parse_netrc): Reset the QUOTE flag after the closing
2569         quote.
2570
2571 2003-10-25  Hrvoje Niksic  <hniksic@xemacs.org>
2572
2573         * url.c (is_valid_ipv6_address): Reformat to GNU coding style.
2574         Use enums for NS_IN* constants.  Use ISXDIGIT.
2575
2576         * convert.c (construct_relative): Document better how the function
2577         works.
2578
2579 2003-10-23  Hrvoje Niksic  <hniksic@xemacs.org>
2580
2581         * config.h.in: Deploy preprocessor magic to avoid Ultrix's
2582         <netdb.h> include <bitypes.h> which defines its own u_int32_t.
2583         Reported by Bernhard Simon.
2584
2585 2003-10-23  Hrvoje Niksic  <hniksic@xemacs.org>
2586
2587         * version.c: Bump version.
2588
2589 2003-10-23  Hrvoje Niksic  <hniksic@xemacs.org>
2590
2591         * url.c: Ditto.
2592
2593         * html-parse.c (advance_declaration): Don't use trailing comma in
2594         enum because older compilers don't support it.
2595
2596         * utils.c: Don't redefine HAVE_SIGSETJMP.
2597
2598 2003-10-16  Hrvoje Niksic  <hniksic@xemacs.org>
2599
2600         * convert.c (construct_relative): Don't handle absolute files
2601         specially -- for example, -P/tmp/foo shouldn't imply that
2602         converted files must refer to "/tmp/foo/..."!
2603
2604 2003-10-15  Hrvoje Niksic  <hniksic@xemacs.org>
2605
2606         * http.c: Consider status 307 a valid redirect.
2607
2608 2003-10-15  Philip Stadermann  <philip.stadermann@credativ.de>
2609
2610         * ftp.c (ftp_retrieve_glob): Correctly loop through the list whose
2611         elements might have been deleted.
2612
2613 2003-10-13  Hrvoje Niksic  <hniksic@xemacs.org>
2614
2615         * html-url.c (tag_handle_meta): Set the Refresh link to expect
2616         HTML.
2617         (append_one_url): Renamed to append_url.
2618
2619 2003-10-13  Hrvoje Niksic  <hniksic@xemacs.org>
2620
2621         * sysdep.h: Only define u_int32_t.
2622
2623 2003-10-11  Hrvoje Niksic  <hniksic@xemacs.org>
2624
2625         * utils.c (large_int_to_string): Use snprintf() to print the
2626         number.  This will work even on systems where libc doesn't
2627         understand %lld, but the compiler does, because it will use our
2628         snprintf replacement.
2629
2630         * init.c (parse_bytes_helper): New function.
2631         (cmd_bytes): Use it to parse bytes, but cast the result to long.
2632         (cmd_bytes_large): Ditto, but store the result to LARGE_INT.  Used
2633         for --quota so that --quota=10G works even on machines without
2634         long long.
2635
2636         * options.h (struct options): Declare quota as LARGE_INT.
2637
2638         * retr.c (downloaded_exceeds_quota): Removed.
2639         (downloaded_increase): Ditto.
2640         (total_downloaded_bytes): New variable, replaces opt.downloaded,
2641         which was the wrong place for it anyway.  Updated callers of
2642         downloaded_exceeds_quota and downloaded_increase to check this
2643         variable directly.
2644
2645         * sysdep.h: Get rid of VERY_LONG_TYPE.  Use LARGE_INT for the same
2646         purpose, defined as `long', `long long' or `double', depending on
2647         size of long and whether long long is available.
2648
2649 2003-10-11  Hrvoje Niksic  <hniksic@xemacs.org>
2650
2651         * sysdep.h: Also check size of short for int32_t.
2652
2653 2003-10-11  Hrvoje Niksic  <hniksic@xemacs.org>
2654
2655         * host.c (lookup_host): Use u_int32_t to store the result of
2656         inet_addr().  That removes the need for offset fiddling, caring
2657         about endian-ness, etc.
2658
2659         * sysdep.h: Define int32_t and u_int32_t if not available.
2660
2661 2003-10-11  Hrvoje Niksic  <hniksic@xemacs.org>
2662
2663         * ftp-basic.c (ftp_epsv): Use socklen_t * as the third argument to
2664         getpeername.
2665
2666         * config.h.in: Define socklen_t stub.
2667
2668         * host.c (sockaddr_len): Return socklen_t.
2669
2670         * connect.c (conaddr): Use socklen_t as the third argument to
2671         accept, getsockname, and connect.
2672
2673 2003-10-10  Hrvoje Niksic  <hniksic@xemacs.org>
2674
2675         * recur.c (retrieve_tree): Don't descend into documents that are
2676         not expected to contain HTML, regardless of their content-type.
2677
2678         * html-url.c (tag_url_attributes): Record which attributes are
2679         supposed to yield HTML links that can be followed.
2680         (tag_find_urls): Propagate that information to the caller through
2681         struct urlpos.
2682
2683 2003-10-10  Hrvoje Niksic  <hniksic@xemacs.org>
2684
2685         * hash.c (find_mapping): Return the next available mapping when
2686         the key is not found, not NULL.
2687         (hash_table_put): Use find_mapping to find the storage for the new
2688         data.
2689         (hash_table_put): Grow the table before exceeding maximum
2690         fullness, not afterwards.
2691
2692 2003-10-10  Hrvoje Niksic  <hniksic@xemacs.org>
2693
2694         * hash.c (hash_table_new): Slightly change the meaning of the
2695         first parameter.  Instead of being the minimum initial size, it is
2696         now the minimum number of items that the hash table can take
2697         without needing to resize.
2698
2699 2003-10-09  Hrvoje Niksic  <hniksic@xemacs.org>
2700
2701         * html-url.c (init_interesting): Initialize interesting_tags and
2702         interesting_attributes as hash tables.  This simplifies the code
2703         immensely because hash tables handle allocation and remove
2704         duplicates automatically.
2705         (find_tag): Removed.
2706         (collect_tags_mapper): Instead of calling find_tag, simply get the
2707         entry from interesting_tags hash table, which is both simpler and
2708         faster.
2709
2710 2003-10-09  Hrvoje Niksic  <hniksic@xemacs.org>
2711
2712         * hash.c (hash_table_get): Declare hash-table argument as const.
2713         (find_mapping): Ditto.
2714         (hash_table_get_pair): Ditto.
2715         (hash_table_contains): Ditto.
2716         (hash_table_count): Ditto.
2717
2718 2003-10-08  Hrvoje Niksic  <hniksic@xemacs.org>
2719
2720         * html-url.c (get_urls_html): Parse the appropriate flags to
2721         html-parse.c.
2722
2723         * html-parse.c (map_html_tags): Accept FLAGS from the caller
2724         instead of examining OPT.
2725
2726 2003-10-08  Hrvoje Niksic  <hniksic@xemacs.org>
2727
2728         * html-url.c (find_tag): Switch to binary search.
2729
2730 2003-10-08  Hrvoje Niksic  <hniksic@xemacs.org>
2731
2732         * main.c (print_help): Fix typo; stured -> stored.
2733
2734 2003-10-08  Hrvoje Niksic  <hniksic@xemacs.org>
2735
2736         * getopt.c: Add definitions of getopt_long and getopt_long_only.
2737
2738 2003-10-08  Hrvoje Niksic  <hniksic@xemacs.org>
2739
2740         * config.h.in: Renamed DEBUG to ENABLE_DEBUG.  ENABLE_DEBUG is, I
2741         think, a better name, because it implies that debugging output is
2742         merely possible, not "on by default", as might be construed from
2743         just DEBUG.
2744
2745 2003-10-08  Hrvoje Niksic  <hniksic@xemacs.org>
2746
2747         * ftp.c (has_insecure_name_p): Define it here.
2748
2749         * utils.c (has_wildcards_p): Define it here.
2750
2751         * sysdep.h: Declare fnmatch-related macros here, if not using
2752         system fnmatch().  Update .c files to not declare fnmatch.h
2753         directly.
2754
2755         * cmpt.c (fnmatch): Moved here.  Use it only under non-GNU libc.
2756
2757 2003-10-08  Hrvoje Niksic  <hniksic@xemacs.org>
2758
2759         * getopt.c: Newer version, imported from Free libit.
2760
2761 2003-10-07  Hrvoje Niksic  <hniksic@xemacs.org>
2762
2763         * cookies.c (struct cookie): Remove unused backpointer to cookie
2764         jar.
2765
2766 2003-10-07  Hrvoje Niksic  <hniksic@xemacs.org>
2767
2768         * cmpt.c (memmove): Comment out, since it's no longer used.
2769
2770         * cookies.c (cookie_jar_generate_cookie_header): Allocate room for
2771         chains in one pass.
2772         (find_chains_of_host): Assume that the caller has allocated DEST
2773         to be sufficiently large to take all the data.
2774         (eliminate_dups): Run through the array and eliminate dups on the
2775         fly instead of using memmove.
2776         (cookie_jar_process_set_cookie): Free cookie->domain before
2777         re-setting it.
2778
2779 2003-10-05  Gisle Vanem  <giva@bgnett.no>
2780
2781         * mswindows.c (set_sleep_mode): Fix type of
2782         _SetThreadExecutionState.
2783
2784 2003-10-05  Hrvoje Niksic  <hniksic@xemacs.org>
2785
2786         * utils.c (file_size): Return -1 if fopen() returns NULL.  Prior
2787         to this patch, wget --post-file=nosuchfile dumped core.
2788
2789 2003-10-04  Gisle Vanem  <giva@bgnett.no>
2790
2791         * mswindows.c (run_with_timeout): Use WaitForSingleObject to wait
2792         for thread termination.
2793
2794 2003-10-04  Hrvoje Niksic  <hniksic@xemacs.org>
2795
2796         * log.c: Use `...' in function definitions; ansi2knr will convert
2797         them to va_dcl.  This allowed removal of the ugly VA_START_1 and
2798         VA_START_2 macros.
2799
2800 2003-10-03  Gisle Vanem  <giva@bgnett.no>
2801
2802         * connect.c: And don't include them here.
2803
2804         * mswindows.h: Include winsock headers here.
2805
2806 2003-10-03  Hrvoje Niksic  <hniksic@xemacs.org>
2807
2808         * html-parse.c (convert_and_copy): Move variable declarations
2809         before statements.
2810
2811 2003-10-02  Gisle Vanem  <giva@bgnett.no>
2812
2813         * mswindows.c (run_with_timeout): For Windows: Run the 'fun' in a
2814         thread via a helper function. Continually query the thread's
2815         exit-code until finished or timed out.
2816
2817 2003-10-02  Hrvoje Niksic  <hniksic@xemacs.org>
2818
2819         * wget.h (XMALLOC_ARRAY): Removed.
2820         (ALLOCA_ARRAY): Ditto.
2821
2822         * html-parse.c: Renamed alloca_p to resized.
2823         (GROW_ARRAY): Renamed DO_REALLOC_FROM_ALLOCA to GROW_ARRAY and
2824         returned it to html-parse.c, since nothing else was using it.
2825
2826 2003-10-02  Hrvoje Niksic  <hniksic@xemacs.org>
2827
2828         * retr.c (retrieve_url): Initialize DUMMY storage for DT.  Caught
2829         by valgrind.
2830
2831 2003-10-02  Hrvoje Niksic  <hniksic@xemacs.org>
2832
2833         * html-parse.c (convert_and_copy): Handle numeric entities in
2834         hexadecimal, &#xHH.
2835         (convert_and_copy): Copy the contents directly to the pool without
2836         a stack-allocated intermediary.
2837
2838 2003-10-02  Hrvoje Niksic  <hniksic@xemacs.org>
2839
2840         * utils.c (alarm_set): New function; use either setitimer or alarm
2841         to set up the alarm.
2842         (alarm_cancel): New function; cancel the alarm set up by
2843         alarm_set.
2844         (run_with_timeout): Use them.
2845
2846 2003-10-01  Hrvoje Niksic  <hniksic@xemacs.org>
2847
2848         * url.c (url_parse): Don't leak memory when a reencoded URL turns
2849         out to be invalid.
2850
2851         * url.c (parse_errors): Mark error messages for translation.
2852         (url_error): Translate error messages returned to the caller.
2853
2854 2003-10-01  Hrvoje Niksic  <hniksic@xemacs.org>
2855
2856         * ftp.c (ftp_loop_internal): Initialize TMRATE to NULL to shut up
2857         the compiler.
2858
2859 2003-09-26  Gisle Vanem  <giva@bgnett.no>
2860
2861         * src/mswindows.c: Added ws_percenttitle() showing progress in the
2862         window titlebar. Called from retr.c. Secured ws_mypath().
2863
2864         * windows/config.h.ms: alloca() prototype not needed.  Removed
2865         "#undef ENABLE_NLS"; should be in Makefile IMHO. Moved
2866         WGET_USE_STDARG from mswindows.h to config.ms.h because of #ifdef
2867         in log.c. (MSVC's vararg.h and stdarg.h are incompatible).
2868
2869 2003-09-29  Aaron Hawley <Aaron.Hawley@uvm.edu>
2870
2871         * ftp.c (getftp): --spider option should now work with FTP
2872         downloads.
2873         (ftp_loop_internal): quiet reports and calculations of downloads
2874         when --spider option set, nor try deleting when --delete-after
2875         also set.
2876         (ftp_loop): --spider will skip HTML-ification of .listing file.
2877
2878 2003-09-26  Gisle Vanem  <giva@bgnett.no>
2879
2880         * mswindows.c (read_registry): Removed.
2881         (set_sleep_mode): New function.
2882         (windows_main_junk): Call it.
2883
2884 2003-09-26  Gisle Vanem  <giva@bgnett.no>
2885
2886         * mswindows.c (read_registry): Fix invocation of registry
2887         functions.
2888
2889         * mswindows.c (read_registry): Condition definitions of sleep and
2890         usleep with not HAVE_SLEEP and HAVE_USLEEP respectively.  Define
2891         HAVE_SLEEP and HAVE_USLEEP under __DMC__.
2892
2893 2003-09-24  Hrvoje Niksic  <hniksic@xemacs.org>
2894
2895         * url.c (url_escape_1): Revert unintentional change to lowercase
2896         xdigit escapes.
2897         (url_escape_dir): Document that this function depends on the
2898         output of url_escape_1.
2899
2900 2003-09-23  Hrvoje Niksic  <hniksic@xemacs.org>
2901
2902         * progress.c (create_image): Print the current ETA if we're done
2903         with the download.
2904         (create_image): Change '-' display char to '+' in the progress bar.
2905
2906         * Makefile.in (clean): Remove .libs.
2907
2908 2003-09-23  Hrvoje Niksic  <hniksic@xemacs.org>
2909
2910         * cookies.c (struct cookie): New flag domain_exact.
2911         (update_cookie_field): Skip leading dot in domain.
2912         (find_matching_chains): Match numeric addresses exactly; don't
2913         needlessly copy HOST to the stack.
2914         (matching_cookie): Added argument HOST.  If cookie->domain_exact
2915         is set, check that HOST is equal to cookie->domain.
2916         (cookie_jar_load): Only use TAB as delimiter.  Document the
2917         meaning of DOMAIN-FLAG.  Skip leading dot in domain.
2918         (cookie_jar_load): Don't ignore DOMAIN-FLAG -- instead, set
2919         domain_exact to true if DOMAIN-FLAG is false.
2920         (save_cookies_mapper): If domain_exact is false, prepend the
2921         domain with dot, like Mozilla does.
2922
2923 2003-09-22  Hrvoje Niksic  <hniksic@xemacs.org>
2924
2925         * progress.c (create_image): Print the initial part of the
2926         download with '-' characters, analogous to how dot progress prints
2927         the initial part with ','.
2928
2929         * hash.c (ptrhash): New function.
2930         (ptrcmp): Ditto.
2931         (hash_table_new): Default to identity hash table.
2932
2933 2003-09-22  Hrvoje Niksic  <hniksic@xemacs.org>
2934
2935         * safe-ctype.h (_sch_test): The cast of BIT to unsigned char was
2936         broken -- _sch_istable bitmasks are 16-bit, not 8-bit!  Cast BIT
2937         to unsigned short instead.
2938
2939 2003-09-22  Hrvoje Niksic  <hniksic@xemacs.org>
2940
2941         * url.c (path_simplify): Instead of calls to memmove, handle "./"
2942         and "../" by advancing pointers.
2943
2944 2003-09-22  Hrvoje Niksic  <hniksic@xemacs.org>
2945
2946         * retr.c (getproxy): Moved from url.c.
2947
2948         * convert.c: Split off link conversion from url.c into separate
2949         file.  Also included the book-keeping stuff from recur.c.
2950
2951 2003-09-21  Hrvoje Niksic  <hniksic@xemacs.org>
2952
2953         * init.c: Improved documentation of functions.
2954         (cmd_boolean): Attempt to make code that tries to avoid calling
2955         strcmp for "speed" a bit more readable.
2956
2957         * init.c (simple_atof): Report error on encountering non-digit,
2958         non-"." character.
2959         (simple_atoi): Replacement for myatoi(), calling interface
2960         compatible with simple_atof.  Updated myatoi's callers.
2961
2962 2003-09-21  Bertrand Demiddelaer  <bert@b3rt.org>
2963
2964         * url.c (path_simplify): Would read two bytes past the end of the
2965         string in the "./" case.
2966
2967 2003-09-21  Matthew J. Mellon  <mellon@tymenet.com>
2968
2969         * http.c (gethttp): Recognize content-type "application/xhtml+xml"
2970         as what Wget considers "text/html".
2971
2972 2003-09-21  Hrvoje Niksic  <hniksic@xemacs.org>
2973
2974         * connect.c (connect_with_timeout): Made timeout type double.
2975
2976         * options.h (struct options): New members read_timeout,
2977         dns_timeout, and connect_timeout.
2978         Use them.
2979
2980 2003-09-21  Hrvoje Niksic  <hniksic@xemacs.org>
2981
2982         * init.c (simple_atof): New function.
2983         (cmd_time): Use it.
2984         (cmd_bytes): Accept things like "1.5k" and such.  Use simple_atof
2985         to parse decimals.
2986
2987         * retr.c (limit_bandwidth): Adjust each sleep by the error of the
2988         previous one.
2989
2990 2003-09-21  Hrvoje Niksic  <hniksic@xemacs.org>
2991
2992         * main.c (main): Use setoptval() for setting the options.  Use
2993         run_command for `-e'.
2994
2995         * init.c (parse_line): Rewritten to return COMIND right away.
2996         Changed linkage to static.
2997         (run_wgetrc): Use the available comind when calling setval, so it
2998         doesn't have to be computed twice.
2999         (setval_internal): New function, runs the command's action without
3000         any error checking.
3001         (setoptval): New function, does what setval used to do, but exits
3002         in case of error.
3003         (run_command): New function.
3004
3005 2003-09-21  Hrvoje Niksic  <hniksic@xemacs.org>
3006
3007         * connect.c (select_fd): Change MAXTIME's type to double.  Handle
3008         its decimal part.
3009
3010         * retr.c (sleep_between_retrievals): In the random-wait case, use
3011         random_float() to wait between 0 and 2*opt.wait seconds.
3012
3013         * utils.c (run_with_timeout): Accept `double' timeouts.  Correctly
3014         handle timeout values in (0, 1) range.
3015         (random_float): New function.
3016
3017         * options.h (struct options): Change the types of wait, waitretry,
3018         and timeout to double.
3019
3020         * init.c (cmd_time): Accept floating point time.
3021
3022 2003-09-20  Hrvoje Niksic  <hniksic@xemacs.org>
3023
3024         * retr.c (get_contents): Cosmetic fixes.
3025
3026 2003-09-20  Hrvoje Niksic  <hniksic@xemacs.org>
3027
3028         * url.c (uri_merge): Get rid of uri_merge_1.
3029         (uri_merge): Merge "foo//", "bar" as "foo//bar", not "foo///bar",
3030         i.e. don't add an extra slash merely because BASE ends with two
3031         slashes.
3032         (parse_credentials): Renamed from parse_uname.  Rewrittern in
3033         standard [beg, end) calling style.
3034         (url_skip_credentials): Renamed from url_skip_uname.  Made static.
3035         (url_skip_credentials): Include # and ; as terminators.  Old code
3036         would mistakenly consider "http://foo.com#hniksic@iskon.hr" to
3037         contain a username.
3038         (url_skip_scheme): Removed because it was unused.
3039         (url_has_scheme): Require "scheme" to be at least one char long.
3040
3041 2003-09-19  Hrvoje Niksic  <hniksic@xemacs.org>
3042
3043         * url.c (url_file_name): Expect NULL dir_prefix.
3044
3045         * init.c (cmd_file): Use a macro to prevent multiple #ifdef
3046         WINDOWS.
3047         (defaults): Set dir_prefix to NULL by default.
3048
3049 2003-09-19  Hrvoje Niksic  <hniksic@xemacs.org>
3050
3051         * safe-ctype.h (_sch_test): Cast BIT to unsigned char, like latest
3052         gcc does.
3053
3054 2003-09-19  Hrvoje Niksic  <hniksic@xemacs.org>
3055
3056         * wget.h (BOUNDED_TO_ALLOCA): Evaluate PLACE only once.
3057         (ARRAY_SIZE): Renamed to countof.  All callers updated.
3058
3059 2003-09-19  Hrvoje Niksic  <hniksic@xemacs.org>
3060
3061         * main.c (main): New option --strict-comments.
3062
3063         * html-parse.c (find_comment_end): New function: simple BM search
3064         for "-->".
3065         (map_html_tags): Use it if looking at a comment and not in strict
3066         comments mode.
3067
3068 2003-09-17  Aurelien Marchand  <artaxerxes@users.sf.net>
3069
3070         * ftp.h: Added OS400 system in enum
3071         * ftp-basic.c: recognize OS400 systems
3072         * ftp.c: don't prepend the CWD if talking to OS400, since it
3073         breaks the change in library
3074
3075 2003-09-18  Hrvoje Niksic  <hniksic@xemacs.org>
3076
3077         * retr.c (get_contents): Pass the correct argument to ssl_iread.
3078
3079 2003-09-18  Hrvoje Niksic  <hniksic@xemacs.org>
3080
3081         * safe-ctype.h: Don't #define ctype.h macros to errors because
3082         that loses when someone #include's ctype.h after safe-ctype.h.
3083
3084 2003-09-17  Hrvoje Niksic  <hniksic@xemacs.org>
3085
3086         * url.c: Undef U, W, C after use.
3087
3088 2003-09-17  Hrvoje Niksic  <hniksic@xemacs.org>
3089
3090         * init.c (cmd_spec_restrict_file_names): Allow the OS setting to
3091         be augmented by ",nocontrol" which means don't escape the control
3092         characters, but otherwise keep OS settings.
3093
3094         * url.c (file_unsafe_char): Deleted.
3095         (append_uri_pathel): Query filechr_table directly.
3096         (filechr_table): Separated Unix, Windows, and control-unsafe
3097         characters.
3098
3099 2003-09-17  Hrvoje Niksic  <hniksic@xemacs.org>
3100
3101         * url.c (url_escape_1): New function.
3102         (url_escape): Use it.
3103         (sync_path): Handle pathological cases where u->file and u->dir
3104         contain really strange characters.
3105         (ENCODE): Deleted.
3106         (REENCODE): Deleted.
3107
3108 2003-09-16  Hrvoje Niksic  <hniksic@xemacs.org>
3109
3110         * url.c (url_file_name): Don't reallocate FNAME if the file
3111         doesn't exist, as is usually the case.
3112
3113         * utils.c (unique_name): New flag allow_passthrough.
3114
3115 2003-09-16  Hrvoje Niksic  <hniksic@xemacs.org>
3116
3117         * utils.c (wtimer_sys_diff): Convert the time difference to signed
3118         __int64, then to double.  This works around MS VC++ 6 which can't
3119         convert unsigned __int64 to double directly.
3120
3121 2003-09-16  Hrvoje Niksic  <hniksic@xemacs.org>
3122
3123         * Makefile.in (clean): Also remove the core.<number> files
3124         produced by recent Linux systems.
3125
3126 2003-09-16  Hrvoje Niksic  <hniksic@xemacs.org>
3127
3128         * http.c (post_file): Don't pad the file if it's not large
3129         enough.  Bail out instead.
3130
3131 2003-09-15  Hrvoje Niksic  <hniksic@xemacs.org>
3132
3133         * retr.c (get_contents): Reduce the buffer size to the amount of
3134         data that may pass through for one second.  This prevents long
3135         sleeps when limiting bandwidth.
3136
3137         * connect.c (connect_to_one): Reduce the socket's RCVBUF when
3138         bandwidth limitation to small values is requested.
3139
3140 2003-09-15  Hrvoje Niksic  <hniksic@xemacs.org>
3141
3142         * progress.c (update_speed_ring): Moved the speed ring update to a
3143         separate function and documented it better.
3144
3145         * progress.c: Use `double' for most timers to support granularity
3146         smaller than 1ms.
3147
3148 2003-09-15  Hrvoje Niksic  <hniksic@xemacs.org>
3149
3150         * wget.h (XDIGIT_TO_XCHAR): Implement as index into a literal
3151         string.
3152         (XDIGIT_TO_xchar): Ditto.
3153
3154 2003-09-15  Hrvoje Niksic  <hniksic@xemacs.org>
3155
3156         * utils.c: Change the type of timer-related functions from long to
3157         double, for better precision.  On machines supporting gettimeofday
3158         the timers now work with granularity of less than one millisecond.
3159
3160 2003-09-15  Hrvoje Niksic  <hniksic@xemacs.org>
3161
3162         * cookies.c (parse_set_cookies): Fixed the parser to handle more
3163         edge conditions.
3164         (test_cookies): New function, contains a test suite for
3165         parse_set_cookies.
3166
3167 2003-09-15  Hrvoje Niksic  <hniksic@xemacs.org>
3168
3169         * url.c (strpbrk_or_eos): Implement as a macro under Gcc.
3170
3171 2003-09-15  Hrvoje Niksic  <hniksic@xemacs.org>
3172
3173         * cookies.c (parse_set_cookies): Allow trailing space in
3174         set-cookies header.  Also, allow any amount of whitespace, not
3175         only one character.  Allow empty set-cookies header without
3176         spewing an error.
3177
3178 2003-09-14  Hrvoje Niksic  <hniksic@xemacs.org>
3179
3180         * url.c (append_uri_pathel): Use opt.restrict_file_names when
3181         calling file_unsafe_char.
3182
3183         * init.c: New command restrict_file_names.
3184
3185         * main.c (main): New option --restrict-file-names[=windows,unix].
3186
3187         * url.c (url_file_name): Renamed from url_filename.
3188         (url_file_name): Add directory and hostdir prefix here, not in
3189         mkstruct.
3190         (append_dir_structure): New function, does part of the work that
3191         used to be in mkstruct.  Iterates over path elements in u->path,
3192         calling append_uri_pathel on each one to append it to the file
3193         name.
3194         (append_uri_pathel): URL-unescape a path element and reencode it
3195         with a different set of rules, more appropriate for handling of
3196         files.
3197         (file_unsafe_char): New function, uses a lookup table to decide
3198         whether a character should be escaped for use in file name.
3199         (append_string): New utility function.
3200         (append_char): Ditto.
3201         (file_unsafe_char): New argument restrict_for_windows, decide
3202         whether Windows file names should be escaped in run-time.
3203
3204         * connect.c: Include <stdlib.h> to get prototype for abort().
3205
3206 2003-09-14  Hrvoje Niksic  <hniksic@xemacs.org>
3207
3208         * utils.c (wtimer_sys_set): Extracted the code that sets the
3209         current time here.
3210         (wtimer_reset): Call it.
3211         (wtimer_sys_diff): Extracted the code that calculates the
3212         difference between two system times here.
3213         (wtimer_elapsed): Call it.
3214         (wtimer_elapsed): Don't return a value smaller than the previous
3215         one, which could previously happen when system time is set back.
3216         Instead, reset start time to current time and note the elapsed
3217         offset for future calculations.  The returned times are now
3218         guaranteed to be monotonically nondecreasing.
3219
3220 2003-09-10  Hrvoje Niksic  <hniksic@xemacs.org>
3221
3222         * host.c (lookup_host): Print the result of the DNS lookup.
3223
3224 2003-09-10  Hrvoje Niksic  <hniksic@xemacs.org>
3225
3226         * init.c (cmd_boolean): Accept yes/no along with on/off.
3227         (cmd_lockable_boolean): Ditto.
3228
3229 2003-09-10  Hrvoje Niksic  <hniksic@xemacs.org>
3230
3231         * init.c: New command dns_cache.
3232
3233         * main.c (main): New option --dns-cache[=off].
3234
3235 2003-09-09  Hrvoje Niksic  <hniksic@xemacs.org>
3236
3237         * config.h.in: Initialize HAVE_GETADDRINFO and ENABLE_IPV6.
3238
3239         * all: Use #ifdef ENABLE_IPV6 instead of the older INET6.  Use
3240         HAVE_GETADDRINFO for getaddrinfo-related stuff.
3241
3242 2003-09-09  Hrvoje Niksic  <hniksic@xemacs.org>
3243
3244         * url.c (url_parse): Return an error if the URL contains a [...]
3245         IPv6 numeric address and we don't support IPv6.
3246
3247 2003-09-05  Hrvoje Niksic  <hniksic@xemacs.org>
3248
3249         * url.c (is_valid_ipv6_address): Modified to not require
3250         zero-terminated strings.
3251         (is_valid_ipv4_address): Ditto.
3252
3253 2003-09-05  Mauro Tortonesi <mauro@deepspace6.net>
3254
3255         src/url.c: added RFC 2732 compliance for URL parsing. The
3256         functions is_*_address valid are a modified version of
3257         glibc 2.3.2 inet_pton's code.
3258
3259 2003-09-03  Ahmon Dancy  <dancy@dancysoft.com>
3260
3261         * main.c init.c options.h: Added --retry-connrefused option so
3262         that Connection Refused failures are treated as non-fatal (when
3263         trying to retrieve from busy servers).
3264
3265         * wget.h: New CONNECT_ERROR macro for encapsulating this
3266         modification.
3267
3268         * ftp.c http.c : Use CONNECT_ERROR macro in places where
3269         ECONNREFUSED was checked.
3270
3271 2003-01-11  Ian Abbott  <abbotti@mev.co.uk>
3272
3273         * ftp.c (ftp_retrieve_glob): Reject insecure filenames as determined
3274         by calling new function has_insecure_name_p.  This is based on a
3275         patch by Red Hat.
3276
3277         * fnmatch.c (has_insecure_name_p): New function: returns non-zero
3278         if filename starts with `/' or contains `../' and is therefore
3279         considered insecure.
3280
3281         * fnmatch.h: Declare has_insecure_name_p().
3282
3283 2002-08-03  Hrvoje Niksic  <hniksic@xemacs.org>
3284
3285         * init.c (cmd_file): Allocate RESULT correctly.
3286
3287 2002-07-24  Hrvoje Niksic  <hniksic@xemacs.org>
3288
3289         * recur.c (retrieve_tree): Check whether downloaded_html_set is
3290         non-NULL before using it.
3291
3292 2002-05-27  Hrvoje Niksic  <hniksic@arsdigita.com>
3293
3294         * html-parse.c (NAME_CHAR_P): Allow almost any character here.
3295
3296 2002-05-24  Hrvoje Niksic  <hniksic@arsdigita.com>
3297
3298         * progress.c (bar_set_params): Fall back to dot progress if the
3299         terminal type is "emacs".
3300
3301 2002-05-20  Hrvoje Niksic  <hniksic@arsdigita.com>
3302
3303         * log.c: Don't #undef WGET_USE_STDARG.
3304
3305 2002-05-16  Hrvoje Niksic  <hniksic@arsdigita.com>
3306
3307         * hash.c (prime_size): Store the offset of the prime number in the
3308         prime table.  When searching, start with the given offset.
3309         (hash_table_new): Pass the pointer to ht->prime_offset to
3310         prime_size.
3311         (grow_hash_table): Ditto.
3312         (prime_size): Make 13 the first prime to make empty hash tables
3313         slightly smaller.
3314
3315 2002-05-16  Ian Abbott  <abbotti@mev.co.uk>
3316
3317         * recur.c (download_child_p): Minor optimization to avoid an
3318         unnecessary additional call to schemes_are_similar_p function.
3319
3320 2002-05-16  Ian Abbott  <abbotti@mev.co.uk>
3321
3322         * url.c (schemes_are_similar_p): New function to test enumerated
3323         scheme codes for similarity.
3324
3325         * url.h: Declare it.
3326
3327         * recur.c (download_child_p): Use it to compare schemes.  This
3328         also fixes a bug that allows hosts to be spanned (without the
3329         -H option) when the parent scheme is https and the child's is
3330         http or vice versa.
3331
3332 2002-05-14  Bill Richardson  <bill@riverstonenet.com>
3333
3334         * ftp.c (getftp): Don't ftruncate stdout.
3335
3336         * http.c (gethttp): Don't ftruncate stdout.
3337
3338 2002-05-09  Ian Abbott  <abbotti@mev.co.uk>
3339
3340         * cmpt.c (strptime_internal): Synched with glibc-2.1.3.
3341         (get_number): Ditto.
3342         (get_alt_number): Ditto.
3343         (__isleap): New function-like macro used by strptime.
3344         (day_of_the_week): New function used by strptime.
3345         (day_of_the_year): Ditto.
3346         (__mon_yday): Now shared by mktime and strptime implementations.
3347
3348 2002-05-08  Hrvoje Niksic  <hniksic@arsdigita.com>
3349
3350         * cookies.c (check_domain_match): Use match_tail in case
3351         insensitive mode.
3352
3353         * utils.c (match_tail): Allow the caller to specify case
3354         insensitive mode.
3355
3356         * cookies.c (store_cookie): When expiry_time is 0, print it as
3357         undefined, not indefinite.
3358
3359 2002-05-07  Ian Abbott  <abbotti@mev.co.uk>
3360
3361         * cookies.c (cookie_jar_process_set_cookie): Do not store
3362         discarded cookie.
3363
3364 2002-04-21  Hrvoje Niksic  <hniksic@arsdigita.com>
3365
3366         * cookies.c (check_domain_match): Allow cookies to be set for
3367         subdomains of unknown top-level domains under some circumstances.
3368
3369 2002-04-21  Thomas Lussnig  <thomas.lussnig@bewegungsmelder.de>
3370
3371         * gen_ssl.c:
3372         - allow checking of server cert
3373         - allow defining client cert type
3374         - allow limit of ssl protocol
3375         - check more return values
3376         - added debug message on break
3377
3378 2002-04-21  Hrvoje Niksic  <hniksic@arsdigita.com>
3379
3380         * recur.c (download_child_p): Revert order of items in check
3381         number 6 for clarity.
3382
3383 2002-04-20  Hrvoje Niksic  <hniksic@arsdigita.com>
3384
3385         * init.c: Ditto.
3386
3387         * main.c: Ditto.
3388
3389         * http.c: Use the new interface.
3390
3391         * cookies.c: Provide an OO-style "cookie jar" interface to enable
3392         separate cookie jars.
3393
3394         * http.c (http_atotm): Declare argument as const.
3395
3396 2002-04-20  Hrvoje Niksic  <hniksic@arsdigita.com>
3397
3398         * cookies.c (cookie_new): Default to PORT_ANY.
3399         (find_cookie_chain_exact): Only search by DOMAIN.
3400         (find_matching_cookie): Also check that PORT matches.
3401         (store_cookie): Only match the domain.
3402         (set_cookie_header_cb): When a cookie "fakes" a domain, assume it
3403         is valid for that host rather than discarding it completely.
3404         (find_matching_chains): Don't search by PORT.
3405         (matching_cookie): Also match PORT.
3406         (load_cookies): Set the port if specified, otherwise leave it as
3407         ANY.
3408         (save_cookies_mapper): Save the port if specified, otherwise leave
3409         it empty.
3410
3411 2002-04-19  Thomas Lussnig  <thomas.lussnig@bewegungsmelder.de>
3412
3413         * init.c: The option `egdfile' was not in sort order.
3414
3415 2002-04-16  Hrvoje Niksic  <hniksic@arsdigita.com>
3416
3417         * ftp.c (getftp): Treat directories that begin with <letter>: as
3418         absolute.
3419         (getftp): Strip trailing slashes from con->id before merging it
3420         with TARGET.
3421
3422 2002-04-16  Hrvoje Niksic  <hniksic@arsdigita.com>
3423
3424         * http.c (gethttp): If Content-Type is not given, assume
3425         text/html.
3426
3427 2002-04-15  Hrvoje Niksic  <hniksic@arsdigita.com>
3428
3429         * recur.c (download_child_p): Don't ignore rejection of HTML
3430         documents that are themselves leaves of recursion.
3431
3432 2002-04-15  Ian Abbott  <abbotti@mev.co.uk>
3433
3434         Makefile.in: Updated several dependencies for object files to take
3435         account of nested include files.
3436
3437 2002-04-15  Ian Abbott  <abbotti@mev.co.uk>
3438
3439         Makefile.in: The target `connect$o' (connect.o) now depends on
3440         `utils.h'
3441
3442 2002-04-15  Ian Abbott  <abbotti@mev.co.uk>
3443
3444         * host.c (SET_H_ERRNO): New function-like macro to set `h_errno'.
3445         (gethostbyname_with_timeout): Use it.
3446
3447         * utils.c: Don't define `SETJMP()', `run_with_timeout_env' or
3448         `abort_run_with_timeout()' when `USE_SIGNAL_TIMEOUT' is undefined.
3449
3450 2002-04-15  Hrvoje Niksic  <hniksic@arsdigita.com>
3451
3452         * host.c (getaddrinfo_with_timeout): New function.
3453         (gethostbyname_with_timeout): Ditto.
3454         (lookup_host): Use them.
3455
3456 2002-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
3457
3458         * utils.c (number_to_string): Handle the case when n < -INT_MAX.
3459
3460 2002-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
3461
3462         * init.c (comind): Use a marginally faster implementation of
3463         binary search.  To quote Martin Buchholz, "a nanosecond saved is a
3464         nanosecond earned."
3465
3466 2002-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
3467
3468         * main.c (print_help): Document `--post-data' and `--post-file'.
3469
3470 2002-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
3471
3472         * http.c (gethttp): Ditto.
3473
3474         * retr.c (retrieve_url): Initialize variables to appease the
3475         compiler.
3476
3477         * gen_sslfunc.c (ssl_iread): Don't handle EINTR when calling
3478         select_fd.
3479         (ssl_iwrite): Ditto.
3480
3481         * connect.c (select_fd): Rewrite to handle EINTR.  Set errno to
3482         ETIMEDOUT in case of timeout.
3483         (iread): No need to handle EINTR when calling select_fd.
3484         (iwrite): Ditto.
3485
3486 2002-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
3487
3488         * retr.c (retrieve_url): Make sure that POST is not honored for
3489         redirections.
3490
3491         * http.c (gethttp): Send the POST data when requested.
3492         (post_file): New function.
3493         (gethttp): Use it.
3494
3495         * main.c (main): Ditto.
3496
3497         * init.c: Add new options.
3498
3499         * options.h (struct options): New options post_data and
3500         post_file_name.
3501
3502 2002-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
3503
3504         * connect.c (connect_with_timeout): Firing SIGALRM can result in
3505         connect() exiting with EINTR.  Treat EINTR the same as ETIMEDOUT.
3506
3507 2002-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
3508
3509         * connect.c (connect_with_timeout): Use it.
3510
3511         * utils.c (run_with_timeout): New function.
3512
3513 2002-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
3514
3515         * url.c (getproxy): Accept a struct url argument.  This obviates
3516         the need for USE_PROXY_P.
3517
3518         * retr.c (retrieve_url): Allow proxy to be a non-FTP URL.
3519
3520         * ftp.c (getftp): Recognize FWTK-style proxy.
3521
3522 2002-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
3523
3524         * config.h.in: Only define _VA_LIST when compiled with gcc.
3525
3526 2002-04012  Ian Abbott  <abbotti@mev.co.uk>
3527
3528         * http.c (http_loop): Compensate for MS Windows two-second
3529         granularity of file modification time when comparing timestamps.
3530
3531         * ftp.c (ftp_retrieve_list): Ditto.
3532
3533 2002-04-12  Ian Abbott  <abbotti@mev.co.uk>
3534
3535         * utils.c (has_html_suffix_p): New function to test filename for
3536         common html extensions.
3537
3538         * utils.h: Declare it.
3539
3540         * http.c (http_loop): Use it instead of previous test.
3541
3542         * retr.c (retrieve_url): Ditto.
3543
3544         * recur.c (download_child_p): Ditto.
3545
3546 2002-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
3547
3548         * config.h.in: Define _VA_LIST on Solaris to prevent stdio.h from
3549         declaring va_list.
3550         From Kevin Rodgers <kevinr@ihs.com>.
3551
3552 2002-04-12  Ian Abbott  <abbotti@mev.co.uk>
3553
3554         * Makefile.in: Specify libtool mode explicitly when linking.
3555
3556 2002-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
3557
3558         * connect.c (connect_with_timeout): New function.
3559         (connect_to_one): Use it.
3560
3561         * config.h.in: Add stubs for HAVE_SIGSETJMP, HAVE_SIGBLOCK, and
3562         HAVE_SETJMP_H.
3563
3564 2002-04-11  Hrvoje Niksic  <hniksic@arsdigita.com>
3565
3566         * log.c: Set WGET_USE_STDARG if __STDC__ is defined and stdarg.h
3567         is present.
3568
3569 2002-04-11  Hrvoje Niksic  <hniksic@arsdigita.com>
3570
3571         * progress.c (bar_create): If INITIAL is larger than TOTAL, fix
3572         TOTAL.
3573         (bar_finish): Likewise.
3574
3575 2002-04-11  Hrvoje Niksic  <hniksic@arsdigita.com>
3576
3577         * html-url.c (tag_handle_form): New function.  Pick up form
3578         actions and mark them for conversion only.
3579
3580 2002-04-11  Hrvoje Niksic  <hniksic@arsdigita.com>
3581
3582         * progress.c (struct progress_implementation): Use PARAMS when
3583         declaring the parameters of *create, *update, *finish, and
3584         *set_params.
3585
3586         * netrc.c: Ditto.
3587
3588         * http.c: Reformat some function definitions so that ansi2knr can
3589         read them.
3590
3591         * hash.c (struct hash_table): Use the PARAMS macro around
3592         parameters in the declaration of hash_function and test_function.
3593         (prime_size): Spell 2580823717UL and 3355070839UL as (unsigned
3594         long)0x99d43ea5 and (unsigned long)0xc7fa5177 respectively, so
3595         that pre-ANSI compilers can read them.
3596         (find_mapping): Use PARAMS when declaring EQUALS.
3597         (hash_table_put): Ditto.
3598
3599         * ftp.h: Wrap the parameters of ftp_index declaration in PARAMS.
3600
3601         * cookies.c (cookie_new): Use (unsigned long)0 instead of 0UL,
3602         which was unsupported by pre-ANSI compilers.
3603
3604         From Nelson H. F. Beebe <beebe@math.utah.edu>, for the most part.
3605
3606 2002-04-11  Hrvoje Niksic  <hniksic@arsdigita.com>
3607
3608         * url.c (url_filename): Use compose_file_name regardless of
3609         whether opt.dirstruct is set.
3610         (mkstruct): Don't handle the query and the reencoding of DIR; that
3611         is done in compose_file_name.
3612
3613 2002-04-10  Hrvoje Niksic  <hniksic@arsdigita.com>
3614
3615         * wget.h: Ditto for extern char *exec_name.
3616
3617         * options.h: Don't guard against OPTIONS_DEFINED_HERE -- it is
3618         perfectly legal to follow an `extern' with a non-`extern' ones,
3619         provided the types match.
3620
3621         * main.c: Don't define OPTIONS_DEFINED_HERE.
3622
3623 2002-04-10  Hrvoje Niksic  <hniksic@arsdigita.com>
3624
3625         * progress.c (create_image): Revert to calculating ETA based on
3626         average download speed.
3627         (create_image): Don't print ETA until the download has been active
3628         for at least 3 seconds.
3629         (create_image): When ETA is not available, don't print anything.
3630         The previous version would print --:--.
3631
3632 2002-04-10  Hrvoje Niksic  <hniksic@arsdigita.com>
3633
3634         * progress.c (bar_update): Keep updating a subinterval until it
3635         reaches or exceeds a watermark.  That way the measurement will be
3636         guaranteed to span a configurable minimum of time.  The current
3637         default is 3s in 30 100ms intervals.
3638
3639 2002-04-09  Hrvoje Niksic  <hniksic@arsdigita.com>
3640
3641         * progress.c (bar_update): Maintain an array of the time it took
3642         to perform previous 30 network reads.
3643         (create_image): Calculate the download speed and ETA based on the
3644         last 30 reads, not the entire download.
3645         (create_image): Make sure that the ETA is not changed more than
3646         once per second.
3647
3648 2002-04-09  Ian Abbott  <abbotti@mev.co.uk>
3649
3650         * mswindows.c (borland_utime): New function conditionally defined
3651         when `HACK_BCC_UTIME_BUG' is defined.  A reimplementation of
3652         `utime()' as Borland's `utime()' function is broken on Windows 9x
3653         systems.  (Original patch by Chin-yuan Kuo <sr1111111@yahoo.com.tw>.)
3654
3655 2002-04-08  Hrvoje Niksic  <hniksic@arsdigita.com>
3656
3657         * ftp.c (ftp_loop): Propagate the result of ftp_retrieve_glob.
3658
3659 2002-03-26  Ian Abbott  <abbotti@mev.co.uk>
3660
3661         * Makefile.in: Updated several dependencies for object files.
3662
3663 2002-03-20  Ian Abbott  <abbotti@mev.co.uk>
3664
3665         * mswindows.c: Include "utils.h".
3666
3667 2002-03-18  Ian Abbott  <abbotti@mev.co.uk>
3668
3669         * host.h: Don't include netdb.h on windows.
3670
3671 2002-02-19  Hrvoje Niksic  <hniksic@arsdigita.com>
3672
3673         * recur.c (retrieve_tree): Handle the case when start_url doesn't
3674         parse.
3675
3676 2002-02-19  Andreas Damm  <andreas-sourceforge@radab.org>
3677
3678         * wget.h (DO_REALLOC_FROM_ALLOCA): Multiply with sizeof(type) when
3679         calling xmalloc and memcpy.
3680
3681 2002-02-19  Hrvoje Niksic  <hniksic@arsdigita.com>
3682
3683         * host.h: Include Unix-specific includes #ifndef WINDOWS.
3684         Patch originally provided by Christian Lackas.
3685
3686 2002-02-11  Christian Lackas  <delta@lackas.net>
3687
3688         * recur.c: recurive downloading for https fixed.
3689
3690 2002-02-19  Alan Eldridge  <alane@geeksrus.net>
3691
3692         * host.h: Also include <netinet/in.h> and <sys/socket.h>.
3693
3694         * ftp-basic.c: Also include <netinet/in.h>.
3695
3696 2002-02-05  Ian Abbott  <abbotti@mev.co.uk>
3697
3698         * http.c (gethttp): when -c used, mark already fully retrieved
3699         file as successfully retrieved.
3700
3701 2002-02-19  Hrvoje Niksic  <hniksic@arsdigita.com>
3702
3703         * url.c (url_parse): Don't treat '?' as query string separator
3704         when parsing FTP URLs.
3705
3706 2002-02-01  Hrvoje Niksic  <hniksic@arsdigita.com>
3707
3708         * html-url.c (tag_handle_meta): Don't crash on <meta
3709         http-equiv=refresh> where content is missing.
3710
3711 2002-01-31  Herold Heiko  <Heiko.Herold@previnet.it>
3712
3713         * ftp-basic.c, host.c: don't include sys/socket.h, arpa/inet.h,
3714         netdb.h on windows.
3715
3716 2002-01-30  Hrvoje Niksic  <hniksic@arsdigita.com>
3717
3718         * retr.c (retrieve_url): Remove redirection cycle detection.  This
3719         is because some sites legitimately redirect the user back to the
3720         same location, e.g. after an authorization check performed by
3721         another page.  MAX_REDIRECTIONS is still used to prevent infinite
3722         redirection loops.
3723
3724 2002-01-26  Hrvoje Niksic  <hniksic@arsdigita.com>
3725
3726         * http.c (gethttp): Wrap host name in square brackets if it
3727         contains a colon.
3728
3729 2002-01-26  Hrvoje Niksic  <hniksic@arsdigita.com>
3730
3731         * url.c (url_parse): Allow all hex digits, not only decimal ones,
3732         to form an IP address.
3733
3734 2002-01-26  Hrvoje Niksic  <hniksic@arsdigita.com>
3735
3736         * url.c (urlchr_table): Make square braces reserved, so we can
3737         parse http://[::1]/.
3738         (url_parse): Handle host in braces.
3739         (url_string): If url->host contains colons, wrap it in braces.
3740
3741 2002-01-24  Hrvoje Niksic  <hniksic@arsdigita.com>
3742
3743         * connect.c (resolve_bind_address): New function.
3744         (connect_to_one): Use it.
3745         (bindport): Ditto.
3746
3747         * init.c: Don't resolve bind-address here.
3748
3749         * host.c (wget_sockaddr_set_address): Would bug out with ADDR == NULL.
3750
3751 2002-01-24  Hrvoje Niksic  <hniksic@arsdigita.com>
3752
3753         * host.c (lookup_host): Use sizeof(ip4_address) to calculate the
3754         offset.
3755         (address_list_new): Use map_ipv4_to_ip.
3756         (wget_sockaddr_set_address): Convert ADDR to IPv4 before using it
3757         in IPv4 context.
3758
3759 2002-01-24  Hrvoje Niksic  <hniksic@arsdigita.com>
3760
3761         * source: Integrated IPv6 support.
3762         Written by Thomas Lussnig <thomas.lussnig@bewegungsmelder.de>.
3763
3764 2002-01-15  Ian Abbott  <abbotti@mev.co.uk>
3765
3766         * init.c (cmd_file): Change `\' to `/' for Windows (yes, really!)
3767         (cmd_directory): New function. Like cmd_file(), but strips
3768         trailing directory separators.
3769         (commands): Change action for "dirprefix" from `cmd_file' to
3770         `cmd_directory'.
3771
3772         * utils.c (make_directory): Allow intermediate `mkdir' calls to
3773         fail, as not all path components that do not exist should be
3774         directory components, especially under Windows.
3775
3776 2002-01-17  Hrvoje Niksic  <hniksic@arsdigita.com>
3777
3778         * netrc.c (parse_netrc): Skip leading whitespace before testing
3779         whether the line is empty.  Empty lines still contain the line
3780         terminator.
3781
3782 2002-01-15  Hrvoje Niksic  <hniksic@arsdigita.com>
3783
3784         * gen_sslfunc.c (ssl_iread): Call select on the file descriptor
3785         only if no data is pending in SSL buffers.
3786         From tony@bluetail.com.
3787
3788 2002-01-14  Hrvoje Niksic  <hniksic@arsdigita.com>
3789
3790         * headers.c (header_get): Strip trailing whitespace from the
3791         header.
3792
3793 2002-01-14  Hrvoje Niksic  <hniksic@arsdigita.com>
3794
3795         * url.c (parse_uname): URL-decode *USER and *PASSWD.
3796
3797 2002-01-07  Ian Abbott <abbotti@mev.co.uk>
3798
3799         * url.c (uri_merge_1): Deal with "net path" relative URL (one that
3800         starts with "//").
3801
3802 2002-01-14  Hrvoje Niksic  <hniksic@arsdigita.com>
3803
3804         * http.c (gethttp): Invalidate SOCK if get_contents encountered an
3805         error.
3806
3807 2001-12-24  Hrvoje Niksic  <hniksic@arsdigita.com>
3808
3809         * version.c: Wget 1.8.1 is released.
3810
3811 2001-12-19  Hrvoje Niksic  <hniksic@arsdigita.com>
3812
3813         * version.c: Wget 1.8.1-pre3 is released.
3814
3815 2001-12-19  Hrvoje Niksic  <hniksic@arsdigita.com>
3816
3817         * recur.c (retrieve_tree): Enqueue the canonical representation of
3818         start_url, so that the test against dl_url_file_map works.
3819
3820 2001-12-19  Hrvoje Niksic  <hniksic@arsdigita.com>
3821
3822         * log.c (logputs): Check for requested verbosity before printing
3823         anything.
3824
3825 2001-12-19  Hrvoje Niksic  <hniksic@arsdigita.com>
3826
3827         * html-url.c (tag_handle_link): Treat the "shortcut icon" link as
3828         inline.
3829
3830 2001-12-18  Hrvoje Niksic  <hniksic@arsdigita.com>
3831
3832         * recur.c (retrieve_tree): Make a copy of file obtained from
3833         dl_url_file_map because the code calls xfree(file) later.
3834
3835 2001-12-18  Hrvoje Niksic  <hniksic@arsdigita.com>
3836
3837         * recur.c (register_html): Maintain a hash table of HTML files
3838         along with the list.  Disallow duplicates.
3839         (retrieve_tree): Use downloaded_html_set to check whether the file
3840         found in dl_url_file_map is an HTML file, and descend into it if
3841         so.
3842         (convert_all_links): Don't guard against duplicates in
3843         downloaded_html_list, since they are no longer possible.
3844
3845 2001-12-18  Ian Abbott  <abbotti@mev.co.uk>
3846
3847         * recur.c (retrieve_tree): Pass on referring URL when retrieving
3848         recursed URL.
3849
3850 2001-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
3851
3852         * version.c: Wget 1.8.1-pre2 is released.
3853
3854 2001-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
3855
3856         * retr.c (sleep_between_retrievals): Simplify indentation.
3857
3858 2001-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
3859
3860         * gen_sslfunc.c (ssl_init_prng): Use random_number to get a byte
3861         of "randomness" at a time.
3862         (ssl_init_prng): Don't seed the PRNG; random_number will do that.
3863
3864         * retr.c (sleep_between_retrievals): Use it.  Make sure that the
3865         random amount averages in opt.wait.
3866         (sleep_between_retrievals): Don't seed the PRNG; random_number
3867         will do that.
3868
3869         * utils.c (random_number): New function.
3870
3871 2001-12-14  Hrvoje Niksic  <hniksic@arsdigita.com>
3872
3873         * url.c (path_simplify): Move here from utils.c, and make static.
3874
3875 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
3876
3877         * init.c (wgetrc_file_name): Print correct message when loading
3878         getenv("WGETRC") fails.
3879
3880 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
3881
3882         * recur.c (register_download): Don't abort when one URL references
3883         two different files.
3884
3885 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
3886
3887         * http.c (gethttp): Check for conn->scheme, not u->scheme, before
3888         calling ssl_iwrite.
3889
3890 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
3891
3892         * version.c: Wget 1.8.1-pre1 is released.
3893
3894 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
3895
3896         * res.c (matches): Fix broken URL in the docstring.
3897
3898 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
3899
3900         * html-url.c (tag_url_attributes): Mark <embed href=...> as
3901         external.
3902
3903 2001-12-12  Hrvoje Niksic  <hniksic@arsdigita.com>
3904
3905         * url.c (get_urls_file): Cosmetic changes.
3906
3907 2001-12-12  Hrvoje Niksic  <hniksic@arsdigita.com>
3908
3909         * html-url.c (append_one_url): Resurrect warning when unable to
3910         resolve a relative link.
3911
3912 2001-12-12  Hrvoje Niksic  <hniksic@arsdigita.com>
3913
3914         * html-url.c (collect_tags_mapper): Break into several functions.
3915         (tag_url_attributes): Collect <embed href=...>.
3916
3917 2001-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
3918
3919         * host.c: New type ipv4_address.  Use it consistently instead of
3920         `unsigned char[4]' and `unsigned char *'.
3921         (pretty_print_address): Accept a `const void *', to require even
3922         less casting.
3923
3924 2001-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
3925
3926         * ftp-ls.c (ftp_parse_vms_ls): Fix obvious memory leaks.
3927
3928 2001-12-10  Hrvoje Niksic  <hniksic@arsdigita.com>
3929
3930         * main.c (main): Initialize progress after fork_to_background, so
3931         that it knows when to use dots.
3932
3933         * mswindows.c (ws_hangup): Call log_request_redirect_output.
3934
3935         * utils.c (fork_to_background): Print the PID of the child
3936         process.
3937
3938         * log.c (log_request_redirect_output): Set a flag that output
3939         redirection has been requested.  Doing anything else in a signal
3940         handler is unsafe.
3941         (check_redirect_output): New function: check whether redirection
3942         has been requested and, if so, call redirect_output().
3943         (logputs): Call check_redirect_output.
3944         (logprintf): Ditto.
3945         (debug_logprintf): Ditto.
3946         (redirect_output): Print clearer messages.
3947
3948         * main.c (redirect_output_signal): Don't call
3949         redirect_output_signal directly.  Instead, call
3950         log_request_redirect_output.
3951
3952         * utils.c (memfatal): Ditto.
3953
3954         * progress.c (display_image): Use it.
3955
3956         * log.c (log_set_save_context): New function: allow the caller to
3957         turn off saving log context lines.
3958
3959 2001-12-10  Hrvoje Niksic  <hniksic@arsdigita.com>
3960
3961         * host.c (address_list_set_faulty): Uncomment a sanity check.
3962
3963 2001-12-10  Hrvoje Niksic  <hniksic@arsdigita.com>
3964
3965         * utils.c (long_to_string): Return a pointer after where the
3966         number ends.
3967         (long_to_string): Rename to number_to_string.
3968
3969 2001-12-10  Hrvoje Niksic  <hniksic@arsdigita.com>
3970
3971         * utils.c (path_simplify): Correctly handle the unlikely case that
3972         b starts out as path + 1.
3973
3974 2001-12-10  Hrvoje Niksic  <hniksic@arsdigita.com>
3975
3976         * utils.c (path_simplify): Rewrite, with better comments, and
3977         without the use of strcpy to move overlapping blocks.
3978
3979 2001-12-09  Hrvoje Niksic  <hniksic@arsdigita.com>
3980
3981         * init.c (cmd_spec_progress): Resurrect.  Check whether VAL is a
3982         valid progress type before setting it.
3983
3984 2001-12-09  Hrvoje Niksic  <hniksic@arsdigita.com>
3985
3986         * main.c (main): Remove stray debugging message.
3987
3988 2001-12-09  Hrvoje Niksic  <hniksic@arsdigita.com>
3989
3990         * progress.c (create_image): Fix ETA padding when hours are prined.
3991
3992 2001-12-09  Hrvoje Niksic  <hniksic@arsdigita.com>
3993
3994         * version.c: Wget 1.8 is released.
3995
3996 2001-12-09  Hrvoje Niksic  <hniksic@arsdigita.com>
3997
3998         * url.c (reencode_string): Declare static.
3999
4000         * res.c (registered_specs): Declare static.
4001
4002         * progress.c (current_impl_locked): Declare static.
4003
4004         * log.c (flush_log_p): Declare static.
4005         (needs_flushing): Ditto.
4006
4007         * http.c (digest_authentication_encode): Declare static.
4008
4009         * html-url.c (init_interesting): Declare static.
4010
4011         * host.c (host_name_addresses_map): Declare static.
4012
4013         * cookies.c (find_matching_chains): Declare static.
4014
4015         * ftp-ls.c (ftp_parse_vms_ls): Warn about the memory leak
4016         indicated by lint.
4017
4018         * utils.c (path_simplify): Remove unused variable STUB_CHAR.
4019
4020         * host.c (address_list_set_faulty): Document that INDEX is
4021         currently unused.
4022
4023         * url.c (rewrite_shorthand_url): Remove unused variable PATH.
4024
4025 2001-12-08  Hrvoje Niksic  <hniksic@arsdigita.com>
4026
4027         * version.c: Wget 1.8-pre2 is released.
4028
4029 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
4030
4031         * progress.c (progress_handle_sigwinch): Set up the signal again.
4032
4033         * utils.c: Include <sys/termios.h>, where Solaris defines
4034         TIOCGWINSZ.
4035
4036         * progress.c (bar_create): Don't use the last column on the screen.
4037         (create_image): Pad ETA to constant size.  Pad SIZE to nine digits
4038         only until it exceeded them.
4039
4040 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
4041
4042         * version.c: Wget 1.8-pre1 is released.
4043
4044 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
4045
4046         * progress.c (progress_create): Make sure that, when the output is
4047         redirected, the progress implementation gets changed to the
4048         fallback one.
4049         (bar_set_params): Set current_impl_locked to 1 when "force" is
4050         specified.
4051         (progress_create): Don't change the progress implementation if
4052         current_impl_locked is non-zero.
4053
4054         * main.c (redirect_output_signal): Call
4055         progress_schedule_redirect.
4056
4057         * progress.c (progress_schedule_redirect): New function.
4058
4059 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
4060
4061         * log.c (logvprintf): Restructure to allow being called multiple
4062         times.
4063         (logprintf): Call logvprintf in a loop.
4064         (debug_logprintf): Ditto.
4065
4066 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
4067
4068         * gen_sslfunc.c (ssl_init_prng): Allow the user to disable EGD by
4069         setting egd_file it to empty string.
4070
4071         * main.c (main): Change the option name from --sslegdsock to
4072         --egd-file.
4073
4074 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
4075
4076         * gen_sslfunc.c (ssl_init_prng): Make the printed message
4077         translatable.
4078
4079 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
4080
4081         * url.c (scheme_disable): New function.
4082
4083         * main.c (main): Call ssl_init_prng from here rather than from
4084         init_ssl, so that it has a chance to disable support for https
4085         before a URL has been resolved.
4086
4087         * gen_sslfunc.c (ssl_init_prng): Seed with rand() if all else
4088         failed.
4089         (ssl_init_prng): Disable support for https if seeding the PRNG
4090         fails.
4091
4092 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
4093
4094         * utils.c (read_whole_line): Handle lines beginning with \0.
4095
4096 2001-12-05  Hrvoje Niksic  <hniksic@arsdigita.com>
4097
4098         * recur.c (convert_all_links): Guard against duplicates in
4099         downloaded_html_files.
4100         (register_download): Don't invalidate similar-looking URLs.
4101         (match_except_index): New function.
4102
4103 2001-12-05  Hrvoje Niksic  <hniksic@arsdigita.com>
4104
4105         * utils.c (path_simplify): Document with test cases.
4106
4107 2001-12-04  Hrvoje Niksic  <hniksic@arsdigita.com>
4108
4109         * gen_sslfunc.c: Ditto.
4110
4111         * rbuf.c: Include <string.h>.
4112
4113 2001-12-04  Hrvoje Niksic  <hniksic@arsdigita.com>
4114
4115         * recur.c (retrieve_tree): Check whether the URL was already
4116         downloaded before downloading it again.
4117         (descend_child_p): Renamed to download_child_p.
4118         (register_download): When one URL is downloaded to a file already
4119         "owned" by another URL, delete all references that map any URL to
4120         that file.
4121         (register_delete_file): New function.
4122         (retrieve_tree): Use it after deleting a file.
4123
4124         * url.c (url_parse): Re-canonicalize the URL also if the path is
4125         empty, so that e.g. "http://www.server.com" ->
4126         "http://www.server.com/".
4127         (lowercase_str): Use ISUPPER instead of !ISLOWER.
4128
4129         * retr.c (retrieve_url): Use the canonical URL form when calling
4130         register_download().
4131
4132 2001-12-04  Ian Abbott <abbotti@mev.co.uk>
4133
4134         * snprintf.c (dopr): Use `unsigned int' as the second argument to
4135         va_arg when casting to `unsigned short' is intended.
4136
4137 2001-12-04  Herold Heiko  <Heiko.Herold@previnet.it>
4138
4139         * gen_sslfunc.c: on windows provide ssl crypto random
4140           initialization through RAND_screen(); could possibly
4141           be not enough for strong ssl communication (see the
4142           relevant manual page from the openssl package).
4143
4144 2001-12-04  Hrvoje Niksic  <hniksic@arsdigita.com>
4145
4146         * url.c (local_quote_string): Reenable quoting of question marks,
4147         but only when `--html-extension' is used.
4148
4149 2001-12-03  Hrvoje Niksic  <hniksic@arsdigita.com>
4150
4151         * version.c: Wget 1.8-beta3 is released.
4152
4153 2001-12-03  Hrvoje Niksic  <hniksic@arsdigita.com>
4154
4155         * snprintf.c (dopr): Cast the result of va_arg to short int and
4156         short unsigned int where these types are expected to be used.
4157
4158 2001-12-03  Hrvoje Niksic  <hniksic@arsdigita.com>
4159
4160         * snprintf.c (dopr): Replace `short int' and `unsigned short int'
4161         with `int' when using it as the second argument to `va_arg'.
4162
4163 2001-12-03  Hrvoje Niksic  <hniksic@arsdigita.com>
4164
4165         * host.c (address_list_new_one): New function.
4166         (lookup_host): Use it.
4167
4168 2001-12-03  Andre Majorel  <amajorel@teaser.fr>
4169
4170         * host.c (lookup_host): Don't initialize TMPSTORE directly because
4171         it's not legal C.
4172
4173 2001-12-03  Hrvoje Niksic  <hniksic@arsdigita.com>
4174
4175         * ftp-basic.c (ftp_port): Don't return HOSTERR if we fail getting
4176         the socket data.
4177
4178         * ftp.c: Ditto.
4179
4180         * http.c: No need to declare h_errno.
4181
4182         * host.c: Declare h_errno.
4183
4184 2001-12-02  Hrvoje Niksic  <hniksic@arsdigita.com>
4185
4186         * utils.c (file_merge): If BASE doesn't contain a slash, just
4187         return a copy of FILE.
4188
4189 2001-12-02  Hrvoje Niksic  <hniksic@arsdigita.com>
4190
4191         * version.c: Wget 1.8-beta2 is released.
4192
4193 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
4194
4195         * ftp.c (getftp): When PWD fails, assume "/".
4196
4197         * ftp-basic.c (ftp_syst): Fix indentation.
4198
4199 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
4200
4201         * url.c (get_urls_file): If opt.base_href is specified, merge each
4202         URL with the base.
4203
4204 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
4205
4206         * main.c (print_help): Don't document the removed `-nh'.
4207
4208 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
4209
4210         * url.c (url_full_path): Document better.
4211
4212         * http.c (gethttp): Use the full path when creating digest
4213         authorization.
4214
4215 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
4216
4217         * cookies.c (path_matches): Return 0 if PREFIX doesn't begin with
4218         '/'.
4219
4220 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
4221
4222         * cookies.c (path_matches): FULL_PATH doesn't begin with '/', but
4223         PREFIX does.
4224
4225 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
4226
4227         * cookies.c (check_domain_match): Reimplement to match Netscape's
4228         "preliminary specification" for cookies.
4229
4230 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
4231
4232         * url.c (replace_attr_refresh_hack): New function.
4233         (convert_links): Call replace_attr_refresh_hack for Refresh
4234         links.  It will add the "TMOUT; URL=" junk before the link.
4235
4236         * html-url.c (collect_tags_mapper): Set ID to the ID of the
4237         "content" attribute, not "http-equiv".
4238         (collect_tags_mapper): Don't use OFFSET to hack the raw_* values;
4239         instead, store the information that this entry belongs to a
4240         "refresh" link.
4241
4242 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
4243
4244         * version.c: Wget 1.8-beta1 is released.
4245
4246 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
4247
4248         * recur.c (retrieve_tree): Allow -p retrievals to exceed maximum
4249         depth by more than one.
4250
4251 2001-11-30  Hrvoje Niksic  <hniksic@arsdigita.com>
4252
4253         * retr.c (retrieve_url): Don't allow more than 20 redirections.
4254
4255 2001-11-30  Hrvoje Niksic  <hniksic@arsdigita.com>
4256
4257         * recur.c (retrieve_tree): Skip the non-inline entries when
4258         enqueuing the children of a leaf HTML node in -p mode.
4259         (descend_url_p): Ignore opt.no_parent when in -p mode and UPOS is
4260         "inline".
4261
4262         * html-url.c (get_urls_html): Don't accept dash_p_leaf_HTML.
4263         (collect_tags_mapper): When an entry is "inline", mark it as such.
4264
4265         * recur.c (descend_url_p): Fix test when checking for
4266         acceptance/rejection rules.
4267
4268 2001-10-31 Daniel BODEA <dali@dali-designs.com>
4269
4270         * netrc.c (search_netrc): When slack_default is 0, still look for
4271         an account with matching password, just not the "default account".
4272         HTTP Authorization using .netrc should now work as expected.
4273
4274 2001-11-30  T. Bharath  <TBharath@responsenetworks.com>
4275
4276         * http.c (persistent_available_p): Call SHUTDOWN_SSL if
4277         test_socket_open fails.
4278
4279 2001-11-30  Hrvoje Niksic  <hniksic@arsdigita.com>
4280
4281         * progress.c (display_image): Just print one CR to reset the
4282         cursor position.
4283
4284 2001-11-30  Christian Fraenkel  <c.fraenkel@gmx.net>
4285
4286         * init.c: New command `ssl_egd_sock'.
4287
4288         * main.c (main): New option `--sslegdsock'.
4289
4290         * gen_sslfunc.c (ssl_init_prng): Seed the RNG using EGD.
4291
4292 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
4293
4294         * cmpt.c (memmove): Include a simple memmove implementation.
4295
4296 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
4297
4298         * headers: Guard against header files being included twice.
4299
4300 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
4301
4302         * gen-md5.c: Use unsigned char * as the buffer argument to
4303         gen_md5_update.
4304
4305 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
4306
4307         * connect.h: Declare select_fd.
4308
4309 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
4310
4311         * recur.c (descend_url_p): When resolving no_parent, compare with
4312         start_url, not parent url.  Otherwise link from /a/b/ to /a/c/
4313         wouldn't be followed, although the download started from /a/.
4314
4315 2001-01-23  Herold Heiko  <Heiko.Herold@previnet.it>
4316
4317         * config.h.ms, mswindows.h: defined HAVE_ISATTY, use _isatty for
4318         MS VC; somebody with Borland compiler please check and provide
4319         patch if possible;
4320
4321         * cmpt.c: provided a usleep emulation.
4322
4323 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
4324
4325         * host.c (address_list_new): Initialize al->faulty.
4326
4327 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
4328
4329         * http.c (http_process_range): Accept the broken output of
4330         "JavaWebServer/1.1.1".
4331
4332 2001-11-28  Hrvoje Niksic  <hniksic@arsdigita.com>
4333
4334         * progress.c (dot_set_params): If PARAMS is unspecified, use
4335         dot_style, if available.
4336
4337         * init.c: Ditto.
4338
4339         * main.c (main): Resurect --dot-style.
4340
4341         * progress.c (dot_finish): Print the quantity if we're left at the
4342         beginning of a row.
4343
4344 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
4345
4346         * cmpt.c (random): Removed.
4347
4348         * retr.c (sleep_between_retrievals): Use the more portable rand()
4349         instead of random().
4350
4351 2001-11-27  Ian Abbott <abbotti@mev.co.uk>
4352
4353         * retr.c (retrieve_from_file): Initialize `new_file' to NULL to
4354         prevent seg fault.
4355
4356 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
4357
4358         * connect.c (connect_to_many): Use address_list_set_faulty to
4359         prevent the faulty address from being reused.
4360
4361         * host.c (address_list_set_faulty): New function.
4362         (address_list_get_bounds): New function, instead of
4363         address_list_count.
4364
4365 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
4366
4367         * url.c (convert_links): Don't translate %d-%d.
4368
4369         * main.c (print_help): Remove stray HAVE_RANDOM code.
4370
4371 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
4372
4373         * ftp.c (getftp): Improve output after sending PASV.  Don't
4374         attempt to "look up" the IP address we already know; call
4375         connect_to_one directly.
4376
4377 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
4378
4379         * progress.c: Change the default progress implementation to "bar".
4380
4381 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
4382
4383         * progress.c (bar_create): Print two newlines.
4384
4385 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
4386
4387         * cmpt.c (random): New function, a simple-minded replacement for
4388         random() on systems that don't have it.
4389
4390 2001-11-26  Hrvoje Niksic  <hniksic@arsdigita.com>
4391
4392         * config.h.in: Put a HAVE_USLEEP stub.
4393
4394         * cmpt.c (usleep): Replacement implementation of usleep using
4395         select.
4396
4397         * init.c: New option init_rate.
4398
4399         * main.c (main): New option --limit-rate.
4400
4401         * retr.c (limit_bandwidth): New function.
4402         (get_contents): Call it to limit the bandwidth used when
4403         downloading.
4404
4405         * progress.c (dot_update): Would print the wrong download speed on
4406         rows other than the first one when the download was continued.
4407         (dot_finish): Ditto.
4408
4409 2001-11-26  Ian Abbott <abbotti@mev.co.uk>
4410
4411         * http.c (gethttp): fix undeclared variable 'err' when compiled
4412         with HAVE_SSL.
4413
4414 2001-11-26  Hrvoje Niksic  <hniksic@arsdigita.com>
4415
4416         * progress.c: Don't allocate new timers; use the timing data
4417         propagated from the caller.
4418
4419         * retr.c (get_contents): Allocate and use a timer.
4420
4421 2001-11-26  Hrvoje Niksic  <hniksic@arsdigita.com>
4422
4423         * http.c (last_host_ip): Made into an address_list.
4424         (invalidate_persistent): Release pc_last_host_ip.
4425         (register_persistent): Use lookup_host.
4426         (persistent_available_p): Check for equality of hosts using
4427         address_list_match_all.  Call address_list_release.
4428         (http_cleanup): New function.
4429
4430         * ftp.c (getftp): Use lookup_host and connect_to_many.
4431
4432         * http.c (gethttp): Use lookup_host and connect_to_many.
4433
4434         * connect.c (make_connection): Removed.
4435         (connect_to_one): New function.
4436         (connect_to_many): Ditto.
4437         (set_connection_host_name): Ditto.
4438
4439         * host.c (lookup_host): New function; new return type.
4440         (address_list_new): New function.
4441         (address_list_count): Ditto.
4442         (address_list_copy_one): Ditto.
4443         (address_list_delete): Ditto.
4444         (address_list_release): Ditto.
4445         (pretty_print_address): Ditto.
4446
4447 2001-11-26  Hrvoje Niksic  <hniksic@arsdigita.com>
4448
4449         * recur.c (retrieve_tree): In case of followed redirection,
4450         blacklist the pre-redirection URL.
4451
4452 2001-11-26  Hrvoje Niksic  <hniksic@arsdigita.com>
4453
4454         * recur.c (descend_redirect_p): New function.
4455         (retrieve_tree): Make sure redirections are not blindly followed.
4456
4457 2001-11-04  Alan Eldridge  <alane@geeksrus.net>
4458
4459         * config.h.in: added HAVE_RANDOM.
4460
4461         * options.h: added random_wait to struct options.
4462
4463         * main.c (print_help [HAVE_RANDOM], main): added arg parsing, help
4464         for --random-wait.
4465
4466         * retr.c (sleep_between_retrievals) [HAVE_RANDOM]: added
4467         implementation of random wait times.
4468
4469         * init.c (commands): added "randomwait" keyword.
4470
4471 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
4472
4473         * recur.c (descend_url_p): Be more conservative with blacklisting
4474         URLs.
4475         (convert_all_links): Print how many files have been converted, and
4476         how long it took.
4477
4478         * progress.c (create_image): Place the number of downloaded bytes
4479         right after the progress bar.
4480
4481         * utils.c (suffix): Return a pointer into the string.
4482
4483 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
4484
4485         * url.c (convert_links): Handle CO_NULLIFY_BASE.
4486
4487         * recur.c (retrieve_tree): Ignore download-ignorable children.
4488         (convert_all_links): Specify CO_NULLIFY_BASE when link_base_p.
4489
4490         * html-url.c (handle_link): Return the newly created urlpos.
4491         (collect_tags_mapper): When dealing with BASE, store the base
4492         reference and mark it as download-ignorable.
4493
4494 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
4495
4496         * url.c (convert_links): Attempt to quote '?' as "%3F" when
4497         linking to local files.  Given up on the attempt, as it breaks
4498         local browsing.
4499
4500 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
4501
4502         * main.c (private_initialize): Removed.
4503         (main): Don't call private_initialize.
4504
4505         * http.c: Call lookup_host.
4506
4507         * host.c (host_init): Removed.
4508         (add_host_to_cache): Initialize host_name_address_map here, on
4509         demand.
4510         (ngethostbyname): Commented out.
4511
4512         * connect.c (make_connection): Remove dead code; use lookup_host.
4513
4514         * host.c (store_hostaddress): Renamed to lookup_host and reversed
4515         the args.
4516         Removed host_address_name_map and host_slave_master_map.
4517
4518 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
4519
4520         * progress.c (dot_create): Align the "[ skipping ... ]" string
4521         with the dots.
4522
4523         * retr.c (rate): Split into two functions: calc_rate and
4524         retr_rate.
4525
4526         * progress.c (create_image): Draw a dummy progress bar even when
4527         total size is unknown.
4528         (display_image): Place the text cursor at the end of the "image".
4529
4530 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
4531
4532         * url.c (reencode_string): Use unsigned char, not char --
4533         otherwise the hex digits come out wrong for 8-bit chars such as
4534         nbsp.
4535         (lowercase_str): New function.
4536         (url_parse): Canonicalize u->url if needed.
4537         (get_urls_file): Parse each URL, and return only the valid ones.
4538         (free_urlpos): Call url_free.
4539         (mkstruct): Add :port if the port is non-standard.
4540         (mkstruct): Append the query string to the file name, if any.
4541         (urlpath_length): Use strpbrk_or_eos.
4542         (uri_merge_1): Handle the cases where LINK is an empty string,
4543         where LINK consists only of query, and where LINK consists only of
4544         fragment.
4545         (convert_links): Count and report both kinds of conversion.
4546         (downloaded_file): Use a hash table, not a list.
4547         (downloaded_files_free): Free the hash table.
4548
4549         * retr.c (retrieve_from_file): Ditto.
4550
4551         * main.c (main): Call either retrieve_url or retrieve_tree
4552         for each URL, not both.
4553
4554         * retr.c (register_all_redirections): New function.
4555         (register_redirections_mapper): Ditto.
4556         (retrieve_url): Register the redirections.
4557         (retrieve_url): Make the string "Error parsing proxy ..."
4558         translatable.
4559
4560         * res.c (add_path): Strip leading slash from robots.txt paths so
4561         that the path representations are "compatible".
4562         (free_specs): Free each individual path, too.
4563         (res_cleanup): New function.
4564         (cleanup_hash_table_mapper): Ditto.
4565
4566         * recur.c (url_queue_new): New function.
4567         (url_queue_delete): Ditto.
4568         (url_enqueue): Ditto.
4569         (url_dequeue): Ditto.
4570         (retrieve_tree): New function, replacement for recursive_retrieve.
4571         (descend_url_p): New function.
4572         (register_redirection): New function.
4573
4574         * progress.c (create_image): Cosmetic changes.
4575
4576         * init.c (cleanup): Do all those complex cleanups only if
4577         DEBUG_MALLOC is defined.
4578
4579         * main.c: Removed --simple-check and the corresponding
4580         simple_host_check in init.c.
4581
4582         * html-url.c (handle_link): Parse the URL here, and propagate the
4583         parsed URL to the caller, who would otherwise have to parse it
4584         again.
4585
4586         * host.c (xstrdup_lower): Moved to utils.c.
4587         (realhost): Removed.
4588         (same_host): Ditto.
4589
4590 2001-11-24  Hrvoje Niksic  <hniksic@arsdigita.com>
4591
4592         * utils.c (path_simplify): Preserver the (non-)existence of
4593         leading slash.  Return non-zero if changes were made.
4594
4595 2001-11-24  Hrvoje Niksic  <hniksic@arsdigita.com>
4596
4597         * progress.c (bar_update): Don't modify bp->total_length if it is
4598         zero.
4599
4600 2001-11-24  Hrvoje Niksic  <hniksic@arsdigita.com>
4601
4602         * retr.c (retrieve_url): When the redirection URL doesn't parse,
4603         print the correct error message rather than "UNKNOWN".
4604
4605 2001-11-24  Hrvoje Niksic  <hniksic@arsdigita.com>
4606
4607         * progress.c (bar_finish): If the timer didn't record any time
4608         since the download beginning, fake 1ms.
4609
4610 2001-11-24  Hrvoje Niksic  <hniksic@arsdigita.com>
4611
4612         * recur.c (recursive_retrieve): Fix typo.
4613
4614 2001-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
4615
4616         * progress.c (create_image): Don't translate "%ld ".
4617
4618 2001-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
4619
4620         * progress.c (bar_set_params): Allow the user to force the use of
4621         the bar.
4622
4623 2001-11-23  Lemble Gregory  <gregory.lemble@st.com>
4624
4625         * gen_sslfunc.c (ssl_init_prng): New function; seed the SSL RNG.
4626
4627 2001-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
4628
4629         * progress.c: Renamed dp_* functions to dot_* for greater clarity
4630         and consistency with bar_*.
4631         (print_download_speed): Get rid of the unneeded '@' character.
4632         (create_image): Fix download rate geometry.
4633
4634         * progress.c (print_elapsed): Remove spurious space.
4635         (print_elapsed): Renamed to print_download_speed, since that's
4636         what it does.
4637
4638 2001-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
4639
4640         * progress.c (bar_update): If the downloaded amount becomes larger
4641         than the expected amount, adjust the expected amount accordingly.
4642
4643 2001-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
4644
4645         * utils.c (determine_screen_width): New function.
4646
4647         * main.c (main): New option `--progress=TYPE'.
4648         (main): Implement compatibility with the old option `--dot-style'.
4649
4650         * init.c: Removed cmd_spec_dotstyle -- that logic is now in
4651         dp_set_params.
4652         (cmd_spec_progress): New function.
4653
4654         * retr.c (get_contents): Use the progress_* functions instead of
4655         the old show_progress().
4656         (show_progress): Removed.
4657         (rate): Print "xxxx.xx K/s" instead of "KB/s".  Ditto for MB/s,
4658         etc.
4659
4660         * progress.c (set_progress_implementation): New function.
4661         (valid_progress_implementation_p): Ditto.
4662         (progress_create): Ditto.
4663         (progress_update): Ditto.
4664         (progress_finish): Ditto.
4665         (dp_create): Ditto.
4666         (dp_update): Ditto.
4667         (dp_finish): Ditto.
4668         (dp_set_params): Ditto.
4669         (print_elapsed): Ditto.
4670
4671 2001-11-22  Hrvoje Niksic  <hniksic@arsdigita.com>
4672
4673         * retr.c (show_progress): Use it.
4674
4675         * log.c (log_set_flush): New function.
4676
4677 2001-11-22  Hrvoje Niksic  <hniksic@arsdigita.com>
4678
4679         * utils.c (path_simplify): Don't remove trailing slashes.
4680
4681         * ftp.c (ftp_get_listing): Use it.
4682
4683         * utils.c (file_merge): New function.
4684
4685         * url.c (opt_url): Removed.
4686
4687         * recur.c (recursive_retrieve): Inline "opt_url" logic.
4688
4689         * main.c (main): Use xfree(), not free().
4690
4691         * url.c (rewrite_url_maybe): Renamed to rewrite_shorthand_url.
4692
4693         * ftp.c (ccon): Move `ccon' typedef here, since it's only used
4694         internally.
4695
4696         * config.h.in: Include a stub for HAVE_STRPBRK.
4697
4698         * cmpt.c (strpbrk): Include a replacement for systems without
4699         strpbrk().
4700
4701         * ftp.c: Use url_set_dir and url_set_file when modifying the URL.
4702
4703         * url.c (url_set_dir): New function.
4704         (url_set_file): Ditto.
4705
4706         * ftp-basic.c (ftp_process_type): Process FTP type here; the URL
4707         parser makes the URL "params" available, so we can do that in this
4708         function.
4709
4710         * retr.c: Ditto.
4711
4712         * ftp.c: Ditto; pass the local file information in `ccon'.
4713
4714         * http.c: Get rid of the ugly kludge that had URL being replaced
4715         with the proxy URL when proxy retrieval was requested.  Use a
4716         separate parameter to http_loop and gethttp for the proxy URL.
4717
4718         * http.c: Changed to reflect the fact that local file, proxy, and
4719         referer information are no longer stored in struct url.  The local
4720         file information is passed in `struct hstat' now.
4721
4722         * url.c: Reworked URL parsing to be more regular.  Reencode the
4723         URL using reencode_string.
4724         Removed non-URL-related information from struct url.  This
4725         includes fields `proxy', `local', and `referer'.
4726
4727 2001-11-22  Jochen Hein  <jochen@jochen.org>
4728
4729         * main.c (main): Split the copyright notice for easier
4730         translation.
4731
4732 2001-08-21  Dave Turner <dct25@hermes.cam.ac.uk>
4733
4734         * ftp-basic.c (ftp_size): New function to send non-standard SIZE
4735           command to server to request file size.
4736         * ftp.h (ftp_size): Export it.
4737         * ftp.c (getftp): Use new ftp_size function if restoring
4738           transfer of a file with unknown size.
4739
4740 2001-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
4741
4742         * url.c (parseurl): Don't depend on the now-obsolete TYPE.
4743
4744 2001-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
4745
4746         * url.c (getproxy): Handle URL shorthands.
4747
4748 2001-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
4749
4750         * main.c: Remove --wait / --waitretry backwards compatibility
4751         code.
4752
4753 2001-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
4754
4755         * main.c (main): Use it.
4756
4757         * url.c (rewrite_url_maybe): New function.
4758
4759 2001-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
4760
4761         * url.c: Clean up handling of URL schemes.
4762
4763 2001-05-13  Hrvoje Niksic  <hniksic@arsdigita.com>
4764
4765         * url.c: Get rid of `protostrings'.
4766         (skip_proto): Don't use protostrings.
4767         (has_proto): Ditto.
4768
4769 2001-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
4770
4771         * Makefile.in: Conditionally compile getopt.o.
4772
4773 2001-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
4774
4775         * md5.h: Renamed to gnu-md5.h.
4776
4777         * md5.c: Renamed to gnu-md5.c.
4778
4779         * http.c: Ditto.
4780
4781         * ftp-opie.c: Use the new macros.
4782
4783         * sysdep.h: Define md5-related macros.
4784
4785         * config.h.in: Define HAVE_SOLARIS_MD5 or HAVE_BUILTIN_MD5
4786         depending on which md5 implementation is used.
4787
4788 2001-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
4789
4790         * res.c (res_register_specs): Initialize OLD and HP_OLD to appease
4791         the compiler.
4792
4793 2001-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
4794
4795         * http.c (gethttp): Print the whole response line when printing
4796         headers is requested.
4797
4798 2001-05-12  Hrvoje Niksic  <hniksic@arsdigita.com>
4799
4800         * res.c: New file.  Implement all RES-related code here.
4801
4802 2001-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
4803
4804         * version.c: Wget 1.7.1 is released.
4805
4806 2001-11-16  Hrvoje Niksic  <hniksic@arsdigita.com>
4807
4808         * headers.c (header_extract_number): Ignore trailing whitespace.
4809
4810 2001-08-24  Ian Abbott  <abbotti@mev.co.uk>
4811
4812         * html-url.c (collect_tags_mapper): Fix bug converting links
4813         with -k option for tags with multiple link attributes by
4814         handling links in the order they appear.
4815
4816 2001-08-15  Ian Abbott  <abbotti@mev.co.uk>
4817
4818         * ftp.c (ftp_loop_internal): Avoid a potential buffer overflow in
4819           the call to the 'rate' function by moving it past the error
4820           checking for the 'getftp' function return value.
4821
4822 2001-11-16  Hrvoje Niksic  <hniksic@arsdigita.com>
4823
4824         * html-parse.c (advance_declaration): Use 0x22 instead of '"' or
4825         '\"'.  Different compilers' assert macros are broken in different
4826         ways.
4827
4828 2001-09-29  Christian Fraenkel  <c.fraenkel@gmx.net>
4829
4830         * http.c (gethttp): print debug output for errors occuring during
4831         the ssl handshake.
4832
4833 2001-11-16  Chris Seawood  <cls@seawood.org>
4834
4835         * init.c: Ditto.
4836
4837         * host.c: Ditto.
4838
4839         * connect.c: Ditto.
4840
4841         * sysdep.h: Support compilation under BEOS.
4842
4843 2001-06-08  Edward J. Sabol  <sabol@alderaan.gsfc.nasa.gov>
4844
4845         * url.c (url_equal): Fix a memory leak when parseurl returns an
4846         error on the second URL. Also, since url_equal is not used at the
4847         moment, do not compile it.
4848
4849         * url.h: Ditto for the prototype of url_equal.
4850
4851 2001-11-16  Hrvoje Niksic  <hniksic@arsdigita.com>
4852
4853         * html-parse.c (map_html_tags): Support XML-style empty tags.
4854
4855 2001-06-26  Hrvoje Niksic  <hniksic@arsdigita.com>
4856
4857         * wget.h (DO_REALLOC_FROM_ALLOCA): Check for do_realloc_newsize in
4858         loop condition because we're no longer setting SIZEVAR here.
4859
4860 2001-06-26  Hrvoje Niksic  <hniksic@arsdigita.com>
4861
4862         * wget.h (DO_REALLOC_FROM_ALLOCA): Set SIZEVAR after the memcpy()
4863         call because it needs the old value.
4864
4865 2001-06-18  Hrvoje Niksic  <hniksic@arsdigita.com>
4866
4867         * cookies.c (ATTR_NAME_CHAR): Allow almost any character to be in
4868         an attribute name.
4869
4870 2001-06-18  Hrvoje Niksic  <hniksic@arsdigita.com>
4871
4872         * url.c (url_filename): Make sure that slashes that sneak in to
4873         u->file via query string get protected.
4874         (file_name_protect_query_string): New function.
4875
4876 2001-06-14  Hrvoje Niksic  <hniksic@arsdigita.com>
4877
4878         * recur.c (recursive_retrieve): Also check undesirable_urls with
4879         canonicalized URL.
4880
4881 2001-06-14  Hrvoje Niksic  <hniksic@arsdigita.com>
4882
4883         * http.c (gethttp): Search `.netrc' with real host, not the proxy
4884         one.
4885
4886 2001-06-14  Hrvoje Niksic  <hniksic@arsdigita.com>
4887
4888         * sysdep.h (MAP_FAILED): Provide MAP_FAILED for systems that don't
4889         define it.
4890
4891 2001-06-09  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
4892
4893         * ftp.h: Provide correct prototype for ftp_parse_ls().
4894
4895 2001-06-04  Hrvoje Niksic  <hniksic@arsdigita.com>
4896
4897         * version.c: Wget 1.7 is released.
4898
4899 2001-06-03  Karl Eichwalder  <ke@suse.de>
4900
4901         * ftp-ls.c (ftp_parse_ls): Fix typo.
4902
4903 2001-05-27  Hrvoje Niksic  <hniksic@arsdigita.com>
4904
4905         * all: Update copyright information.
4906
4907 2001-05-26  Hrvoje Niksic  <hniksic@arsdigita.com>
4908
4909         * http.c (gethttp): Indicate that the continued download failed
4910         for *this* file.
4911
4912 2001-05-26  Hrvoje Niksic  <hniksic@arsdigita.com>
4913
4914         * version.c: Wget 1.7-pre1 is released.
4915
4916 2001-05-26  Hrvoje Niksic  <hniksic@arsdigita.com>
4917
4918         * version.c: Updated version to 1.7-pre1.
4919
4920 2001-05-14  Hrvoje Niksic  <hniksic@arsdigita.com>
4921
4922         * gen_sslfunc.c: Don't include <sys/time.h> directly.
4923
4924 2001-05-14  Hrvoje Niksic  <hniksic@arsdigita.com>
4925
4926         * http.c (gethttp): Use real URL data for cookies, not the proxy
4927         stuff.
4928
4929 2001-05-12  Hrvoje Niksic  <hniksic@arsdigita.com>
4930
4931         * main.c (print_help): Document `--no-http-keep-alive'.
4932
4933         * utils.c (numdigit): Handle negative numbers *correctly*.
4934
4935         * hash.c (make_nocase_string_hash_table): Use term "nocase" rather
4936         than the confusing "unsigned".
4937
4938         * utils.c (string_set_contains): Renamed from string_set_exists.
4939
4940         * hash.c (hash_table_contains): Renamed from hash_table_exists.
4941
4942         * cookies.c: Move case-insensitive hash tables to hash.c.
4943
4944 2001-05-09  Hrvoje Niksic  <hniksic@arsdigita.com>
4945
4946         * http.c (gethttp): Before concluding that the file is already
4947         fully retrieved, make sure that the file existed and `Range' was
4948         actually requested.
4949
4950 2001-05-09  Hrvoje Niksic  <hniksic@arsdigita.com>
4951
4952         * cookies.c (eliminate_dups): New function.
4953         (build_cookies_request): Use it.
4954         (build_cookies_request): Set chain_store_size after reallocating
4955         all_chains.
4956         (check_domain_match): Annotated for easier future debugging.
4957         (store_cookie): In the debug message, print whether the cookie is
4958         permanent.
4959
4960 2001-05-08  Hrvoje Niksic  <hniksic@arsdigita.com>
4961
4962         * http.c (http_loop): Reset no_truncate before deciding whether to
4963         set it.
4964         (gethttp): Further clarify "-c conflicts with existing file" error
4965         message, based on input from Herold Heiko.
4966
4967 2001-05-07  Hrvoje Niksic  <hniksic@arsdigita.com>
4968
4969         * http.c (http_loop): If restval is set, set no_truncate to 1
4970         unconditionally.
4971
4972 2001-05-02  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
4973
4974         * ftp-ls.c (ftp_parse_winnt_ls): Assure months are being correctly
4975         converted. Pointed out by <Stefan.Weil@de.heidelberg.com>.
4976         (ftp_parse_vms_ls): Ditto.
4977
4978 2001-04-30  Hrvoje Niksic  <hniksic@arsdigita.com>
4979
4980         * init.c (cmd_address): Zero SIN before using it; apparently
4981         needed on *BSD.
4982
4983 2001-04-29  Hrvoje Niksic  <hniksic@arsdigita.com>
4984
4985         * ftp.c (ftp_loop_internal): Don't set NO_TRUNCATE if the file is
4986         empty.
4987
4988 2001-04-29  Hrvoje Niksic  <hniksic@arsdigita.com>
4989
4990         * main.c (main): Make `--cookies' respect its argument.
4991
4992 2001-04-28  Hrvoje Niksic  <hniksic@arsdigita.com>
4993
4994         * main.c (main): Removed undocumented option `--email-address'.
4995
4996         * netrc.c: Use the latest read_whole_line.
4997
4998         * init.c (defaults): Set opt.ftp_pass to "-wget@".
4999
5000         * mswindows.c (pwd_cuserid): Ditto.
5001
5002         * utils.c (pwd_cuserid): Removed.
5003
5004         * host.c (ftp_getaddress): Removed.
5005
5006 2001-04-28  Hrvoje Niksic  <hniksic@arsdigita.com>
5007
5008         (http_loop): Allocate space for filename_plus_orig_suffix with
5009         alloca; this is more efficient and removes the need to free it
5010         before each and every return.
5011
5012 2001-04-28  Hrvoje Niksic  <hniksic@arsdigita.com>
5013
5014         * http.c (gethttp): Return RETRUNNEEDED when the retrieval is
5015         unneeded because the file is already there and fully downloaded,
5016         and -c is specified.
5017         (http_loop): Handle RETRUNNEEDED.
5018
5019         * wget.h (uerr_t): New value RETRUNNEEDED.
5020
5021         * http.c (http_loop): Set no_truncate for files that both exist
5022         and are non-empty.
5023         (gethttp): Consider the download finished when restval >= contlen,
5024         not only when restval==contlen.
5025         (gethttp): Handle redirection before giving up due to -c.
5026         (gethttp): Clarify error message which explains that -c will not
5027         truncate the file.
5028         (gethttp): When returning CONTNOTSUPPORTED, don't forget to free
5029         the stuff that needs freeing and release the socket.
5030
5031 2001-04-27  Hrvoje Niksic  <hniksic@arsdigita.com>
5032
5033         * main.c (print_help): Wget booleans accept "off", not "no".
5034
5035 2001-04-27  Hrvoje Niksic  <hniksic@arsdigita.com>
5036
5037         * http.c (http_loop): If allow_cache is zero, always disable
5038         caching, not only when retrieving through proxy.
5039
5040         * init.c: Ditto.
5041
5042         * options.h (struct options): Rename proxy_cache to allow_cache.
5043
5044 2001-04-27  Hrvoje Niksic  <hniksic@arsdigita.com>
5045
5046         * http.c (mktime_from_utc): Improve documentation.
5047         (http_atotm): Put format strings into a separate array.
5048
5049 2001-04-27  Hrvoje Niksic  <hniksic@arsdigita.com>
5050
5051         * safe-ctype.h: Instead of throwing #error when isalpha is
5052         defined, redefine it to something that will throw a compile-time
5053         error if actually *used*.  Do the same for the rest of the
5054         standard C macros.
5055
5056 2001-04-26  Hrvoje Niksic  <hniksic@arsdigita.com>
5057
5058         * url.c (getproxy): Ignore empty proxy vars.
5059
5060 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
5061
5062         * http.c (http_loop): Would load cookies every time.
5063
5064         * cookies.c (load_cookies): Handle cookies whose values contain
5065         embedded spaces.
5066
5067 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
5068
5069         * utils.c: Define each DIGITS_* in one line.
5070
5071 2001-04-25  Roger L. Beeman  <beeman@cisco.com>
5072
5073         * http.c (http_atotm): Initialize t.tm_isdst to 0.
5074         (mktime_from_utc): Prevent mktime() from having discontinuities at
5075         DST transition points.
5076
5077 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
5078
5079         * html-url.c (get_urls_html): Fix documentation.
5080
5081 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
5082
5083         * url.c (UNSAFE_CHAR): Reimplement using a static table.
5084         (url_init): Removed.
5085         (init_unsafe_char_table): Removed.
5086
5087 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
5088
5089         * snprintf.c (dopr): Replace ISDIGIT with '0' <= ch && ch <= '9'.
5090
5091 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
5092
5093         * utils.c: Document timer functions.
5094
5095         * retr.c (rate): Use it.
5096         (rate): Print in GB/s if transfer rate exceeds 1 GB/s.
5097
5098         * utils.c (wtimer_granularity): New function.
5099
5100 2001-04-24  Hrvoje Niksic  <hniksic@arsdigita.com>
5101
5102         * retr.c (show_progress): Ditto.
5103
5104         * ftp.c (getftp): Ditto.
5105
5106         * http.c (gethttp): Use new timer functions.
5107
5108         * utils.c (wtimer_allocate): New function.
5109         (wtimer_new): Ditto.
5110         (wtimer_delete): Ditto.
5111         (wtimer_reset): Ditto.
5112         (wtimer_elapsed): Ditto.
5113
5114 2001-04-24  Hrvoje Niksic  <hniksic@arsdigita.com>
5115
5116         * utils.c (long_to_string): New, faster version.  Favors smaller
5117         numbers; much of the calculation is now done at compile-time.
5118
5119 2001-04-24  Hrvoje Niksic  <hniksic@arsdigita.com>
5120
5121         * utils.c (numdigit): Handle negative numbers.
5122
5123 2001-04-23  Hrvoje Niksic  <hniksic@arsdigita.com>
5124
5125         * retr.c (show_progress): Print the download rate even when the
5126         percentages are not available.
5127
5128 2001-04-21  Hrvoje Niksic  <hniksic@arsdigita.com>
5129
5130         * ftp.c (getftp): Adjust expected_bytes if the length is
5131         authoritative.
5132
5133 2001-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
5134
5135         * url.c: Don't declare `construct'.
5136
5137         * hash.c (grow_hash_table): Speed up rehashing; inline storing of
5138         mappings to new locations.
5139         (hash_table_new): Make resize_threshold a field in the hash table,
5140         so we don't have to recalculate it in each hash_table_put.
5141         (grow_hash_table): Update resize_threshold.
5142         (MAX): Remove unused macro.
5143         (prime_size): Made static.
5144
5145 2001-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
5146
5147         * retr.c (retrieve_url): Call uri_merge, not url_concat.
5148
5149         * html-url.c (collect_tags_mapper): Call uri_merge, not
5150         url_concat.
5151
5152         * url.c (mkstruct): Use encode_string instead of xstrdup followed
5153         by URL_CLEANSE.
5154         (path_simplify_with_kludge): Deleted.
5155         (contains_unsafe): Deleted.
5156         (construct): Renamed to uri_merge_1.
5157         (url_concat): Renamed to uri_merge.
5158
5159 2001-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
5160
5161         * url.c (str_url): Use encode_string instead of the unnecessary
5162         CLEANDUP.
5163         (encode_string_maybe): New function, returns input string if no
5164         encoding is needed.
5165         (encode_string): Call encode_string_maybe to do the dirty work,
5166         xstrdup if no work needed.
5167
5168 2001-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
5169
5170         * wget.h (XDIGIT_TO_xchar): Define here.
5171
5172         * url.c (decode_string): Use new name.
5173         (encode_string): Ditto.
5174
5175         * http.c (XDIGIT_TO_xchar): Rename HEXD2asc to XDIGIT_TO_xchar.
5176         (dump_hash): Use new name.
5177
5178         * wget.h: Rename ASC2HEXD and HEXD2ASC to XCHAR_TO_XDIGIT and
5179         XDIGIT_TO_XCHAR respectively.
5180
5181 2001-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
5182
5183         * init.c: Include cookies.h.
5184
5185         * cookies.h: Declare cookies_cleanup.
5186
5187         * cookies.c (check_domain_match): Remove unused variable.
5188         (save_cookies): Remove extraneous argument from debug statement.
5189
5190         * host.c (same_host): Don't call skip_url.
5191
5192         * url.c (skip_url): Removed.  Removed its calls from various
5193         functions in url.c.
5194
5195 2001-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
5196
5197         * cookies.c (unsigned_string_hash): Use the new code in
5198         string_hash as reference.
5199
5200         * hash.c (hash_table_map): Allow deletion and change of the
5201         element processed by MAPFUN.
5202         (string_hash): Use the function from glib.
5203
5204 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
5205
5206         * config.h.in: Include #undef stub.
5207
5208         * hash.c (hash_table_remove): Rewrite to actually clear deleted
5209         entries instead of just marking them as deleted.
5210
5211 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
5212
5213         * hash.h: Declare hash_table_get_pair and hash_table_count.
5214
5215 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
5216
5217         * cookies.c: Declare http_atotm.
5218
5219 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
5220
5221         * ftp-ls.c (ftp_parse_unix_ls): Use octal constants for
5222         permissions.  A compiler that doesn't accept octal constants is
5223         seriously broken and shouldn't be used -- octal constants were
5224         present in K&R C!
5225
5226 2001-01-20  Karl Eichwalder  <ke@suse.de>
5227
5228         * Makefile.in: Provide and use DESTDIR according to the Coding
5229         Standards.
5230
5231 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
5232
5233         * ftp-ls.c (ftp_parse_vms_ls): Make seconds optional in time
5234         specification.
5235
5236 2001-04-11  Hrvoje Niksic  <hniksic@arsdigita.com>
5237
5238         * url.c (parseurl): Don't strip trailing slash when u->dir is "/"
5239         because that strips the *leading* slash, thus forcing relative
5240         FTP retrieval.
5241
5242 2001-04-10  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
5243
5244         * ftp.c (getftp): Convert initial FTP directory from VMS to UNIX
5245         notation for VMS servers.
5246         (ftp_retrieve_dirs): Do not prepend '/' to f->name when
5247         odir is an empty string.
5248
5249 2001-04-10  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
5250
5251         * ftp-ls.c (ftp_parse_winnt_ls): Made the fix for AM/PM more
5252         effective. Suggested by Edward J. Sabol.
5253
5254 2001-04-10  Hrvoje Niksic  <hniksic@arsdigita.com>
5255
5256         * cookies.c (build_cookies_request): Use and sort cookies from all
5257         matching domains.
5258         (build_cookies_request): Check for duplicates before generating
5259         the `Cookies' header.
5260
5261         * main.c (main): Don't load cookies here.
5262         (main): Make loadcookies and savecookies call the correct command.
5263
5264         * http.c (http_loop): Load cookies on-demand.
5265
5266 2001-04-09  Hrvoje Niksic  <hniksic@arsdigita.com>
5267
5268         * http.c (gethttp): Fix indentation of SSL ifdef.
5269
5270 2001-04-09  Hrvoje Niksic  <hniksic@arsdigita.com>
5271
5272         * ftp.c (ftp_retrieve_dirs): Don't forcibly prepend "/" to u->dir;
5273         that hack is no longer necessary.
5274         (getftp): Prepend initial directory to *non*-absolute u->dir's.
5275
5276 2001-04-09  Hrvoje Niksic  <hniksic@arsdigita.com>
5277
5278         * init.c (cmd_file): New function.
5279         (enable_tilde_expansion): New variable.
5280         (run_wgetrc): Use it.
5281         (cmd_file): Use it.
5282
5283 2001-04-08  Hrvoje Niksic  <hniksic@arsdigita.com>
5284
5285         * init.c: Include cookie-related options.
5286
5287         * main.c (main): Include cookie-specific options.
5288         (main): Load cookies before download is finished.
5289         (main): Save cookies when done.
5290
5291         * http.c (gethttp): Process the `Set-Cookie' header.
5292         (gethttp): Include cookies in the response.
5293
5294         * cookies.c: New file.
5295
5296 2001-04-08  Hrvoje Niksic  <hniksic@arsdigita.com>
5297
5298         * utils.c (datetime_str): New function.
5299
5300 2001-04-08  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
5301
5302         * ftp-ls.c (ftp_parse_winnt_ls): The AM/PM change did assume
5303         12:01PM == 00:01, which was obviously wrong. Taken care of this
5304         anomaly.
5305
5306         * ChangeLog: Removed an excess conflict marker. Reformatted the
5307         entry by Philipp Thomas from 2001-03-09.
5308
5309         * ftp-ls.c (ftp_parse_winnt_ls): Ensure that adjusted PM hours lay
5310         between 0 and 23. Elminate unused variable `sec'.
5311
5312 2001-04-08  Hrvoje Niksic  <hniksic@arsdigita.com>
5313
5314         * hash.c (hash_table_count): New function.
5315
5316 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
5317
5318         * utils.c (read_file): Cast MAP_FAILED to char *.  Enforced by
5319         Digital Unix cc.
5320
5321 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
5322
5323         * config.h.in: Oops, do the namespace tweaks only on systems we
5324         know about.
5325
5326 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
5327
5328         * hash.c: Include <string.h>.
5329
5330 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
5331
5332         * config.h.in: Define "compilation environment" options that work
5333         under Linux and Solaris.  To be reviewed on other OS'es.
5334
5335 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
5336
5337         * http.c (gethttp): Prepend literal newline with `\n\'.
5338
5339 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
5340
5341         * sysdep.h: Don't define VERY_LONG_FORMAT.
5342
5343         * utils.c (very_long_to_string): New function.
5344         (legible_very_long): Use it; don't use VERY_LONG_FORMAT.
5345
5346 2001-04-04  Christian Fraenkel  <christian.fraenkel@gmx.net>
5347
5348         * url.c (parse_uname): Would run past the end of the string if the
5349         username was present, but the URL did not contain a slash, e.g.
5350         http://foo:bar@myhost.
5351
5352 2001-04-03  KOJIMA Hajime  <kjm@rins.ryukoku.ac.jp>
5353
5354         * http.c (http_atotm): Use %A instead of %a to match full
5355         weekday.  (On most systems there is no difference.)
5356
5357 2001-04-03  Paul Bludov  <paul@ozero.net>
5358
5359         * mswindows.c (sleep): Use SleepEx() instead of Sleep().
5360         (ws_changetitle): Use alloca() instead of malloc() to avoid memory
5361         leak.
5362         (ws_mypath): Use GetModuleFileName instead of argv[0].
5363         (ws_startup): Use data.wVersion for comparison.
5364
5365 2001-04-02  Hrvoje Niksic  <hniksic@arsdigita.com>
5366
5367         * http.c (http_loop): Ditto.
5368
5369         * ftp.c (ftp_loop_internal): Made the check whether to continue
5370         retrieval `-O'-friendly.
5371
5372 2001-04-02  Hrvoje Niksic  <hniksic@arsdigita.com>
5373
5374         * netrc.c (parse_netrc): Don't trim the line endings explicitly;
5375         they will be handled as whitespace.
5376         (parse_netrc): Correctly handle lines that end with whitespace.
5377
5378 2001-04-02  Hrvoje Niksic  <hniksic@arsdigita.com>
5379
5380         * retr.c (retrieve_url): New variable global_download_count used
5381         to identify first retrieval.
5382
5383         * ftp.c (getftp): Ditto.
5384
5385         * http.c (gethttp): Rewind opt.dfp only on first retrieval.
5386
5387 2001-04-02  Hrvoje Niksic  <hniksic@arsdigita.com>
5388
5389         * init.c (cmd_address): Heap-allocate the address that gets stored
5390         to CLOSURE.  Old code would simply assign an address on the stack.
5391
5392 2001-04-01  Nicolas Lichtmaier <nick@debian.org>
5393
5394         * ftp.c (ftp_get_listing): Propagate error status.
5395         (ftp_retrieve_glob): Use it.
5396         (ftp_loop): Ditto.
5397
5398 2001-04-01  Nicolas Lichtmaier <nick@debian.org>
5399
5400         * main.c (main): Add -C to the string that is the third arg to
5401         getopt_long().
5402
5403 2001-04-01  Hrvoje Niksic  <hniksic@arsdigita.com>
5404
5405         * ftp.c (getftp): Don't start the download from scratch if `-c'
5406         was specified, but the file is already fully downloaded.
5407
5408         * http.c (gethttp): Don't truncate a pre-existing file if `-c' was
5409         specified and the server doesn't support continued download.
5410         (gethttp): Don't start the download from scratch if `-c' was
5411         specified, but the file is already fully downloaded.
5412
5413 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
5414
5415         (recursive_retrieve): Don't clear the hash tables at this point at
5416         all; it interferes with the normal operation of register_download.
5417
5418 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
5419
5420         * recur.c (recursive_retrieve): Clear the hash tables only when
5421         they are defined.
5422
5423 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
5424
5425         * http.c (gethttp): Make sure the socket is closed with
5426         CLOSE_INVALIDATE before we have drained the body.
5427
5428 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
5429
5430         * retr.c (retrieve_url): Call register_download() for downloaded
5431         files and register_html() for downloaded HTML files.
5432
5433         * recur.c (register_download): New function; register here that a
5434         file has been downloaded, rather than in recursive_retrieve().
5435         (register_html): New function; enqueue the location of HTML files
5436         here rather than in recursive_retrieve().
5437
5438 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
5439
5440         * main.c (print_help): Use multiple fputs instead of a single ugly
5441         printf().
5442         (main): Consistently assign numbers >128 to options without a
5443         corresponding character.
5444
5445 2001-03-09  Philipp Thomas  <pthomas@suse.de>
5446
5447         * safe-ctype.h: New file. Locale independent ctype.h replacement
5448         taken from libiberty.
5449
5450         * safe-ctype.c: New file. Tables for above.
5451
5452         * Makefile.in: Add safe-ctype$o to OBJS.  Add dependencies for
5453         safe-ctype$o.
5454
5455         * cmpt.c: Remove include of ctype.h. Use ISSPACE instead of
5456         isspace.
5457
5458         * ftp-basic.c: Don't include ctype.h.
5459
5460         * ftp-ls.c: Likewise.
5461
5462         * ftp.c: Likewise.
5463
5464         * headers.c: Likewise.
5465
5466         * host.c: Likewise.
5467
5468         * html-parse.c: Likewise.
5469
5470         * html-url.c: Likewise.
5471
5472         * http.c: Likewise.
5473
5474         * init.c: Likewise.
5475
5476         * main.c: Likewise. Set LC_CTYPE along with LC_MESSAGES.
5477
5478         * netrc.c: Likewise.
5479
5480         * recur.c: Likewise.
5481
5482         * retr.c: Likewise.
5483
5484         * snprintf.c: Replace ctype.h with safe-ctype.h. Use ISDIGIT
5485         instead of isdigit.
5486
5487         * sysdep.h: Remove defines of ctype macros as they aren't needed
5488         for safe-ctype-h.
5489
5490         * url.c: Don't include ctype.h.
5491
5492         * utils.c: Likewise.
5493
5494         * wget.h: Include safe-ctype.h.
5495
5496 2001-03-27  Dan Harkless  <wget@harkless.org>
5497
5498         * Makefile.in: Moved top_builddir out of "User configuration
5499         section" of top Makefile and analogous spot in this one.
5500
5501 2001-03-17  Dan Harkless  <wget@harkless.org>
5502
5503         * Makefile.in: Include @SSL_INCLUDES@ substition in INCLUDES.
5504         Define top_builddir.  Link wget with libtool so the user doesn't
5505         have to supply a bunch of custom environment variables to
5506         correctly link with the OpenSSL shared libraries.
5507
5508 2001-03-06  Hack Kampbjorn  <hack@hackdata.com>
5509
5510         * http.c (gethttp): skip :port in host header if it is the
5511         DEFAULT_HTTPS_PORT when using SSL.
5512
5513         * url.c: move the #define of DEFAULT_HTTP_PORT, DEFAULT_FTP_PORT
5514         and DEFAULT_HTTPS_PORT to the header file so it can be use in the
5515         rest of the code.
5516         * url.h: Ditto
5517
5518 2001-03-01  Jonas Jensen  <bones@huleboer.dk>
5519
5520         * retr.c (show_progress): Correctly calculate the number of bytes
5521         in the first line of the download that have been actually
5522         downloaded in this run.
5523
5524 2001-02-23  Dan Harkless  <wget@harkless.org>
5525
5526         * main.c (print_help): --help documentation for -N said it would
5527         re-download files if they had the _same_ timestamp on server.
5528         (print_help): -nr belongs in "FTP options" section of --help
5529         output, not "Recursive retrieval" section.  Alphabetized FTP
5530         options by long option name.
5531
5532 2001-02-16  Dan Harkless  <wget@harkless.org>
5533
5534         * init.c (commands): Hack Kampbjørn <hack@hackdata.com> discovered
5535         that "httpsproxy" had been inserted into commands[] out of
5536         alphabetical order, causing "BUG: unknown command `httpuser'".
5537
5538 2001-02-13  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
5539
5540         * ftp-ls.c (ftp_parse_ls): Added support of ST_MACOS (Unix-like
5541         listing without correct permissons).
5542
5543         * ftp.h (stype): Added ST_MACOS to identify the NetPresenz MacOS
5544         FTP server.
5545
5546         * ftp.c (ftp_retrieve_list): New mirroring logic: A remote file
5547         shall be donwloaded only when it's newer than the local copy or
5548         when it has the same timeestamp but its size is different. ST_VMS
5549         and ST_MACOS as special cases that lie about file size.
5550
5551         * ftp-ls.c (ftp_parse_ls): Support for ST_MACOS.
5552
5553         * Makefile.in: Removed dependency on ftpparse library due to unclear
5554         copyright issues and absence of any feedback to our queries.
5555
5556         * ftp-ls.c: Removed dependency on ftpparse library due to unclear
5557         copyright issues and absence of any feedback to our queries.
5558         (ftp_parse_ls): Added a warning message when remote server system
5559         does not seem to be suported by wget.
5560         (ftp_parse_vms_ls): New function for parsing VMS ftp
5561         server listing output.
5562         (clean_line): New function responsible for removing
5563         end-of-line characters from FTP listing texts.
5564
5565         * ftp.c (getftp): Global variables pwd and host_type are now
5566         member of the ccon structure under names ccon.id and ccon.rs.
5567
5568         * ftp.h (struct ccon): Added formed global variables from ftp.c,
5569         enum stype rs (remote system identification) and char *id (initial
5570         working directory), as suggested by Hrvoje.
5571
5572         * url.c (parse_uname): Added support for passwords containing '@'
5573         characters.
5574         (skip_uname): Ditto.
5575
5576 2001-02-11  Hrvoje Niksic  <hniksic@arsdigita.com>
5577
5578         * ftp.c (ftp_loop): Reset con.
5579
5580 2001-01-06  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
5581
5582         * url.c (parse_uname): Added support for passwords containing '@'
5583         characters.
5584         (skip_uname): Ditto.
5585
5586 2001-02-11  Hack Kampbjørn  <hack@hackdata.com>
5587
5588         * url.c (parseurl): Debug-print u->ftp_type.
5589
5590 2001-02-11  Hrvoje Niksic  <hniksic@arsdigita.com>
5591
5592         * ftp.c (ftp_loop_internal): Disable padding.
5593         (getftp): Ditto.
5594
5595         * http.c (http_loop): Disable padding.
5596
5597         * retr.c (show_progress): Use it to enable padding.
5598
5599         * retr.c (rate): Optional parameter PAD for padding the rate.
5600
5601 2001-02-10  Hrvoje Niksic  <hniksic@arsdigita.com>
5602
5603         * retr.c (show_progress): Make sure that the last output line
5604         includes progress.
5605
5606 2001-02-10  Jonas Jensen  <bones@huleboer.dk>
5607
5608         * retr.c (show_progress): Print the download rate along with the
5609         percentages.
5610         Along with Anders Thorsby <anders@thorsby.dk>.
5611
5612 2001-02-10  Tim Mooney  <mooney@dogbert.cc.ndsu.NoDak.edu>
5613
5614         * ftp.h: Rename enums `command' to `wget_ftp_command' and
5615         `fstatus' to `wget_ftp_status' because old names clash with Tru64
5616         net/if.h.
5617
5618 2001-02-08  Christian Fraenkel <christian.fraenkel@gmx.net>
5619
5620         * gen_sslfunc.c: verify_callback is now static
5621
5622         * gen_sslfunc.c (init_ssl): load certificate if specified
5623
5624         * gen_sslfunc.c (ssl_printerr): new function
5625
5626         * init.c: added new --sslcertfile and --sslcertkey switches
5627
5628         * main.c: ditto
5629
5630         * options.h: ditto
5631
5632         * http.c (gethttp): abort when init_ssl fails
5633
5634 2001-01-23  Herold Heiko  <Heiko.Herold@previnet.it>
5635
5636         * mswindows.h: Include <malloc.h>; it's needed for alloca().
5637
5638 2001-01-10  Dan Harkless  <wget@harkless.org>
5639
5640         * url.c (str_url): Clarified this function's comment header after
5641         Hrvoje answered my question on the list as to when hide != 1.
5642         Also Hrvoje pointed out I need to use xstrdup() on the string literal.
5643
5644 2001-01-06  Hrvoje Niksic  <hniksic@arsdigita.com>
5645
5646         * connect.c (bindport): Declare addrlen as int.  Diagnosed by
5647         Drazen Kacar <dave@arsdigita.com>.
5648         (conaddr): Ditto.
5649
5650 2001-01-09  Dan Harkless  <wget@harkless.org>
5651
5652         * html-url.c: A bunch of fixup of `--page-requisites'-related
5653         comments to reflect Hrvoje's changes to my code when transplanting
5654         it into this new file, to fix spelling mistakes, to clarify, etc.
5655
5656         * url.c (write_backup_file): Clarified a comment.
5657         (str_url): Henrik van Ginhoven pointed out on the list that we
5658         shouldn't give away the number of characters in the password by
5659         replacing each character with a 'x'.  Use "<password>" instead.
5660
5661         * ftp.c (ftp_retrieve_dirs): The bug where recursion into FTP
5662         directories didn't work if logging in put you in a directory other
5663         than "/" is fixed now.  Removed the comment here warning of the bug.
5664
5665         * main.c (print_help): --continue's description was misleading.
5666         We don't "restart", we "resume".  Also, better to say
5667         "partially-downloaded file" rather than just "existing file".
5668
5669 2001-01-06  Dan Harkless  <wget@harkless.org>
5670
5671         * ChangeLog: The '[Not in 1.6 branch.]'s were decided not to be
5672         the best way to go about my aim.  Removed them in favor of:
5673
5674         * ChangeLog-branches/1.6_branch.ChangeLog: New file.
5675
5676 2001-01-04  Hrvoje Niksic  <hniksic@arsdigita.com>
5677
5678         * url.c (replace_attr): New function, to be used by both
5679         TO_COMPLETE and TO_RELATIVE case in convert_links.
5680         (find_fragment): New function for finding URL fragments.
5681         (replace_attr): Better handle the case where the original string
5682         is not quoted.  Use find_fragment.
5683         (convert_links): Use replace_attr().
5684
5685 2000-12-31  Dan Harkless  <wget@harkless.org>
5686
5687         * ChangeLog: Since this flat file doesn't have multiple branches,
5688         looking at the dates would make you think that things went into
5689         1.6 that actually just went into the 1.7-dev branch.  Added "[Not
5690         in 1.6 branch.]" where appropriate to clarify.
5691
5692 2000-12-30  Dan Harkless  <wget@harkless.org>
5693
5694         * ftp.c, http.c:  Applied Hack Kampbjørn <hack@hackdata.com>'s
5695         patch to deal with h_errno not being defined in netdb.h under Cygwin.
5696
5697 2000-12-18  Csaba Raduly  <csaba.raduly@sophos.com>
5698
5699         * sysdep.h: Include <malloc.h> and <io.h> under Watcom.
5700
5701 2000-12-17  Igor Khristophorov  <igor@atdot.org>
5702
5703         * http.c (check_end): Fix test for '+' or '-'.
5704
5705 2000-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
5706
5707         * url.c (parseurl): Rename inner loop var from i to ind to avoid
5708         clash with the function top-level-declared variable i.
5709         (str_url): Likewise, rename inner-loop i to j.
5710
5711         * recur.c (parse_robots): Don't declare LEN at top of function.
5712         (robots_match): Renamed parameter FORBIDDEN to avoid hiding of
5713         global variable.
5714
5715         * main.c (main): Change erroneous use of bitwise and to logical.
5716
5717         * init.c (cmd_address): Don't heap-allocate `sin'; it can be on
5718         the stack because it will be copied to closure.
5719
5720         Thanks to Csaba Raduly's run of PC-LINT over the sources.
5721
5722 2000-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
5723
5724         * http.c (basic_authentication_encode): Use xmalloc(), not
5725         malloc().  Thanks to Csaba Raduly's run of PC-LINT over the
5726         sources.
5727
5728 2000-12-17  Csaba Raduly  <csaba.raduly@sophos.com>
5729
5730         * sysdep.h: Test for __EMX__ rather than for EMXOS2 for OS/2
5731         compilation.
5732
5733 2000-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
5734
5735         * mswindows.c: Include <errno.h>.
5736
5737         * gen_sslfunc.c: Include <errno.h>.
5738
5739         * ftp-basic.c: Don't attempt to declare errno or h_errno because
5740         they're not used.
5741
5742         * main.c: Include <errno.h> because errno is used.
5743
5744         * ftp.c: Ditto.
5745
5746         * http.c: Include <netdb.h> for h_errno.
5747
5748 2000-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
5749
5750         * html-parse.c (advance_declaration): MSVC assert() chokes on
5751         '\"'.  Use '"' instead.
5752
5753 2000-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
5754
5755         * utils.c (xfree_real): Removed.
5756         (xfree_debug): Just call free().
5757
5758         * wget.h (xfree): Make it an alias for free.
5759
5760 2000-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
5761
5762         * http.c (http_loop): Furthermore, touch output_document only if
5763         it is known to be an existing regular file.
5764
5765 2000-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
5766
5767         * ftp.c (ftp_retrieve_list): Ditto.
5768
5769         * http.c (http_loop): Touch output_document if that is used for
5770         output.
5771
5772 2000-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
5773
5774         * http.c: Include gen_sslfunc.h after including Wget's headers.
5775         (persistent_available_p): Needed coma before `int ssl'.
5776
5777 2000-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
5778
5779         * ftp.c (ftp_loop_internal): Ditto.
5780
5781         * http.c (http_loop): Use it.
5782
5783         * retr.c (sleep_between_retrievals): New function that handles the
5784         logic of opt.wait and opt.waitretry.
5785
5786 2000-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
5787
5788         * rbuf.h: Implement only a single version of RBUF_READCHAR, using
5789         rbuf_read_bufferful when the buffer is depleted.
5790
5791         * rbuf.c (rbuf_read_bufferful): New function.
5792
5793 2000-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
5794
5795         * gen_sslfunc.h: Use ansi2knr style function declarations.
5796
5797         * gen_sslfunc.c: Reformat according to the GNU coding standards.
5798         More should be done.
5799
5800         * http.c (persistent_available_p): Place the cheap SSL test nearer
5801         the top of the function.
5802         (CLOSE_FINISH, CLOSE_INVALIDATE): Define only one version of each.
5803
5804 2000-12-05  Hrvoje Niksic  <hniksic@arsdigita.com>
5805
5806         * url.c (init_unsafe_char_table): Reinstate space as an unsafe
5807         char.
5808
5809 2000-12-03  Christian Fraenkel <christian.fraenkel@gmx.net>
5810
5811         * Makefile.in: added gen_sslfunc object
5812         * config.h.in: added HAVE_SSL define
5813         * connect.c: changed select_fd from static int to int
5814         * connect.h: ditto
5815         * gen_sslfunc.h: New file
5816         * gen_sslfunc.c: ditto
5817         * http.c: added HTTPS fuctionality
5818         * retrc.c: ditto
5819         * url.c: ditto
5820         * init.c: added opt.httpsproxy
5821         * options.h: ditto
5822         * rbuf.h: added alternate rbuf struct
5823         * wget.h: added CONSSLERR
5824         * rbuf.c: ditto
5825
5826         * http.c: Added HTTPS fuctionality.
5827
5828         * retrc.c: Ditto.
5829
5830         * url.c: Ditto.
5831
5832         * init.c: Added opt.httpsproxy.
5833
5834         * options.h: Ditto.
5835
5836         * rbuf.h: Added alternate rbuf struct.
5837
5838         * wget.h: Added CONSSLERR.
5839
5840         * rbuf.c: Ditto.
5841
5842 2000-11-30  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
5843
5844         * ftp-ls.c (ftp_parse_unix_ls): Added second parameter
5845         "ignore_perms" to ignore file and directory permissions for
5846         Windows NT FTP server listings.
5847         (ftp_parse_winnt_ls): New function.
5848         (ftp_parse_ls): Parses UNIX and Windows NT listings
5849         separately. Simple heuristics for distinguishing between UNIX and
5850         MS-DOS-like FTP listing provided by Windows NT FTP service.
5851
5852 2000-11-18  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
5853
5854         * ftpparse.c, ftpparse.h: New files.
5855
5856         * ftp-ls.c (ftp_parse_ls): Use ftp_parse_unix_ls for UNIX servers
5857         only. Use ftp_parse_nonunix_ls otherwise.
5858         (ftp_parse_nonunix_ls): Stub to the ftpparse library handling all
5859         exotic FTP servers.
5860
5861         * ftp.h (stype): New enum, distinguishes UNIX, VMS, and "other"
5862         FTP servers.
5863
5864         * ftp.c: New static wariables host_type, pwd, and pwd_len.
5865         (getftp): Support for VMS. Support for FTP servers that do not
5866         place you in the root directory after login.
5867         (ftp_retrieve_list): VMS is silent about the real file size, issue
5868         a more appropriate message.
5869         (ftp_get_listing): Pass host_type to ftp_parse_ls.
5870
5871         * ftp-basic.c (ftp_pwd, ftp_syst): New functions.
5872
5873 2000-11-30  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
5874
5875         * ftp-ls.c (ftp_parse_unix_ls): Added second parameter
5876         "ignore_perms" to ignore file and directory permissions for
5877         Windows NT FTP server listings.
5878         (ftp_parse_winnt_ls): New function.
5879         (ftp_parse_ls): Parses UNIX and Windows NT listings
5880         separately. Simple heuristics for distinguishing between UNIX
5881         and MS-DOS-like FTP listing provided by Windows NT FTP service.
5882
5883 2000-11-29  John Summerfield  <summer@OS2.ami.com.au>
5884
5885         * netrc.c (parse_netrc): Get rid of line ending.
5886
5887 2000-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
5888
5889         * ftp.c (ftp_retrieve_list): Undo typo "fix" until resolution by
5890         Dan.
5891
5892 2000-11-24  Karl Eichwalder  <ke@suse.de>
5893
5894         * main.c (print_help): Untabify.
5895
5896 2000-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
5897
5898         * utils.c (xrealloc_debug): Do the unregister/register thing only
5899         if the pointer has actually changed.
5900         (xmalloc_real): Declare `static' in DEBUG_MALLOC builds.
5901         (xfree_real): Ditto.
5902         (xrealloc_real): Ditto.
5903         (xstrdup_real): Ditto.
5904
5905 2000-11-22  Hrvoje Niksic  <hniksic@arsdigita.com>
5906
5907         * ftp.c (getftp): ftp_getaddress() returns a malloc'ed copy of the
5908         string; no need to strdup() it.
5909         (getftp): Make pwd_len a local variable.
5910         (ftp_loop): Free PWD before returning.
5911
5912         * init.c (cleanup): Free opt.ftp_pass only if it's non-NULL.
5913
5914 2000-11-22  Hrvoje Niksic  <hniksic@arsdigita.com>
5915
5916         * all: Use xfree() instead of free.
5917
5918         * utils.c (xfree): New function.
5919
5920 2000-11-21  Hrvoje Niksic  <hniksic@arsdigita.com>
5921
5922         * url.c (convert_links): HTML-quote the converted string.
5923
5924         * utils.c (html_quote_string): Move here from ftp-ls.c
5925         (html_quote_string): Make non-static; declare in utils.h.
5926         (html_quote_string): Convert SP to &#32;.
5927
5928 2000-11-21  Hrvoje Niksic  <hniksic@arsdigita.com>
5929
5930         * ftp.c (getftp): Reformat Jan's code according to GNU coding
5931         standards; remove (debugging?) printf's; use '\0' for the ASCII
5932         zero character.  Use alloca() instead of malloc() for
5933         inter-function temporary allocations.
5934
5935 2000-11-18  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
5936
5937         * ftpparse.c, ftpparse.h: New files.
5938
5939         * ftp-ls.c (ftp_parse_ls): Use ftp_parse_unix_ls for UNIX servers
5940         only. Use ftp_parse_nonunix_ls otherwise.
5941         (ftp_parse_nonunix_ls): Stub to the ftpparse library handling all
5942         exotic FTP servers.
5943
5944         * ftp.h (stype): New enum, distinguishes UNIX, VMS, and "other"
5945         FTP servers.
5946
5947         * ftp.c: New static wariables host_type, pwd, and pwd_len.
5948         (getftp): Support for VMS. Support for FTP servers that do not
5949         place you in the root directory after login.
5950         (ftp_retrieve_list): VMS is silent about the real file size, issue
5951         a more appropriate message.
5952         (ftp_get_listing): Pass host_type to ftp_parse_ls.
5953
5954         * ftp-basic.c (ftp_pwd, ftp_syst): New functions.
5955
5956 2000-11-21  Hrvoje Niksic  <hniksic@arsdigita.com>
5957
5958         * hash.c (hash_table_put): Don't overwrite deleted mappings.
5959
5960 2000-11-21  Hrvoje Niksic  <hniksic@arsdigita.com>
5961
5962         * hash.c (find_mapping): New function.
5963         (hash_table_get): Use it.
5964         (hash_table_get_pair): Ditto.
5965         (hash_table_exists): Ditto.
5966         (hash_table_remove): Ditto.
5967         (hash_table_remove): Really delete the entry if the mapping
5968         following LOCATION is empty.
5969
5970         * utils.c (string_set_add): Check whether the element has existed
5971         before.
5972
5973         * hash.c (hash_table_get_pair): New function.
5974
5975 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
5976
5977         * http.c (http_process_type): Ignore trailing whitespace; use
5978         strdupdelim().
5979
5980         * recur.c (recursive_retrieve): Use the new `convert' field.
5981         (convert_all_links): Ditto.
5982         (convert_all_links): Don't respect meta_disallow_follow.
5983
5984         * html-url.c (handle_link): Fill out link_relative_p and
5985         link_complete_p.
5986
5987         * url.h (struct _urlpos): Make elements more readable.
5988
5989         * recur.c (recursive_retrieve): Call slist_prepend instead of
5990         slist_append.
5991         (convert_all_links): Call slist_nreverse before iterating through
5992         urls_html.
5993
5994         * utils.c (slist_prepend): New function.
5995         (slist_nreverse): Ditto.
5996
5997 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
5998
5999         * http.c (check_end): Constify.
6000
6001 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
6002
6003         * http.c (http_loop): If username and password are known, try the
6004         `Basic' authentication scheme by default.
6005
6006         * connect.h: Declare test_socket_open.
6007
6008 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
6009
6010         * version.c: Bump version from 1.5.3+dev to 1.7-dev.
6011
6012 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
6013
6014         * http.c (gethttp): Don't use the return value of sprintf().
6015         (gethttp): Inhibit keep-alive if opt.http_keep_alive is 0.
6016
6017 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
6018
6019         * recur.c (recursive_retrieve): Print the "so we don't load"
6020         debugging message only if we really don't load.
6021
6022         * http.c (gethttp): Inhibit keep-alive if proxy is being used.
6023         (gethttp): Don't request keep-alive if keep-alive is inhibited.
6024
6025 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
6026
6027         * http.c (gethttp): Make the HTTP persistent connections more
6028         robust.
6029
6030 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
6031
6032         * retr.c (get_contents): If use_expected, make sure that the
6033         appropriate amount of data is being read.
6034
6035         * http.c (gethttp): Check for both `Keep-Alive: ...' and
6036         `Connection: Keep-Alive'.
6037
6038         * wget.h (DEBUGP): Call debug_logprintf only if opt.debug is
6039         turned on.
6040
6041 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
6042
6043         * http.c (connection_available_p): Use it.
6044
6045         * connect.c (test_socket_open): New function.
6046
6047         * http.c (gethttp): Support persistent connections.  Based on the
6048         ideas, and partly on code, by Sam Horrocks <sam@daemoninc.com>.
6049         (register_persistent): New function.
6050         (connection_available_p): Ditto.
6051         (invalidate_connection): Ditto.
6052
6053 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
6054
6055         * url.c (convert_links): Handle UREL2ABS case.
6056
6057         * recur.c (recursive_retrieve): Instead of the list
6058         urls_downloaded, use hash tables dl_file_url_map and
6059         dl_url_file_map.
6060         (convert_all_links): Use them to retrieve data.
6061
6062         * host.c (clean_hosts): Free the hash tables.
6063
6064         * main.c (private_initialize): Call host_init().
6065
6066         * host.c (store_hostaddress): Use a saner, hash table-based data
6067         model.
6068         (realhost): Ditto.
6069         (host_init): Initialize the hash tables.
6070
6071 2000-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
6072
6073         * utils.c (slist_append): Eviscerate NOSORT.  Hash tables are now
6074         used for what the sorted slists used to be used for.
6075         (slist_contains): Don't rely on the list being sorted.
6076         (slist_append): Simplify the code.
6077
6078         * recur.c (recursive_cleanup): Use free_string_set.
6079
6080         * utils.c (string_set_add, string_set_exists, string_set_free):
6081         New functions for easier freeing of hash tables whose keys are
6082         strdup'ed strings.
6083
6084         * recur.c (recursive_retrieve): Use the hash table functions for
6085         storing undesirable URLs.
6086
6087         * hash.c: New file.
6088
6089 2000-11-17  Hrvoje Niksic  <hniksic@arsdigita.com>
6090
6091         * main.c (private_initialize): Call url_init.
6092         (main): Call private_initialize.
6093
6094         * url.c (unsafe_char_table): New table.
6095         (UNSAFE_CHAR): Use it.
6096         (init_unsafe_char_table): New function.
6097         (url_init): New function; call init_unsafe_char_table.
6098
6099 2000-11-16  Hrvoje Niksic  <hniksic@arsdigita.com>
6100
6101         * mswindows.h: Define snprintf and vsnprintf to _snprintf and
6102         _vsnprintf respectively.
6103
6104 2000-11-15  Hrvoje Niksic  <hniksic@arsdigita.com>
6105
6106         * config.h.in: Do the _XOPEN_SOURCE and _SVID_SOURCE things only
6107         on Linux.
6108
6109 2000-11-15  Hrvoje Niksic  <hniksic@arsdigita.com>
6110
6111         * html-url.c (handle_link): Handle HTML fragment identifiers.
6112
6113         * recur.c (recursive_retrieve): If norobot info is respected and
6114         the file is specified not to be followed by robots, respect that.
6115
6116         * html-url.c (collect_tags_mapper): Handle <meta name=robots
6117         content=X>.  For us the important cases are where X is NONE or
6118         where X contains NOFOLLOW.
6119         (get_urls_html): Propagate that information to the caller.
6120
6121 2000-11-13  Hrvoje Niksic  <hniksic@arsdigita.com>
6122
6123         * url.c (convert_links): Unlink the file we might be reading from
6124         before writing to it.
6125         (convert_links): Use alloca instead of malloc for
6126         filename_plus_orig_suffix.
6127
6128 2000-11-12  Hrvoje Niksic  <hniksic@arsdigita.com>
6129
6130         * host.c (realhost): Add HOST to the list with quality==0 only if
6131         it wasn't already there.
6132         Based on analysis by Lu Guohan <feng@public.bjnet.edu.cn>.
6133
6134 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
6135
6136         * url.c (get_urls_file): Ditto.
6137         (convert_links): Ditto.
6138
6139         * html-url.c (get_urls_html): Use read_file() instead of
6140         load_file().
6141
6142         * utils.c (read_file): New function, instead of the old
6143         load_file().
6144         (read_file_free): Ditto.
6145
6146         * url.c (findurl): Search only for the supported protocols.
6147         (convert_links): Use fwrite() when writing out a region of
6148         characters.
6149
6150 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
6151
6152         * ftp-ls.c: Move html_quote_string and ftp_index here.
6153
6154         * url.c: Remove get_urls_html, since that's now in html-url.c.
6155
6156         * html-url.c: New file.
6157
6158         * html-parse.c: New file.
6159
6160 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
6161
6162         * init.c (run_wgetrc): Don't bother killing off '\r' since
6163         pars_line() skips whitespace at end of line anyway.
6164         (parse_line): Oops, it didn't.  Now it does.
6165
6166         * recur.c (parse_robots): Ditto here.
6167
6168         * ftp-ls.c (ftp_parse_unix_ls): Kill off the newline character
6169         manually because read_whole_line no longer does.
6170
6171         * utils.c (read_whole_line): Rewrite to: a) use less memory
6172         (reallocates to needed size after work), b) work faster -->
6173         fgets() instead of getc, c) be more correct --> doesn't kill the
6174         newline character at the end of line.
6175
6176 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
6177
6178         * init.c (comind): Initialize MAX to array size - 1.
6179
6180 2000-11-08  Hrvoje Niksic  <hniksic@arsdigita.com>
6181
6182         * url.c (construct): Changed last_slash[-1] to *(last_slash - 1).
6183         Suggested by Edward J. Sabol.
6184
6185 2000-11-08  Hrvoje Niksic  <hniksic@arsdigita.com>
6186
6187         * url.c (construct): Handle the case where host name is not
6188         followed by a slash.
6189
6190 2000-11-06  Hrvoje Niksic  <hniksic@arsdigita.com>
6191
6192         * init.c: commands[] need to be sorted!  ("base" wasn't.)
6193
6194 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
6195
6196         * wget.h (DO_REALLOC_FROM_ALLOCA): Use braces to disambiguate
6197         `if'.
6198
6199 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
6200
6201         * url.c (construct): Insert unneeded initialization for the
6202         compiler to shut up.
6203
6204         * config.h.in: Define _XOPEN_SOURCE to 500 to get the prototype
6205         for strptime() (*duh*).  Define _SVID_SOURCE to get S_IFLNK which
6206         otherwise gets lost when you define _XOPEN_SOURCE.
6207
6208         * utils.c (touch): Include the file name in the error message.
6209         From Debian.
6210
6211 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
6212
6213         * log.c (logvprintf): Use vsnprintf() in all cases.  If necessary,
6214         resize the buffer to fit the formated message.  That way, messages
6215         of arbitrary size may be printed.
6216         (logvprintf): Use saved_append() to optionally log the last
6217         several lines of output.
6218         (logputs): Ditto.
6219         (log_close): Adapt to new data structures.
6220         (log_dump): Ditto.
6221         (redirect_output): Print messages to stderr, not to stdout.
6222
6223         * log.c (saved_append_1): New function.  Replaces the old logging
6224         system ("log all output until 10M characters") with a new, much
6225         more reasonable one ("log last screenful of text").
6226         (saved_append): New function; call saved_append_1.
6227         (free_log_line): New function.
6228
6229 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
6230
6231         * url.c (construct): Fix comment.
6232         (find_last_char): Document.
6233
6234 2000-11-04  Hrvoje Niksic  <hniksic@arsdigita.com>
6235
6236         * snprintf.c: New file.
6237
6238 2000-11-03  Hrvoje Niksic  <hniksic@arsdigita.com>
6239
6240         * wget.h: If HAVE_STDARG_H is not defined, don't declare argument
6241         types to logprintf() and debug_logprintf().
6242
6243 2000-11-02  Hrvoje Niksic  <hniksic@arsdigita.com>
6244
6245         * ftp.c (ftp_loop_internal): Hide the password from the URL when
6246         printing non-verbose.  Problem spotted by Dariusz Mlynarczyk
6247         <darekm@bydg.lomac.com.pl>.
6248
6249 2000-11-02  Junio Hamano  <junio@twinsun.com>
6250
6251         * ftp-basic.c (ftp_login): Make comparison case-insensitive.
6252
6253 2000-11-02  Tyler Riddle  <triddle@liquidmarket.com>
6254
6255         * http.c (known_authentication_scheme_p): Recognize NTML
6256         authentication.
6257         (create_authorization_line): Treat NTML the same as `Basic'.
6258
6259 2000-11-02  Hrvoje Niksic  <hniksic@arsdigita.com>
6260
6261         * retr.c (retrieve_url): Free url before returning.
6262         (retrieve_url): Free mynewloc before returning.
6263         Spotted by Mark A. Mankins <Mankins_Mark@prc.com>.
6264
6265 2000-11-02  Hrvoje Niksic  <hniksic@arsdigita.com>
6266
6267         * url.c (parseurl): Remove possible reading past the end of
6268         sup_protos[].  Spotted by Mark A. Mankins <Mankins_Mark@prc.com>.
6269
6270 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
6271
6272         * main.c (main): In case of opt.downloaded overflowing, print
6273         <overflow> instead of a totally bogus random value.
6274
6275         * retr.c (retrieve_from_file): Ditto.
6276
6277         * recur.c (recursive_retrieve): Ditto.
6278
6279         * main.c (main): Ditto.
6280
6281         * http.c (http_loop): Ditto.
6282
6283         * ftp.c (ftp_loop_internal): Use downloaded_increase() instead of
6284         `+=', and downloaded_exceeds_quota() instead of the simple-minded
6285         check.
6286         (ftp_retrieve_list): Ditto.
6287         (ftp_retrieve_dirs): Ditto.
6288         (ftp_retrieve_glob): Ditto.
6289
6290         * retr.c (downloaded_increase): New function.  Notice overflows of
6291         opt.downloaded.
6292         (downloaded_exceeds_quota): Make sure that opt.downloaded is not
6293         used if it overflowed.
6294
6295         * options.h (struct options): New member downloaded_overflow.
6296
6297 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
6298
6299         * wget.h (enum): Remove extra space after last enumeration.
6300
6301 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
6302
6303         * main.c (main): Use legible_very_long() for printing
6304         opt.downloaded.
6305
6306         * utils.c (legible_1): New function that operates on strings and
6307         does the brunt of legible()'s work.
6308         (legible): Use legible_1().
6309         (legible_very_long): New function; dump the argument with
6310         sprintf(), and call legible_1().
6311
6312         * options.h (struct options): Use VERY_LONG_TYPE for
6313         opt.downloaded.
6314
6315         * sysdep.h (VERY_LONG_TYPE): Define it to have a 64-bit or greater
6316         type.
6317
6318         * config.h.in: Make sure that SIZEOF_LONG and SIZEOF_LONG_LONG get
6319         defined.  Define HAVE_LONG_LONG if long long is available.
6320
6321 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
6322
6323         * utils.c (long_to_string): Update with a later, better version.
6324
6325 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
6326
6327         * url.c (path_simplify_with_kludge): New function.
6328         (path_simplify_with_kludge): Disable it.  Instead...
6329         (parse_dir): ...make sure that at this point the right thing is
6330         done, i.e. that "query" part of the URL (?...) is always assigned
6331         to the file, never to the directory portion of the path.
6332
6333 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
6334
6335         * retr.c (retrieve_url): Detect redirection cycles.
6336
6337 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
6338
6339         * url.c (get_urls_html): Decode HTML entities using
6340         html_decode_entities.
6341
6342         * html.c (htmlfindurl): Don't count the `#' in numeric entities
6343         (&#NNN;) as an HTML fragemnt.
6344         (html_decode_entities): New function.
6345
6346 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
6347
6348         * html.c (htmlfindurl): Fix recognition of # HTML fragments.
6349
6350 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
6351
6352         * url.c (construct): Rewritten for clarity.  Avoids the
6353         unnecessary copying and stack-allocation the old version
6354         performed.
6355
6356 2000-10-31  Hrvoje Niksic  <hniksic@arsdigita.com>
6357
6358         * ftp.c (getftp): Ditto.
6359
6360         * http.c (gethttp): Rewind the stream when retrying from scratch.
6361
6362 2000-10-31  Hrvoje Niksic  <hniksic@arsdigita.com>
6363
6364         * retr.c (retrieve_url): Use url_concat() to handle relative
6365         redirections instead of /ad hoc/ code.
6366
6367         * url.c (url_concat): New function encapsulating weird
6368         construct().
6369         (urllen_http_hack): New function.
6370         (construct): When constructing new URLs, recognize that `?' does
6371         not form part of the file name in HTTP.
6372
6373 2000-10-13  Adrian Aichner  <adrian@xemacs.org>
6374
6375         * retr.c: Add msec timing support for WINDOWS.
6376         * retr.c (reset_timer): GetSystemTime() on WINDOWS.
6377         * retr.c (elapsed_time): Calculate delta time to msec on WINDOWS.
6378
6379 2000-10-27  Dan Harkless  <wget@harkless.org>
6380
6381         * retr.c (retrieve_url): Manually applied T. Bharath
6382         <TBharath@responsenetworks.com>'s patch to get wget to grok
6383         illegal relative URL redirects.  Reformatted and re-commented it.
6384
6385 2000-10-23  Dan Harkless  <wget@harkless.org>
6386
6387         * connect.c (make_connection and bindport): Manually applied Rob
6388         Mayoff <mayoff@dqd.com>'s 1.5.3 patch to add --bind-address,
6389         changing coding style to GNU's.
6390
6391         * ftp.c (ftp_loop_internal): --delete-after wasn't implemented for
6392         files downloaded via FTP.  Per a comment, .listing files were not
6393         counted towards number of bytes and files downloaded because they're
6394         deleted anyway.  Well, they aren't under -nr, so count them then.
6395
6396         * init.c: Manually applied Rob Mayoff's 1.5.3 patch to add
6397         --bind-address, alphabetizing, changing coding style to GNU's,
6398         commenting, and renaming cmd_ip_address() to cmd_address() to
6399         imply hostnames also okay.
6400
6401         * main.c (main): --delete-after didn't delete the root of the
6402         tree.  Ignore --convert-links if --delete-after was specified.
6403         Manually applied Rob Mayoff's 1.5.3 patch to add --bind-address,
6404         fixing duplicate use of added-since-1.5.3 case value.
6405         (print_help): Clarified that --delete-after deletes local files.
6406         Rob forgot to add a line for his new --bind-address option.
6407
6408         * options.h (struct options): Manually applied Rob Mayoff's patch
6409         to add --bind-address (bind_address structure member).
6410
6411         * recur.c (recursive_retrieve): Improved comment; added DEBUGP().
6412         Ignore --convert-links if --delete-after was specified.
6413
6414         * retr.c (retrieve_from_file): Just added a DEBUGP().
6415
6416 2000-10-19  Dan Harkless  <wget@harkless.org>
6417
6418         * ftp.c (ftp_loop_internal): downloaded_file() enumerators changed.
6419         (getftp): Applied Piotr Sulecki <Piotr.Sulecki@ios.krakow.pl>'s
6420         patch to work around FTP servers that incorrectly respond to the
6421         "REST" command with the remaining size rather than the total file size.
6422
6423         * http.c (gethttp): Improved a comment and added code to tack on
6424         ".html" to text/html files without that extension when -E specified.
6425         (http_loop): Use new downloaded_file() enumerators and deal with
6426         the case of gethttp() called xrealloc() on u->local.
6427
6428         * init.c (commands): Added new "htmlextension" command.
6429         Also renamed John Daily's cmd_quad() to the more descriptive
6430         cmd_lockable_boolean(), alpha-sorted the CMD_DECLARE()s and
6431         removed duplicate cmd_boolean() declaration.
6432
6433         * main.c (print_help): Added my new -E / --html-extension option.
6434         (main): Undocumented --email-address option previously used -E synonym.
6435         Stole it away for the much more deserving --html-extension's use.
6436
6437         * options.h (struct options): Added html_extension field.
6438
6439         * url.c (convert_links): URL X that we saved as X.html locally due
6440         to -E needs to be backed up as X.orig, not X.html.orig.  Added comments.
6441         (downloaded_file): Now remembers if we added .html extension to a file.
6442
6443         * url.h (downloaded_file_t): Added extra enumerators to support above.
6444         (downloaded_file): Now takes and returns a downloaded_file_t.
6445
6446         * wget.h (unnamed "dt" enum): Added ADDED_HTML_EXTENSION enumerator.
6447
6448 2000-10-09  Dan Harkless  <wget@harkless.org>
6449
6450         * html.c (htmlfindurl): Added unneeded initialization to quiet warning.
6451
6452         * main.c (print_help): Clarified what --retr-symlinks does.
6453
6454 2000-09-15  John Daily  <jdaily@cyberdude.com>
6455
6456         * init.c: Add support for "always" and "never" values to allow
6457         .wgetrc to override commandline (useful e.g. with .pm files
6458         calling `wget --passive-ftp' when your firewall doesn't allow that).
6459
6460         * ftp.c (getftp): passive_ftp is first option to support always/never.
6461
6462 2000-08-30  Dan Harkless  <wget@harkless.org>
6463
6464         * ftp.c (ftp_retrieve_list): Use new INFINITE_RECURSION #define.
6465
6466         * html.c: htmlfindurl() now takes final `dash_p_leaf_HTML' parameter.
6467         Wrapped some > 80-column lines.  When -p is specified and we're at a
6468         leaf node, do not traverse <A>, <AREA>, or <LINK> tags other than
6469         <LINK REL="stylesheet">.
6470
6471         * html.h (htmlfindurl): Now takes final `dash_p_leaf_HTML' parameter.
6472
6473         * init.c: Added new -p / --page-requisites / page_requisites option.
6474
6475         * main.c (print_help): Clarified that -l inf and -l 0 both allow
6476         infinite recursion.  Changed the unhelpful --mirrior description
6477         to simply give the options it's equivalent to.  Added new -p option.
6478         (main): Added some comments; handle new -p / --page-requisites.
6479
6480         * options.h (struct options): Added new page_requisites field.
6481
6482         * recur.c: Changed "URL-s" to "URLs" and "HTML-s" to "HTMLs".
6483         Calculate and pass down new `dash_p_leaf_HTML' parameter to
6484         get_urls_html().  Use new INFINITE_RECURSION #define.
6485
6486         * retr.c: Changed "URL-s" to "URLs".  get_urls_html() now takes
6487         final `dash_p_leaf_HTML' parameter.
6488
6489         * url.c: get_urls_html() and htmlfindurl() now take final
6490         `dash_p_leaf_HTML' parameter.
6491
6492         * url.h (get_urls_html): Now takes final `dash_p_leaf_HTML' parameter.
6493
6494         * wget.h: Added some comments and new INFINITE_RECURSION #define.
6495
6496 2000-08-23  Dan Harkless  <wget@harkless.org>
6497
6498         * main.c (print_help): -B / --base was not mentioned.
6499
6500 2000-08-22  Dan Harkless  <wget@harkless.org>
6501
6502         * main.c (print_help): Modified -nc description to mention that it
6503         also prevents the creation of multiple versions of the same file
6504         with ".<number>" suffixes.
6505
6506 2000-07-14  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
6507
6508         * retr.c (retrieve_url): Consistently strdup opt.referer when
6509         setting u->referer.
6510
6511 2000-06-09  Dan Harkless  <wget@harkless.org>
6512
6513         * main.c (print_help): --help output for --waitretry was over 80 cols.
6514
6515 2000-06-09  Hrvoje Niksic  <hniksic@iskon.hr>
6516
6517         * url.c (encode_string): Fix comment.
6518         Suggested by Herold Heiko <Heiko.Herold@previnet.it>.
6519
6520 2000-06-01  Const Kaplinsky  <const@ce.cctpu.edu.ru>
6521
6522         * ftp.c (ftp_retrieve_list): Change permissions only on plain
6523         files.
6524
6525 2000-06-01  Hrvoje Niksic  <hniksic@iskon.hr>
6526
6527         * url.c (str_url): Print the port number only if it's different
6528         from the default port number for that protocol.
6529
6530 2000-05-22  Dan Harkless  <wget@harkless.org>
6531
6532         * main.c (print_help): Added --help line for Damir Dzeko
6533         <ddzeko@zesoi.fer.hr>'s until-now-undocumented --referer option.
6534         Removed comments that --referer and --waitretry were undocumented.
6535         Changed "`.wgetrc' command" to "`.wgetrc'-style command" on --help
6536         line for --execute.
6537
6538 2000-05-18  Hrvoje Niksic  <hniksic@iskon.hr>
6539
6540         * ftp.c (getftp): Ditto.
6541
6542         * http.c (gethttp): Check for return value of fclose/fflush.
6543
6544 2000-04-12  Hrvoje Niksic  <hniksic@iskon.hr>
6545
6546         * host.c (store_hostaddress): Instead of shifting ADDR, start
6547         copying from the correct address.
6548
6549 2000-04-12  Hrvoje Niksic  <hniksic@iskon.hr>
6550
6551         * http.c (gethttp): Don't free REQUEST -- it was allocated with
6552         alloca().
6553         Pointed out by Gisle Vanem <gvanem@eunet.no>.
6554
6555 2000-04-04  Dan Harkless  <wget@harkless.org>
6556
6557         * host.c (store_hostaddress): R. K. Owen's patch introduces a
6558         "left shift count >= width of type" warning on 32-bit
6559         architectures.  Got rid of it by tricking the compiler w/ a variable.
6560
6561         * url.c (UNSAFE_CHAR): The macro didn't include all the illegal
6562         characters per RFC1738, namely everything above '~'.  It also
6563         generated a warning on OSes where char =~ unsigned char.  Fixed.
6564
6565 1998-10-17  Hrvoje Niksic  <hniksic@srce.hr>
6566
6567         * http.c (http_process_type): Removed needless strdup(), a memory
6568         leak.
6569
6570 1998-09-25  Hrvoje Niksic  <hniksic@srce.hr>
6571
6572         * html.c (htmlfindurl): Set PH to the first occurrence of `#'.
6573
6574 1998-09-25  Simon Munton  <simonm@m4data.co.uk>
6575
6576         * init.c (wgetrc_file_name): Don't free HOME under Windows.
6577
6578 1998-12-01  "R. K. Owen"  <rkowen@Nersc.GOV>
6579
6580         * host.c (store_hostaddress): Fix for big endian 64-bit machines.
6581
6582 1998-12-01  Hrvoje Niksic  <hniksic@srce.hr>
6583
6584         * url.c (UNSAFE_CHAR): New macro.
6585         (contains_unsafe): Use it.
6586         (encode_string): Ditto.
6587
6588 1998-12-01  Hrvoje Niksic  <hniksic@srce.hr>
6589
6590         * main.c (i18n_initialize): Use LC_MESSAGES only if available.
6591
6592 2000-03-31  Hrvoje Niksic  <hniksic@srce.hr>
6593
6594         * Use TOUPPER/TOLOWER.
6595
6596 1998-12-22  Alexander V. Lukyanov  <lav@yars.free.net>
6597
6598         * ftp-opie.c (btoe): Zero-terminate OSTORE.
6599
6600 2000-03-21  Hrvoje Niksic  <hniksic@iskon.hr>
6601
6602         * wget.h (DO_REALLOC_FROM_ALLOCA): Ditto.
6603
6604         * sysdep.h (ISALNUM): New macro.
6605         (TOLOWER): Ditto.
6606         (TOUPPER): Ditto.
6607
6608 2000-03-10  Dan Harkless  <wget@harkless.org>
6609
6610         * html.c (idmatch): Implemented checking of my new --follow-tags
6611         and --ignore-tags options.
6612
6613         * init.c (commands): Added comment reminding people adding new
6614         entries doing allocation to add corresponding freeing in cleanup().
6615         (commands): Added new followtags and ignoretags commands.
6616         (cleanup): Free storage for new followtags and ignoretags.
6617
6618         * main.c: Use of "comma-separated list" was random -- normalized
6619         it.  Did some alphabetization.  Added comments pointing out
6620         "Options without arguments" and "Options accepting an argument"
6621         sections of long_options[].  Added new options --follow-tags and
6622         -G / --ignore-tags.  Added comment that Damir's --referer is
6623         currently undocumented.  Added comment that Heiko's --waitretry is
6624         partially undocumented (mentioned in --help but not in
6625         wget.texi).  Moved improperly sorted 24, 129, and 'G' cases.
6626
6627         * options.h (struct options): Added new fields follow_tags and
6628         ignore_tags.
6629
6630         * wget.h: Added "#define EQ 0" so we can say "strcmp(a, b) == EQ".
6631
6632 2000-03-02  Dan Harkless  <wget@harkless.org>
6633
6634         * ftp.c (ftp_loop_internal): Heiko introduced "suggest explicit
6635         braces to avoid ambiguous `else'" warnings.  Eliminated them.
6636
6637         * http.c (gethttp): Dan Berger's query string patch is totally
6638         bogus.  If you have two different URLs, gen_page.cgi?page1 and
6639         get_page.cgi?page2, they'll both be saved as get_page.cgi and the
6640         second will overwrite the first.  Also, parameters to implicit
6641         CGIs, like "http://www.host.com/db/?2000-03-02" cause the URLs to
6642         be printed with trailing garbage characters, and could seg fault.
6643         Backing out the patch, which Dan B. informed me by email was just
6644         a kludge to download StarOffice from Sun made necessary due to
6645         wget's unconditional escaping of certain characters (room for an
6646         option there?).
6647         (http_loop): Heiko introduced "suggest explicit braces to avoid
6648         ambiguous `else'" warnings.  Eliminated them.
6649
6650         * main.c: Heiko's --wait / --waitretry backwards compatibility
6651         code looks to have been totally untested -- automatic variable
6652         'wr' was used without being initialized, and a long int was passed
6653         into setval()'s char* val parameter.
6654
6655         * recur.c (parse_robots): Applied Edward J. Sabol
6656         <sabol@alderaan.gsfc.nasa.gov>'s patch for Guan Yang's reported
6657         problem with "User-agent:<space>*<space>" lines in robots.txt.
6658
6659         * url.c (parseurl, str_url): Removing Dan Berger's code (see
6660         http.c above for explanation).
6661
6662 1999-08-25  Heiko Herold  <Heiko.Herold@previnet.it>
6663
6664         * ftp.c: Respect new option waitretry.
6665
6666 2000-01-30  Damir Dzeko  <ddzeko@zesoi.fer.hr>
6667
6668         * http.c (gethttp): Send custom Referer, if required.
6669
6670 1999-09-24  Charles G Waldman  <cgw@fnal.gov>
6671
6672         * netrc.c (parse_netrc): Allow passwords to contain spaces.
6673
6674         * netrc.c (parse_netrc): New function.
6675
6676 1999-09-17  Dan Berger  <dberger@ix.netcom.com>
6677
6678         * http.c (gethttp): Send it.
6679
6680         * url.c (parseurl): Detect query string in HTTP URL-s.
6681         (str_url): Print it.
6682
6683 2000-03-02  HIROSE Masaaki  <hirose31@t3.rim.or.jp>
6684
6685         * html.c (html_allow): Add <link href=...> and <script src=...>.
6686
6687 1999-05-02  andrew deryabin  <djsf@softhome.net>
6688
6689         * http.c (gethttp): Specify port in `Host' header only if it's
6690         different from 80.
6691
6692 1998-11-03  Edward J. Sabol  <sabol@alderaan.gsfc.nasa.gov>
6693
6694         * recur.c (recursive_retrieve): If a finite maximum depth is
6695         specified, and we're are already at that depth, don't download the
6696         HTML file for parsing.
6697
6698 2000-03-01  Dan Harkless  <wget@harkless.org>
6699
6700         * ftp.c (ftp_loop_internal): Call new downloaded_file() function,
6701         even though we don't do conversion on HTML files retrieved via
6702         FTP, so _current_ usage of downloaded_file() makes this call unneeded.
6703         (ftp_retrieve_list): Added a comment saying where we need to
6704         stat() a .orig file if FTP'd HTML file conversion is ever implemented.
6705         (ftp_retrieve_list): "Local file '%s' is more recent," is sometimes
6706         a lie -- reworded as "Server file no newer than local file '%s' --".
6707
6708         * http.c (http_loop): Fixed a typo and clarified a comment.
6709         (http_loop): When -K and -N are specified together, compare size
6710         and timestamp of server file X against local file X.orig (if
6711         extant) rather than converted local file X.
6712         (http_loop): "Local file '%s' is more recent," is sometimes a lie
6713         -- reworded as "Server file no newer than local file '%s' --".
6714         (http_loop): Call new downloaded_file() function to prevent
6715         wrongful overwriting of .orig file when -N is specified.
6716
6717         * url.c (convert_links): When -K specified, only rename X to
6718         X.orig if downloaded_file() returns TRUE.  Otherwise when we skip
6719         file X due to -N, we clobber an X.orig from a previous invocation.
6720         (convert_links): Call the failsafe xstrdup(), not the real strdup().
6721         (convert_links): Added a note asking anyone who understands how
6722         multiple URLs can correspond to a single file to comment it.
6723         (downloaded_file): Added this new function.
6724
6725         * url.h (downloaded_file): Added prototype for this new function
6726         as well as its downloaded_file_t enum type.
6727
6728         * wget.h (boolean): Added this new typedef and TRUE and FALSE #defines.
6729
6730 2000-02-29  Dan Harkless  <wget@harkless.org>
6731
6732         * version.c: Upped version to developer-only "1.5.3+dev".
6733
6734 2000-02-18  Dan Harkless  <wget@harkless.org>
6735
6736         * init.c (backup_converted): Added this new option.
6737
6738         * main.c (-K / --backup-converted): Added this new option.
6739
6740         * options.h (backup_converted): Added this new option.
6741
6742         * url.c (convert_links): When backup_converted is specified, save
6743         file X as X.orig before converting.
6744
6745         * url.h (urlpos): Fixed typo -- said "Rekative" instead of "Relative".
6746
6747 1998-09-21  Hrvoje Niksic  <hniksic@srce.hr>
6748
6749         * version.c: Wget 1.5.3 is released.
6750
6751 1998-09-21  Hrvoje Niksic  <hniksic@srce.hr>
6752
6753         * host.c (ftp_getaddress): Don't warn when reverse-lookup of local
6754         address doesn't yield FQDN.
6755
6756 1998-09-21  Andreas Schwab  <schwab@issan.informatik.uni-dortmund.de>
6757
6758         * cmpt.c (strerror): Fix declaration of sys_errlist.
6759
6760 1998-09-11  Hrvoje Niksic  <hniksic@srce.hr>
6761
6762         * main.c (main): Don't use an array subscript as the first
6763         argument to STRDUP_ALLOCA.
6764         From Kaveh R. Ghazi.
6765
6766 1998-09-11  Szakacsits Szabolcs  <szaka@sienet.hu>
6767
6768         * html.c (htmlfindurl): Download table background.
6769
6770 1998-09-11  Hans Grobler  <grobh@conde.ee.sun.ac.za>
6771
6772         * init.c (parse_line): Would free *com before allocating it.
6773         (parse_line): Would free com instead of *com.
6774
6775 1998-09-10  Howard Gayle  <howard@fjst.com>
6776
6777         * url.c (get_urls_html): Would drop the last character of the
6778         link.
6779
6780 1998-09-10  Hrvoje Niksic  <hniksic@srce.hr>
6781
6782         * http.c (http_loop): Don't print status code if quiet.
6783
6784 1998-09-10  Kaveh R. Ghazi  <ghazi@caip.rutgers.edu>
6785
6786         * log.c: Use <stdarg.h> only when __STDC__.
6787
6788 1998-09-10  Adam D. Moss  <adam@foxbox.org>
6789
6790         * html.c (htmlfindurl): Download <layer src=...>.
6791
6792 1998-09-10  Howard Gayle  <howard@fjst.com>
6793
6794         * ftp.c (ftp_retrieve_list): Don't update the time stamp of a file
6795         not retrieved.
6796
6797 1998-06-27  Hrvoje Niksic  <hniksic@srce.hr>
6798
6799         * utils.c: Include <libc.h> on NeXT.
6800
6801 1998-06-26  Heinz Salzmann  <heinz.salzmann@intermetall.de>
6802
6803         * url.c (get_urls_html): Fix calculation of URL position.
6804
6805 1998-06-23  Hrvoje Niksic  <hniksic@srce.hr>
6806
6807         * version.c: Wget 1.5.2 is released.
6808
6809 1998-06-23  Dave Love  <d.love@dl.ac.uk>
6810
6811         * ftp.c, init.c, netrc.c: Include errno.h.
6812
6813         * http.c: Include errno.h and time header.
6814
6815         * Makefile.in (exext): Define.
6816         (install.bin, uninstall.bin): Use it.
6817
6818 1998-06-21  Hrvoje Niksic  <hniksic@srce.hr>
6819
6820         * http.c (http_loop): Don't attempt to compare local and remote
6821         sizes if the remote size is unknown.
6822
6823 1998-06-16  Hrvoje Niksic  <hniksic@srce.hr>
6824
6825         * url.c (get_urls_html): Use malloc() instead of alloca in the
6826         loop.
6827
6828 1998-06-13  Hrvoje Niksic  <hniksic@srce.hr>
6829
6830         * version.c: Wget 1.5.2-b4 is released.
6831
6832 1998-06-13  Hrvoje Niksic  <hniksic@srce.hr>
6833
6834         * url.c (get_urls_html): Ignore spaces before and after the URI.
6835
6836 1998-06-08  Wanderlei Antonio Cavassin  <cavassin@conectiva.com.br>
6837
6838         * ftp.c (getftp): Translate `done'.
6839
6840 1998-06-06  Hrvoje Niksic  <hniksic@srce.hr>
6841
6842         * version.c: Wget 1.5.2-b3 is released.
6843
6844 1998-06-06  Alexander Kourakos  <awk@bnt.com>
6845
6846         * init.c (cleanup): Close dfp, don't free it.
6847
6848 1998-06-06  Hrvoje Niksic  <hniksic@srce.hr>
6849
6850         * utils.c (make_directory): Twiddle.
6851
6852         * config.h.in: Added template for access().
6853
6854 1998-06-05  Mathieu Guillaume  <mat@cythere.com>
6855
6856         * html.c (htmlfindurl): Download <input src=...>
6857
6858 1998-06-03  Hrvoje Niksic  <hniksic@srce.hr>
6859
6860         * utils.c (file_exists_p): Use access() with two arguments.
6861
6862 1998-05-27  Martin Kraemer  <Martin.Kraemer@mch.sni.de>
6863
6864         * netrc.c (parse_netrc): Correct logic.
6865
6866 1998-05-27  Hrvoje Niksic  <hniksic@srce.hr>
6867
6868         * ftp.c (getftp): Added `break'; suggested by Lin Zhe Min
6869         <ljm@ljm.wownet.net>.
6870
6871 1998-05-24  Hrvoje Niksic  <hniksic@srce.hr>
6872
6873         * version.c: Wget 1.5.2-b2 is released.
6874
6875 1998-05-18  Juan Jose Rodriguez  <jcnsoft@jal1.telmex.net.mx>
6876
6877         * mswindows.h: Don't translate mkdir to _mkdir under Borland.
6878
6879 1998-05-17  Hrvoje Niksic  <hniksic@srce.hr>
6880
6881         * retr.c (elapsed_time): Return correct value when
6882         HAVE_GETTIMEOFDAY is undefined.
6883
6884 1998-05-13  Hrvoje Niksic  <hniksic@srce.hr>
6885
6886         * version.c: Wget 1.5.2-b1 is released.
6887
6888 1998-05-08  Hrvoje Niksic  <hniksic@srce.hr>
6889
6890         * getopt.c (_getopt_internal): Use exec_name instead of argv[0].
6891         (_getopt_internal): Don't translate `#if 0'-ed strings.
6892
6893 1998-05-06  Douglas E. Wegscheid  <wegscd@whirlpool.com>
6894
6895         * mswindows.c (ws_handler): Use fork_to_background().
6896
6897 1998-05-05  Hrvoje Niksic  <hniksic@srce.hr>
6898
6899         * version.c: Wget 1.5.1 is released.
6900
6901 1998-05-05  Hrvoje Niksic  <hniksic@srce.hr>
6902
6903         * http.c (parse_http_status_line): Avoid `minor' and `major'
6904         names.
6905
6906 1998-05-02  Hrvoje Niksic  <hniksic@srce.hr>
6907
6908         * utils.c (mkdirhier): Renamed to make_directory.
6909
6910 1998-05-01  Hrvoje Niksic  <hniksic@srce.hr>
6911
6912         * mswindows.c (fork_to_background): Define under Windows.
6913
6914         * utils.c (fork_to_background): New function.
6915
6916         * html.c (htmlfindurl): Removed rerdundant casts.
6917
6918 1998-05-01  Douglas E. Wegscheid  <wegscd@whirlpool.com>
6919
6920         * mswindows.c (ws_mypath): Cache the path.
6921
6922 1998-04-30  Douglas E. Wegscheid  <wegscd@whirlpool.com>
6923
6924         * ftp.h: Prefix enum ftype members with FT_.
6925
6926         * ftp-ls.c, ftp.c, html.h: Adjust accordingly.
6927
6928         * mswindows.h: Use stat under Borland, _stat under MSVC.
6929
6930 1998-04-28  Hrvoje Niksic  <hniksic@srce.hr>
6931
6932         * http.c (known_authentication_scheme_p): New function.
6933         (gethttp): Handle authorization more correctly.
6934
6935         * ftp-basic.h: Removed.
6936
6937         * cmpt.h: Removed.
6938
6939         * utils.c: Include <unistd.h> before <pwd.h>; needed under SunOS
6940         with gcc 2.8.
6941         (numdigit): Use `while' loop.
6942
6943         * http.c (create_authorization_line): Detect authentication
6944         schemes case-insensitively.
6945
6946         * http.c (extract_header_attr): Use strdupdelim().
6947         (digest_authentication_encode): Move declaration of local
6948         variables to smaller scope.
6949         (digest_authentication_encode): Reset REALM, OPAQUE and NONCE.
6950         (create_authorization_line): Detect authentication schemes
6951         case-insensitively.
6952
6953         * utils.c (touch): Constify.
6954
6955         * http.c (gethttp): Report a nicer error when no data is received.
6956
6957         * rbuf.h (RBUF_READCHAR): Ditto.
6958
6959         * ftp-basic.c (ftp_response): Use sizeof.
6960
6961 1998-04-27  Hrvoje Niksic  <hniksic@srce.hr>
6962
6963         * retr.c (print_percentage): EXPECTED is long, not int.
6964         (print_percentage): Use floating-point arithmetic to avoid
6965         overflow with large files' sizes multiplied with 100.
6966
6967 1998-04-27  Gregor Hoffleit  <flight@mathi.uni-heidelberg.de>
6968
6969         * config.h.in: Added pid_t stub.
6970
6971         * sysdep.h (S_ISREG): Moved here from mswindows.h (NeXT doesn't
6972         define it).
6973
6974 1998-04-20  Hrvoje Niksic  <hniksic@srce.hr>
6975
6976         * version.c: Wget 1.5.0 is released.
6977
6978 1998-04-18  Hrvoje Niksic  <hniksic@srce.hr>
6979
6980         * url.c (str_url): Ditto.
6981
6982         * ftp-basic.c (ftp_rest): Use new name.
6983
6984         * utils.c (long_to_string): Renamed from prnum().
6985
6986 1998-04-16  Hrvoje Niksic  <hniksic@srce.hr>
6987
6988         * version.c: Wget 1.5-b17 is released.
6989
6990 1998-04-08  Hrvoje Niksic  <hniksic@srce.hr>
6991
6992         * headers.c (header_get): New argument FLAGS.
6993
6994         * http.c (gethttp): If request is malformed, bail out of the
6995         header loop.
6996         (gethttp): Check for empty header *after* the status line checks.
6997         (gethttp): Disallow continuations for status line.
6998
6999 1998-04-08  Hrvoje Niksic  <hniksic@srce.hr>
7000
7001         * version.c: Wget 1.5-b16 is released.
7002
7003 1998-04-08  Hrvoje Niksic  <hniksic@srce.hr>
7004
7005         * init.c (commands): Renamed `always_rest' to `continue'.
7006
7007 1998-04-05  Hrvoje Niksic  <hniksic@srce.hr>
7008
7009         * all: Use it.
7010
7011         * log.c (logputs): New argument.
7012         (logvprintf): Ditto.
7013         (logprintf): Ditto.
7014
7015 1998-04-04  Hrvoje Niksic  <hniksic@srce.hr>
7016
7017         * http.c (http_atotm): Update comment.
7018
7019         * main.c (i18n_initialize): Set LC_MESSAGES, not LC_ALL.
7020
7021         * wget.h: Renamed ENABLED_NLS to HAVE_NLS.
7022
7023         * main.c (i18n_initialize): New function.
7024         (main): Use it.
7025
7026         * log.c: Include <unistd.h>.
7027
7028         * retr.c (show_progress): Cast alloca to char *.
7029
7030 1998-04-04  Hrvoje Niksic  <hniksic@srce.hr>
7031
7032         * version.c: Wget 1.5-b15 is released.
7033
7034 1998-04-04  Hrvoje Niksic  <hniksic@srce.hr>
7035
7036         * utils.h: Declare file_non_directory_p().
7037
7038 1998-04-03  Hrvoje Niksic  <hniksic@srce.hr>
7039
7040         * main.c (main): It's `tries', not `numtries' now.
7041
7042 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
7043
7044         * init.c (getperms): Removed.
7045
7046 1998-04-01  Tim Charron  <tcharron@interlog.com>
7047
7048         * log.c (logvprintf): Don't use ARGS twice.
7049
7050 1998-04-01  John  <john@futuresguide.com>
7051
7052         * mswindows.c: Cleaned up.
7053
7054 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
7055
7056         * version.c: Wget 1.5-b14 is released.
7057
7058 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
7059
7060         * ftp-opie.c (STRLEN4): New macro.
7061         (btoe): Use it.
7062
7063 1998-04-01  Junio Hamano  <junio@twinsun.com>
7064
7065         * http.c: Document all the Digest functions.
7066
7067 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
7068
7069         * utils.c (file_non_directory_p): Renamed from isfile().
7070
7071         * mswindows.h (S_ISREG): New macro, suggested by Tim Adam.
7072
7073 1998-03-31  Hrvoje Niksic  <hniksic@srce.hr>
7074
7075         * utils.c (mkdirhier): Use 0777 instead of opt.dirmode.
7076
7077         * init.c (cmd_spec_dotstyle): Use 48 dots per line for binary
7078         style.
7079         (cmd_permissions): Removed.
7080
7081         * config.h.in: Add template for WORDS_BIGENDIAN.
7082
7083 1998-03-31  Junio Hamano  <junio@twinsun.com>
7084
7085         * http.c (HEXD2asc): New macro.
7086         (dump_hash): Use it.
7087
7088 1998-03-31  Hrvoje Niksic  <hniksic@srce.hr>
7089
7090         * version.c: Wget 1.5-b13 is released.
7091
7092 1998-03-31  Hrvoje Niksic  <hniksic@srce.hr>
7093
7094         * main.c (main): Don't try to use `com'.
7095
7096 1998-03-30  Hrvoje Niksic  <hniksic@srce.hr>
7097
7098         * init.c (cmd_permissions): New function.
7099
7100 1998-03-30  Hrvoje Niksic  <hniksic@srce.hr>
7101
7102         * version.c: Wget 1.5-b12 is released.
7103
7104 1998-03-30  Hrvoje Niksic  <hniksic@srce.hr>
7105
7106         * init.c (commands): Renamed `numtries' to `tries'.
7107         (cmd_spec_debug): Removed.
7108         (home_dir): Under Windows, return `C:\' if HOME is undefined.
7109
7110 1998-03-29  Hrvoje Niksic  <hniksic@srce.hr>
7111
7112         * config.h.in: Define _XOPEN_SOURCE.
7113
7114         * init.c (check_user_specified_header): New function.
7115         (cmd_spec_header): Use it.
7116         (cmd_spec_useragent): New function.
7117
7118 1998-03-29  Hrvoje Niksic  <hniksic@srce.hr>
7119
7120         * version.c: Wget 1.5-b11 is released.
7121
7122 1998-03-28  Hrvoje Niksic  <hniksic@srce.hr>
7123
7124         * wget.h: Include <libintl.h> only if NLS is enabled.
7125
7126 1998-03-26  Hrvoje Niksic  <hniksic@srce.hr>
7127
7128         * options.h (struct options): Made `wait' a long.
7129         (struct options): Ditto for `timeout'.
7130
7131 1998-03-19  Hrvoje Niksic  <hniksic@srce.hr>
7132
7133         * utils.c (exists): Renamed to file_exists_p.
7134         (file_exists_p): Use access() if available.
7135
7136 1998-03-17  Hrvoje Niksic  <hniksic@srce.hr>
7137
7138         * utils.c (memfatal): Set save_log_p to 0 to avoid potential
7139         infloop.
7140
7141         * log.c: do_logging -> save_log_p.
7142
7143         * config.h.in: Added template for HAVE_VSNPRINTF.
7144
7145 1998-03-16  Hrvoje Niksic  <hniksic@srce.hr>
7146
7147         * init.c: Ditto.
7148
7149         * http.c: Protect declaration against non-ANSI compiler.
7150
7151         * log.c (logvprintf): Use vsnprintf() if available.
7152
7153         * getopt.c (main): Don't translate test stuff.
7154
7155 1998-03-16  Hrvoje Niksic  <hniksic@srce.hr>
7156
7157         * version.c: Wget 1.5-b10 is released.
7158
7159 1998-03-11  Hrvoje Niksic  <hniksic@srce.hr>
7160
7161         * ftp.c (getftp): Don't translate "CWD %s".
7162
7163         * wget.h (GCC_FORMAT_ATTR): Renamed from FORMAT_ATTR.
7164
7165 1998-03-07  Hrvoje Niksic  <hniksic@srce.hr>
7166
7167         * ftp-opie.c (btoe): Use memcpy() instead of strncat().
7168
7169         * log.c (logputs): New function.
7170         (logvprintf): Renamed from vlogmsg; use logputs().
7171
7172         * retr.c (show_progress): Print `[100%]' when the retrieval is
7173         finished.
7174
7175         * init.c (run_wgetrc): Use FILE, not PATH.
7176         (wgetrc_file_name): Ditto.
7177
7178 1998-03-07  Tim Adam  <tma@osa.com.au>
7179
7180         * recur.c (parse_robots): Correctly reset `entries' on empty
7181         disallow.
7182
7183 1998-03-07  Hrvoje Niksic  <hniksic@srce.hr>
7184
7185         * init.c (cmd_spec_debug): Use cmd_boolean().
7186
7187 1998-02-23  Hrvoje Niksic  <hniksic@srce.hr>
7188
7189         * http.c (gethttp): Create proxy-authorization correctly.
7190
7191 1998-02-22  Hrvoje Niksic  <hniksic@srce.hr>
7192
7193         * md5.c: Ditto.
7194
7195         * getopt.c: Use ANSI function definitions.
7196
7197         * ftp-opie.c: New file.
7198
7199         * options.h: Don't redefine EXTERN.
7200
7201         * init.c: Sort it correctly.
7202
7203 1998-02-22  Hrvoje Niksic  <hniksic@srce.hr>
7204
7205         * version.c: Wget 1.5-b9 is released.
7206
7207 1998-02-22  Hrvoje Niksic  <hniksic@srce.hr>
7208
7209         * recur.c (recursive_retrieve): Reset `first_time'.
7210
7211         * ftp.c (getftp): Added `default' clause to switches of uerr_t.
7212
7213         * rbuf.c (rbuf_peek): Simplified.
7214         (rbuf_flush): Use MINVAL.
7215
7216         * wget.h (MINVAL): Moved from url.h.
7217
7218         * rbuf.h (RBUF_FD): New macro.
7219
7220         * url.c (add_url): Add to the head of the list.
7221
7222         * ftp.c (ftp_retrieve_list): Set the permissions to downloaded
7223         file.
7224         (getftp): Set the default permissions to 0600.
7225
7226 1998-02-21  Hrvoje Niksic  <hniksic@srce.hr>
7227
7228         * url.c (get_urls_html): Ditto.
7229         (convert_links): Ditto.
7230
7231         * recur.c (parse_robots): Ditto.
7232
7233         * html.c (ftp_index): Ditto.
7234
7235         * ftp-ls.c (ftp_parse_unix_ls): Open file as binary.
7236
7237         * init.c (defaults): Initialize `opt' to zero via memset.
7238
7239         * http.c (digest_authentication_encode): goto considered harmful.
7240
7241 1998-02-19  Hrvoje Niksic  <hniksic@srce.hr>
7242
7243         * ftp.c (delelement): Simplify and fix leak.
7244
7245 1998-02-18  Hrvoje Niksic  <hniksic@srce.hr>
7246
7247         * http.c (dump_hash): Use HEXD2ASC instead of home-grown stuff.
7248
7249         * url.h (HEXD2ASC): Removed warning.
7250
7251         * init.c (comind): Use binary search.
7252         (commands): Reorganized.
7253         (setval): Ditto.
7254         (cmd_boolean): New function.
7255         (cmd_number): Ditto.
7256         (cmd_number_inf): Ditto.
7257         (cmd_string): Ditto.
7258         (cmd_vector): Ditto.
7259         (cmd_directory_vector): Ditto.
7260         (cmd_bytes): Ditto.
7261         (cmd_time): Ditto.
7262         (cmd_spec_debug): Ditto.
7263         (cmd_spec_dirmode): Ditto.
7264         (cmd_spec_dirstruct): Ditto.
7265         (cmd_spec_dotstyle): Ditto.
7266         (cmd_spec_header): Ditto.
7267         (cmd_spec_htmlify): Ditto.
7268         (cmd_spec_mirror): Ditto.
7269         (cmd_spec_outputdocument): Ditto.
7270         (cmd_spec_recursive): Ditto.
7271         (settime): Merged with cmd_time().
7272         (setbytes): Merged with cmd_bytes().
7273         (setonoff): Merged with cmd_boolean().
7274         (onoff): Ditto.
7275
7276 1998-02-17  Hrvoje Niksic  <hniksic@srce.hr>
7277
7278         * Makefile.in (distclean): Remove `config.h'.
7279
7280 1998-02-17  Hrvoje Niksic  <hniksic@srce.hr>
7281
7282         * version.c: Wget 1.5-b8 is released.
7283
7284 1998-02-17  Hrvoje Niksic  <hniksic@srce.hr>
7285
7286         * http.c (digest_authentication_encode): New function.
7287         (create_authorization_line): Use it.
7288         (dump_hash): New function.
7289         (digest_authentication_encode): Use it.
7290
7291         * fnmatch.c: Renamed from `mtch.c'.
7292
7293 1998-02-15  Karl Eichwalder  <ke@suse.de>
7294
7295         * main.c (main): Tag "Written by..." string as translatable.
7296
7297 1998-02-15  Hrvoje Niksic  <hniksic@srce.hr>
7298
7299         * wget.h (FREE_MAYBE): New macro.
7300
7301         * http.c (create_authorization_line): Don't use ANSI C string
7302         concatenation feature.
7303         (basic_authentication_encode): Use alloca() for temporary
7304         variables.
7305
7306         * recur.h: Ditto.
7307
7308         * http.c: Ditto.
7309
7310         * headers.h: Ditto.
7311
7312         * ftp-basic.c: Protect declaration against non-ANSI compiler.
7313
7314         * http.c (create_authorization_line): Cast `unsigned char *' to
7315         `char *' for sprintf, to shut up the noisy Digital Unix cc.
7316
7317 1998-02-15  Hrvoje Niksic  <hniksic@srce.hr>
7318
7319         * version.c: Wget 1.5-b7 is released.
7320
7321 1998-02-15  Hrvoje Niksic  <hniksic@srce.hr>
7322
7323         * cmpt.c (strstr): Synched with glibc-2.0.6.
7324
7325         * ftp-basic.c (calculate_skey_response): Ditto.
7326         (calculate_skey_response): Use alloca().
7327
7328         * http.c (create_authorization_line): Work with FSF's version of
7329         md5.c.
7330
7331         * md5.c: New file, from GNU libc.
7332
7333 1998-02-14  Hrvoje Niksic  <hniksic@srce.hr>
7334
7335         * url.h (URL_CLEANSE): Name the temporary variable more carefully.
7336
7337 1998-02-13  Hrvoje Niksic  <hniksic@srce.hr>
7338
7339         * http.c (basic_authentication_encode): New function, instead of
7340         the macro.
7341
7342 1998-02-13  Junio Hamano  <junio@twinsun.com>
7343
7344         * http.c: Add HTTP-DA support.
7345         * ftp-basic.c: Add Opie/S-key support.
7346         * config.h.in, Makefile.in: Add HTTP-DA and Opie/S-key support.
7347         * md5.c, md5.h: New files.
7348
7349 1998-02-13  Hrvoje Niksic  <hniksic@srce.hr>
7350
7351         * http.c (http_process_range): Renamed from hprocrange().
7352         (http_process_range): Parse the whole header.
7353
7354         * headers.c: New file.
7355         (header_process): New function.
7356         (header_get): Renamed from fetch_next_header.
7357
7358         * all: Include utils.h only where necessary.
7359
7360         * wget.h: Declare xmalloc(), xrealloc() and xstrdup() here.
7361
7362         * wget.h: Add provisions for dmalloc.
7363
7364 1998-02-12  Hrvoje Niksic  <hniksic@srce.hr>
7365
7366         * version.c: Wget 1.5-b6 is released.
7367
7368 1998-02-12  Hrvoje Niksic  <hniksic@srce.hr>
7369
7370         * ftp.c (ftp_loop): Determine `filename' more precisely.
7371
7372         * init.c (setval): Don't set `opt.quiet' if output-document is
7373         `-'.
7374
7375         * log.c (log_init): Print to STDERR instead of STDOUT.
7376         (vlogmsg): Use STDERR by default.
7377         (logflush): Ditto.
7378
7379 1998-02-11  Simon Josefsson  <jas@pdc.kth.se>
7380
7381         * host.c: Use addr_in again.
7382
7383 1998-02-08  Karl Eichwalder  <karl@suse.de>
7384
7385         * http.c (gethttp): Fixed typo.
7386
7387 1998-02-08  Hrvoje Niksic  <hniksic@srce.hr>
7388
7389         * version.c: Wget 1.5-b5 is released.
7390
7391 1998-02-08  Hrvoje Niksic  <hniksic@srce.hr>
7392
7393         * retr.c (show_progress): Use it.
7394
7395         * log.c (logflush): New function.
7396
7397         * wget.h: Utilize __attribute__ if on gcc.
7398
7399 1998-02-07  Hrvoje Niksic  <hniksic@srce.hr>
7400
7401         * http.c (base64_encode_line): New argument LENGTH.
7402         (BASIC_AUTHENTICATION_ENCODE): Use it.
7403         (BASIC_AUTHENTICATION_ENCODE): Take length of HEADER into account.
7404
7405         * main.c (main): Fixed fprintf() format mismatch.
7406
7407 1998-02-06  Hrvoje Niksic  <hniksic@srce.hr>
7408
7409         * version.c: Wget 1.5-b4 is released.
7410
7411 1998-02-03  Simon Josefsson  <jas@pdc.kth.se>
7412
7413         * host.c: use sockaddr_in instead of addr_in.
7414
7415 1998-02-04  Hrvoje Niksic  <hniksic@srce.hr>
7416
7417         * init.c (cleanup): Use it.
7418
7419         * recur.c (recursive_cleanup): New function.
7420
7421         * retr.c (retrieve_from_file): Ditto.
7422
7423         * main.c (main): Use it.
7424
7425         * recur.c (recursive_reset): New function.
7426
7427         * retr.c (retrieve_from_file): Ditto.
7428
7429         * main.c (main): Simplify call to recursive_retrieve().
7430
7431         * recur.c (recursive_retrieve): Removed FLAGS argument.
7432
7433         * http.c (gethttp): Changed call to iwrite().
7434
7435 1998-02-03  Hrvoje Niksic  <hniksic@srce.hr>
7436
7437         * url.c (get_urls_html): Ditto.
7438         (free_urlpos): Ditto.
7439         (mkstruct): Ditto.
7440         (construct): Ditto.
7441
7442         * retr.c (retrieve_url): Move declaration of local variables to
7443         smaller scope.
7444
7445         * url.c (urlproto): Use it.
7446         (parseurl): Ditto.
7447         (str_url): Ditto.
7448         (get_urls_html): Ditto.
7449
7450         * utils.h (ARRAY_SIZE): New macro.
7451
7452         * url.c (proto): Moved from url.h.
7453
7454         * url.h (URL_CLEANSE): Reformatted.
7455         (USE_PROXY_P): Renamed from USE_PROXY.
7456
7457         * ftp-basic.c: Adjust to the new interface of iwrite().
7458
7459         * ftp-basic.c (ftp_port): Use alloca().
7460
7461 1998-02-03  Hrvoje Niksic  <hniksic@srce.hr>
7462
7463         * version.c: Wget 1.5-b3 is released.
7464
7465         * host.c (ftp_getaddress): Don't print to stderr directly.
7466
7467         * init.c (setbytes): Support `g' for gigabytes.
7468         (cmdtype): New specification CTIME.
7469         (setval): Use it with settime().
7470         (commands): Use it for WAIT and TIMEOUT.
7471
7472 1998-02-02  Hrvoje Niksic  <hniksic@srce.hr>
7473
7474         * http.c (BASIC_AUTHENTICATION_ENCODE): New macro.
7475         (gethttp): Use it.
7476
7477         * utils.c (unique_name_1): Moved from url.c.
7478         (unique_name): Ditto.
7479
7480         * url.c (url_filename): Ditto.
7481
7482         * log.c (redirect_output): Changed call to unique_name().
7483
7484         * url.c (unique_name_1): Renamed from unique_name().
7485         (unique_name): Changed interface.
7486
7487         * init.c (enum cmdid): Moved from init.h.
7488         (cmdtype): Ditto.
7489         (struct cmd): Ditto.
7490
7491         * main.c (main): Use it.
7492         (main): Moved `--backups' to not have a short option.
7493
7494         * options.h (struct options): New member BACKGROUND.
7495
7496         * main.c (print_help): Rearranged.
7497         (main): New long options for -n* short options: --no-directories,
7498         --no-host-directories, --non-verbose, --no-host-lookup and
7499         --dont-remove-listing.
7500
7501 1998-02-01  Hrvoje Niksic  <hniksic@srce.hr>
7502
7503         * main.c (main): Use log_close().
7504
7505         * log.c: New variable LOGFP.
7506         (vlogmsg): Use it.
7507         (redirect_output): Don't open /dev/null; set LOGFP to stdin
7508         instead.
7509         (log_close): New function.
7510
7511         * options.h (struct options): Removed LFILE.
7512
7513         * log.c (log_enable): Removed.
7514
7515         * main.c (main): Use it.
7516
7517         * log.c (log_init): New function.
7518
7519         * url.c (get_urls_html): Removed needless assignment to BASE.
7520
7521         * host.c (add_hlist): Don't set CMP needlessly.
7522
7523         * utils.c (match_backwards): Ditto.
7524         (in_acclist): Ditto.
7525
7526         * url.c (findurl): Ditto.
7527
7528         * netrc.c (parse_netrc): Ditto.
7529
7530         * log.c (log_dump): Ditto.
7531
7532         * html.c (html_quote_string): Ditto.
7533
7534         * ftp-basic.c (ftp_request): Made static.
7535
7536         * connect.c: Made global variables static.
7537
7538         * url.c (construct): Ditto.
7539
7540         * init.c (init_path): Avoid assignment inside `if'-condition.
7541
7542         * ftp.c: Don't include in.h or winsock.h.
7543
7544         * ftp.c (ftp_loop): Use SZ.
7545
7546         * connect.c (bindport): Cast &addrlen to int *.
7547         (conaddr): Ditto.
7548
7549         * init.c (initialize): Don't use SYSTEM_WGETRC unconditionally.
7550
7551 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
7552
7553         * ftp.c (getftp): Initialize opt.ftp_pass here.
7554         (ftp_retrieve_dirs): Use alloca().
7555
7556         * init.c (defaults): Don't initialize opt.ftp_pass.
7557
7558         * sysdep.h (S_ISLNK): Declare for OS/2; ditto for lstat.
7559         From Ivan F. Martinez <ivanfm@ecodigit.com.br>.
7560
7561 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
7562
7563         * recur.c (parse_robots): Check for comments more correctly.
7564
7565         * host.c (ftp_getaddress): Use STRDUP_ALLOCA.
7566         (ftp_getaddress): Add diagnostics when reverse-lookup yields only
7567         hostname.
7568
7569 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
7570
7571         * version.c: Wget 1.5-b2 is released.
7572
7573         * netrc.c (NETRC_FILE_NAME): Moved from netrc.h.
7574
7575         * utils.c (proclist): Pass FNM_PATHNAME to fnmatch().
7576
7577         * ftp-basic.c (ftp_pasv): Avoid unnecessary casting to unsigned
7578         char.
7579
7580         * log.c: Don't attempt to hide arguments from ansi2knr.
7581
7582         * cmpt.c: Synched strptime() and mktime() with glibc-2.0.6.
7583
7584         * ansi2knr.c: Use a later version, from fileutils-3.16l alpha.
7585
7586         * ftp.c (getftp): Ditto.
7587
7588         * http.c (gethttp): Use it.
7589
7590         * retr.c (get_contents): New argument EXPECTED; pass it to
7591         show_progress().
7592         (show_progress): New argument EXPECTED; use it to display
7593         percentages.
7594
7595         * init.c (setval): Ditto.
7596
7597         * http.c (gethttp): Ditto.
7598         (http_loop): Ditto.
7599
7600         * ftp.c (getftp): Ditto.
7601         (ftp_loop_internal): Ditto.
7602
7603         * ftp-ls.c (ftp_parse_unix_ls): Use abort() instead of assert(0).
7604
7605         * sysdep.h (CLOSE): Simplify; use DEBUGP.
7606
7607         * netrc.c (search_netrc): Use alloca().
7608
7609         * init.c (defaults): Initialize no_flush.
7610
7611         * log.c (vlogmsg): Don't flush if no_flush.
7612
7613         * options.h (struct options): New variable no_flush.
7614
7615         * main.c (main): Don't play games with buffering.
7616
7617         * log.c (vlogmsg): Flush the output after every message.
7618
7619 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
7620
7621         * init.c (parse_line): Ditto.
7622
7623         * url.c (get_urls_html): Ditto.
7624
7625         * main.c (main): Don't cast to unsigned char.
7626
7627         * init.c (run_wgetrc): Don't cast to unsigned char.
7628         (parse_line): Accept char instead of unsigned char.
7629
7630         * html.c (htmlfindurl): Use char instead of unsigned char.
7631
7632         * all: Use them.
7633
7634         * sysdep.h: Add wrappers to ctype macros to make them
7635         eight-bit-clean:
7636
7637 1998-01-30  Hrvoje Niksic  <hniksic@srce.hr>
7638
7639         * html.c (htmlfindurl): Download <img lowsrc=...>
7640
7641         * main.c (main): Ignore SIGPIPE.
7642
7643         * connect.c (select_fd): New argument WRITEP.
7644         (iwrite): Call select_fd().
7645
7646 1997-02-27  Fila Kolodny <fila@ibi.com>
7647
7648         * ftp.c (ftp_retrieve_list): If retrieving symlink and the proper
7649         one already exists, just skip it.
7650
7651 1998-01-30  Hrvoje Niksic  <hniksic@srce.hr>
7652
7653         * http.c (gethttp): Cosmetic changes.
7654
7655         * http.c (check_end): Allow `+D...' instead of `GMT'.
7656         From Fabrizio Pollastri <pollastri@cstv.to.cnr.it>.
7657
7658         * url.c (process_ftp_type): New function.
7659         (parseurl): Use it.
7660
7661         * connect.c (iwrite): Allow writing in a few chunks.
7662         (bindport): Made SRV static, so addr can point to it.
7663         (select_fd): Removed HPUX kludge.
7664
7665         * host.c (free_hlist): Incorporated into clean_hosts().
7666
7667 1998-01-29  Hrvoje Niksic  <hniksic@srce.hr>
7668
7669         * host.c (hlist): Made static.
7670         (search_address): Cosmetic change.
7671
7672 1998-01-29  Hrvoje Niksic  <hniksic@srce.hr>
7673
7674         * version.c: Wget v1.5-b1 is released.
7675
7676         * http.c (hgetlen): Use sizeof() to get the header length.
7677         (hgetrange): Ditto.
7678         (hgettype): Ditto.
7679         (hgetlocation): Ditto.
7680         (hgetmodified): Ditto.
7681         (haccepts_none): Ditto.
7682
7683         * main.c (main): Updated `--version' and `--help' output, as per
7684         Francois Pinard's suggestions.
7685
7686         * main.c: Include locale.h; call setlocale(), bindtextdomain() and
7687         textdomain().
7688
7689         * config.h.in: Define stubs for I18N3.
7690
7691         * wget.h: Include libintl.h.
7692
7693 1998-01-28  Hrvoje Niksic  <hniksic@srce.hr>
7694
7695         * url.c (mkstruct): Check for opt.cut_dirs.
7696         (mkstruct): alloca()-te more, xmalloc() less.
7697
7698         * utils.c (load_file): Check for ferror().
7699
7700         * url.c (get_urls_file): Close only the files we opened.
7701         (get_urls_html): Ditto.
7702         (count_slashes): New function.
7703
7704         * http.h: Removed.
7705
7706         * http.c (gethttp): Respect username and password provided by
7707         proxy URL.
7708         (base64_encode_line): Write into an existing buffer instead of
7709         malloc-ing a new one.
7710         (struct http_stat): Moved from http.h
7711
7712         * retr.c (retrieve_url): Free SUF.
7713
7714         * all: Removed lots of unnecessary .h dependencies.
7715
7716         * html.c (global_state): Made static.
7717
7718         * utils.h (ALLOCA_ARRAY): New macro.
7719
7720         * main.c (main): New option `--cut-dirs'.
7721
7722         * url.c (construct): Use alloca() for T.
7723
7724         * utils.c (mkdirhier): Use STRDUP_ALLOCA.
7725
7726         * host.c (_host_t): Moved from host.h.
7727         (struct host): Renamed from _host_t.
7728         (store_hostaddress): Use STRDUP_ALLOCA for INET_S.
7729         (realhost): Ditto.
7730
7731         * host.h: Don't include url.h.
7732
7733         * ftp.c (LIST_FILENAME): Moved from ftp.h.
7734
7735         * init.c (DEFAULT_FTP_ACCT): Moved from ftp.h.
7736
7737         * main.c (main): Enable log if the output goes to a TTY.
7738
7739         * connect.h: Removed unused constant `BACKLOG'.
7740
7741         * config.h.in: Check for isatty().
7742
7743         * Makefile.in (LINK): Use CFLAGS when linking.
7744
7745 1998-01-27  Hrvoje Niksic  <hniksic@srce.hr>
7746
7747         * mswindows.c (ws_hangup): Use redirect_output().
7748
7749         * main.c (redirect_output_signal): New function; use
7750         redirect_output().
7751
7752         * log.c (redirect_output): New function, based on hangup(), which
7753         is deleted.
7754
7755         * log.c (vlogmsg): New function.
7756
7757         * wget.h (DEBUGP): Use debug_logmsg().
7758
7759         * main.c (hangup): Use it.
7760
7761         * log.c (log_dump): New function.
7762
7763         * utils.h (DO_REALLOC): Use `long' for various sizes.
7764
7765         * http.c (hskip_lws): Use `while', for clarity.
7766         (HTTP_DYNAMIC_LINE_BUFFER): New constant.
7767         (fetch_next_header): Use it instead of DYNAMIC_LINE_BUFFER.
7768
7769         * ftp-basic.c (FTP_DYNAMIC_LINE_BUFFER): New constant.
7770         (ftp_response): Use it instead of DYNAMIC_LINE_BUFFER.
7771
7772         * utils.c (DYNAMIC_LINE_BUFFER): Moved from utils.c.
7773         (LEGIBLE_SEPARATOR): Ditto.
7774         (FILE_BUFFER_SIZE): Ditto.
7775
7776         * retr.c (BUFFER_SIZE): Moved from retr.h.
7777
7778         * log.c: New file.
7779         (logmsg): Moved from utils.c.
7780         (debug_logmsg): New function.
7781
7782         * mswindows.h: Include it here.
7783
7784         * init.c: Ditto.
7785
7786         * utils.c: Don't include <windows.h>.
7787
7788 1998-01-25  Hrvoje Niksic  <hniksic@srce.hr>
7789
7790         * host.c (ftp_getaddress): Ditto.
7791
7792         * main.c (main): Use it.
7793
7794         * utils.h (STRDUP_ALLOCA): New macro.
7795
7796         * init.c: Prepend `wget: ' to error messages printed on stderr.
7797
7798         * utils.c (mkdirhier): Renamed from mymkdir.
7799         (touch): Renamed from my_touch.
7800         (pwd_cuserid): Renamed from my_cuserid().
7801
7802 1998-01-24  Andy Eskilsson  <andy.eskilsson@telelogic.se>
7803
7804         * utils.c (accdir): Process wildcards.
7805         (proclist): New function.
7806         (accdir): Use it to avoid code repetition.
7807
7808 1998-01-24  Hrvoje Niksic  <hniksic@srce.hr>
7809
7810         * recur.c (parse_robots): Respect opt.useragent; use alloca().
7811
7812         * http.c (gethttp): Construct useragent accordingly.
7813
7814         * version.c: Changed version string to numbers-only.
7815
7816         * main.c (print_help): List all the options.
7817
7818         * mswindows.c (windows_main_junk): Initialize argv0 here.
7819
7820 1998-01-24  Karl Heuer  <kwzh@gnu.org>
7821
7822         * netrc.c (search_netrc): Initialize `l' only after processing
7823         netrc.
7824
7825         * main.c (main): Don't trap SIGHUP if it's being ignored.
7826
7827 1998-01-24  Hrvoje Niksic  <hniksic@srce.hr>
7828
7829         * all: Use logmsg().
7830
7831         * utils.c (time_str): Moved from retr.c.
7832         (logmsg): New function.
7833         (logmsg_noflush): Ditto.
7834
7835         * rbuf.c: New file, moved buf_* functions here.
7836
7837         * ftp.c (ftp_expected_bytes): Moved from ftp-basic.c.
7838
7839         * ftp-basic.c (ftp_rest): Use prnum().
7840
7841         * ftp-basic.c: Ditto.
7842
7843         * ftp.c: Use the new reading functions and macros.
7844
7845         * retr.c (buf_initialize): New function.
7846         (buf_initialized_p): Ditto.
7847         (buf_uninitialize): Ditto.
7848         (buf_fd): Ditto.
7849
7850         * http.c (fetch_next_header): Use the BUF_READCHAR macro for
7851         efficiency.
7852         (gethttp): Use alloca() where appropriate.
7853
7854         * retr.c (buf_readchar): Use it.
7855         (buf_peek): Use rstreams.
7856
7857         * retr.h (BUF_READCHAR): New macro.
7858
7859         * init.c (home_dir): Rewritten for clarity.
7860         (init_path): Ditto.
7861
7862         * mswindows.c (ws_backgnd): Made static.
7863         (read_registry): Ditto.
7864         (ws_cleanup): Ditto.
7865         (ws_handler): Ditto.
7866
7867 1998-01-23  Hrvoje Niksic  <hniksic@srce.hr>
7868
7869         * alloca.c: New file.
7870
7871         * Makefile.in (ALLOCA): Define.
7872
7873         * mswindows.c (ws_help): Constify.
7874         (ws_help): Use alloca.
7875
7876         * mswindows.c: Reformat.
7877
7878         * all: Added _(...) annotations for I18N snarfing and translation.
7879
7880         * host.c (ftp_getaddress): Nuke SYSINFO.
7881         (ftp_getaddress): Don't use getdomainname().
7882         (ftp_getaddress): Use uname(), where available.
7883
7884         * http.c (gethttp): Protect a stray fprintf().
7885
7886         * init.c (settime): New function.
7887         (setval): Treat WAIT specially, allowing suffixes like `m' for
7888         minutes, etc.
7889
7890 1998-01-21  Hrvoje Niksic  <hniksic@srce.hr>
7891
7892         * url.c (get_urls_html): Use alloca() for TEMP.
7893
7894 1998-01-21  Jordan Mendelson  <jordy@wserv.com>
7895
7896         * url.c (rotate_backups): New function.
7897
7898         * http.c (gethttp): Ditto.
7899
7900         * ftp.c (getftp): Rotate backups.
7901
7902 1997-12-18  Hrvoje Niksic  <hniksic@srce.hr>
7903
7904         * all: Renamed nmalloc(), nrealloc() and nstrdup() to xmalloc(),
7905         xrealloc() and xstrdup().  Use the new functions.
7906
7907         * url.c (decode_string): Made static.
7908         (has_proto): Ditto.
7909         (parse_dir): Ditto.
7910         (parse_uname): Ditto.
7911         (mkstruct): Ditto.
7912         (construct): Ditto.
7913         (construct_relative): Ditto.
7914
7915         * retr.c (show_progress): Made static.
7916
7917         * recur.c (robots_url): Made static.
7918         (retrieve_robots): Ditto.
7919         (parse_robots): Ditto.
7920         (robots_match): Ditto.
7921
7922         * main.h: Removed.
7923
7924         * main.c (printhelp): Made static.
7925         (hangup): Ditto.
7926
7927         * init.c (comind): Made static.
7928         (defaults): Ditto.
7929         (init_path): Ditto.
7930         (run_wgetrc): Ditto.
7931         (onoff): Ditto.
7932         (setonoff): Ditto.
7933         (setnum): Ditto.
7934         (myatoi): Ditto.
7935         (getperms): Ditto.
7936         (setbytes): Ditto.
7937
7938         * http.c (fetch_next_header): Made static.
7939         (hparsestatline): Ditto.
7940         (hskip_lws): Ditto.
7941         (hgetlen): Ditto.
7942         (hgetrange): Ditto.
7943         (hgettype): Ditto.
7944         (hgetlocation): Ditto.
7945         (hgetmodified): Ditto.
7946         (haccepts_none): Ditto.
7947         (gethttp): Ditto.
7948         (base64_encode_line): Ditto.
7949         (mktime_from_utc): Ditto.
7950         (http_atotm): Ditto.
7951
7952         * html.c (idmatch): Made static.
7953
7954         * host.c (search_host): Made static.
7955         (search_address): Ditto.
7956         (free_hlist): Ditto.
7957
7958         * ftp.c (getftp): Made static.
7959         (ftp_loop_internal): Ditto.
7960         (ftp_get_listing): Ditto.
7961         (ftp_retrieve_list): Ditto.
7962         (ftp_retrieve_dirs): Ditto.
7963         (ftp_retrieve_glob): Ditto.
7964         (freefileinfo): Ditto.
7965         (delelement): Ditto.
7966
7967         * ftp-ls.c (symperms): Made static.
7968         (ftp_parse_unix_ls): Ditto.
7969
7970         * connect.c (select_fd): Made static.
7971
7972         * utils.c (xmalloc): Renamed from nmalloc.
7973         (xrealloc): Renamed from nrealloc.
7974         (xstrdup): Renamed from nstrdup.
7975
7976         * getopt.c (exchange): Use alloca.
7977
7978         * mswindows.c (mycuserid): Use strncpy.
7979
7980         * New files mswindows.c, mswindows.h, sysdep.h.  winjunk.c,
7981         systhings.h, windecl.h and winjunk.h removed.
7982
7983         * mswindows.c (sleep): New function.
7984
7985         * utils.c: Include <windows.h> under Windows.
7986
7987 1997-06-12  Darko Budor  <dbudor@zesoi.fer.hr>
7988
7989         * url.h (URL_UNSAFE): Change default under Windows.
7990
7991         * retr.c (retrieve_from_file): Respect opt.delete_after.
7992
7993         * main.c (main): Call ws_help on Windows.
7994
7995         * winjunk.c (windows_main_junk): New function.
7996
7997         * main.c (main): Junk-process argv[0].
7998
7999         * http.c (mktime_from_utc): Return -1 if mktime failed.
8000
8001         * http.c (http_loop): Ditto.
8002
8003         * ftp.c (ftp_loop_internal): Change title on Windows when using a
8004         new URL.
8005
8006         * winjunk.c (getdomainname): Lots of functions.
8007
8008 1997-06-12  Hrvoje Niksic  <hniksic@srce.hr>
8009
8010         * cmpt.c (strptime_internal): Handle years more correctly for
8011         `%y'.
8012
8013 1997-06-09  Mike Thomas <mthomas@reality.ctron.com>
8014
8015         * http.c (gethttp): Allocate enough space for
8016         `Proxy-Authorization' header.
8017
8018 1997-05-10  Hrvoje Niksic  <hniksic@srce.hr>
8019
8020         * version.c: Wget/1.4.5 is released.
8021
8022 1997-05-10  Hrvoje Niksic  <hniksic@srce.hr>
8023
8024         * retr.c (get_contents): Check return value of fwrite more
8025         carefully.
8026
8027 1997-03-30  Andreas Schwab  <schwab@issan.informatik.uni-dortmund.de>
8028
8029         * cmpt.c (strptime_internal) [case 'Y']: Always subtract 1900 from
8030         year, regardless of century.
8031
8032 1997-03-30  Hrvoje Niksic  <hniksic@srce.hr>
8033
8034         * utils.c (isfile): Use `lstat' instead of `stat'.
8035
8036 1997-03-29  Hrvoje Niksic  <hniksic@srce.hr>
8037
8038         * utils.c (numdigit): Use explicit test.
8039
8040 1997-03-21  Hrvoje Niksic  <hniksic@srce.hr>
8041
8042         * http.c (http_loop): Always use `url_filename' to get u->local.
8043
8044 1997-03-20  Hrvoje Niksic  <hniksic@srce.hr>
8045
8046         * url.c: Recognize https.
8047
8048 1997-03-13  Hrvoje Niksic  <hniksic@srce.hr>
8049
8050         * recur.c (recursive_retrieve): Lowercase just the host name.
8051
8052 1997-03-09  Hrvoje Niksic  <hniksic@srce.hr>
8053
8054         * url.c (get_urls_file): Use the correct test.
8055         (get_urls_html): Ditto.
8056
8057 1997-03-07  Hrvoje Niksic  <hniksic@srce.hr>
8058
8059         * connect.c: Reverted addrlen to int.
8060
8061         * init.c (parse_line): Check for -1 instead of NONE.
8062
8063         * version.c: Changed version to 1.4.5.
8064
8065 1997-02-17  Hrvoje Niksic  <hniksic@srce.hr>
8066
8067         * init.c: New option netrc.
8068         (initialize): Don't parse .netrc.
8069
8070         * cmpt.c (recursive): Return rp.
8071         (strptime_internal): Match the long strings first, the abbreviated
8072         second.
8073
8074 1997-02-16  Hrvoje Niksic  <hniksic@srce.hr>
8075
8076         * http.c (check_end): New function.
8077         (http_atotm): Use it.
8078
8079 1997-02-13  gilles Cedoc  <gilles@cedocar.fr>
8080
8081         * http.c (gethttp): Use them.
8082
8083         * init.c: New options proxy_user and proxy_passwd.
8084
8085 1997-02-14  Hrvoje Niksic  <hniksic@srce.hr>
8086
8087         * ftp.c (ftp_retrieve_list): Create links even if not relative.
8088
8089 1997-02-10  Hrvoje Niksic  <hniksic@srce.hr>
8090
8091         * recur.c (recursive_retrieve): Lowercase the host name, if the
8092         URL is not "optimized".
8093
8094         * host.c (realhost): Return l->hostname, even if it matches with
8095         host.
8096
8097 1997-02-10  Marin Purgar  <pmc@asgard.hr>
8098
8099         * connect.c: Make addrlen size_t instead of int.
8100         (conaddr): Ditto.
8101
8102 1997-02-09  Gregor Hoffleit  <flight@mathi.uni-heidelberg.DE>
8103
8104         * systhings.h: Define S_ISLNK on NeXT too.
8105
8106 1997-02-09  Hrvoje Niksic  <hniksic@srce.hr>
8107
8108         * version.c: Released 1.4.3.
8109
8110         * url.c: Futher update to list of protostrings.
8111         (skip_proto): Skip `//' correctly for FTP and HTTP.
8112
8113         * url.c (get_urls_html): Handle bogus `http:' things a little
8114         different.
8115
8116         * main.c (main): Removed `follow-ftp' from `f'.
8117         (main): Dumped the `prefix-files' and `file-prefix' options and
8118         features; old and bogus.
8119         (main): Exit on failed setval() in `-e'.
8120
8121         * http.c (fetch_next_header): Use it to detect header continuation
8122         correctly.
8123
8124         * retr.c (buf_peek): New function.
8125
8126 1997-02-08  Hrvoje Niksic  <hniksic@srce.hr>
8127
8128         * wget.h: Include time.h and stuff.
8129
8130 1997-02-08  Roger Beeman  <beeman@cisco.com>
8131
8132         * ftp.c: Include <time.h>
8133
8134 1997-02-07  Hrvoje Niksic  <hniksic@srce.hr>
8135
8136         * url.c (findurl): Would read over buffer limits.
8137
8138 1997-02-06  Hrvoje Niksic  <hniksic@srce.hr>
8139
8140         * ftp-ls.c (ftp_parse_unix_ls): Allow spaces in file names.
8141
8142 1997-02-05  Hrvoje Niksic  <hniksic@srce.hr>
8143
8144         * http.c (http_atotm): Initialize tm.is_dst.
8145
8146 1997-02-02  Hrvoje Niksic  <hniksic@srce.hr>
8147
8148         * http.c (gethttp): Don't print the number of retrieved headers.
8149
8150         * main.c (main): New option `--no-clobber', alias for `-nc'.
8151
8152         * url.c: Recognize `https://'.
8153
8154 1997-02-01  Hrvoje Niksic  <hniksic@srce.hr>
8155
8156         * host.c (herrmsg): Don't use h_errno.
8157
8158 1997-01-30  Hrvoje Niksic  <hniksic@srce.hr>
8159
8160         * host.c (accept_domain): Use it.
8161
8162         * main.c (main): New option `--exclude-domains'.
8163
8164         * retr.c (retrieve_url): Use it.
8165         (retrieve_url): Bail out when an URL is redirecting to itself.
8166
8167         * url.c (url_equal): New function.
8168
8169 1997-01-29  Hrvoje Niksic  <hniksic@srce.hr>
8170
8171         * connect.c: Include arpa/inet.h instead of arpa/nameser.h.
8172
8173         * http.c (mk_utc_time): New function.
8174         (http_atotm): Use it; handle time zones correctly.
8175
8176 1997-01-28  Hrvoje Niksic  <hniksic@srce.hr>
8177
8178         * http.c: Ditto.
8179
8180         * ftp-basic.c: Use it instead of WRITE.
8181
8182         * connect.c (iwrite): New function.
8183
8184 1997-01-27  Hrvoje Niksic  <hniksic@srce.hr>
8185
8186         * cmpt.c (mktime): New function.
8187
8188         * netrc.c: Include <sys/types.h>.
8189
8190         * main.c (main): Wouldn't recognize --spider.
8191
8192         * retr.c (rate): Use `B', `KB' and `MB'.
8193         (reset_timer,elapsed_time): Moved from utils.c.
8194
8195         * ftp.c (ftp_retrieve_list): Ditto.
8196
8197         * http.c (http_loop): Don't touch the file if opt.dfp.
8198
8199 1997-01-24  Hrvoje Niksic  <hniksic@srce.hr>
8200
8201         * cmpt.c: New file.
8202
8203         * ftp.c (ftp_retrieve_glob): New argument semantics.
8204         (ftp_retrieve_dirs): Use it.
8205         (ftp_loop): Ditto.
8206
8207         * html.c (htmlfindurl): Recognize `'' as the quote char.
8208
8209 1997-01-23  Hrvoje Niksic  <hniksic@srce.hr>
8210
8211         * ftp.c (ftp_loop_internal): Use it.
8212
8213         * utils.c (remove_link): New function.
8214
8215 1997-01-22  Hrvoje Niksic  <hniksic@srce.hr>
8216
8217         * retr.c (retrieve_url): Require STRICT redirection URL.
8218
8219         * url.c (parseurl): New argument STRICT.
8220
8221         * http.c (hparsestatline): Be a little-bit less strict about
8222         status line format.
8223
8224 1997-01-21  Hrvoje Niksic  <hniksic@srce.hr>
8225
8226         * http.c (gethttp): Use it.
8227
8228         * main.c (main): Don't use '<digit>' as options.
8229
8230         * init.c: New option ignore_length.
8231
8232         * http.c (gethttp): Ditto.
8233         (http_loop): Check for redirection without Location:.
8234         (gethttp): Don't print Length unless RETROKF.
8235
8236         * ftp.c (getftp): Use it.
8237
8238         * url.c (mkalldirs): New function.
8239
8240         * utils.c (mymkdir): Don't check for existing non-directory.
8241
8242         * url.c (mkstruct): Don't create the directory.
8243
8244 1997-01-20  Hrvoje Niksic  <hniksic@srce.hr>
8245
8246         * init.c (setval): Removed NO_RECURSION checks.
8247
8248 1997-01-19  Hrvoje Niksic  <hniksic@srce.hr>
8249
8250         * version.c: "Released" 1.4.3-pre2.
8251
8252         * recur.c (recursive_retrieve): Bypass host checking only if URL
8253         is ftp AND parent URL is not ftp.
8254
8255         * ftp-basic.c (ftp_request): Print out Turtle Power.
8256
8257         * ftp.c (ftp_loop): Call ftp_retrieve_glob with 0 if there's no
8258         wildcard.
8259         (ftp_retrieve_glob): Call ftp_loop_internal even on empty list, if
8260         not glob.
8261
8262         * http.c (gethttp): Be a little bit smarter about status codes.
8263
8264         * recur.c (recursive_retrieve): Always reset opt.recursive when
8265         dealing with FTP.
8266
8267 1997-01-18  Hrvoje Niksic  <hniksic@srce.hr>
8268
8269         * retr.c (retrieve_url): New variable location_changed; use it for
8270         tests instead of mynewloc.
8271         (retrieve_url): Allow heuristic adding of html.
8272
8273         * url.c (url_filename): Don't use the `%' in Windows file names.
8274
8275         * http.c (http_loop): Always time-stamp the local file.
8276
8277         * http.c (http_loop): Ditto.
8278
8279         * ftp.c (ftp_retrieve_list): Use it.
8280
8281         * utils.c (my_touch): New function.
8282
8283         * ftp.c (ftp_retrieve_list): Use #ifdef HAVE_STRUCT_UTIMBUF
8284         instead of #ifndef NeXT.
8285
8286         * utils.c (strptime): New version, by Ulrich Drepper.
8287
8288 1997-01-17  Hrvoje Niksic  <hniksic@srce.hr>
8289
8290         * http.c (haccepts_none): Renamed from `haccepts_bytes'.
8291         (gethttp): If haccepts_none(), disable ACCEPTRANGES.
8292         (http_loop): Would remove ACCEPTRANGES.
8293
8294         * ftp.c (getftp): Call ftp_list with NULL.
8295
8296 1997-01-15  Hrvoje Niksic  <hniksic@srce.hr>
8297
8298         * html.c (ftp_index): Don't print minutes and seconds if we don't
8299         know them; beautify the output.
8300
8301         * ftp.c (getftp): Don't close the socket on FTPNSFOD.
8302
8303 1997-01-14  Hrvoje Niksic  <hniksic@srce.hr>
8304
8305         * utils.c (strptime): New function.
8306         (strptime): Don't use get_alt_number.
8307         (strptime): Don't use locale.
8308         (match_string): Made it a function.
8309
8310 1997-01-12  Hrvoje Niksic  <hniksic@srce.hr>
8311
8312         * http.c (http_atotm): New function.
8313         (http_loop): Use it.
8314
8315         * atotm.c: Removed from the distribution.
8316
8317         * http.c (base64_encode_line): Rewrite.
8318
8319 1997-01-09  Hrvoje Niksic  <hniksic@srce.hr>
8320
8321         * ftp.c (getftp): Use ftp_expected_bytes; print size.
8322
8323         * ftp-basic.c (ftp_response): Use ftp_last_respline.
8324         (ftp_expected_bytes): New function.
8325
8326         * ftp.c (getftp): Print the unauthoritative file length.
8327
8328         * ftp-ls.c: Renamed from ftp-unix.c.
8329         (ftp_parse_ls): Moved from ftp.c.
8330         (ftp_parse_unix_ls): Recognize seconds in time spec.
8331         (ftp_parse_unix_ls): Recognize year-less dates of the previous
8332         year.
8333
8334 1997-01-08  Hrvoje Niksic  <hniksic@srce.hr>
8335
8336         * ftp-basic.c: Don't declare errno if #defined.
8337
8338         * host.c (ftp_getaddress): Check for sysinfo legally.
8339
8340 1997-01-08  Darko Budor  <dbudor@diana.zems.fer.hr>
8341
8342         * connect.c (iread): Use READ.
8343
8344 1996-12-23  Hrvoje Niksic  <hniksic@srce.hr>
8345
8346         * url.c: Recognize finger, rlogin, tn3270, mid and cid as valid
8347         schemes.
8348
8349 1996-12-22  Hrvoje Niksic  <hniksic@srce.hr>
8350
8351         * host.c (ftp_getaddress): Allow `.' in hostname.
8352
8353 1996-12-26  Darko Budor <dbudor@zems.fer.hr>
8354
8355         * wget.h: READ and WRITE macros for use instead of read and write
8356         on sockets, grep READ *.c, grep WRITE *.c
8357
8358         * wsstartup.c: new file - startup for winsock
8359
8360         * wsstartup.h: new file
8361
8362         * win32decl.h: new file - fixup for <errno.h> and winsock trouble
8363
8364         * configure.bat: Configure utility for MSVC
8365
8366         * src/Makefile.ms,config.h.ms: new files for use with MSVC 4.x
8367
8368 1996-12-22  Hrvoje Niksic  <hniksic@srce.hr>
8369
8370         * version.c: Released 1.4.3-pre.
8371
8372         * utils.c (prnum): Accept long.
8373         (legible): Use prnum().
8374
8375         * connect.c (make_connection): Accept port as short.
8376         (bindport): Ditto.
8377
8378         * http.c (gethttp): Use search_netrc.
8379
8380 1996-12-21  Hrvoje Niksic  <hniksic@srce.hr>
8381
8382         * ftp.c (getftp): Use search_netrc.
8383
8384         * netrc.c (free_netrc): New function.
8385
8386         * init.c (home_dir): New function.
8387
8388         * url.c (convert_links): Allow REL2ABS changes.
8389
8390 1996-12-21  Gordon Matzigkeit  <gord@gnu.ai.mit.edu>
8391
8392         * netrc.c: New file.
8393         (parse_netrc, maybe_add_to_list): New functions.
8394
8395 1996-12-17  Hrvoje Niksic  <hniksic@srce.hr>
8396
8397         * retr.c (retrieve_url): Reset opt.recursion before calling
8398         ftp_loop if it is reached through newloc.
8399
8400         * init.c (run_wgetrc): Print the wgetrc path too, when reporting
8401         error; don't use "Syntax error", since we don't know if it is
8402         really a syntax error.
8403
8404 1996-12-16  Hrvoje Niksic  <hniksic@srce.hr>
8405
8406         * utils.c (acceptable): Extract the filename part of the path.
8407
8408         * recur.c (recursive_retrieve): Call acceptable() with the right
8409         argument; would bug out on wildcards.
8410
8411         * init.c (parse_line): Likewise.
8412
8413         * html.c (htmlfindurl): Cast to char * when calling stuff.
8414
8415 1996-12-15  Hrvoje Niksic  <hniksic@srce.hr>
8416
8417         * ftp.c (getftp): Use ftp_pasv.
8418
8419         * ftp-basic.c (ftp_request): Accept NULL value.
8420         (ftp_pasv): New function.
8421
8422         * options.h (struct options): Add passive FTP option.
8423
8424 1996-12-15  Hrvoje Niksic  <hniksic@srce.hr>
8425
8426         * url.c (parseurl): Debug output.
8427
8428         * utils.c (path_simplify): New one, adapted from bash's
8429         canonicalize_pathname().
8430
8431 1996-12-14  Hrvoje Niksic  <hniksic@srce.hr>
8432
8433         * ftp.c (getftp): Don't discard the buffer.
8434
8435         * retr.c (get_contents): New parameter nobuf.
8436
8437 1996-12-13  Shawn McHorse  <riffraff@txdirect.net>
8438
8439         * html.c (htmlfindurl): Recognize <meta contents="d; URL=...".
8440
8441         * init.c (setval): Strip the trailing slashes on CVECDIR.
8442
8443 1996-12-13  Hrvoje Niksic  <hniksic@srce.hr>
8444
8445         * init.c: Make excludes and includes under CVECDIR instead of
8446         CVEC.
8447
8448 1996-12-13  Shawn McHorse  <riffraff@txdirect.net>
8449
8450         * url.c (get_urls_html): Skip "http:".
8451
8452 1996-12-13  Hrvoje Niksic  <hniksic@srce.hr>
8453
8454         * utils.c (strcasecmp): From glibc.
8455         (strncasecmp): Also.
8456         (strstr): Also.
8457
8458         * url.c: Added javascript: to the list of URLs prefixes.
8459
8460 1996-12-12  Shawn McHorse  <riffraff@txdirect.net>
8461
8462         * recur.c (retrieve_robots): Print the warning message only if
8463         verbose.
8464
8465 1996-12-12  Gregor Hoffleit  <flight@mathi.uni-heidelberg.DE>
8466
8467         * ftp.c (ftp_retrieve_list): Use NeXT old utime interface.
8468
8469 1996-12-12  Hrvoje Niksic  <hniksic@srce.hr>
8470
8471         * systhings.h: New file.
8472
8473         * ../configure.in: Check for utime.h
8474
8475         * ftp.c: Check whether we have unistd.h.
8476
8477 1996-11-27  Hrvoje Niksic  <hniksic@srce.hr>
8478
8479         * recur.c (recursive_retrieve): Send the canonical URL as referer.
8480         (recursive_retrieve): Call get_urls_html with the canonical URL.
8481
8482 1996-12-13  Kaveh R. Ghazi  <ghazi@caip.rutgers.edu>
8483
8484         * (configure.in, config.h.in, src/Makefile.in, src/*.[ch]): Add
8485         ansi2knr support for compilers which don't support ANSI style
8486         function prototypes and signatures.
8487
8488         * (aclocal.m4, src/ansi2knr.c, src/ansi2knr.1): New files.
8489
8490 1996-11-26  Hrvoje Niksic  <hniksic@srce.hr>
8491
8492         * url.c: Use it; Recognize paths ending with "." and ".." as
8493         directories.
8494         (url_filename): Append .n whenever file exists and could be a
8495         directory.
8496
8497         * url.h (ISDDOT): New macro.
8498
8499         * init.c (parse_line): Use unsigned char.
8500
8501         * url.c (get_urls_html): Cast to unsigned char * when calling
8502         htmlfindurl.
8503
8504         * html.c (htmlfindurl): Use unsigned char.
8505
8506         * version.c: Changed version to 1.4.3.
8507
8508 1996-11-25  Hrvoje Niksic  <hniksic@srce.hr>
8509
8510         * version.c: Released 1.4.2.
8511
8512         * ftp.c (getftp): Simplified assertion.
8513         (ftp_loop_internal): Remove symlink before downloading.
8514         (ftp_retrieve_list): Unlink the symlink name before attempting to
8515         create a symlink!
8516
8517         * options.h (struct options): Renamed print_server_response to
8518         server_response.
8519
8520         * ftp.c (rel_constr): Removed.
8521         (ftp_retrieve_list): Don't use it.
8522         (ftp_retrieve_list): Use opt.retr_symlinks.
8523
8524 1996-11-24  Hrvoje Niksic  <hniksic@srce.hr>
8525
8526         * main.c (main): New option retr_symlinks.
8527
8528         * url.c (convert_links): Print verbose message.
8529
8530 1996-11-24  Hrvoje Niksic  <hniksic@srce.hr>
8531
8532         * http.c (http_loop): Reset newloc in the beginning of function;
8533         would cause FMR in retrieve_url.
8534
8535 1996-11-23  Hrvoje Niksic  <hniksic@srce.hr>
8536
8537         * recur.c (convert_all_links): Find the URL of each HTML document,
8538         and feed it to get_urls_html; would bug out.
8539         (convert_all_links): Check for l2 instead of dl; removed dl.
8540
8541         * url.c (convert_links): Don't refer to freed newname.
8542
8543         * recur.c (recursive_retrieve): Add this_url to urls_downloaded.
8544
8545         * main.c (main): Print the OS_TYPE in the debug output, too.
8546
8547         * recur.c (recursive_retrieve): Check for opt.delete_after.
8548
8549         * main.c (main): New option delete-after.
8550
8551         * init.c (setval): Cleaned up.
8552
8553 1996-11-21  Hrvoje Niksic  <hniksic@srce.hr>
8554
8555         * Makefile.in (wget): Make `wget' the default target.
8556
8557         * ftp.c (ftp_loop_internal): Move noclobber checking out of the
8558         loop.
8559         (ftp_retrieve_list): Warn about non-matching sizes.
8560
8561         * http.c (http_loop): Made -nc non-dependent on opt.recursive.
8562
8563         * init.c (setnum): Renamed from setnuminf; New argument flags.
8564         (setval): Use it.
8565
8566         * main.c (main): Sorted the options.
8567         (main): New option --wait.
8568
8569 1996-11-21  Shawn McHorse  <riffraff@txdirect.net>
8570
8571         * html.c (htmlfindurl): Reset s->in_quote after getting out of
8572         quotes.
8573
8574 1996-11-20  Hrvoje Niksic  <hniksic@srce.hr>
8575
8576         * version.c: Changed version to 1.4.2.
8577
8578 1996-11-20  Hrvoje Niksic  <hniksic@srce.hr>
8579
8580         * version.c: Released 1.4.1.
8581
8582         * html.c (html_quote_string): New function.
8583         (ftp_index): Use it.
8584         (htmlfindurl): A more gentle ending debug message.
8585
8586         * ftp.c (ftp_loop): Check for opt.htmlify.
8587
8588         * init.c: New command htmlify.
8589
8590         * ftp.c (getftp): Nicer error messages, with `'-encapsulated
8591         strings.
8592         (ftp_loop): Print size of index.html.
8593
8594         * init.c (setval): Implement "styles".
8595
8596         * main.c (main): New option dotstyle.
8597
8598 1996-11-19  Hrvoje Niksic  <hniksic@srce.hr>
8599
8600         * ftp.c (getftp): Close the master socket in case of errors, after
8601         bindport().
8602
8603         * connect.c (bindport): Initialize msock to -1.
8604
8605         * ftp.c (getftp): Initialize dtsock to -1.
8606
8607         * connect.c (closeport): Don't close sock if sock == -1.
8608
8609 1996-11-18  Hrvoje Niksic  <hniksic@srce.hr>
8610
8611         * init.c (setnuminf): Nuked default value -- just leave unchanged.
8612         (setval): Don't send default values.
8613         (defaults): Use DEFAULT_TIMEOUT -- aaargh.
8614
8615         * options.h (struct options): Use long for dot_bytes.
8616
8617         * init.c (setquota): Renamed to setbytes.
8618         (setval): Use setbytes on DOTBYTES.
8619
8620 1996-11-17  Hrvoje Niksic  <hniksic@srce.hr>
8621
8622         * ftp.c (getftp): Initialize con->dltime.
8623
8624         * recur.c (recursive_retrieve): Use same_host instead of
8625         try_robots; simply load robots_txt whenever the host is changed.
8626         (recursive_retrieve): Free forbidden before calling parse_robots.
8627
8628 1996-11-16  Hrvoje Niksic  <hniksic@srce.hr>
8629
8630         * retr.c (show_progress): Use them.
8631
8632         * options.h (struct options): New options dot_bytes, dots_on_line
8633         and dot_spacing.
8634
8635 1996-11-16  Mark Boyns  <boyns@sdsu.edu>
8636
8637         * recur.c (recursive_retrieve): Retrieve directories regardless of
8638         acc/rej rules; check for empty u->file.
8639
8640 1996-11-14  Hrvoje Niksic  <hniksic@srce.hr>
8641
8642         * init.c (setval): Use it.
8643
8644         * utils.c (merge_vecs): New function.
8645
8646         * init.c (setval): Reset the list-type functions when encountering
8647         "".
8648
8649 1996-11-14  Shawn McHorse  <riffraff@txdirect.net>
8650
8651         * recur.c (recursive_retrieve): Use base_url instead of this_url
8652         for no_parent.
8653
8654 1996-11-14  Shawn McHorse  <riffraff@txdirect.net>
8655
8656         * html.c (htmlfindurl): Reset s->in_quote after exiting the quote.
8657
8658 1996-11-13  Hrvoje Niksic  <hniksic@srce.hr>
8659
8660         * utils.c (sepstring): Rewrote; don't use strtok.
8661
8662         * recur.c (recursive_retrieve): Enter assorted this_url to slist
8663         when running the first time.
8664         (retrieve_robots): Warn to ignore errors when robots are loaded.
8665
8666         * utils.c (load_file): Moved from url.c.
8667
8668         * http.c: Made static variables const too in h* functions.
8669
8670         * main.c (main): Renamed --continue-ftp to --continue.
8671
8672         * recur.c (recursive_retrieve): Use it.
8673
8674         * utils.c (frontcmp): New function.
8675
8676         * url.c (accdir): New function.
8677
8678         * html.c (htmlfindurl): Recognize <area href=...>.
8679
8680         * ftp.c (ftp_retrieve_dirs): Implemented opt.includes.
8681
8682         * init.c (setval): Free the existing opt.excludes and
8683         opt.includes, if available.
8684
8685         * main.c (main): New option -I.
8686
8687 1996-11-12  Hrvoje Niksic  <hniksic@srce.hr>
8688
8689         * ftp.c (ftp_retrieve_glob): Do not weed out directories.
8690
8691         * version.c: Changed version to 1.4.1.
8692
8693 1996-11-11  Hrvoje Niksic  <hniksic@srce.hr>
8694
8695         * version.c: Released 1.4.0.
8696
8697 1996-11-10  Hrvoje Niksic  <hniksic@srce.hr>
8698
8699         * main.c (main): Free com and val after parse_line.
8700         (printhelp): Reorder the listing.
8701
8702         * http.c: More robust header parsing.
8703
8704         * http.c: Allow any number of spaces, or no spaces, precede ':'.
8705         (hskip_lws): New function.
8706         (haccepts_bytes): New function.
8707         (gethttp): Use it.
8708
8709         * init.c (setval): Check header sanity.
8710         (setval): Allow resetting of headers.
8711
8712 1996-11-10  Hrvoje Niksic  <hniksic@srce.hr>
8713
8714         * http.c (http_loop): Don't use has_wildcards.
8715
8716         * http.c (gethttp): Free all_headers -- would leak.
8717
8718         * recur.c (recursive_retrieve): Initialize depth to 1 instead of
8719         0 -- this fixes a long-standing bug in -rl.
8720
8721 1996-11-09  Hrvoje Niksic  <hniksic@srce.hr>
8722
8723         * ftp.c: Use -1 as "impossible" value for con->fd.
8724
8725         * url.h (URL_SEPARATOR): Don't treat `*' and `+' as separators.
8726
8727         * init.c (parse_line): Use isalpha.
8728
8729         * ftp-unix.c: Use HAVE_UNISTD_H.
8730
8731         * mtch.c (has_wildcards): Don't match \.
8732
8733         * http.c (http_loop): Warn on HTTP wildcard usage.
8734
8735 1996-11-08  Hrvoje Niksic  <hniksic@srce.hr>
8736
8737         * url.c (url_filename): Do not create numbered suffixes if
8738         opt.noclobber -- would bug out on -nc.
8739
8740 1996-11-07  Hrvoje Niksic  <hniksic@srce.hr>
8741
8742         * recur.c (parse_robots): Don't chuck out the commands without
8743         arguments (`Disallow:<empty>' didn't work).
8744         (parse_robots): Compare versions lowercase.
8745         (parse_robots): Match on base_version, not version_string!
8746         (parse_robots): Handle comments properly.
8747         (parse_robots): Match versions in a sane way.
8748
8749         * init.c: Print nicer error messages.
8750
8751         * version.c: Changed version to 1.4.0.
8752
8753 1996-11-06  Hrvoje Niksic  <hniksic@srce.hr>
8754
8755         * version.c: Released 1.4.0-test2.
8756
8757         * init.c (run_wgetrc): Close fp.
8758
8759         * ftp.c (ftp_retrieve_dirs): Allocate the correct length for
8760         u->dir.
8761
8762 1996-11-06  Hrvoje Niksic  <hniksic@srce.hr>
8763
8764         * init.c (setquota): Allow inf as quota specification.
8765
8766 1996-11-05  Hrvoje Niksic  <hniksic@srce.hr>
8767
8768         * ftp.c (ftp_retrieve_dirs): Return QUOTEXC if quota exceeded.
8769         (ftp_retrieve_glob): Return QUOTEXC on quota exceeded.
8770
8771         * main.c (main): Check for quota by comparison with downloaded
8772         stuff, not from status.
8773
8774         * connect.c (select_fd): Should compile on HPUX without warnings now.
8775
8776         * ftp.c (ftp_get_listing): Check whether ftp_loop_internal
8777         returned RETROK.
8778
8779 1996-11-04  Hrvoje Niksic  <hniksic@srce.hr>
8780
8781         * ftp.c (ftp_retrieve_glob): Print the pattern nicely.
8782         (getftp): Return FTPRETRINT on control connection error.
8783
8784         * html.c (htmlfindurl): Recognize <embed src=...> and
8785         <bgsound src=...>.
8786         (ftp_index): Handle username and password correctly.
8787
8788         * main.c (main): Made `-np' a synonim for --no-parent.
8789
8790 1996-11-02  Hrvoje Niksic  <hniksic@srce.hr>
8791
8792         * ftp.c (ftp_loop): Check for opt.ftp_glob too before calling
8793         ftp_retrieve_glob.
8794
8795         * version.c: Changed version to 1.4.0-test2.
8796
8797 1996-11-02  Hrvoje Niksic  <hniksic@srce.hr>
8798
8799         * version.c: Released 1.4.0-test1.
8800
8801         * url.c (str_url): Don't use sprintf when creating %2F-prefixed
8802         directory.
8803         (convert_links): Removed definition of make_backup.
8804
8805         * http.h: Removed definition of MAX_ERROR_LENGTH.
8806
8807         * host.c (ftp_getaddress): Check for "(none)" domains.
8808
8809         * ftp.c (ftp_retrieve_dirs): Docfix.
8810
8811         * http.c (gethttp): Use ou->referer instead of u->referer.
8812
8813         * retr.c (retrieve_url): Reset u to avoid freeing pointers twice;
8814         this was known to cause coredumps on Linux.
8815
8816         * html.c (ftp_index): Cast the argument to local_time to time_t *.
8817
8818 1996-11-01  Hrvoje Niksic  <hniksic@srce.hr>
8819
8820         * connect.c (select_fd): Use exceptfds -- once and for all.
8821
8822         * retr.c (retrieve_from_file): Free filename after
8823         recursive_retrieve.
8824         (retrieve_from_file): Send RFIRST_TIME to recursive_retrieve on
8825         first-time retrieval.
8826         (retrieve_from_file): Return uerr_t; new argument, count.
8827         (retrieve_from_file): Break on QUOTEXC.
8828
8829         * init.c (setquota): Fixed a bug that caused rejection of
8830         non-postfixed values..
8831
8832 1996-10-30  Hrvoje Niksic  <hniksic@srce.hr>
8833
8834         * version.c: Changed name to wget.
8835
8836         * connect.c (iread): Smarter use of select.
8837         (select_fd): Set errno on timeout.  If not timeout, return 1
8838         instead of 0.
8839
8840 1996-10-29  Hrvoje Niksic  <hniksic@srce.hr>
8841
8842         * ftp.c (ftp_loop_internal): Don't use con->cmd before
8843         establishing it.
8844
8845 1996-10-26  Hrvoje Niksic  <hniksic@srce.hr>
8846
8847         * http.c (gethttp): Send correct referer when using proxy.
8848         (gethttp): Use struct urlinfo ou to access the relevant data; send
8849         correct authorization in all cases.
8850
8851         * host.c (same_host): Use skip_uname to skip username and
8852         password.
8853
8854         * url.c (skip_uname): New function.
8855         (parseurl): Use it.
8856
8857         * host.c (same_host): Do not assume HTTP -- same_host should now
8858         be totally foolproof.
8859
8860         * url.c (skip_proto): New function.
8861         (parse_uname): Use it.
8862
8863         * http.c (gethttp): Create local user and passwd from what is
8864         given.
8865
8866         * url.c (parseurl): Check for HTTP username and password too.
8867
8868 1996-10-25  Hrvoje Niksic  <hniksic@srce.hr>
8869
8870         * config.h.in: Removed #define gethostbyname R...
8871
8872 1996-10-22  Hrvoje Niksic  <hniksic@srce.hr>
8873
8874         * version.c: Changed version to 1.4.0-test1.
8875
8876 1996-10-21  Hrvoje Niksic  <hniksic@srce.hr>
8877
8878         * version.c: "Released" 1.4b29.
8879
8880         * recur.c (recursive_retrieve): Check for no_parent.
8881
8882         * init.c (setval): Option update.
8883
8884         * main.c (main): New option no-parent.
8885
8886         * options.h (struct options): New variable no_parent.
8887
8888         * recur.c (recursive_retrieve): Only files are checked for
8889         opt.accepts and opt.rejects.
8890         (recursive_retrieve): Check directories for opt.excludes.
8891         (recursive_retrieve): Make the dir absolute when checking
8892         opt.excludes.
8893
8894         * html.c (htmlfindurl): Recognize <applet code=...> and <script
8895         src=...>
8896
8897 1996-10-18  Hrvoje Niksic  <hniksic@srce.hr>
8898
8899         * ftp.c (getftp): Do not line-break assert entries at all.
8900         (ftp_retrieve_dirs): docfix.
8901
8902         * connect.c (select_fd): Use fd + 1 as nfds.
8903
8904         * version.c: Changed version to 1.4b29.
8905
8906 1996-10-18  Hrvoje Niksic  <hniksic@srce.hr>
8907
8908         * version.c: "Released" 1.4b28.
8909
8910         * ftp.c (ftp_loop_internal): Check whether f->size == len and
8911         don't continue the loop if it is.
8912         (ftp_get_listing): Remove list_filename on unsuccesful loop.
8913
8914 1996-10-17  Hrvoje Niksic  <hniksic@srce.hr>
8915
8916         * ftp.c (ftp_loop_internal): Use strcpy to initialize tmp.
8917         (getftp): Do not use multiline assert.
8918
8919         * http.c (hparsestatline): Use mjr and mnr instead of major and
8920         minor, which don't compile on Ultrix.
8921         (http_loop): Use strcpy() to initialize tmp.
8922
8923         * all: Geturl -> Fetch
8924
8925 1996-10-17  Hrvoje Niksic  <hniksic@srce.hr>
8926
8927         * recur.c (parse_robots): Fixed an off-by-one bug when looking for
8928         ':'.
8929
8930         * html.c (htmlfindurl): Fixed several possible off-by-one bugs by
8931         moving `bufsize &&' to the beginning of each check in for-loops.
8932
8933         * recur.c (parse_robots): Close fp on exit.
8934
8935         * url.c (mymkdir): Check for each directory before creating.
8936
8937 1996-10-16  Hrvoje Niksic  <hniksic@srce.hr>
8938
8939         * version.c: Changed version to 1.4b28.
8940
8941 1996-10-16  Hrvoje Niksic  <hniksic@srce.hr>
8942
8943         * version.c: "Released" 1.4b27.
8944
8945         * init.c (parse_line): Use isspace.
8946         (parse_line): Free *com on all errors.
8947
8948         * ftp.c (ftp_loop): Change FTPOK to RETROK before exiting.
8949         (delelement): Use next instead of f->next and prev instead of
8950         f->prev.
8951         (delelement): Free the members of the deleted element.
8952
8953         * http.c (http_loop): Do not return RETROK on code != 20x.
8954
8955         * init.c (cleanup): Free opt.user_header.
8956         (cleanup): Free opt.domains.
8957
8958         * url.c (freelists): Moved to cleanup().
8959
8960         * http.c (hparsestatline): Docfix.
8961
8962         * main.c (main): Return with error status on unsuccesful
8963         retrieval.
8964
8965         * init.c (setval): Do not remove listing when mirroring.
8966
8967         * url.c (url_filename): Use opt.fileprefix.
8968
8969         * ftp.c (ftp_get_listing): Use url_filename to get filename for
8970         .listing.
8971
8972         * main.c (main): New option: -rn.
8973
8974 1996-10-15  Hrvoje Niksic  <hniksic@srce.hr>
8975
8976         * Makefile.in (RM): Added RM = rm -f.
8977
8978         * host.c (clean_hosts): New function.
8979         (free_hlist): Just free the list, no reset.
8980
8981         * version.c: Changed version to 1.4b27.
8982
8983 1996-10-13  Hrvoje Niksic  <hniksic@srce.hr>
8984
8985         * version.c: "Released" 1.4b26.
8986
8987         * retr.c (retrieve_from_file): If call get_urls_html with
8988         opt.spider to make it silent in spider mode.
8989
8990         * url.c (str_url): Use CLEANDUP instead of URL_CLEANSE.
8991
8992         * url.h (CLEANDUP): New macro.
8993
8994         * http.c (gethttp): Fixed a bug that freed location only when it
8995         was NULL.
8996
8997         * retr.c (retrieve_url): Free url if it will not be stored,
8998         i.e. newloc is NULL.
8999
9000         * html.c (htmlfindurl): Handle exiting from quotes correctly; the
9001         old version would bug out on <a href="x#a"href="y">.
9002
9003         * html.h (state_t): New member in_quote.
9004
9005         * html.c (htmlfindurl): Free s->attr at the beginning of
9006         attr-loop.
9007
9008         * recur.c (recursive_retrieve): Recognize RCLEANUP.
9009         (tried_robots): Make hosts a global variable.
9010         (recursive_retrieve): Free constr after URL host optimization.
9011         (tried_robots): Free urlinfo before exiting.
9012
9013         * utils.c (free_slist): New function.
9014
9015         * recur.c (recursive_retrieve): Use flags to add cleanup
9016         possibility.
9017
9018         * main.c (main): Free filename after recursive_retrieve.
9019
9020         * http.c (gethttp): Store successful responses too.
9021
9022 1996-10-12  Hrvoje Niksic  <hniksic@srce.hr>
9023
9024         * all: Constified the whole source.  This required some minor
9025         changes in many functions in url.c, possibly introducing bugs -- I
9026         hope not.
9027
9028         * ftp-basic.c: Removed last_respline.
9029
9030         * http.c (gethttp): Free type.
9031
9032         * host.c (same_host): Free real1 and real2.
9033
9034         * main.c (main): New option --spider.
9035
9036         * retr.c (get_contents): Don't reset errno.
9037
9038         * main.c (main): Sorted the options.
9039
9040         * connect.c (iread): Set errno to ETIMEDOUT only if it was left
9041         uninitialized by select().
9042
9043         * http.c (http_loop): Print the time when the connection is
9044         closed.
9045         (gethttp): Debug-print the HTTP request.
9046
9047 1996-10-11  Hrvoje Niksic  <hniksic@srce.hr>
9048
9049         * connect.c (iread): Do not try reading after timeout.
9050
9051         * main.c (main): Would bug out on -T.
9052
9053         * connect.c (select_fd): Do not use exceptfds.
9054         (iread): Set ETIMEDOUT on select_fd <= 0.
9055
9056         * version.c: Changed version to 1.4b26.
9057
9058 1996-10-10  Hrvoje Niksic  <hniksic@srce.hr>
9059
9060         * version.c: "Released" 1.4b25.
9061
9062         * ftp-unix.c (ftp_parse_unix_ls): Ignore lines without file name
9063         or link name.
9064
9065         * http.c (gethttp): Add errcode to struct hstat.
9066         (http_loop): Use it.
9067
9068         * url.c (no_proxy_match): Simplify using char** for no_proxy.
9069
9070         * options.h (struct options): Make opt.no_proxy a vector.
9071
9072         * utils.c (sepstring): Use !*s instead of !strlen(s).
9073
9074         * init.c (setval): Set opt.maxreclevel to 0 on --mirror.
9075         (getperms): Use ISODIGIT instead of isdigit.
9076
9077         * ftp.c (getftp): Print time.
9078
9079         * main.c (main): Use legible output of downloaded quantity.
9080
9081         * ftp.c (getftp): Use elapsed_time().
9082         (ftp_loop_internal): Use rate().
9083
9084         * http.c (http_loop): Add download ratio output; Use rate().
9085
9086         * utils.c (rate): New function.
9087
9088 1996-10-09  Hrvoje Niksic  <hniksic@srce.hr>
9089
9090         * http.c (http_loop): Use timer.
9091
9092         * ftp.c: Split to ftp-basic.c and ftp.c
9093
9094         * utils.c (reset_timer): New function.
9095         (elapsed_time): New function.
9096
9097         * retr.c (show_progress): Make bytes_in_line and offs long; should
9098         work on 16-bit machines.
9099
9100 1996-10-08  Hrvoje Niksic  <hniksic@srce.hr>
9101
9102         * url.c (in_acclist): New argument backward.
9103
9104         * ftp.c (ftp_retrieve_glob): Use acceptable() to determine whether
9105         a file should be retrieved according to suffix.
9106         (ftp_get_listing): Check the return value of unlink; Do not call
9107         ftp_retrieve_dirs if depth reached maxreclevel.
9108         (ftp_retrieve_dirs): Check whether the directory is in
9109         exclude-list.
9110
9111         * main.c (main): Print the version number at the beginning of
9112         DEBUG output.
9113         (main): Use strrchr when creating exec_name.
9114
9115         * ftp.c (ftp_retrieve_glob): Do not close control connection.
9116
9117         * version.c: Changed version to 1.4b25.
9118
9119 1996-10-07  Hrvoje Niksic  <hniksic@srce.hr>
9120
9121         * version.c: "Released" 1.4b24.
9122
9123         * Makefile.in: Rewrite.
9124
9125         * ftp.c (ftp_loop_internal): Likewise.
9126
9127         * retr.c (time_str): Check for failed time().
9128
9129         * html.c (htmlfindurl): Recognize <fig src> and <overlay src> from
9130         HTML3.0.
9131
9132         * retr.c (time_str): Return time_t *.
9133
9134         * connect.c (bindport): Close msock on unsuccesful bind.
9135         (bindport): The same for getsockname and listen.
9136
9137         * retr.c (retrieve_url): Allow any number of retries on
9138         proxy.
9139
9140         * http.c (gethttp): Do not treat errno == 0 as timeout.
9141         (http_loop): Likewise.
9142         (http_loop): Cosmetic changes.
9143
9144         * connect.c (iread): Set errno to ETIMEDOUT in case of timeout.
9145
9146         * retr.c (get_contents): Reset errno.
9147
9148         * ftp.c (getftp): Minor fixes.
9149
9150 1996-10-06  Hrvoje Niksic  <hniksic@srce.hr>
9151
9152         * http.c: Do not use backups.
9153
9154         * geturl.1 (WARNING): Warn that man-page could be obsolete.
9155
9156         * getopt.c (getopt_long): Moved to getopt.c
9157
9158         * geturl.texi: Enhanced.
9159
9160         * main.c (main): Use it.
9161
9162         * recur.c (convert_all_links): New function.
9163
9164         * utils.c (add_slist): New argument flags.
9165
9166         * recur.c (recursive_retrieve): Update a list of downloaded URLs.
9167         (parse_robots): Do not chuck out empty value fields.
9168         (parse_robots): Make yourself welcome on empty Disallow.
9169
9170         * version.c: Changed version to 1.4b24.
9171
9172 1996-10-06  Hrvoje Niksic  <hniksic@srce.hr>
9173
9174         * version.c: "Released" 1.4b23.
9175
9176         * ftp.c (ftp_loop_internal): Get the time after getftp.
9177
9178         * Makefile.in (install.info): New target.
9179         (install): Use it.
9180
9181         * http.c (http_loop): Fix output when doing -O.
9182
9183 1996-10-05  Hrvoje Niksic  <hniksic@srce.hr>
9184
9185         * geturl.texi: New file.
9186
9187         * main.c (main): Do not print the warnings and download summary if
9188         opt.quiet is set.
9189
9190         * version.c: Changed version to 1.4b23.
9191
9192 1996-10-05  Hrvoje Niksic  <hniksic@srce.hr>
9193
9194         * "Released" 1.4b22.
9195
9196         * atotm.c (atotm): Use True and False instead of TRUE and FALSE,
9197         to avoid redefinition warnings.
9198
9199         * host.c (store_hostaddress): Use memcpy() to copy the address
9200         returned by inet_addr.
9201
9202         * version.c: Changed version to 1.4b22.
9203
9204 1996-10-04  Hrvoje Niksic  <hniksic@srce.hr>
9205
9206         * version.c: "Released" 1.4b21.
9207
9208         * ftp-unix.c (ftp_parse_ls): Renamed to ftp_parse_unix_ls.
9209
9210         * ftp.c (ftp_port): Use conaddr.
9211         (getftp): Print the file length.
9212         (ftp_retrieve_list): Check the stamps of plain files only.
9213
9214         * connect.c (closeport): Do not call shutdown().
9215         (conaddr): New function.
9216
9217         * html.c (ftp_index): Made it dfp-aware.
9218
9219         * init.c (cleanup): New name of freemem. Close opt.dfp.
9220
9221         * ftp.c (getftp): Use opt.dfp if it is set.
9222
9223         * ftp-unix.c (ftp_parse_ls): Recognize time in h:mm format.
9224
9225         * ftp.c (ftp_retrieve_dirs): Fixed a bug that caused incorrect
9226         CWDs to be sent with recursive FTP retrievals.
9227
9228 1996-10-03  Hrvoje Niksic  <hniksic@srce.hr>
9229
9230         * recur.c (parse_robots): Made it more compliant with "official"
9231         specifications.
9232
9233         * http.c: New function.
9234
9235         * ftp-unix.c (ftp_parse_ls): Added better debug output.
9236
9237         * ftp.c (getftp): Print out the LIST in case of
9238         opt.print_server_response.
9239
9240         * version.c: Changed version to 1.4b21.
9241
9242 1996-10-01  Hrvoje Niksic  <hniksic@srce.hr>
9243
9244         * version.c: "Released" 1.4b20.
9245
9246         * README: Update.
9247
9248         * http.c (gethttp): Preset lengths of various headers instead of
9249         calculating them dynamically.
9250         (gethttp): Check for 206 partial contents.
9251
9252 1996-09-30  Hrvoje Niksic  <hniksic@srce.hr>
9253
9254         * configure.in: Set SYSTEM_GETURLRC to $libdir/geturlrc
9255
9256         * http.c (gethttp): Send the port number in the Host: header.
9257
9258 1996-09-29  Hrvoje Niksic  <hniksic@srce.hr>
9259
9260         * http.c (gethttp): Send host: header.
9261         (gethttp): Add the possibility of user-defined headers.
9262         (gethttp): Move decision about pragma: no-cache to http_loop,
9263         where it belongs.
9264         (gethttp): Pass a struct instead of enormous argument list.
9265         (http_loop): Use a new, fancier display format.
9266         (ftp_loop): Likewise.
9267
9268         * main.c: (hangup): Turn off buffering of the new log file.
9269
9270         * install-sh: Likewise.
9271
9272         * config.sub: Replace with the one in autoconf-2.10
9273
9274         * geturl.1: Update.
9275
9276         * init.c: New options httpuser and httppasswd.
9277
9278         * http.c: (base64_encode_line): New function.
9279         (gethttp): Send authentication.
9280
9281         * connect.c (make_connection): Use store_hostaddress.
9282
9283 1996-09-28  Hrvoje Niksic  <hniksic@srce.hr>
9284
9285         * host.c (store_hostaddress): New function.
9286
9287         * NEWS: Update.
9288
9289         * http.c (hgetrange): New function.
9290         (gethttp): Use ranges.
9291
9292         * utils.c (numdigit): Accept long instead of int.
9293
9294         * http.c (http_loop): Add restart capabilities.
9295
9296         * ftp.c (ftp_retrieve_glob): Fixed a bug that could cause matchres
9297         being used uninitialized.
9298         (ftp_retrieve_list): Similar fix.
9299
9300         * host.c (add_hlist): Fixed a bug that could cause cmp being used
9301         uninitialized.
9302
9303         * url.c (construct_relative): New function.
9304
9305         * recur.c (recursive_retrieve): Use it.
9306
9307         * retr.c (convert_links): New function.
9308
9309 1996-09-27  Hrvoje Niksic  <hniksic@srce.hr>
9310
9311         * url.c (free_urlpos): New function.
9312
9313         * recur.c (recursive_retrieve): Adapt.
9314
9315         * url.c (get_urls_html): Return a linked list instead of a vector.
9316
9317         * url.c (get_urls_file): Return a linked list instead of a vector.
9318
9319         * geturl.1: Update.
9320
9321         * http.c (gethttp): Implement it.
9322
9323         * init.c (setval): New option: SAVEHEADERS
9324
9325         * ftp.c (ftp_loop_internal): Do not set restval if listing is to
9326         be retrieved. Lack of this test caused bugs when the connection
9327         was lost during listing.
9328
9329         * retr.c (retrieve_url): Fixed a bug that caused
9330         coredumps. *newloc is now reset by default.
9331         (retrieve_url): Lift the twenty-tries limit on proxies.
9332
9333         * version.c: Changed version to 1.4b20.
9334
9335 1996-09-20  Hrvoje Niksic  <hniksic@srce.hr>
9336
9337         * version.c: "Released" 1.4b19.
9338
9339 1996-09-19  Hrvoje Niksic  <hniksic@srce.hr>
9340
9341         * ftp.c (ftp_loop_internal): Renamed from ftp_1fl_loop.
9342         (getftp): Changed prototype to accept ccon *.
9343
9344 1996-09-17  Hrvoje Niksic  <hniksic@srce.hr>
9345
9346         * ftp.c (ftp_retrieve_list): Fixed a bug that caused setting
9347         incorrect values to files pointed to by symbolic links.
9348         (ftp_1fl_loop): Do not count listings among the downloaded URL-s.
9349
9350 1996-09-16  Hrvoje Niksic  <hniksic@srce.hr>
9351
9352         * url.c (mkstruct): Do not prepend "./" in front of a pathname.
9353
9354         * main.c (main): New option: --user-agent.
9355
9356         * geturl.1: Ditto.
9357
9358         * init.h: Ditto.
9359
9360         * init.c (setval): Ditto.
9361
9362         * main.c (main): Rename "server-headers" to "server-response".
9363
9364         * ftp-unix.c (ftp_parse_ls): Check for asterisks at the end of
9365         executables in 'ls -F' listings.
9366
9367 1996-09-15  Hrvoje Niksic  <hniksic@srce.hr>
9368
9369         * url.c (parseurl): Remove realloc() and sprintf().
9370         (str_url): Get rid of sprintf().
9371
9372         * recur.c (recursive_retrieve): Enable FTP recursion through proxy
9373         servers.
9374
9375         * url.h (URL_CLEANSE): Made it else-resistant.
9376         (USE_PROXY): New macro.
9377
9378 1996-09-14  Hrvoje Niksic  <hniksic@srce.hr>
9379
9380         * NEWS: Update.
9381
9382         * version.c: Changed version to 1.4b19.
9383
9384 1996-09-14  Hrvoje Niksic  <hniksic@srce.hr>
9385
9386         * version.c: "Released" 1.4b18.
9387
9388         * url.c: Made it reallocate space exponentially.
9389
9390 1996-09-14  Drazen Kacar  <dave@fly.cc.fer.hr>
9391
9392         * html.c (htmlfindurl): Added <frame src> and <iframe src> among
9393         the list of stuff to fetch.
9394
9395 1996-09-13  Hrvoje Niksic  <hniksic@srce.hr>
9396
9397         * url.c (get_urls_html): Fixed a bug that caused SIGSEGV's with
9398         -Fi.
9399
9400         * html.c (htmlfindurl): Rewrite.
9401
9402         * http.c (gethttp): Use opt.proxy_cache.
9403
9404         * main.c (main): Added --cache option.
9405
9406         * ftp.c (ftp_response): Print server response if opt.print_server
9407         response is set.
9408         (getftp): Print newlines after each request if the server response
9409         is to be printed.
9410         (ftp_response): Copy the last response line to last_respline.
9411
9412         * http.c (gethttp): Add Pragma: nocache for retried
9413         proxy-retrievals.
9414
9415         * ftp.c (getftp): Use it.
9416
9417         * retr.c (buf_discard): New function.
9418
9419         * ftp.c (ftp_response): Use buf_readchar().
9420         (getftp): Flush the control connection buffer before calling
9421         get_contents().
9422
9423         * retr.c (buf_readchar): New function.
9424         (buf_flush): New function.
9425         (get_contents): Use buf_readchar() instead of read(x, x, 1).
9426         (get_contents): Use buf_flush.
9427
9428 1996-09-12  Hrvoje Niksic  <hniksic@srce.hr>
9429
9430         * ftp.c: Incorporate changes to ftp_response.
9431
9432         * ftp.c (ftp_response): Allocate the server response dynamically,
9433         as in read_whole_line and fetch_next_header.
9434
9435         * utils.c (read_whole_line): Fixed a bug that prevented reading
9436         the last line if it is not \n-terminated. Also fixed a possible
9437         memory overflow.
9438
9439         * http.c (fetch_next_header): Return malloc-ed string as large as
9440         needed.
9441         (gethttp): Use new fetch_next_header.
9442
9443 1996-09-12  Hrvoje Niksic  <hniksic@srce.hr>
9444
9445         * http.c (hgetlen): Compute the header length the first time only.
9446         (hgettype): Ditto.
9447         (hgetlocation): Ditto.
9448         (hgetmodified): Ditto.
9449
9450 1996-09-11  Hrvoje Niksic  <hniksic@srce.hr>
9451
9452         * sample.geturlrc: Update.
9453
9454 1996-09-10  Hrvoje Niksic  <hniksic@srce.hr>
9455
9456         * http.c (http_loop): Ditto.
9457
9458         * ftp.c (getftp): Open the output file as binary.
9459
9460         * version.c: Changed version to 1.4b18.
9461
9462 1996-09-10  Hrvoje Niksic  <hniksic@srce.hr>
9463
9464         * version.c: "Released" 1.4b17.
9465
9466         * ftp-unix.c (ftp_parse_ls): If unable to open file, return NULL
9467         instead of failed assertion.
9468
9469 1996-09-09  Hrvoje Niksic  <hniksic@srce.hr>
9470
9471         * ftp.c (ftp_get_listing): Add a numbered suffix to LIST_FILENAME
9472         if a file of that name already exists.
9473
9474 1996-09-05  Hrvoje Niksic  <hniksic@srce.hr>
9475
9476         * ftp.c (ftp_1fl_loop): Handler FTPPORTERR and FOPENERR correctly.
9477
9478         * config.h.in: Define gethostbyname as Rgethostbyname when using
9479         Socks.
9480
9481         * configure.in: Check for -lresolv if using Socks.
9482
9483         * version.c: Changed version to 1.4b17.
9484
9485 1996-07-15  Hrvoje Niksic  <hniksic@srce.hr>
9486
9487         * version.c: "Released" 1.4b16.
9488
9489         * http.c (gethttp): More intelligent check for first line of HTTP
9490         response.
9491         (gethttp): Would bug out on time-stamping.
9492
9493         * version.c: Changed version to 1.4b16.
9494
9495 1996-07-11  Hrvoje Niksic  <hniksic@srce.hr>
9496
9497         * version.c: Released 1.4b15.
9498
9499         * http.c (http_loop): Print \n after the loop entry, not before.
9500
9501         * url.c (url_filename): Use ISDOT.
9502
9503         * url.h (ISDOT): New macro.
9504
9505         * recur.c (recursive_retrieve): Change only opt.recursive for
9506         following FTP.
9507
9508 1996-07-11  Antonio Rosella <antonio.rosella@agip.it>
9509
9510         * socks/geturl.cgi: Fixed version No.
9511
9512         * socks/download-netscape.html: Ditto.
9513
9514         * socks/download.html: Changed socks.html to download.html.
9515
9516 1996-07-11  Hrvoje Niksic  <hniksic@srce.hr>
9517
9518         * url.c (url_filename): Check for opt.dirstruct instead for
9519         opt.recursive && opt.dirstruct.
9520
9521         * init.c (defaults): Ditto.
9522         (defaults): Reset dirstruct by default.
9523         (setval): Set opt.dirstruct whenever setting recursive.
9524
9525         * init.h: Removed FORCEDIRHIER.
9526
9527         * INSTALL: Added -L to socks-description.
9528
9529         * version.c: Changed version to 1.4b15.
9530
9531 1996-07-10  Hrvoje Niksic  <hniksic@srce.hr>
9532
9533         * version.c: "Released" 1.4b14.
9534
9535         * geturl.1: Update AUTHOR to include Rosella as contributor.
9536
9537         * NEWS: Update.
9538
9539         * socks/geturl.cgi: Simplified command creation, nuked <blink>.
9540
9541         * socks/geturl.cgi: Wrap nutscape extensions within if $netscape.
9542         (cal_time): Fix == to eq.
9543
9544         * socks/geturl.cgi: GPL-ized with permission of A. Rosella.
9545
9546         * geturl.1 (hostname): Moved URL CONVENTIONS to the beginning.
9547
9548         * Makefile.in: Use @VERSION@.
9549
9550         * configure.in: Check version from version.c.
9551
9552         * socks/geturl.cgi: Changed /pub/bin/perl to /usr/bin/perl.
9553
9554         * socks/download.html: Created from download-netscape.html, made
9555         HTML-2.0 compliant.
9556
9557         * recur.c (recursive_retrieve): Set opt.force_dir_hier when
9558         following FTP links from recursions.
9559
9560 1996-07-09  Hrvoje Niksic  <hniksic@srce.hr>
9561
9562         * url.c (mymkdir): Fixed a bug that prevented mymkdir() to create
9563         absolute directories correctly.
9564
9565         * version.c: Changed version to 1.4b14.
9566
9567 1996-07-09  Hrvoje Niksic  <hniksic@srce.hr>
9568
9569         * version.c: "Released" 1.4b13.
9570
9571         * url.c (make_backup): New function.
9572
9573         * http.c (http_loop): Make a backup copy of the local file (using
9574         rename(2)) before opening it.
9575
9576         * main.c (main): Added --backups.
9577
9578         * host.c (ftp_getaddress): Bail out on failed mycuserid().
9579         (ftp_getaddress): Check for leading dot on MY_DOMAIN.
9580         (ftp_getaddress): Check for empty, null or (null) domain.
9581
9582         * url.c (get_urls_html): If this_url is NULL, the base must have a
9583         protocol.
9584         (parseurl): Use has_proto.
9585
9586         * retr.c (retrieve_url): Warn when proxy is used with more than 20
9587         retries.
9588
9589         * url.c (mkstruct): Create the directory (calling mymkdir()) only
9590         if it is not already there.
9591         (has_proto): New function.
9592         (get_urls_html): Eliminate the remaining call to findurl -- use
9593         has_proto.
9594
9595         * geturl.1: Ditto.
9596
9597         * main.c: Change -X to -x.
9598
9599         * url.c (url_filename): Simplify creation of filename if
9600         prefix_files is set.
9601         (url_filename): Simplify everything. And I do mean *everything*.
9602         (mkstruct): Add dir_prefix before hostname.
9603         (path_simplify): Fixed a bug that caused writing outside the path
9604         string in case of "." and ".." path strings.
9605
9606 1996-07-06  Hrvoje Niksic  <hniksic@srce.hr>
9607
9608         * init.c: Added --mirror.
9609
9610         * main.c (main): Added -X to force saving of directory hierarchy.
9611
9612         * ftp.c (ftp_retrieve_list): Added recursion depth counter.
9613         (ftp_retrieve_list): Check whether quota is exceeded.
9614
9615         * url.c (get_urls_html): Skip leading blanks for absolute URIs.
9616
9617         * http.c (gethttp): Use referer if present.
9618
9619         * recur.c (recursive_retrieve): Set u->referer before calling
9620         retrieve_url.
9621
9622         * url.c (newurl): Use memset to nullify the struct members.
9623         (freeurl): Free the referer field too.
9624
9625         * url.h: Added referer to urlinfo.
9626
9627         * geturl.1: Updated the manual to document some of the new features.
9628
9629         * utils.c (numdigit): Moved from url.c.
9630
9631         * README: Rewritten.
9632
9633         * config.h.in: Add the support for socks.
9634
9635         * configure.in: Add the support for socks.
9636
9637         * url.c (url_filename): If the dir_prefix is ".", work with just
9638         the file name.
9639         (url_filename): Do not look for .n extensions if timestamping if
9640         turned on.
9641
9642         * retr.c (show_progress): Skip the over-abundant restval data, and
9643         print the rest of it with ',' instead of '.'.
9644
9645 1996-07-05  Hrvoje Niksic  <hniksic@srce.hr>
9646
9647         * retr.c (show_progress): Changed second arg. to long (as it
9648         should be).
9649         (show_progress): Moved to retr.c.
9650         (get_contents): Moved to retr.c.
9651
9652         * version.c: Change version to 1.4b13.
9653
9654 1996-07-05  Hrvoje Lacko <hlacko@fly.cc.fer.hr>
9655
9656         * url.c (in_acclist): Would return after the first suffix.
9657
9658 1996-07-04  Hrvoje Niksic  <hniksic@srce.hr>
9659
9660         * version.c: "Released" 1.4b12.
9661
9662         * url.c (path_simplify): More kludgifications.
9663         (get_urls_html): Use new parameters for htmlfindurl.
9664
9665         * html.c: Removed memorizing "parser states", since the new
9666         organization does not require them.
9667
9668         * init.c (run_geturlrc): Use read_whole_line.
9669
9670         * ftp-unix.c (ftp_parse_ls): Use read_whole_line.
9671
9672         * recur.c (parse_robots): Use read_whole_line.
9673
9674         * utils.c (read_whole_line): New function.
9675
9676         * recur.c (tried_robots): Use add_slist/in_slist, *much* cleaner.
9677
9678         * host.c (ngethostbyname): Call inet_addr just once. Yet to be
9679         tested on OSF and Ultrix.
9680         (add_hlist): New function.
9681         (free_hlist): New function.
9682         (search_host): New function.
9683         (search_address): New function.
9684         (realhost): Use search_host, search_address and add_hlist.
9685         (same_host): Replaced realloc() with strdupdelim(), made
9686         case-insensitive, fixed a memory leak.
9687
9688         * html.c (ftp_index): Fixed tm_min and tm_sec to be tm_hour and
9689         tm_min, like intended.
9690
9691         * version.c: Change user agent information to
9692         Geturl/version.
9693
9694 1996-07-03  Hrvoje Niksic  <hniksic@srce.hr>
9695
9696         * utils.c: Renamed nmalloc.c to utils.c, .h likewise.
9697
9698         * url.c (acceptable): Always accept directories.
9699
9700         * ftp-unix.c (ftp_parse_ls): Support brain-damaged "ls -F"-loving
9701         servers by stripping trailing @ from symlinks and trailing / from
9702         directories.
9703
9704         * ftp.c (ftp_loop): Debugged the "enhanced" heuristics. :-)
9705
9706         * url.c (skip_url): Use toupper instead of UCASE.
9707
9708         * host.c (sufmatch): Made it case-insensitive.
9709
9710         * url.c (match_backwards_or_pattern): Fixed i == -1 to j == -1.
9711         (match_backwards): New function, instead of
9712         match_backwards_or_pattern.
9713
9714         * recur.c (recursive_retrieve): Increased performance by
9715         introducing inl, which reduces number of calls to in_slist to only
9716         one.
9717
9718         * ftp.c (ftp_loop): Enhanced the heuristics that decides which
9719         routine to use.
9720
9721         * main.c (printhelp): Removed the warranty stuff.
9722
9723 1996-07-02  Hrvoje Niksic  <hniksic@srce.hr>
9724
9725         * url.c (add_slist): Simplify.
9726         (match_backwards_or_pattern): New function.
9727         (in_acclist): Use match_backwards_or_pattern.
9728         (matches): Remove.
9729
9730 1996-06-30  Hrvoje Niksic  <hniksic@srce.hr>
9731
9732         * ftp.c (ftp_loop): Call ftp_index on empty file names, if not
9733         recursive.
9734
9735         * html.c (ftp_index): Fixed to work. Beautified the output.
9736
9737         * ftp.c (ftp_retrieve_glob): Another argument to control whether
9738         globbing is to be used.
9739         (ftp_retrieve_list): Compare the time-stamps of local and remote
9740         files to determine whether to download.
9741
9742 1996-06-29  Hrvoje Niksic  <hniksic@srce.hr>
9743
9744         * ftp.c (rel_constr): New function.
9745
9746         * retr.c (retrieve_from_file): Check for text/html before
9747         retrieving recursively.
9748
9749         * main.c (main): Check whether the file is HTML before going into
9750         recursive HTML retrieving.
9751
9752         * ftp.c (ftp_retrieve_list): Manage directories.
9753         (ftp_retrieve_glob): Pass all the file-types to ftp_retrieve_list.
9754         (ftp_1fl_loop): Fixed a bug that caused con->com to be incorrectly
9755         initialized, causing bugchecks in getftp to fail.
9756
9757         * configure.in: Check for symlink.
9758
9759         * ftp.c (ftp_retrieve_list): Added support for symlinks.
9760
9761         * version.c: "Released" 1.4b10.
9762
9763         * atotm.c (atotm): Redeclared as time_t.
9764
9765         * init.c: New variable "timestamping".
9766
9767         * main.c (main): New option 'N'.
9768
9769         * http.c (hgetlocation): Case-insensitive match.
9770         (hgetmodified): New function.
9771         (http_loop): Implement time-stamping.
9772
9773 1996-06-28  Hrvoje Niksic  <hniksic@srce.hr>
9774
9775         * version.c: Changed version to 1.4b10
9776
9777         * atotm.c: New file, from phttpd.
9778
9779         * options.h (struct options): New parameter timestamping.
9780
9781         * version.c: 1.4b9 "released".
9782
9783         * recur.c (recursive_retrieve): Used linked list (ulist) for
9784         faster storing of URLs.
9785
9786         * url.c (get_urls_html): Removed the old kludge with comparing the
9787         outputs of htmlfindurl and findurl.
9788         (get_urls_html): Added better protocol support here.
9789         (create_hash): Removed, as well as add_hash and in_hash.
9790         (addslist): New function.
9791         (in_slist): ditto
9792
9793         * version.c: Released 1.4b8, changed version to b9.
9794
9795 1996-06-27  Hrvoje Niksic  <hniksic@srce.hr>
9796
9797         * ftp.c (freefileinfo): New function.
9798         (delelement): New function.
9799
9800         * everywhere: GPL!
9801
9802         * ftp.c (ftp_loop): Use ccon.
9803         (ftp_retrieve_glob): Likewise.
9804
9805         * ftp.h: Define ccon, to define status of control connection.
9806
9807         * ftp.c (ftp_get_listing): New function.
9808         (ftp_retrieve_more): New function.
9809         (ftp_retrieve_glob): New function.
9810
9811 1996-06-25  Hrvoje Niksic  <hniksic@srce.hr>
9812
9813         * configure.in: Removed the search for cuserid().
9814
9815         * init.c (getmode): Renamed to getperms.
9816
9817 1996-06-24  Hrvoje Niksic  <hniksic@srce.hr>
9818
9819         * version.c: New version.
9820
9821         * main.c (hangup): New function, that handles hangup. Hangup
9822         signal now causes geturl to stop writing on stdout, and to write
9823         to a log file.
9824
9825         * ftp.c (getftp): "Released" 1.4b7.
9826
9827         * html.c (htmlfindurl): Ignore everything inside <head>...</head>.
9828         (ftp_index): Use fileinfo/urlinfo.
9829
9830         * ftp-unix.c (ftp_parse_ls): New function.
9831         (symperms): New function.
9832
9833         * ftp.c (ftp_1fl_loop): New function, to handle 1-file loops.
9834
9835         * retr.c (retrieve_url): Added FTP support.
9836
9837 1996-06-23  Hrvoje Niksic  <hniksic@srce.hr>
9838
9839         * geturl.h: Removed NOTFTP2HTML enum.
9840         Added DO_LOGIN, DO_CWD and DO_LIST. LIST_ONLY is obsolete.
9841
9842         * ftp.c (getftp): Resynched with urlinfo.
9843         (getftp): Removed HMTL-ization of index.html from getftp.
9844
9845         * version.c: 1.4b6 "released".
9846
9847         * options.h (options): New struct, to keep options in.
9848
9849         * http.c (http_loop,gethttp): Synched with proxy.
9850
9851         * retr.c (retrieve_url): Implemented proxy retrieval.
9852
9853         * main.c (main): Use retrieve_from_file.
9854
9855 1996-06-22  Hrvoje Niksic  <hniksic@srce.hr>
9856
9857         * retr.c (retrieve_from_file): New function.
9858
9859         * url.c (parseurl): Modified to return URLOK if all OK. Protocol
9860         can be found in u->proto.
9861
9862         * ftp.c (ftp_response): Fixed to accept multi-line responses as
9863         per RFC 959.
9864
9865         * recr.c (recursive_retrieve): Take newloc from retrieve_url.
9866
9867         * url.c (mymkdir): Removed the file of the same name, if one
9868         exists.
9869         (isfile): New function.
9870         (mkstruct): Fixed the '/' glitches.
9871         (path_simplify): Hacked to treat something/.. correctly.
9872
9873 1996-06-21  Hrvoje Niksic  <hniksic@srce.hr>
9874
9875         * http.c (gethttp): Close the socket after error in headers.
9876         (http_loop): HEOF no longer a fatal header.
9877
9878         * loop.c (retrieve_url): When dt is NULL, do not modify it. This
9879         simplifies the syntax of calling retrieve_url.
9880
9881         * recr.c (recursive_retrieve): Modified to use get_urls_html.
9882
9883         * url.c (get_urls_file): New function.
9884         (get_urls_html): New function.
9885
9886         * recr.c (recursive_retrieve): Patched up to conform to the
9887         standards.
9888
9889         * http.c (gethttp): Synched with the rest...
9890         (gethttp): Treat only CONREFUSED specially, with connection
9891         errors.
9892
9893         * init.c,geturl.1,http.c (http_loop): Removed kill_error.
9894
9895 1996-06-20  Hrvoje Niksic  <hniksic@srce.hr>
9896
9897         * http.c (http_loop): New function.
9898
9899         * loop.c: Removed *lots* of stuff from retrieve_url.
9900
9901         * url.c (parseurl): Changed to work with urlinfo. Integrated
9902         username finding and path parsing.
9903         (newurl): New function.
9904         (freeurl): New function.
9905         (mkstruct): Removed the old bogosities, made it urlinfo-compliant.
9906         (url_filename): Likewise.
9907         (path_simplify): Accept relative paths too.
9908         (opt_url): Made urlinfo-compliant, removed bogosities.
9909         (path_simplify): Expanded to accept relative paths.
9910         (str_url): A replacement for hide_url
9911         (decode_string): Fixed a bug that caused malfunctioning when
9912         encountering an illegal %.. combination.
9913         (opt_url): Removed the argument. Dot-optimizations are now default.
9914
9915         * nmalloc.c (strdupdelim): New function.
9916
9917         * url.h: Added the urlinfo structure
9918
9919 1996-06-19  Hrvoje Niksic  <hniksic@srce.hr>
9920
9921         * url.c (hide_url): Thrown out the protocol assertion. Do not
9922         change the URL if the protocol if not recognized.
9923         (findurl): Put continue instead of break.
9924
9925 1996-06-18  Hrvoje Niksic  <hniksic@srce.hr>
9926
9927         * sample.geturlrc: Changed the defaults to be commented out and
9928         harmless (previous defaults caused pains if copied to
9929         ~/.geturlrc).
9930
9931         * http.c (gethttp): Print the HTTP request in debug mode.
9932
9933         * connect.c (iread): Added EINTR check loop to select-ing
9934         too. EINTR is now correctly handled with select().
9935
9936         * TODO: new file
9937
9938 1996-05-07  Hrvoje Niksic  <hniksic@srce.hr>
9939
9940         * host.c (same_host): Made the function a little bit more
9941         intelligent regarding diversified URL syntaxes.
9942
9943         * url.c (skip_url): Spaces are now skipped after URL:
9944
9945         * Released 1.3.1 with the patch to prevent crashing when sending
9946         NULL to robot* functions and the patch to compile "out of the box"
9947         on AIX.
9948
9949         * recr.c (recursive_retrieve): Added checking whether this_url is
9950         NULL when calling the robot functions.
9951
9952         * ChangeLog: New file.