sjero.net Git - wget/blob - src/ChangeLog

   1 2007-08-09  Ralf Wildenhues  <Ralf.Wildenhues <at> gmx.de>
   2
   3         * src/url.c (url_string): Use comparison, not assignment, in
   4         check for auth_mode == URL_AUTH_HIDE_PASSWD.
   5
   6 2007-08-08  Micah Cowan  <micah@cowan.name>
   7
   8         * init.c (defaults): Content disposition will not be default,
   9         since it currently results in extra round-trips.
  10
  11 2007-07-31  Micah Cowan  <micah@cowan.name>
  12
  13         * http.c (gethttp): Set contlen = -1 when we encounter a
  14         negative-valued Content-Length header, so we don't consider it
  15         an internal error later on and call abort().
  16
  17 2007-07-29  Micah Cowan  <micah@cowan.name>
  18
  19         * url.h, url.c (url_string): Replaced bool arg of the url_string
  20         function with enum url_auth_mode, with added option to
  21         completely remove user/pass auth information.
  22         * http.c, ftp.c, url.c, recur.c: Adapted call to url_string
  23         function to fit new usage.
  24         * recur.c (retrieve_tree): Remove auth info from Referer header.
  25
  26 2007-07-28  Micah Cowan  <micah@cowan.name>
  27
  28         * options.h, init.c, retr.c, main.c: renamed opt maxredirect
  29         field to max_redirect, for improved consistency.
  30         * init.c: changed max_redirect parser from cmd_number_inf to
  31         cmd_number, as infinite redirects may not be appropriate.
  32         Alternatively, if cmd_number_inf should be used, then
  33         opt.max_redirect's value should be checked a bit differently in
  34         retr.c, to allow for the "infinite" meaning of zero.
  35
  36 2007-07-25  Micah Cowan  <micah@cowan.name>
  37
  38         * http.c (create_authorization_line)
  39         (basic_authentication_encode, known_authentication_scheme_p)
  40         (load_cookies): Moved declarations up.
  41         (basic_authed_hosts): Added. Tracks what hosts have issued Basic
  42         challenge and been given the global username, password.
  43         (maybe_send_basic_creds): Added. Sends Basic creds for hosts that
  44         have issued Basic challenges.
  45         (register_basic_auth_host): Added. Instantiates
  46         basic_authed_hosts if necessary, then registers the host that
  47         has issued a challenge.
  48         (gethttp) <auth>: Only send authentication credentials after
  49         we've received a challenge from that host. This is a stop-gap
  50         fix until a proper fix can be implemented; still isn't quite
  51         right, as we should only be sending credentials automatically
  52         for authenticated paths and below, and not for the entire host.
  53
  54 2007-07-16  Joshua David Williams  <yurimxpxman@gmail.com>
  55
  56         * options.h: added maxredirect to options struct
  57         * init.c: added maxredirect to list of variables
  58         * retr.c (retrieve_url): replaced MAX_REDIRECTIONS with opt.maxredirect
  59         * main.c: added option --max-redirect
  60
  61 2007-07-16  Joshua David Williams  <yurimxpxman@gmail.com>
  62
  63         * test.h: tests made more verbose; now displays the name
  64         of each test run.
  65
  66 2007-07-05  Micah Cowan  <micah@cowan.name>
  67
  68         * cmpt.c, connect.c, connect.h, convert.c, convert.h:
  69         * cookies.c, cookies.h, ftp-basic.c, ftp.c, ftp.h, ftp-ls.c:
  70         * ftp-opie.c, gen-md5.c, gen-md5.h, getopt.c, getopt.h, gnu-md5.c:
  71         * gnu-md5.h, gnutls.c, hash.c, hash.h, host.c, host.h:
  72         * html-parse.c, html-parse.h, html-url.c, http.c, http.h:
  73         * http-ntlm.c, http-ntlm.h, init.c, init.h, log.c, log.h, main.c:
  74         * Makefile.in, mswindows.c, mswindows.h, netrc.c, netrc.h:
  75         * openssl.c, options.h, progress.c, progress.h, ptimer.c:
  76         * ptimer.h, recur.c, recur.h, res.c, res.h, retr.c, retr.h:
  77         * safe-ctype.c, safe-ctype.h, spider.c, spider.h, ssl.h, sysdep.h:
  78         * test.c, test.h, url.c, url.h, utils.c, utils.h, wget.h:
  79         * xmalloc.c, xmalloc.h:
  80         Updated GPL reference to version 3 or later, removed FSF
  81         address.
  82
  83 2007-02-02  Hrvoje Niksic  <hniksic@xemacs.org>
  84
  85         * http.c (print_server_response): Escape non-printable characters
  86         in server respone.
  87
  88 2007-02-02  Hrvoje Niksic  <hniksic@xemacs.org>
  89
  90         * netrc.c: Don't make netrc_list static, as it prevents
  91         compilation with DEBUG_MALLOC.
  92
  93         * utils.c (aprintf): Don't use vasprintf when DEBUG_MALLOC is
  94         requested because, in that case, we want the calls to malloc to be
  95         coming from us.
  96
  97 2007-01-23  Hrvoje Niksic  <hniksic@xemacs.org>
  98
  99         * cookies.c (parse_set_cookie): Would erroneously discard cookies
 100         with unparsable expiry time.
 101
 102 2007-01-23  Hrvoje Niksic  <hniksic@xemacs.org>
 103
 104         * progress.c (create_image): Check for ETA overflow.
 105         (print_row_stats): Ditto.
 106
 107 2007-01-09  Mauro Tortonesi  <mauro@ferrara.linux.it>
 108
 109         * init.c (cmd_spec_prefer_family): Small fix to get rid of a gcc
 110         warning about strict-aliasing violation.
 111
 112 2007-01-09  Steven M. Schweda  <sms@antinode.org>
 113
 114         * ftp-basic.c (ftp_syst): Fixed segfault if response text is missing.
 115
 116 2006-12-29  Gisle Vanem  <giva@bgnett.no>
 117
 118         * mswindows.c: Avoid a warning if 'ws_hangup()' is unused.
 119
 120 2006-12-27  Mauro Tortonesi  <mauro@ferrara.linux.it>
 121
 122         * http.c (parse_content_disposition): Consider directory prefix, if
 123         specified.
 124
 125 2006-11-21  Hrvoje Niksic  <hniksic@xemacs.org>
 126
 127         * retr.c (retrieve_from_file): Ditto.
 128         (url_uses_proxy): New function.
 129
 130         * main.c (main): Don't check for opt.use_proxy when deciding
 131         whether to call retrieve_url or retrieve_tree; check whether the
 132         proxy would be used for *this* URL.
 133
 134 2006-10-17  Mike Grant  <mggr@pml.ac.uk>
 135
 136         * ftp.c (ftp_loop_internal): Would incorrectly skip changing
 137         working directory when retrying after a failed FTP attempt.
 138         Originally reported by Nate Eldredge.
 139
 140 2006-10-12  Mauro Tortonesi  <mauro@ferrara.linux.it>
 141
 142         * convert.c (downloaded_file): Fixed bug which used to break -E -k -K
 143         mode.
 144
 145 2006-08-28  Mauro Tortonesi  <mauro@ferrara.linux.it>
 146
 147         * http.c: #include'd spider.h to get rid of compiler warnings.
 148
 149         * main.c: Ditto.
 150
 151         * recur.c: Ditto.
 152
 153 2006-08-24  Mauro Tortonesi  <mauro@ferrara.linux.it>
 154
 155         * Makefile.in: Added spider.c to the list of files to compile and
 156         spider.h to the list of header files. Updated copyright information.
 157
 158         * http.c: Major changes to recursive spider mode. Now for every
 159         resource we are supposed to check, we send a HEAD request to find out
 160         if it exists. If the resource is a HTML file, we retrieve it and parse
 161         it to discover links to other resources.
 162
 163         * recur.c: Ditto.
 164
 165         * res.c (res_retrieve_file): Disable opt.timestamping and opt.spider
 166         when retrieving robots.txt. Updated copyright information.
 167
 168         * convert.c: Moved code tracking broken links to spider.c.
 169
 170         * convert.h: Ditto.
 171
 172         * spider.c: Created new file to keep track of visited URLs in spider
 173         mode.
 174
 175         * spider.h: Ditto.
 176
 177 2006-08-21  Mauro Tortonesi  <mauro@ferrara.linux.it>
 178
 179         * http.c: Fixed timestamping-related bug.
 180
 181 2006-08-16  Mauro Tortonesi  <mauro@ferrara.linux.it>
 182
 183         * http.c: Fixed bug which broke --continue feature. Now if -c is
 184         given, http_loop sends a HEAD request to find out the destination
 185         filename before resuming download.
 186
 187 2006-08-08  Hrvoje Niksic  <hniksic@xemacs.org>
 188
 189         * utils.c (datetime_str): Avoid code repetition with time_str.
 190
 191 2006-07-21  Hrvoje Niksic  <hniksic@xemacs.org>
 192
 193         * init.c (commands): Correctly place "contentdisposition".
 194
 195 2006-07-14  Mauro Tortonesi  <mauro@ferrara.linux.it>
 196
 197         * sysdep.h: If intptr_t isn't defined, simply typedef it to long.
 198
 199         * http.c: Added explicit cast to int in logprintf call to remove
 200         compiler warnings on 64-bit platforms.
 201
 202         * connect.c: Added a few casts to intptr_t to remove compiler warnings
 203         on 64-bit platforms.
 204
 205         * main.c: Disable -r, -p and -N when -O is used. Disable -k when -O is
 206         used and multiple URLs are given. Update maintainer information.
 207
 208         * all: Update copyright information.
 209
 210 2006-07-10  KJKHyperion  <hackbunny@reactos.com>
 211
 212         * url.c (filechr_table): Mark DEL (0x7f) as a control character
 213         and | as a character Windows can't handle.
 214
 215 2006-06-28  Mauro Tortonesi  <mauro@ferrara.linux.it>
 216
 217         * res.c: Implemented is_robots_txt_url function for detection of
 218         robots.txt URLs and related test routine.
 219
 220         * res.h: Ditto.
 221
 222         * url.c: Implemented are_urls_equal function for URL comparison and
 223         related testing routine.
 224
 225         * url.h: Ditto.
 226
 227         * convert.c: Fixes for recursive spider mode: don't consider
 228         non-existing robots.txt as a broken link, and use are_urls_equal
 229         instead of strcasecmp for referrer URLs comparison.
 230
 231         * test.c: Call tests routines for are_urls_equal and
 232         is_robots_txt_url.
 233
 234 2006-06-26  Hrvoje Niksic  <hniksic@xemacs.org>
 235
 236         * wget.h (wgint): Typedef to any 64-bit (or larger) type we can
 237         find, not necessarily off_t or long.
 238
 239 2006-06-26  Hrvoje Niksic  <hniksic@xemacs.org>
 240
 241         * cmpt.c (strtoll): Check for overflow and underflow without
 242         relying on (technically) undefined behavior.  Don't assume that
 243         strtoll_type is 64 bits wide.
 244
 245 2006-06-21  Hrvoje Niksic  <hniksic@xemacs.org>
 246
 247         * utils.c (base64_encode): Cast void pointer to char * before
 248         doing arithmetic.
 249
 250 2006-06-20  Hrvoje Niksic  <hniksic@xemacs.org>
 251
 252         * utils.c (base64_encode): Made TBL const.
 253         (base64_decode): Made the base64_char_to_value table const.
 254
 255 2006-06-19  Hrvoje Niksic  <hniksic@xemacs.org>
 256
 257         * utils.c (base64_encode): Made the DATA pointer void * so the
 258         callers can pass it any kind of pointer (including both signed and
 259         unsigned char pointers).
 260         (base64_decode): Ditto for DEST.
 261
 262 2006-06-19  Hrvoje Niksic  <hniksic@xemacs.org>
 263
 264         * utils.c (base64_encode): Would read past end of STR.
 265         Reported by rick@eckle.org.
 266
 267 2006-06-13  Mauro Tortonesi  <mauro@ferrara.linux.it>
 268
 269         * options.h (struct options): Introduced member restrict_files_case to
 270         keep track of preferences on character case restrictions for
 271         filenames.
 272
 273         * init.c: Modified defaults and cmd_spec_restrict_file_names to
 274         support character case restrictions for filenames. Added
 275         test_cmd_spec_restrict_file_names unit test.
 276
 277         * url.c: Modified append_uri_pathel to support character case
 278         restrictions for filenames. Added test_append_uri_pathel unit test.
 279
 280         * test.c: Added test_cmd_spec_restrict_file_names and
 281         test_append_uri_pathel to the list of unit tests to run.
 282
 283 2006-06-12  Mauro Tortonesi  <mauro@ferrara.linux.it>
 284
 285         * retr.c (retrieve_from_file): Use retrieve_tree and automatically
 286         turn on opt.follow_ftp in case of recursive FTP retrieval through HTTP
 287         proxy.
 288
 289         * main.c: Automatically turn on opt.follow_ftp in case of recursive
 290         FTP retrieval through HTTP proxy.
 291
 292 2006-06-12  Tony Lewis  <tlewis@exelana.com>
 293
 294         * main.c: Improved CHEN Peng's patch by proposing a simpler logic.
 295
 296 2006-06-12  CHEN Peng  <chenpeng@alumni.nus.edu.sg>
 297
 298         * main.c: Use retrieve_tree in case of recursive FTP retrieval through
 299         HTTP proxy.
 300
 301 2006-05-25  Mauro Tortonesi  <mauro@ferrara.linux.it>
 302
 303         * convert.c: Added mechanisms to keep track broken links.
 304
 305         * convert.h: Ditto.
 306
 307         * wget.h: Reordered and enumerated uerr_t constants.
 308
 309         * recur.c: Fixes to support recursive spider mode.
 310
 311         * http.c: Ditto.
 312
 313         * main.c: Print broken links in case of recursive spider mode.
 314
 315         * retr.c: Changed interface of retrieve_url.
 316
 317         * retr.h: Ditto.
 318
 319         * ftp.c: Changed interface of ftp_loop.
 320
 321         * ftp.h: Ditto.
 322
 323         * res.c: Minor change to reflect changes in interface of retrieve_url.
 324
 325 2006-05-18  Lawrence Jones  <lawrence.jones@ugs.com>
 326
 327         * ftp-ls.c (ftp_parse_unix_ls): Correct size parsing, add size
 328         and filename debugging output.
 329
 330 2006-04-28  Mauro Tortonesi  <mauro@ferrara.linux.it>
 331
 332         * http.c: If Content-Disposition header is present, allow unique
 333         filename generation unless -nc is given. Permit to disable parsing of
 334         Content-Disposition header.
 335
 336         * options.h: Added option --no-content-disposition to disable parsing
 337         of HTTP Content-Disposition header.
 338
 339         * init.c: Ditto.
 340
 341         * main.c: Ditto.
 342
 343 2006-04-11  Hrvoje Niksic  <hniksic@xemacs.org>
 344
 345         * hash.c (TOLOWER): Wrap macro arg in parentheses.
 346
 347 2006-04-08  Hrvoje Niksic  <hniksic@xemacs.org>
 348
 349         * http.c (parse_content_disposition): Doc fix.
 350
 351 2006-03-15  Mauro Tortonesi  <mauro@ferrara.linux.it>
 352
 353         * utils.c: Restricted operational semantics of frontcmp and proclist
 354         from generic strings to directory names and them to subdir_p and
 355         dir_matches_p respectively.  Applied George Ogata's one line patch to
 356         restrict algorithm of subdir_p to full directory name matching.  Added
 357         testcases for subdir_p and dir_matches_p.
 358
 359         * utils.h: Changed all frontcmp occurrences to subdir_p.
 360
 361         * recur.c: Ditto.
 362
 363         * test.c: Changed type returned by test functions from char * to const
 364         char *.  Added test_subdir_p and test_dir_matches_p to the list of
 365         tests to run.
 366
 367         * http.c (test_parse_content_disposition): Changed return type from
 368         char * to const char *.
 369
 370 2006-03-14  Mauro Tortonesi  <mauro@ferrara.linux.it>
 371
 372         * recur.c (struct queue_element): Changed type of html_allowed member
 373         to bool.
 374
 375 2006-03-09  Mauro Tortonesi  <mauro@ferrara.linux.it>
 376
 377         * ftp.c (ftp_list): Try `LIST -a' command first and revert to `LIST'
 378         in case of failure.
 379
 380 2006-03-06  Hrvoje Niksic  <hniksic@xemacs.org>
 381
 382         * hash.c (TOLOWER): Fix definition when STANDALONE.
 383         Reported by Beni Serfaty.
 384
 385 2006-03-02  Mauro Tortonesi  <mauro@ferrara.linux.it>
 386
 387         * http.c (http_loop): Fixed recursive HTTP retrieval.
 388
 389 2006-02-28  Hrvoje Niksic  <hniksic@xemacs.org>
 390
 391         * http.c (extract_param): Declare extern so it can be used from
 392         other files.
 393         (extract_param): Return error for empty name.
 394
 395 2006-02-28  Hrvoje Niksic  <hniksic@xemacs.org>
 396
 397         * url.c (find_last_char): Define in terms of memrchr.
 398
 399         * cmpt.c (memrchr): Define it on systems that don't have it.
 400
 401         * http.c (extract_param): New function for parsing header values
 402         with parameters.
 403         (parse_content_disposition): Use it.  Don't allow slashes and
 404         backslashes in the file name.
 405
 406 2006-02-27  Hrvoje Niksic  <hniksic@xemacs.org>
 407
 408         * url.c (path_simplify): Don't preserve ".." at beginning of path.
 409         Suggested by Frank McCown.
 410
 411 2006-02-25  Hrvoje Niksic  <hniksic@xemacs.org>
 412
 413         * http.c (gethttp): Only use FILE.N.html if FILE.html exists.
 414
 415 2006-02-09  Hrvoje Niksic  <hniksic@xemacs.org>
 416
 417         * mswindows.c (run_with_timeout): Made thread_hnd non-static.
 418
 419 2006-02-05  Hrvoje Niksic  <hniksic@xemacs.org>
 420
 421         * retr.c (sleep_between_retrievals): Sleep at a minimum of 1/2 of
 422         the specified wait period.
 423
 424 2006-02-03  Hrvoje Niksic  <hniksic@xemacs.org>
 425
 426         * utils.c (number_to_string): Don't use sprintf for printing
 427         WGINT_MIN; simply divide n by 10 and defer printing the last
 428         digit.
 429         (number_to_string): Removed the SPRINTF_WGINT macro.
 430
 431 2006-02-03  Mauro Tortonesi  <mauro@ferrara.linux.it>
 432
 433         * http.c: Fixed support for Content-Disposition header.
 434
 435         * test.c: Added test_parse_content_disposition to the list of unit
 436         tests to run.
 437
 438 2006-02-02  Hrvoje Niksic  <hniksic@xemacs.org>
 439
 440         * hash.c: Don't define countof if it's already defined.
 441
 442         * hash.c: Obtain the definition of uintptr_t when standalone.
 443
 444 2006-01-30  Mauro Tortonesi  <mauro@ferrara.linux.it>
 445
 446         * http.c: Changed output format. Removed excessively verbose debugging
 447         output.
 448
 449 2005-12-07  Mauro Tortonesi  <mauro@ferrara.linux.it>
 450
 451         * http.c: Fixed pre-download verbose output which was broken by
 452         HTTP code refactoring.
 453
 454 2005-11-23  Mauro Tortonesi  <mauro@ferrara.linux.it>
 455
 456         * http.c: Refactored HTTP code.  If -O is not used, the new code
 457         delays the choice of the file name where the downloaded resource
 458         will be saved until the HTTP headers have been retrieved.
 459         Added support for Content-Disposition header.
 460
 461 2005-11-19  Hrvoje Niksic  <hniksic@xemacs.org>
 462
 463         * hash.c (INVALID_PTR): Use uintptr_t instead of unsigned long.
 464         (hash_pointer): Don't assume a pointer fits in `unsigned long'.
 465
 466 2005-11-02  Mauro Tortonesi  <mauro@ferrara.linux.it>
 467
 468         * Makefile.in: Removed support for unit testing (now it is in
 469         tests/Makefile.in).
 470
 471 2005-10-27  Mauro Tortonesi  <mauro@ferrara.linux.it>
 472
 473         * Makefile.in: Added basic support for unit testing.
 474
 475         * test.c: Ditto.
 476
 477         * test.h: Ditto.
 478
 479 2005-10-13  Daniel Stenberg  <daniel@haxx.se>
 480
 481         * http-ntlm.c (ntlm_output): Fixed buffer overflow vulnerability.
 482
 483 2005-10-09  Russ Allbery  <rra@stanford.edu>
 484
 485         * snprintf.c: Remove round to round_int and pow10 to pow10_int, to
 486         avoid warnings from GCC 4.0.
 487
 488 2005-10-05  Mauro Tortonesi  <mauro@ferrara.linux.it>
 489
 490         * retr.c: Changed semantics of no_proxy_match.
 491
 492 2005-09-17  Hrvoje Niksic  <hniksic@xemacs.org>
 493
 494         * main.c (main): Don't print the summary if nothing has been downloaded.
 495
 496 2005-09-17  Hrvoje Niksic  <hniksic@xemacs.org>
 497
 498         * retr.c (retr_rate): Rename parameter from MSECS to SECS since it
 499         no longer holds milliseconds.
 500
 501 2005-09-01  Hrvoje Niksic  <hniksic@xemacs.org>
 502
 503         * progress.c: Introduce symbolic constants for "magic" values of
 504         0.2 and 0.9, REFRESH_INTERVAL and ETA_REFRESH_INTERVAL.
 505
 506 2005-08-27  Hrvoje Niksic  <hniksic@xemacs.org>
 507
 508         * cmpt.c (strtoll): Correctly handle strtoll("0x", ptr, 0) and
 509         strtoll("0x<nonhexchar>", ptr, 0) -- in both cases *ptr must be
 510         set to the position of 'x', not after it.
 511
 512 2005-08-27  Hrvoje Niksic  <hniksic@xemacs.org>
 513
 514         * hash.c (hash_table_map): Rename to hash_table_for_each and
 515         update callers.
 516         Document the meaning of the callback's return value.
 517         (hash_table_iterate): New function.
 518         (hash_table_iter_next): Likewise.
 519         Update most places that used hash_table_for_each to use the
 520         iteration, which doesn't require a temporary function with
 521         explicit state management.
 522
 523 2005-08-26  Albert Chin  <wget@mlists.thewrittenword.com>
 524
 525         * Makefile.in: Use @datadir@.  Define localedir as $(datadir)/locale.
 526
 527 2005-08-26  Jeremy Shapiro  <jnshapiro@gmail.com>
 528
 529         * openssl.c (ssl_init): Set SSL_MODE_AUTO_RETRY.
 530
 531 2005-08-23  Hrvoje Niksic  <hniksic@xemacs.org>
 532
 533         * host.c (address_list_from_ipv4_addresses): Use IP_INADDR_DATA.
 534
 535 2005-08-12  Hrvoje Niksic  <hniksic@xemacs.org>
 536
 537         * wget.h: Renamed strtoll_return to strtoll_type.
 538
 539 2005-08-11  Hrvoje Niksic  <hniksic@xemacs.org>
 540
 541         * progress.c (eta_to_human_short): Switch to days when printing
 542         more than 48h rather than 100h.  (It's not immediately apparent
 543         how many days there are in 83h.)
 544
 545 2005-08-11  Hrvoje Niksic  <hniksic@xemacs.org>
 546
 547         * cmpt.c (strtoll): Define it if missing on the system and if Wget
 548         needs it.
 549
 550         * mswindows.c (str_to_int64): Move to cmpt.c and rename to strtoll.
 551
 552 2005-08-10  Hrvoje Niksic  <hniksic@xemacs.org>
 553
 554         * host.c (print_address): Always use inet_ntop when IPv6 is
 555         enabled.
 556
 557         * host.h (ip_address): Simplify the data union.
 558
 559 2005-08-09  Hrvoje Niksic  <hniksic@xemacs.org>
 560
 561         * mswindows.c (inet_ntop): Also handle IPv4 addresses for
 562         completeness.
 563
 564 2005-08-09  Hrvoje Niksic  <hniksic@xemacs.org>
 565
 566         * http.c (gethttp): Don't read more than the amount of data
 567         specified by the content-length header.
 568
 569 2005-08-09  Vasil Dimov  <vd@datamax.bg>
 570
 571         * ftp.c (getftp): Don't free RESPLINE if ftp_response returns a
 572         status other than FTPOK.
 573
 574 2005-08-04  Giuseppe Bonacci  <g.bonacci@libero.it>
 575
 576         * ftp-ls.c (ftp_parse_unix_ls): Remember the position of the
 577         previous token instead of backtracking back to it.
 578
 579 2005-07-08  Gisle Vanem  <giva@bgnett.no>
 580
 581         * mswindows.h: Include process.h to get getpid() declaration.
 582
 583 2005-07-08  Hrvoje Niksic  <hniksic@xemacs.org>
 584
 585         * utils.c (aprintf): Use vasprintf where available.
 586
 587 2005-07-08  Hrvoje Niksic  <hniksic@xemacs.org>
 588
 589         * url.c (rewrite_shorthand_url): Simplify code using aprintf and
 590         strspn.
 591
 592 2005-07-07  Hrvoje Niksic  <hniksic@xemacs.org>
 593
 594         * gnutls.c (ssl_check_certificate): Check for the validity of the
 595         presented X509 certificate.
 596
 597 2005-07-07  Hrvoje Niksic  <hniksic@xemacs.org>
 598
 599         * openssl.c (ssl_check_certificate): Print custom error messages
 600         for frequent X509 certificate problems.
 601
 602 2005-07-07  Hrvoje Niksic  <hniksic@xemacs.org>
 603
 604         * mswindows.h: Define an alias for stat and fstat, as requested by
 605         config-compiler.h.
 606         (gai_strerror): Define to windows_strerror if NEED_GAI_STRERROR is
 607         defined.
 608
 609 2005-07-06  Hrvoje Niksic  <hniksic@xemacs.org>
 610
 611         * mswindows.h: Use strtoll where available.
 612
 613 2005-07-06  Hrvoje Niksic  <hniksic@xemacs.org>
 614
 615         * sysdep.h: Add a full declaration of fnmatch.h.
 616
 617 2005-07-06  Hrvoje Niksic  <hniksic@xemacs.org>
 618
 619         * utils.c: Unconditionally include <setjmp.h>.
 620
 621 2005-07-06  Hrvoje Niksic  <hniksic@xemacs.org>
 622
 623         * utils.c (fnmatch_nocase): New function.
 624         (proclist): Use it instead of fnmatch when opt.ignore_case is
 625         requested.
 626         (in_acclist): Respect opt.ignore_case.
 627         (frontcmp): Respect opt.ignore_case.
 628
 629         * options.h (struct options): New flag opt.ignore_case.
 630
 631 2005-07-06  Hrvoje Niksic  <hniksic@xemacs.org>
 632
 633         * ptimer.c: Measure time in seconds rather than milliseconds.
 634         Adjusted all callers.
 635
 636 2005-07-06  Hrvoje Niksic  <hniksic@xemacs.org>
 637
 638         * http.c (gethttp): When freeing MESSAGE, take into account that
 639         it can be NULL.
 640
 641 2005-07-05  Hrvoje Niksic  <hniksic@xemacs.org>
 642
 643         * cmpt.c (timegm): Handle years after 2099.
 644
 645 2005-07-05  Hrvoje Niksic  <hniksic@xemacs.org>
 646
 647         * cmpt.c (timegm): Remove unused variable.
 648
 649 2005-07-05  Hrvoje Niksic  <hniksic@xemacs.org>
 650
 651         * cmpt.c (timegm): Don't call mktime; simply count the seconds
 652         between 1970-01-01 and the specified date.
 653
 654 2005-07-05  Hrvoje Niksic  <hniksic@xemacs.org>
 655
 656         * wget.h (or): Define HAVE_SSL when either HAVE_OPENSSL or
 657         HAVE_GNUTLS are defined.
 658
 659         * gnutls.c: New file.
 660
 661 2005-07-05  Hrvoje Niksic  <hniksic@xemacs.org>
 662
 663         * http.c (gethttp): Don't print the request write error message
 664         twice.
 665
 666 2005-07-04  Hrvoje Niksic  <hniksic@xemacs.org>
 667
 668         * openssl.c (openssl_errstr): Instead of always using a large
 669         static buffer, only allocate the error string when there is an
 670         actual error.
 671
 672 2005-07-04  Hrvoje Niksic  <hniksic@xemacs.org>
 673
 674         * xmalloc.c (debugging_free): Prefix hex pointer value with "0x"
 675         when printing.
 676
 677 2005-07-04  Hrvoje Niksic  <hniksic@xemacs.org>
 678
 679         * utils.c (NEXT_BASE64_CHAR): Rename to NEXT_CHAR and simplify to
 680         get the next non-whitespace character.
 681
 682 2005-07-04  Hrvoje Niksic  <hniksic@xemacs.org>
 683
 684         * utils.c (base64_decode): Don't silently tolerate non-base64
 685         non-white-space characters in the base64 stream.
 686
 687 2005-07-04  Hrvoje Niksic  <hniksic@xemacs.org>
 688
 689         * connect.c (LAZY_RETRIEVE_INFO): Make last_tick unsigned to match
 690         transport_map_modified_tick.
 691
 692 2005-07-04  Hrvoje Niksic  <hniksic@xemacs.org>
 693
 694         * config-post.h (alloca): Updated declaration to not enumerate all
 695         Windows compilers.
 696
 697 2005-07-04  Hrvoje Niksic  <hniksic@xemacs.org>
 698
 699         * openssl.c (openssl_errstr): Separate error messages with "; ".
 700
 701 2005-07-03  Hrvoje Niksic  <hniksic@xemacs.org>
 702
 703         * ftp.c (getftp): Ditto.
 704
 705         * http.c (gethttp): Use fd_errstr.
 706
 707         * connect.c (fd_register_transport): Restructure parameters to
 708         include only a single structure that describes transport
 709         implementation.
 710
 711         * openssl.c (openssl_errstr): New function: dump SSL error strings
 712         into a static buffer and return a pointer to the buffer.
 713
 714         * connect.c (fd_errstr): New function; returns transport-specific
 715         error message, or strerror(errno) if transport doesn't supply one.
 716
 717 2005-07-03  Hrvoje Niksic  <hniksic@xemacs.org>
 718
 719         * mswindows.h: Also wrap accept() and listen().
 720
 721 2005-07-03  Hrvoje Niksic  <hniksic@xemacs.org>
 722
 723         * url.c (path_end): Skip separators appropriate for the scheme.
 724         (strpbrk_or_eos): Remove gcc-specific version, as the optimization
 725         it tried to perform no longer applies.
 726
 727 2005-07-02  Hrvoje Niksic  <hniksic@xemacs.org>
 728
 729         * host.c: Don't include "connect.h" now that we no longer have
 730         socket_has_inet6.
 731
 732 2005-07-02  Hrvoje Niksic  <hniksic@xemacs.org>
 733
 734         * host.c: Remove extraneous definition of netdb.h.
 735
 736 2005-07-02  Hrvoje Niksic  <hniksic@xemacs.org>
 737
 738         * http.c (gethttp): Skip error message body in the keep-alive
 739         case.
 740
 741 2005-07-02  Hrvoje Niksic  <hniksic@xemacs.org>
 742
 743         * url.c (url_parse): Would crash when parsing fragments.  Support
 744         fragments for FTP URLs too.
 745
 746 2005-07-02  Hrvoje Niksic  <hniksic@xemacs.org>
 747
 748         * version.c: Don't use "cvs" in version name, since we're not
 749         using CVS anymore.
 750
 751 2005-07-02  Hrvoje Niksic  <hniksic@xemacs.org>
 752
 753         * progress.c (create_image): Ditto.
 754
 755         * retr.c (retr_rate): Display smaller rate numbers with greater
 756         precision.
 757
 758 2005-07-02  Hrvoje Niksic  <hniksic@xemacs.org>
 759
 760         * http.c (response_head_terminator): Minor optimization.
 761
 762         * retr.c (fd_read_hunk): Call terminator with pointer to the start
 763         of the data and the pointer to the current data.  Changed all
 764         callers.
 765
 766 2005-07-01  Hrvoje Niksic  <hniksic@xemacs.org>
 767
 768         * url.c (url_parse): Make sure u->params is not initialized for
 769         http/https URLs.
 770         (url_parse): Don't crash on garbage following []-delimited IPv6
 771         addresses.
 772
 773 2005-07-01  Hrvoje Niksic  <hniksic@xemacs.org>
 774
 775         * main.c (print_help): Don't refer to the non-existent -nr in
 776         description of --mirror.
 777
 778 2005-06-30  Hrvoje Niksic  <hniksic@xemacs.org>
 779
 780         * host.c (pretty_print_address): Renamed to just print_address.
 781         Clarify documentation.
 782
 783 2005-06-30  Hrvoje Niksic  <hniksic@xemacs.org>
 784
 785         * http.c (gethttp): Explicitly document the different cases when
 786         generating the Host header.
 787
 788 2005-06-30  Hrvoje Niksic  <hniksic@xemacs.org>
 789
 790         * host.c (pretty_print_address): Handle error result from
 791         inet_ntop.
 792
 793 2005-06-30  Gisle Vanem  <giva@bgnett.no>
 794
 795         * mswindows.c (inet_ntop): New function.  Print IPv6 addresses
 796         using WSAAddressToString.
 797
 798 2005-06-27  Hrvoje Niksic  <hniksic@xemacs.org>
 799
 800         * progress.c (dot_update): Remove unused variable row_qty.
 801
 802 2005-06-29  Hrvoje Niksic  <hniksic@xemacs.org>
 803
 804         * main.c: Check for both SIGHUP and SIGUSR1 before using them.
 805
 806 2005-06-29  Hrvoje Niksic  <hniksic@xemacs.org>
 807
 808         * utils.c: Unconditionally include locale.h.
 809
 810 2005-06-29  Hrvoje Niksic  <hniksic@xemacs.org>
 811
 812         * ptimer.c: Include sys/time.h to get struct timeval.
 813
 814 2005-06-29  Hrvoje Niksic  <hniksic@xemacs.org>
 815
 816         * wget.h: Remove obsolete definition of with_thousand_seps_sum.
 817
 818 2005-06-29  Hrvoje Niksic  <hniksic@xemacs.org>
 819
 820         * gnu-md5.h: Unconditionally include limits.h.
 821
 822 2005-06-29  Hrvoje Niksic  <hniksic@xemacs.org>
 823
 824         * utils.c (random_number): Use lrand48 if available.
 825         (random_float): Use drand48 if available.
 826
 827 2005-06-29  Hrvoje Niksic  <hniksic@xemacs.org>
 828
 829         * main.c (secs_to_human_time): Use print_decimal when printing
 830         total download time in seconds.
 831
 832         * progress.c (print_row_stats): Use it to print total download
 833         time at the end of the download.
 834         (create_image): Ditto.
 835
 836         * utils.c (print_decimal): New function; print small decimal
 837         numbers with more precision than large ones.
 838
 839         * progress.c (print_row_stats): New function.  Print ETA after the
 840         download rate at the end of each row.
 841
 842 2005-06-28  Hrvoje Niksic  <hniksic@xemacs.org>
 843
 844         * init.c (parse_line): Check for alphanumerics.
 845
 846 2005-06-28  Hrvoje Niksic  <hniksic@xemacs.org>
 847
 848         * (dot_create): Remove unnecessary casts.
 849
 850 2005-06-28  Hrvoje Niksic  <hniksic@xemacs.org>
 851
 852         * ftp.c (getftp): Delete trailing newlines from LIST output so
 853         lines don't come out with trailing \015\012 with -S.
 854
 855 2005-06-27  Hrvoje Niksic  <hniksic@xemacs.org>
 856
 857         * mswindows.h: Remove superfluous includes.
 858
 859 2005-06-27  Hrvoje Niksic  <hniksic@xemacs.org>
 860
 861         * config-post.h (alloca): Amend alloca declaration to take care of
 862         all Win32 compilers, not just MSVC and MinGW.
 863
 864 2005-06-27  Hrvoje Niksic  <hniksic@xemacs.org>
 865
 866         * utils.c (get_grouping_data): Force separator to "." rather than
 867         " " when "," is taken.
 868
 869 2005-06-27  Hrvoje Niksic  <hniksic@xemacs.org>
 870
 871         * wget.h (PTR_FORMAT): Cast the result of sizeof to int before
 872         passing it to printf's %*.
 873
 874         * retr.h: Declare output_stream and output_stream_regular.
 875
 876         * ftp.h: Declare ftp_last_respline.
 877
 878         * convert.h: Declare dl_url_file_map.
 879
 880         * http.h: New file.
 881
 882 2005-06-27  Hrvoje Niksic  <hniksic@xemacs.org>
 883
 884         * cookies.c: Make cookies_now static.
 885
 886 2005-06-27  Hrvoje Niksic  <hniksic@xemacs.org>
 887
 888         * utils.c (human_readable): Remove intermediary cast to long; MSVC
 889         has problems casting *unsigned* __int64 to double.
 890
 891 2005-06-27  Hrvoje Niksic  <hniksic@xemacs.org>
 892
 893         * sysdep.h: Use the system-provided fnmatch by default.
 894
 895 2005-06-27  Hrvoje Niksic  <hniksic@xemacs.org>
 896
 897         * http.c (mktime_from_utc): Renamed to timegm and moved to cmpt.c.
 898         Don't compile it if GNU timegm is available.
 899         (http_atotm): Use timegm.
 900
 901 2005-06-27  Hrvoje Niksic  <hniksic@xemacs.org>
 902
 903         * http.c (http_atotm): Correctly query the old locale value.
 904
 905 2005-06-27  Hrvoje Niksic  <hniksic@xemacs.org>
 906
 907         * config-post.h (alloca): Don't #define alloca under MinGW32,
 908         which defines it in malloc.h, included from mswindows.h.
 909
 910 2005-06-27  Hrvoje Niksic  <hniksic@xemacs.org>
 911
 912         * utils.c (get_grouping_data): Force the use of separators in C
 913         locale.
 914
 915 2005-06-27  Hrvoje Niksic  <hniksic@xemacs.org>
 916
 917         * main.c (i18n_initialize): Set all locale categories.
 918
 919         * http.c (http_atotm): Temporarily set locale to "C".
 920
 921 2005-06-27  Hrvoje Niksic  <hniksic@xemacs.org>
 922
 923         * http.c (gethttp): Improve "POST data file missing" error
 924         message.
 925
 926 2005-06-27  Hrvoje Niksic  <hniksic@xemacs.org>
 927
 928         * progress.c (set_progress_implementation): Type COLON as const
 929         char *.
 930
 931 2005-06-27  Hrvoje Niksic  <hniksic@xemacs.org>
 932
 933         * utils.c (with_thousand_seps): Handle negative numbers.
 934
 935 2005-06-26  Hrvoje Niksic  <hniksic@xemacs.org>
 936
 937         * progress.c (create_image): Mark the "eta" string for translation.
 938
 939 2005-06-26  Hrvoje Niksic  <hniksic@xemacs.org>
 940
 941         * html-url.c (get_urls_file): Don't explicitly set entry->next to
 942         NULL since entry is already zeroed out.
 943
 944 2005-06-26  Gisle Vanem  <giva@bgnett.no>
 945
 946         * mswindows.h: Define gai_strerror under MinGW.
 947
 948 2005-06-26  Hrvoje Niksic  <hniksic@xemacs.org>
 949
 950         * utils.c (with_thousand_seps): Correctly implement thousand seps
 951         consisting of more than one character.
 952
 953 2005-06-26  Hrvoje Niksic  <hniksic@xemacs.org>
 954
 955         * main.c (secs_to_human_time): Ditto.
 956
 957         * progress.c (create_image): Print more exact duration of very
 958         short downloads.
 959
 960         * main.c (secs_to_human_time): Don't translate time suffixes "h",
 961         "m", and "s", which are not strictly SI, but are "accepted for use
 962         with SI".
 963         (secs_to_human_time): Print really small intervals as 0s, not
 964         0.00s.
 965
 966 2005-06-26  Hrvoje Niksic  <hniksic@xemacs.org>
 967
 968         * config-post.h: Replace the alloca declaration with the one from
 969         the latest Autoconf manual.  This should remove a warning with GCC
 970         on AIX.
 971
 972 2005-06-26  Hrvoje Niksic  <hniksic@xemacs.org>
 973
 974         * ftp.c (getftp): Always invoke SIZE, not only when continuing a
 975         download.
 976
 977         * main.c (main): Ditto here.
 978
 979         * progress.c (create_image): When the download is finished, print
 980         how long it took.
 981
 982 2005-06-26  Hrvoje Niksic  <hniksic@xemacs.org>
 983
 984         * main.c (main): Print the downloaded and quota amounts with the
 985         "human_readable" function.
 986
 987         * ftp.c (print_length): Ditto.
 988
 989         * http.c (gethttp): Don't display thousand separators.
 990
 991         * utils.c (with_thousand_seps): Rewritten to respect locale
 992         settings and to be type size agnostic.
 993
 994 2005-06-25  Hrvoje Niksic  <hniksic@xemacs.org>
 995
 996         * utils.c (human_readable): Divide with 1024 instead of shifting
 997         so the operation can work with non-integer N.
 998
 999 2005-06-25  Hrvoje Niksic  <hniksic@xemacs.org>
1000
1001         * progress.c (eta_to_human): New logic for more human-readable
1002         ETA.
1003
1004 2005-06-25  Hrvoje Niksic  <hniksic@xemacs.org>
1005
1006         * utils.c (with_thousand_seps_sum): Decrease buffer size so it
1007         cannot overrun add_thousand_seps's buffer.
1008
1009 2005-06-25  Hrvoje Niksic  <hniksic@xemacs.org>
1010
1011         * utils.c (SPRINTF_WGINT): The correct format is %I64d, not just
1012         %I64.
1013
1014 2005-06-25  Hrvoje Niksic  <hniksic@xemacs.org>
1015
1016         * http.c (http_loop): Don't warn about wildcards in HTTP URLs if
1017         globbing isn't requested in the first place.
1018
1019         * retr.c (retrieve_url): Temporarily turn off globbing when
1020         processing HTTP->FTP redirects.
1021
1022 2005-06-25  Hrvoje Niksic  <hniksic@xemacs.org>
1023
1024         * utils.c (with_thousand_seps_sum): Now defined only if
1025         SUM_SIZE_INT is double.
1026
1027         * wget.h (SUM_SIZE_INT): Instead of bothering with long, long
1028         long, __int64, and friends, simply either use wgint or double, end
1029         of story.  Since we know how to print either, we no longer need
1030         LARGE_INT_FMT.
1031
1032         * sysdeps.h (LARGE_INT): Renamed to SUM_SIZE_INT to better reflect
1033         its intent, and moved to wget.h.
1034
1035 2005-06-25  Hrvoje Niksic  <hniksic@xemacs.org>
1036
1037         * Makefile.in: No need to clean .libs.
1038
1039 2005-06-25  Hrvoje Niksic  <hniksic@xemacs.org>
1040
1041         * cookies.c (parse_set_cookies): Cast pointer subtraction to int
1042         before using it with %d; AIX compiler warns on this.
1043         Reported by Jens Schleusener.
1044
1045 2005-06-24  Hrvoje Niksic  <hniksic@xemacs.org>
1046
1047         * http.c (gethttp): Don't prepend / here.
1048
1049         * cookies.c (cookie_handle_set_cookie): Prepend / to PATH.
1050         (cookie_header): Ditto.
1051
1052 2005-06-24  Hrvoje Niksic  <hniksic@xemacs.org>
1053
1054         * init.c: opt.verbose must be declared as int.
1055
1056 2005-06-23  Hrvoje Niksic  <hniksic@xemacs.org>
1057
1058         * cmpt.c (strpbrk): Removed.
1059         (mktime): Removed.
1060         Include <time.h>.
1061
1062 2005-06-23  Hrvoje Niksic  <hniksic@xemacs.org>
1063
1064         * utils.c (read_file): Ditto.
1065
1066         * main.c (main): Use struct_fstat.
1067
1068         * mswindows.h (struct_fstat): Define a struct_fstat to deal with
1069         the fact that Borland 5.5 has 64-bit stat, but not 64-bit fstat!
1070
1071 2005-06-23  Hrvoje Niksic  <hniksic@xemacs.org>
1072
1073         * sysdep.h: Remove code that deals with Watcom.
1074
1075 2005-06-22  Hrvoje Niksic  <hniksic@xemacs.org>
1076
1077         * all: Use bool instead of int and false/true instead of 0/non-0
1078         for boolean variables and values.
1079
1080 2005-06-22  Hrvoje Niksic  <hniksic@xemacs.org>
1081
1082         * sysdep.h: Include the stdbool.h/_Bool/bool blurb from Autoconf.
1083
1084 2005-06-22  Hrvoje Niksic  <hniksic@xemacs.org>
1085
1086         * init.c (cmd_lockable_boolean): Removed.
1087
1088 2005-06-22  Hrvoje Niksic  <hniksic@xemacs.org>
1089
1090         * cookies.c (struct cookie): Use 1-bit bitfields for booleans
1091         which makes the structure takes less space at no cost in
1092         complexity.
1093
1094 2005-06-22  Hrvoje Niksic  <hniksic@xemacs.org>
1095
1096         * Makefile.in ($(OBJ)): Add the config.h dependency.
1097
1098 2005-06-22  Hrvoje Niksic  <hniksic@xemacs.org>
1099
1100         * openssl.c, connect.c, host.c: Replace instances of #ifdef
1101         ENABLE_DEBUG if (opt.debug) {...} #endif with IF_DEBUG {...}.
1102
1103         * main.c: Rename the IF_DEBUG defined here to WHEN_DEBUG.
1104
1105         * wget.h (IF_DEBUG): New macro.
1106         (DEBUGP): Define in terms of IF_DEBUG.
1107
1108 2005-06-22  Hrvoje Niksic  <hniksic@xemacs.org>
1109
1110         * http.c (gethttp): Only handle --set-cookies (and assert that
1111         cookie jar exists) if opt.cookies is true.  Failure to do so
1112         triggered the assert when --no-cookies was used and the server
1113         sent a Set-Cookie header.  Ouch!
1114
1115 2005-06-22  Hrvoje Niksic  <hniksic@xemacs.org>
1116
1117         * connect.c (select_fd): Expect select() to exist.
1118
1119         * utils.c (xsleep): Always use select() as sleep fallback on
1120         non-Windows platforms.
1121
1122         * ptimer.c: Delete the implementation of PTIMER_TIME.
1123
1124         * main.c: Assume existence of signal(), test for different signal
1125         names instead.
1126
1127         * cmpt.c: Better document reasons why certain functions are
1128         included.
1129
1130 2005-06-22  Hrvoje Niksic  <hniksic@xemacs.org>
1131
1132         * Makefile.in: Remove the manually maintained dependency list;
1133         make all object files depend on every header.
1134
1135 2005-06-20  Hrvoje Niksic  <hniksic@xemacs.org>
1136
1137         * hash.c: Rename "mapping" to "cell" to avoid confusion with the
1138         term "mapping" (or "map") sometimes being used for the entire hash
1139         table.  Also rename "non-empty" to "occupied" for easier reading
1140         of if (!NON_EMPTY (...)) ... .
1141
1142 2005-06-20  Hrvoje Niksic  <hniksic@xemacs.org>
1143
1144         * main.c, ptimer.c, sysdep.h, utils.c: Use #elif to simplify reading of
1145         chained if-else-else-else-... statements.
1146
1147 2005-06-20  Hrvoje Niksic  <hniksic@xemacs.org>
1148
1149         * all: Return type of signal handlers is `void'.  Include signal.h
1150         unconditionally.
1151
1152         * all: Don't explicitly cast values returned by malloc.  We no
1153         longer support ancient compilers that don't declare malloc, and we
1154         never supported C++ builds.
1155
1156 2005-06-19  Hrvoje Niksic  <hniksic@xemacs.org>
1157
1158         * all: Don't declare errno.  Include both time.h and sys/time.h,
1159         as long as sys/time.h exists.  Don't dereference function pointers
1160         when invoking the functions they point to.
1161
1162         * cmpt.c (memmove): Remove function mandated by C89.
1163         (strerror): Ditto.
1164         (strstr): Ditto.
1165
1166         * all: Undo the K&R-ization changes from 2005-05-03.
1167
1168         * all: Remove support for K&R compilers: use C89 function
1169         declarations, remove definition of PARAMS, remove support for
1170         varargs, and remove ansi2knr.  Assume the presence of time.h,
1171         string.h, and other headers mandated by C89.
1172
1173 2005-06-19  Hrvoje Niksic  <hniksic@xemacs.org>
1174
1175         * init.c (cmd_lockable_boolean): Don't recognize literal "2" and
1176         "-1" values; unlike 0 and 1, those should never be exposed to the
1177         user.  Update the error message to be more self-consistent, as
1178         proposed by Benno Schulenberg.
1179
1180 2005-06-18  Hrvoje Niksic  <hniksic@xemacs.org>
1181
1182         * http.c (gethttp): Don't free "head" before using it to save
1183         headers.
1184
1185 2005-06-18  Hrvoje Niksic  <hniksic@xemacs.org>
1186
1187         * http.c (gethttp): When -E is in use, check for file existence
1188         after appending ".html" to the name and modify the file name if
1189         necessary.
1190
1191 2005-06-17  Hrvoje Niksic  <hniksic@xemacs.org>
1192
1193         * connect.c (socket_has_inet6): Removed.
1194
1195         * host.c (lookup_host): Don't use the AI_ADDRCONFIG getaddrinfo
1196         hint.
1197
1198 2005-06-16  Hrvoje Niksic  <hniksic@xemacs.org>
1199
1200         * init.c (cmd_lockable_boolean): Improve the error message so it
1201         lists the more useful values first.
1202
1203 2005-06-15  Hrvoje Niksic  <hniksic@xemacs.org>
1204
1205         * http.c (gethttp): Also report the system error when the POST
1206         data file is missing.
1207
1208 2005-06-15  Benno Schulenberg  <benno@nietvergeten.nl>
1209
1210         * ftp.c, http.c, connect.c, cookies.c, html-url.c, init.c, res.c:
1211         Gettext-ize messages that were previously missed.
1212
1213 2005-06-15  Hrvoje Niksic  <hniksic@xemacs.org>
1214
1215         * host.h (ip_address): Remove the trailing comma from the type
1216         enum in the no-IPv6 case.
1217
1218         * main.c (struct cmdline_option): Remove the trailing comma from
1219         the enum.
1220
1221         Reported by Jens Schleusener.
1222
1223 2005-05-30  Hrvoje Niksic  <hniksic@xemacs.org>
1224
1225         * url.c (strpbrk_or_eos): Check for a recent GCC version before
1226         using the statement-as-expression extension.
1227
1228 2005-05-30  Hrvoje Niksic  <hniksic@xemacs.org>
1229
1230         * http.c (gethttp): Don't attempt to "skip short body" if we're
1231         issuing a HEAD request (in which case the response head is not
1232         followed by a body).
1233
1234 2005-05-30  Hrvoje Niksic  <hniksic@xemacs.org>
1235
1236         * init.c (cmd_spec_header): Don't split the string along the
1237         commas using cmd_vector; just append the new value using
1238         vec_append instead.
1239
1240         * utils.c (vec_append): New function.
1241
1242 2005-05-27  Andreas Beckmann  <debian@abeckmann.de>
1243
1244         * html-url.c (tag_handle_link): Mark the content from the <link
1245         src="..."> tag as expecting HTML.
1246
1247 2005-05-24  Hrvoje Niksic  <hniksic@xemacs.org>
1248
1249         * http.c (http_atotm): Document the origin of the "cookie date"
1250         format.
1251
1252 2005-05-21  Hrvoje Niksic  <hniksic@xemacs.org>
1253
1254         * init.c (setval_internal): Report exact command name alongside
1255         the "display name".
1256
1257 2005-05-18  Hrvoje Niksic  <hniksic@xemacs.org>
1258
1259         * cookies.c (update_cookie_field): Explicitly cast -1 to time_t to
1260         cope with systems where time_t is unsigned.
1261
1262         * cookies.c: Remove unnecessary casts to time_t from values
1263         already of that type.
1264
1265 2005-05-17  Hrvoje Niksic  <hniksic@xemacs.org>
1266
1267         * ftp.c (ftp_loop_internal): Same here.
1268
1269         * http.c (http_loop): Don't clobber the file when -c is specified
1270         and the first attempt to retrieve the file fails.
1271
1272 2005-05-16  Hrvoje Niksic  <hniksic@xemacs.org>
1273
1274         * openssl.c (ssl_check_certificate): Print all issues with a
1275         certificate.
1276
1277 2005-05-16  Hrvoje Niksic  <hniksic@xemacs.org>
1278
1279         * ftp-basic.c: Don't xfree() the line returned by ftp_response if
1280         the returned code is not FTPOK.
1281
1282 2005-05-16  Hrvoje Niksic  <hniksic@xemacs.org>
1283
1284         * init.c (cleanup): Don't free the non-existent opt.ftp_acc.  Free
1285         the SSL-related stuff.
1286
1287 2005-05-16  Hrvoje Niksic  <hniksic@xemacs.org>
1288
1289         * ftp.c (print_length): Consistently print \n at end of the
1290         "Length" line.
1291
1292 2005-05-14  Hrvoje Niksic  <hniksic@xemacs.org>
1293
1294         * openssl.c (ssl_connect): Announce the beginning and the end of
1295         the SSL handshake when in debug mode.
1296
1297         * wget.h (PTR_FORMAT): New macro for easier printing of pointer
1298         values.  Use %0*lx along with PTR_FORMAT instead of %p.
1299
1300 2005-05-14  Hrvoje Niksic  <hniksic@xemacs.org>
1301
1302         * http.c (gethttp): Would forget to close the connection when
1303         keep_alive was not used.
1304
1305 2005-05-13  Hrvoje Niksic  <hniksic@xemacs.org>
1306
1307         * openssl.c (pattern_match): Document the code that decides
1308         whether "*" matches ".".
1309
1310 2005-05-12  Hrvoje Niksic  <hniksic@xemacs.org>
1311
1312         * ftp-ls.c (ftp_index): Use %d to print the port number, which is
1313         now int.
1314         From Steven M. Schweda's VMS patches.
1315
1316 2005-05-12  Hrvoje Niksic  <hniksic@xemacs.org>
1317
1318         * url.c (rewrite_shorthand_url): Don't rewrite "https://host" to
1319         "ftp://https//host" when SSL is not used.
1320
1321 2005-05-11  Hrvoje Niksic  <hniksic@xemacs.org>
1322
1323         * openssl.c (ssl_check_server_identity): Renamed to
1324         ssl_check_certificate because it does more than just checking the
1325         server's identity.
1326         (ssl_check_certificate): Tell the user about
1327         --no-check-certificate.
1328
1329 2005-05-11  Hrvoje Niksic  <hniksic@xemacs.org>
1330
1331         * openssl.c (ssl_init): Always use SSL_VERIFY_NONE, so that the
1332         handshake finishes even if the certificate is invalid.  That way
1333         ssl_check_server_identity can provide better diagnostics on why
1334         the verification failed.
1335
1336 2005-05-11  Hrvoje Niksic  <hniksic@xemacs.org>
1337
1338         * openssl.c (pattern_match): New function.
1339         (ssl_check_server_identity): Treat peer certificate common name as
1340         wildcard.
1341
1342 2005-05-10  Hrvoje Niksic  <hniksic@xemacs.org>
1343
1344         * openssl.c (ssl_check_server_identity): Print certificate subject
1345         and issuer.
1346
1347 2005-05-10  Hrvoje Niksic  <hniksic@xemacs.org>
1348
1349         * res.c (res_register_specs): Correctly pass pointers to
1350         hash_table_get_pair.
1351
1352 2005-05-10  Hrvoje Niksic  <hniksic@xemacs.org>
1353
1354         * http.c (gethttp): Call ssl_check_server_identity.
1355
1356         * openssl.c (ssl_check_server_identity): New function, verifies
1357         that the host name in the certificate matches the actual host
1358         name.
1359         (verify_cert_callback): Removed, since it didn't do anything
1360         except returning the preverify_ok argument.
1361
1362         * connect.c (fd_transport_context): Allow retrieval of the context
1363         pointer registered with fd_register_transport.
1364
1365 2005-05-09  Hrvoje Niksic  <hniksic@xemacs.org>
1366
1367         * openssl.c (verify_cert_callback): Renamed from verify_callback.
1368         Always return the received "ok" value.  Print the X509 name in
1369         debug mode.
1370         (ssl_init): Enable partial writes in SSL context.
1371
1372 2005-05-08  Hrvoje Niksic  <hniksic@xemacs.org>
1373
1374         * http.c (http_loop): Check for wildcards in the URL path
1375         component, not in the whole URL.
1376
1377         * ftp.c (ftp_loop): Check for wildcards in URL path before
1378         unescaping, so the users can escape globbing metacharacters with %
1379         escapes.
1380
1381 2005-05-08  Hrvoje Niksic  <hniksic@xemacs.org>
1382
1383         * init.c (run_command): Correctly interpret the return value of
1384         parse_line.
1385         (commands): Re-alphabetize.
1386
1387 2005-05-08  Hrvoje Niksic  <hniksic@xemacs.org>
1388
1389         * netrc.c (parse_netrc): Explicitly check for assignment != NULL
1390         to silence warning from Borland C.
1391
1392         * url.c (sync_path): Don't unnecessarily increment p.
1393         (url_parse): Don't unnecessarily set url_encode to NULL just
1394         prior to return from the function.
1395
1396 2005-05-08  Hrvoje Niksic  <hniksic@xemacs.org>
1397
1398         * log.c (escnonprint_internal): Place variable declarations
1399         before other statements.
1400
1401 2005-05-08  Hrvoje Niksic  <hniksic@xemacs.org>
1402
1403         * html-url.c: Include recur.h.
1404
1405         * http.c (request_new): Define as accepting no args.
1406
1407 2005-05-07  Hrvoje Niksic  <hniksic@xemacs.org>
1408
1409         * url.c (strpbrk_or_eos): Made inline.  Use strchr(s, '\0') for
1410         finding the NUL char position.
1411
1412 2005-05-07  Hrvoje Niksic  <hniksic@xemacs.org>
1413
1414         * url.c (decide_copy_method): Renamed to char_needs_escaping.
1415         Since it now returns only two possible values, change it to return
1416         boolean (int).
1417
1418 2005-05-07  Hrvoje Niksic  <hniksic@xemacs.org>
1419
1420         * ftp-basic.c (ftp_request): Prevent newlines in VALUE causing
1421         inadvertent sending of multiple FTP commands.
1422
1423 2005-05-07  Hrvoje Niksic  <hniksic@xemacs.org>
1424
1425         * url.c (decide_copy_method): Never cause reencode_escapes to
1426         decode % escapes; it is too intrusive and breaks some servers.
1427
1428 2005-05-07  Hrvoje Niksic  <hniksic@xemacs.org>
1429
1430         * http.c (gethttp): When tunnelling SSL traffic over proxy with
1431         CONNECT, we're really talking to the remote server directly.
1432         Because of this, the request-line argument must be the URL path
1433         rather than the whole URL, as it would be when using regular
1434         proxies.
1435         Reported by Charles Lane.
1436
1437 2005-05-06  Hrvoje Niksic  <hniksic@xemacs.org>
1438
1439         * init.c (cmd_spec_useragent): Allow empty User-Agent.
1440
1441         * http.c (gethttp): Don't print "unknown authentication scheme"
1442         for failed Basic authentication.
1443         (SET_USER_AGENT): Don't set user-agent if opt.useragent is empty.
1444         (gethttp): Use alloca for allocation of www_authenticate.
1445
1446 2005-05-06  Hrvoje Niksic  <hniksic@xemacs.org>
1447
1448         * main.c (print_help): Fix wording of --secure-protocol help text.
1449
1450 2005-05-06  Hrvoje Niksic  <hniksic@xemacs.org>
1451
1452         * cmpt.c (strstr): Updated from glibc 2.3.5.
1453
1454 2005-05-05  Hrvoje Niksic  <hniksic@xemacs.org>
1455
1456         * http.c (http_atotm): Zero out the whole struct tm being passed
1457         to strptime.
1458
1459 2005-05-05  Hrvoje Niksic  <hniksic@xemacs.org>
1460
1461         * main.c (main): Propagate option name to setoptval.
1462
1463         * init.c (setoptval): Accept another argument, OPTNAME.  Propagate
1464         that argument as the option name independently of the actual
1465         command, determined by command_by_name(com).
1466
1467 2005-05-05  Hrvoje Niksic  <hniksic@xemacs.org>
1468
1469         * init.c (parse_line): Make the return value indicate whether
1470         there was a syntax error or a setter failed.
1471         (run_wgetrc): Return an indication on whether an error has been
1472         encountered.
1473         (initialize): Abort if there have been errors running either
1474         .wgetrc file.
1475
1476 2005-05-05  Hrvoje Niksic  <hniksic@xemacs.org>
1477
1478         * log.c (copy_and_escape): Slightly reduce code repetition between
1479         the two loops.
1480
1481 2005-05-05  Charles C.Fu  <ccwf@bacchus.com>
1482
1483         * utils.c (proclist): Strip leading slash when calling fnmatch
1484         too, otherwise wildcard comparisons always fail.
1485
1486 2005-05-05  Hrvoje Niksic  <hniksic@xemacs.org>
1487
1488         * utils.c (touch): Set access time to current time.
1489
1490 2005-05-05  Hrvoje Niksic  <hniksic@xemacs.org>
1491
1492         * url.c (url_unescape): Don't unescape %00, it effectively
1493         truncates the string.
1494
1495 2005-05-05  Hrvoje Niksic  <hniksic@xemacs.org>
1496
1497         * log.c (copy_and_escape): Replace the FOR_URI argument with a
1498         slightly more general mechanism for specifying different kinds of
1499         escape.
1500
1501 2005-05-05  Hrvoje Niksic  <hniksic@xemacs.org>
1502
1503         * ftp-basic.c (ftp_response): Fix printing FTP server response.
1504
1505 2005-05-05  Hrvoje Niksic  <hniksic@xemacs.org>
1506
1507         * retr.c (limit_bandwidth_reset): Reset sleep_adjust.
1508         (limit_bandwidth): Don't allow huge "adjustment" values that
1509         result from being suspended for a while.
1510
1511 2005-05-04  Hrvoje Niksic  <hniksic@xemacs.org>
1512
1513         * wget.h: If gettext was found but libtintl.h wasn't, declare
1514         gettext's return type to avoid type mismatches.
1515
1516 2005-05-03  Hrvoje Niksic  <hniksic@xemacs.org>
1517
1518         * url.c (url_parse): Rename label `error' to avoid conflict with
1519         identifier.
1520
1521         * retr.c (fd_read_body): Rename label `out' to avoid conflict with
1522         identifier.
1523         (fd_read_hunk): Use explicit double constant.
1524         (retrieve_from_file): Don't use string concatenation.
1525         (sleep_between_retrievals): Make sure xsleep is called with a
1526         `double' argument.
1527         (no_proxy_match): Define as static, like it is declared.
1528
1529         * progress.c (bar_create): Use 0.0 instead of 0 because K&R
1530         compilers can't automatically promote it.
1531
1532         * http-ntlm.c (ntlm_output): Replace \xHH sequences with \OOO for
1533         the sake of old compilers.
1534
1535         * ftp.c (ftp_loop_internal): Don't use string concatenation.
1536
1537         * http.c (request_send): Use explicit double constants when
1538         calling fd_read and fd_write.
1539         (post_file): Ditto.
1540         (gethttp): Ditto.
1541         (skip_short_body): Ditto.
1542
1543         * ftp-basic.c: When calling fd_write, specify the last argument as
1544         a `double' constant for the sake of K&R compilers which don't see
1545         the prototype and therefore can't promote it to double
1546         automatically.
1547
1548         * cookies.c (cookie_jar_load): Rename abort label to abort_cookie
1549         to avoid name conflict in K&R compilers.
1550
1551 2005-04-29  Hrvoje Niksic  <hniksic@xemacs.org>
1552
1553         * ptimer.c (posix_init): Since we allow _POSIX_MONOTONIC_CLOCK==0,
1554         it is not enough to check for _POSIX_MONOTONIC_CLOCK-0, we must
1555         also check for defined(_POSIX_MONOTONIC_CLOCK).
1556
1557 2005-04-28  Hrvoje Niksic  <hniksic@xemacs.org>
1558
1559         * ftp.c, hash.c, connect.c, host.c, http.c: Remove unreached code,
1560         such as "break" following return or abort.
1561
1562 2005-04-28  Hrvoje Niksic  <hniksic@xemacs.org>
1563
1564         * init.c (commands): Wrap the use of opt.random_file in #ifdef
1565         HAVE_SSL.
1566
1567 2005-04-28  Hrvoje Niksic  <hniksic@xemacs.org>
1568
1569         * http.c (gethttp): Correctly set the user agent.
1570
1571 2005-04-27  Hrvoje Niksic  <hniksic@xemacs.org>
1572
1573         * init.c (cmd_spec_useragent): Free the old value of
1574         opt.useragent before setting the new one.
1575
1576 2005-04-27  Mauro Tortonesi  <mauro@ferrara.linux.it>
1577
1578         * main.c: Map --ftp-password, --http-password and --proxy-password to
1579         the new ftppassword, httppassword and proxypassword commands
1580         respectively.  Document the --user and --password options in the help
1581         string.
1582
1583 2005-04-27  Mauro Tortonesi  <mauro@ferrara.linux.it>
1584
1585         * ftp.c: Add support for --user and --password.
1586
1587         * http.c: Add support for --user and --password.
1588
1589         * init.c: Deprecated ftppasswd, httppasswd, login, passwd and
1590         proxypasswd commands.  Added ftppassword, ftpuser, httppassword,
1591         password, proxypassword and user commands.
1592
1593         * main.c: Renamed --ftp-passwd to --ftp-password.  Added --ftp-user,
1594         --http-password, --password, --proxy-password and --user.  Deprecated
1595         --http-passwd and --proxy-passwd.  Added documentation for new options
1596         and removed documentation for deprecated options in the help string.
1597
1598         * options.h (struct options): Added user and passwd members to handle
1599         --user and --password respectively.  Renamed ftp_acc and ftp_pass
1600         members to ftp_user and ftp_passwd for consistency.
1601
1602 2005-04-27  Hrvoje Niksic  <hniksic@xemacs.org>
1603
1604         * main.c (print_help): Advertise "DER", not "ASN1".
1605
1606 2005-04-27  Hrvoje Niksic  <hniksic@xemacs.org>
1607
1608         * openssl.c (init_prng): Disable the weak random seed by default.
1609
1610         * http.c (gethttp): Simplify SSL initialization; disable SSL when
1611         anything goes wrong with the initialization.
1612
1613         * options.h (struct options): New option opt.random_file.
1614
1615 2005-04-27  Hrvoje Niksic  <hniksic@xemacs.org>
1616
1617         * init.c: Wrap private key commands in IF_SSL.
1618
1619 2005-04-27  Hrvoje Niksic  <hniksic@xemacs.org>
1620
1621         * openssl.c (ssl_init): Ditto.
1622
1623         * options.h (struct options): Allow separate specification of key
1624         type and certificate type.
1625
1626         * init.c (cmd_spec_cert_type): Provide a "der" synonym for "asn1"
1627         certificate encoding.
1628
1629 2005-04-26  Hrvoje Niksic  <hniksic@xemacs.org>
1630
1631         * openssl.c: Renamed "gen_sslfunc.c" to "openssl.c" and
1632         "gen_sslfunc.h" to "openssl.h".  This reflects the intent of
1633         openssl.c encapsulating the OpenSSL-specific code.
1634
1635 2005-04-26  Hrvoje Niksic  <hniksic@xemacs.org>
1636
1637         * init.c: Renamed "closure" (a synonym for context in some
1638         cultures) to "place", which more accurately reflects the usage.
1639
1640 2005-04-26  Hrvoje Niksic  <hniksic@xemacs.org>
1641
1642         * gen_sslfunc.c (ssl_init): Use default locations for loading the
1643         certificate bundles.
1644         (ssl_init_prng): Disable the cryptographically weak PRNG
1645         initialization fallback.
1646
1647         * init.c: Renamed SSL command-line arguments and wgetrc commands.
1648         (defaults): Check the server certificate by default.
1649
1650 2005-04-26  Hrvoje Niksic  <hniksic@xemacs.org>
1651
1652         * cookies.c (cookie_handle_set_cookie): Delete the part of the
1653         path after the trailing slash.
1654
1655         * http.c (gethttp): Call cookie_handle_set_cookie with path that
1656         begins with '/'.
1657
1658 2005-04-26  Hrvoje Niksic  <hniksic@xemacs.org>
1659
1660         * http.c (gethttp): Call skip_short_body only if keep_alive is in
1661         use.
1662         (gethttp): Send the User-Agent header with the CONNECT request as
1663         well.
1664
1665 2005-04-25  Hrvoje Niksic  <hniksic@xemacs.org>
1666
1667         * main.c (option_data): Removed support for the undocumented flag
1668         --use-proxy.
1669
1670 2005-04-25  Hrvoje Niksic  <hniksic@xemacs.org>
1671
1672         * main.c (option_data): Don't treat -Y as a boolean switch; treat
1673         it as a value switch instead, so "-Y off" continues to work.
1674
1675 2005-04-24  Hrvoje Niksic  <hniksic@xemacs.org>
1676
1677         * utils.c (aprintf): Delete unreachable statement.
1678
1679 2005-04-24  Hrvoje Niksic  <hniksic@xemacs.org>
1680
1681         * host.c (cmp_prefer_ipv4): New function.
1682         (cmp_prefer_ipv6): New function.
1683         (lookup_host): Use the appropriate comparator according to
1684         opt.prefer_family.
1685
1686         * init.c: New option prefer_family.
1687
1688         * host.c (is_valid_ipv6_address): Spell NS_* constants in lower
1689         case to avoid clash with system headers.
1690         (lookup_host): Reorder the addresses so that IPv4 ones come first.
1691
1692         * utils.c (stable_sort): New function.
1693
1694 2005-04-24  Hrvoje Niksic  <hniksic@xemacs.org>
1695
1696         * connect.c (retryable_socket_connect_error): Return 0 for
1697         ENETUNREACH and EHOSTUNREACH.
1698
1699 2005-04-23  Hrvoje Niksic  <hniksic@xemacs.org>
1700
1701         * cmpt.c: Reenable the memmove implementation for systems that
1702         lack it.
1703
1704         * http.c (gethttp): Store the "authorized" state of the persistent
1705         connection.
1706         (request_remove_header): New function.
1707         (gethttp): Don't send the "Basic" authentication if the connection
1708         is already authorized.
1709
1710 2005-04-23  Hrvoje Niksic  <hniksic@xemacs.org>
1711
1712         * utils.c (base64_encode): Treat input as unsigned chars.
1713         Required for correct encoding of binary stuff.
1714
1715 2005-04-23  Hrvoje Niksic  <hniksic@xemacs.org>
1716
1717         * http-ntlm.c: Format the function definitions in an
1718         ansi2knr-friendly fashion.
1719
1720 2005-04-22  Hrvoje Niksic  <hniksic@xemacs.org>
1721
1722         * http.c (gethttp): Handle multiple WWW-Authentication headers,
1723         only one of which is recognized.  Those are sent by IIS with NTLM
1724         authorization.
1725         (create_authorization_line): Propagate information whether
1726         authorization is finished.
1727         (gethttp): Only stop authorization when it's really finished, not
1728         after fixed two steps.
1729
1730 2005-04-21  Hrvoje Niksic  <hniksic@xemacs.org>
1731
1732         * gen_sslfunc.c (ssl_init): Fix warning message text; mark the
1733         message as translatable.
1734
1735 2005-04-21  Hrvoje Niksic  <hniksic@xemacs.org>
1736
1737         * main.c (print_help): Print the EGD option outside the cluster of
1738         SSL options.
1739
1740 2005-04-21  Hrvoje Niksic  <hniksic@xemacs.org>
1741
1742         * http-ntlm.c (ntlm_output): Fix setting the domain.
1743         Suggested by Sami Krank.
1744
1745 2005-04-20  Mauro Tortonesi  <mauro@ferrara.linux.it>
1746
1747         * connect.c: Set IPV6_V6ONLY socket option when -6 switch is used.
1748
1749 2005-04-20  FUJISHIMA Satsuki  <sf@FreeBSD.org>
1750
1751         * http.c (request_set_header): Fix the check whether a new header
1752         needs to be allocated.
1753
1754 2005-04-18  Hrvoje Niksic  <hniksic@xemacs.org>
1755
1756         * utils.c (base64_encode): Use the parameter order that makes more
1757         sense.  Return the length of the base64 written.  Updated all
1758         callers.
1759
1760 2005-04-17  Hrvoje Niksic  <hniksic@xemacs.org>
1761
1762         * http.c (request_set_header): Free NAME when VALUE is NULL and
1763         freeing the header name is requested.
1764
1765 2005-04-17  Hrvoje Niksic  <hniksic@xemacs.org>
1766
1767         * snprintf.c (fmtstr): Declare VALUE as const char *.
1768         Based on patch by Russ Allbery.
1769
1770 2005-04-17  Hrvoje Niksic  <hniksic@xemacs.org>
1771
1772         * snprintf.c (fmtfp): More correct handling of significant digit
1773         count with %g -- 0.002 has one significant digit, not three.
1774
1775 2005-04-16  Hrvoje Niksic  <hniksic@xemacs.org>
1776
1777         * retr.c (fd_read_body): Respect read timeout with non-interactive
1778         or no progress gauge -- treat ETIMEDOUT specially only when
1779         progress_interactive.
1780         Reported by FUJISHIMA Satsuki.
1781
1782 2005-04-16  FUJISHIMA Satsuki  <sf@FreeBSD.org>
1783
1784         * http.c (gethttp): Don't use HTTP/1.0 persistent connections over
1785         proxy.
1786
1787 2005-04-16  Hrvoje Niksic  <hniksic@xemacs.org>
1788
1789         * snprintf.c: Use the PARAMS macro to handle prototypes.  Write
1790         function definitions in the ansi2knr-friendly way.
1791         (fmtstr): If string precision is specified, don't read VALUE past
1792         it.
1793         (dopr): Actually print %g and %e formats.
1794         (fmtfp): Fix a bug that caused 0.01 to be printed as 0.1.
1795         (fmtfp): Use LLONG in floating point conversions to be able to
1796         convert more digits.
1797         (fmtfp): Interpret precision as number of significant digits with
1798         %g.
1799         (fmtfp): Omit trailing decimal zeros with %g.
1800
1801         * snprintf.c: Don't include <ctype.h> because none of it is used.
1802         Include strings.h/string.h, as per Autoconf.
1803
1804 2005-04-15  Hrvoje Niksic  <hniksic@xemacs.org>
1805
1806         * ptimer.c: Use _POSIX_TIMERS - 0 > 0, which handles the case when
1807         _POSIX_TIMERS is defined but empty, as well as the case when it is
1808         undefined.  Do the same with the check for _POSIX_MONOTONIC_CLOCK.
1809         Suggested by Larry Jones.
1810
1811 2005-04-15  Hrvoje Niksic  <hniksic@xemacs.org>
1812
1813         * ptimer.c: Check that _POSIX_TIMERS is defined as well as > 0.
1814         Problem reported by Steven M. Schweda.
1815
1816 2005-04-14  Hrvoje Niksic  <hniksic@xemacs.org>
1817
1818         * http.c (skip_short_body): Print the skipped body data in debug
1819         mode.
1820         (skip_short_body): Don't skip more than 4k of body data.
1821         (skip_short_body): Return whether the skipping was successful.
1822         (gethttp): If skip_short_body failed, invalidate the connection.
1823
1824 2005-04-12  Gisle Vanem  <giva@bgnett.no>
1825
1826         * ftp.c (getftp): Ditto.
1827
1828         * http.c (gethttp): Open the output file in binary mode.
1829
1830 2005-04-11  Hrvoje Niksic  <hniksic@xemacs.org>
1831
1832         * hash.c: Conditionalize including config.h on HAVE_CONFIG_H
1833         instead of on STANDALONE.
1834
1835 2005-04-11  Hrvoje Niksic  <hniksic@xemacs.org>
1836
1837         * gen_sslfunc.c (ssl_print_errors): Made static.
1838         (ssl_print_errors): Eliminate potentially dangerous fixed-size
1839         error buffer.  Passing NULL to ERR_error_string causes it to use
1840         its own static buffer, which is fine for our purposes.
1841
1842         * gen_sslfunc.c: Include gen_sslfunc.h.  Make the declarations of
1843         ssl_init and ssl_conect match the actual definitions.
1844         (ssl_connect): Simply return a boolean, the SSL context is no
1845         longer useful as a return value.
1846
1847         * retr.c: Don't include SSL headers; we don't need them.
1848
1849 2005-04-11  Hrvoje Niksic  <hniksic@xemacs.org>
1850
1851         * config-post.h: Don't define _VA_LIST under Solaris; it breaks
1852         compilation with GCC 3.4 under Solaris 10.  (It was defined to
1853         avoid a warning with previous versions of GCC.)
1854
1855 2005-04-11  Hrvoje Niksic  <hniksic@xemacs.org>
1856
1857         * xmalloc.c (register_ptr): Warn the user to increase SZ prior to
1858         aborting.
1859
1860 2005-04-11  Hrvoje Niksic  <hniksic@xemacs.org>
1861
1862         * convert.c (convert_cleanup): Free converted_files.
1863
1864 2005-04-10  Hrvoje Niksic  <hniksic@xemacs.org>
1865
1866         * wget.h (DEBUGP): Use __builtin_expect to give a hint to GCC that
1867         opt.debug is false in the vast majority of cases.
1868
1869 2005-04-10  Hrvoje Niksic  <hniksic@xemacs.org>
1870
1871         * config-post.h: Declare alloca as void *, not char *.
1872
1873 2005-04-09  Hrvoje Niksic  <hniksic@xemacs.org>
1874
1875         * recur.c (download_child_p): When -p is used, (temporarily)
1876         ignore accept/reject rules for HTMLs, even when they are at the
1877         maximum recursion depth.  That is because with -p we are, if
1878         necessary, overstepping the max. depth to get the requisites.
1879
1880 2004-06-12  Larry Jones <lawrence.jones@ugsplm.com>
1881
1882         * recur.c (download_child_p): Correct the logic in check number 6:
1883         test opt.reclevel (not DEPTH) against INFINITE_RECURSION.
1884
1885 2005-04-09  Hrvoje Niksic  <hniksic@xemacs.org>
1886
1887         * url.c: Use "static const" in preference to "const static".
1888         Sun's cc warns that "storage class after type is obsolescent".
1889
1890         * url.c (urlchr_table): Don't mark ~ as unsafe, too many broken
1891         web sites are confused when ~ is changed to %7E.  Their servers
1892         redirect /%7Efoo/ to /~foo/, which Wget again accesses using %7E,
1893         causing further redirections, therefore looping infinitely.  See
1894         Debian bug #301624 for an example.
1895
1896 2005-04-09  Hrvoje Niksic  <hniksic@xemacs.org>
1897
1898         * alloca.c: Include wget.h to be able to use xmalloc.  In addition
1899         to defining malloc to xmalloc, also define free to xfree.
1900
1901 2005-04-09  Hrvoje Niksic  <hniksic@xemacs.org>
1902
1903         * http-ntlm.c (ntlm_output): Use "char", not "unsigned char" for
1904         ntlmbuf.  Our base64 functions accept char anyway.
1905         (ntlm_output): Join up the format string, since we nominally
1906         support K&R compilers.
1907         (ntlm_output): Ditto.
1908
1909 2005-04-08  Hrvoje Niksic  <hniksic@xemacs.org>
1910
1911         * ptimer.c: Use Windows timers under Cygwin, whose POSIX timer
1912         implementation is incomplete.
1913
1914 2005-04-08  Hrvoje Niksic  <hniksic@xemacs.org>
1915
1916         * ptimer.c (struct ptimer): Remove the unused initialized field.
1917
1918         * ptimer.c: Renamed function parameters from WT (which used to
1919         stand for wget_timer or wtimer) to PT.
1920
1921 2005-04-08  Hrvoje Niksic  <hniksic@xemacs.org>
1922
1923         * ptimer.c (posix_init): Be smarter about choosing clocks.  In
1924         decreasing order of preference, use CLOCK_MONOTONIC,
1925         CLOCK_HIGHRES, and CLOCK_REALTIME.
1926         (ptimer_allocate): Removed.
1927
1928         * ptimer.c: Refactor the code by cleanly separating the
1929         architecture-dependent code from the architecture-independent
1930         code.
1931
1932 2005-04-08  Hrvoje Niksic  <hniksic@xemacs.org>
1933
1934         * ptimer.c (ptimer_init): Explicitly check that
1935         _POSIX_MONOTONIC_CLOCK is *both* defined and >=0.  (Undefined
1936         symbols are >=0.)
1937
1938 2005-04-08  Hrvoje Niksic  <hniksic@xemacs.org>
1939
1940         * ptimer.c (ptimer_diff): Fix typo affecting Windows build.
1941
1942 2005-04-08  Hrvoje Niksic  <hniksic@xemacs.org>
1943
1944         * ptimer.c (ptimer_init): In fact, _POSIX_MONOTONIC_CLOCK needs to
1945         be >= 0.
1946
1947         * ptimer.c (ptimer_init): Check whether _POSIX_MONOTONIC_CLOCK is
1948         defined instead of whether it's greater than 0.  glibc defines it
1949         to 0, but still makes it available via sysconf.
1950
1951 2005-04-08  Hrvoje Niksic  <hniksic@xemacs.org>
1952
1953         * mswindows.c (str_to_int64): Rename OVERFLOW and UNDERFLOW to
1954         INT64_OVERFLOW and INT64_UNDERFLOW, since those names are used.
1955
1956 2005-04-07  Hrvoje Niksic  <hniksic@xemacs.org>
1957
1958         * ptimer.c: New file.  Move the "wtimer" functions from utils.c to
1959         this file and rename them to ptimer_.
1960
1961 2005-04-07  Hrvoje Niksic  <hniksic@xemacs.org>
1962
1963         * host.c (NO_ADDRESS): Define NO_ADDRESS only after the system
1964         headers have been included.
1965
1966 2005-04-06  Hrvoje Niksic  <hniksic@xemacs.org>
1967
1968         * http.c (pconn): Include NTLM data, which is per-connection.
1969         (known_authentication_scheme_p): Recognize NTLM authorization.
1970         (create_authorization_line): Call ntlm_input and ntlm_output.
1971
1972         * http-ntlm.c: New file, donated by Daniel Stenberg and originally
1973         written for curl, heavily modified for Wget.
1974
1975         * utils.c (base64_encode): Relocated from http.c, since it is now
1976         used by http-ntlm.c, and will possibly be used elsewhere.
1977         (base64_decode): New function, originally based on code from GNU
1978         recode.
1979
1980 2005-04-02  Hrvoje Niksic  <hniksic@xemacs.org>
1981
1982         * ftp.c (ftp_loop): Ditto.
1983
1984         * ftp-basic.c (ftp_pasv): Use the xzero shorthand for memset(0).
1985         (ftp_lpsv): Ditto.
1986
1987 2005-04-05  Mauro Tortonesi  <mauro@ferrara.linux.it>
1988
1989         * Makefile.in: removed string_t.c from list of source files.
1990
1991 2005-04-04  Mauro Tortonesi  <mauro@ferrara.linux.it>
1992
1993         * string_t.c: Removed.
1994
1995         * string_t.h: Removed.
1996
1997 2005-04-02  Hrvoje Niksic  <hniksic@xemacs.org>
1998
1999         * url.c (rewrite_shorthand_url): Only accept recognized schemes.
2000         That way "foo:80" will correctly be rewritten to "http://foo:80"
2001         instead of left unchanged and ultimately rejected because of
2002         "unsupported scheme foo".
2003
2004 2005-03-31  Hrvoje Niksic  <hniksic@xemacs.org>
2005
2006         * utils.c (number_to_string): Avoid explicit 64-bit constants;
2007         construct them by multiplication at compile-time.
2008
2009         * utils.c, elsewhere: Don't append "L" to 32-bit integer
2010         constants; we aren't really compilable on 16-bit systems anyway.
2011
2012         * hash.c (prime_size): Remove primes larger than 2^31, but include
2013         2^31-1, which is prime.
2014
2015 2005-03-30  Hrvoje Niksic  <hniksic@xemacs.org>
2016
2017         * utils.c (string_set_to_array): New function.
2018
2019         * convert.c: Replace the use of "slists" with sets/hash-tables,
2020         which in fact suit the intended purpose much better.
2021         downloaded_html_list is removed altogether.
2022
2023 2005-03-29  Hrvoje Niksic  <hniksic@xemacs.org>
2024
2025         * ftp.h (enum): Rename GLOBALL, GETALL, and GETONE to
2026         GLOB_GLOBALL, GLOB_GETALL, and GLOB_GETONE to avoid conflict with
2027         Linux headers.
2028
2029 2005-03-29  Hrvoje Niksic  <hniksic@xemacs.org>
2030
2031         * utils.c (numdigit): More correct handling of negative numbers.
2032
2033 2005-03-21  Hrvoje Niksic  <hniksic@xemacs.org>
2034
2035         * http.c (gethttp): Print the human-readable size.
2036
2037         * ftp.c (getftp): Print the human-readable size of the file to be
2038         downloaded.
2039
2040         * utils.c (human_readable): New function.
2041
2042         * utils.c: Renamed "legible" to "with_thousand_seps",
2043         "legible_large_int" to "with_thousand_seps_large", and "legible_1"
2044         to "add_thousand_seps".
2045
2046 2005-03-21  Hrvoje Niksic  <hniksic@xemacs.org>
2047
2048         * http.c (gethttp): Inhibit persistent connections when talking to
2049         proxies, as mandated by RFC 2068.
2050
2051 2005-03-20  Hrvoje Niksic  <hniksic@xemacs.org>
2052
2053         * url.c (unescape_single_char): New function.
2054         (url_escape_dir): Use it to unescape slashes in directory
2055         components.
2056         (url_string): Escape unsafe chars in host name, except for the ':'
2057         charaters, which can appear in IPv6 addresses.
2058
2059         * main.c (main): Don't access the cookie jar directly.
2060
2061         * log.c (escnonprint_internal): Correctly calculate the needed
2062         string size.  Don't forget the buffer's new size after having
2063         reallocated it.
2064         (log_cleanup): New function.  Free the escnonprint ring data.
2065
2066         * init.c (cleanup): Don't free the cookie jar explicitly, it is
2067         now done by http_cleanup.
2068         (cleanup): opt.user_headers is now a vector, free it with
2069         free_vec.
2070
2071         * http.c (gethttp): Make sure to free the request data, the status
2072         message, and the response data before returning from the function.
2073         (save_cookies): New function.
2074         (http_cleanup): Free the cookie jar here.
2075
2076         * hash.c: Renamed string_hash to hash_string and ptrhash to
2077         hash_pointer.  Exported hash_pointer.
2078
2079         * xmalloc.c: Organized malloc_table (previously malloc_debug) as a
2080         simple EQ hash table.  register_ptr and unregister_ptr are now of
2081         O(1) complexity.
2082
2083         * xmalloc.c: Renamed "*_debug" to debugging_* and "*_real" to
2084         checking_*.
2085
2086 2005-03-12  Hrvoje Niksic  <hniksic@xemacs.org>
2087
2088         * utils.c (debug_test_md5): Moved to gen-md5.c.
2089
2090         * mswindows.h: Don't declare inet_ntop, since we don't use it.
2091
2092         * mswindows.h: For consistency, also wrap closesocket, it being
2093         a Winsock call.
2094
2095         * mswindows.h: Don't declare sleep and usleep; we're defining
2096         xsleep now.
2097
2098         * mswindows.h (mkdir): Don't special-case Borland C, _mkdir
2099         works there as well.
2100
2101         * host.c: Don't include winsock header files; the correct ones
2102         are already included by mswindows.h.
2103
2104         * mswindows.c (xsleep): Round toward the nearest millisecond
2105         in an attempt to avoid average short sleeps.
2106
2107         * utils.c (wtimer_granularity): Report correct values for
2108         Windows timers and for high-resolution timers.
2109
2110         * utils.c (wtimer_initialize_once): New function, called to
2111         initialize the timer frequency.
2112
2113         * utils.c: Replace the use of GetSystemTime with high-resolution
2114         counters under Windows.  When high-resolution counters are
2115         unavailable, use GetTickCount().
2116
2117 2005-03-15  Hrvoje Niksic  <hniksic@xemacs.org>
2118
2119         * retr.c (fd_read_body): Undo the 2004-11-18 change.  Instead,
2120         always be "exact".
2121
2122 2005-03-17  Hrvoje Niksic  <hniksic@xemacs.org>
2123
2124         * ftp-basic.c (ftp_login): Don't free the string if ftp_response
2125         returned an error status because the line didn't get allocated in
2126         the first place.
2127
2128 2005-03-15  Hrvoje Niksic  <hniksic@xemacs.org>
2129
2130         * http.c (read_http_response_head): Limit the response size to 64k
2131         bytes.
2132
2133         * retr.c (fd_read_hunk): Accept a MAXSIZE argument that limits the
2134         number of bytes the function is allowed to allocate.
2135         (fd_read_line): Limit the line to 4096 bytes.
2136
2137 2005-03-12  Hrvoje Niksic  <hniksic@xemacs.org>
2138
2139         * wget.h: Include options.h after wgint has been defined.
2140
2141         * options.h (struct options): Declare options processed with
2142         cmd_bytes as wgint, not long.
2143
2144 2005-03-18  Hrvoje Niksic  <hniksic@xemacs.org>
2145
2146         * init.c (cmd_file): Use concat_strings.
2147
2148         * http.c (basic_authentication_encode): Use concat_strings.
2149
2150         * ftp-ls.c (ftp_index): Use concat_strings.
2151
2152         * ftp-basic.c (ftp_request): Use concat_strings.
2153
2154         * utils.c (concat_strings): New function.
2155
2156 2005-03-12  Hrvoje Niksic  <hniksic@xemacs.org>
2157
2158         * init.c (simple_atof): Handle negative numbers; skip whitespace
2159         before the number.
2160         (simple_atoi): Ditto.  Also, check for overflow and underflow.
2161         (cmd_number): Bail out on negative numbers.
2162         (parse_bytes_helper): Ditto.
2163
2164 2005-03-06  Hrvoje Niksic  <hniksic@xemacs.org>
2165
2166         * http.c (gethttp): Handle multiple Set-Cookie headers sent by
2167         remote server.
2168
2169 2005-03-06  Hrvoje Niksic  <hniksic@xemacs.org>
2170
2171         * init.c (defaults): Use passive FTP by default.
2172
2173 2005-03-06  Hrvoje Niksic  <hniksic@xemacs.org>
2174
2175         * mswindows.c: Provide wrappers to Winsock functions that set
2176         errno to WSAGetLastError() in case of failure.  Also provide a
2177         Windows-specific version of strerror.
2178
2179         * mswindows.h: Wrap calls to socket, bind, connect, recv, send,
2180         select, getsockname, getpeername, and setsockopt.
2181
2182 2005-03-06  Hrvoje Niksic  <hniksic@xemacs.org>
2183
2184         * url.c (url_parse): Reject port numbers larger than 65535.  We
2185         also check for overflow while parsing port numbers.
2186
2187 2005-03-06  Hrvoje Niksic  <hniksic@xemacs.org>
2188
2189         * utils.c (read_file): Don't use wgint for file size; LFS won't
2190         work since the file is mmap'ed as a whole.
2191
2192         * options.h: Don't include stdio.h.
2193
2194         * log.c: Ditto.
2195
2196         * init.c: Disambiguate assignment from non-zero test to avoid
2197         Borland C warning.
2198
2199         * http.c (response_new): Don't needlessly post-increment count.
2200
2201         * hash.c: Include stdio.h.
2202
2203         * gnu-md5.h: Don't include stdio.h.
2204
2205         * getopt.h (struct option): Always use const.
2206
2207         * ftp.c (getftp): Avoid unnecessary assignment to RES to avoid
2208         Borland C warning.
2209
2210         * ftp-ls.c: Disambiguate assignment from non-zero test to avoid
2211         Borland C warning.
2212
2213         * cmpt.c (strptime_internal): Don't initialize rp_backup when
2214         !_NL_CURRENT to avoid Borland C warning.
2215
2216 2005-03-06  Hrvoje Niksic  <hniksic@xemacs.org>
2217
2218         * utils.c (fopen_excl): Fix parse error when O_BINARY is
2219         available.
2220
2221 2005-03-05  Hrvoje Niksic  <hniksic@xemacs.org>
2222
2223         * url.c (url_file_name): Don't allow hosts named ".." to be
2224         appended as path elements.
2225
2226 2005-03-03  Hrvoje Niksic  <hniksic@xemacs.org>
2227
2228         * retr.c (retrieve_url): Escape location header.
2229
2230         * http.c (print_server_response_1): Escape server response when
2231         printing it.
2232         (gethttp): Escape host name, status message, location header, and
2233         content type.
2234         (http_loop): Escape error message from server.
2235
2236         * host.c (lookup_host): Escape host name when printing it.
2237
2238         * ftp.c (getftp): Escape user name when printing it.
2239         (getftp): Escape remote file and directory for printing.
2240         (getftp): Escape server listing when printing it.
2241         (ftp_retrieve_list): Escape link name and file name.
2242         (ftp_retrieve_glob): Escape file name.
2243
2244         * ftp-basic.c (ftp_response): Escape server response when printing
2245         it.
2246
2247         * cookies.c (parse_set_cookies): Escape the cookie field when
2248         printing it.
2249         (parse_set_cookies): Escape contents of remote header.
2250         (cookie_handle_set_cookie): Escape host name and cookie domain.
2251
2252         * connect.c (connect_to_ip): Escape the host name.
2253
2254         * log.c (escnonprint): New function, used for printing strings
2255         coming from the server that possibly contain non-ASCII characters.
2256         (escnonprint_uri): Ditto.
2257
2258 2005-02-24  Hrvoje Niksic  <hniksic@xemacs.org>
2259
2260         * ftp.c (getftp): Ditto.
2261
2262         * http.c (gethttp): When we're not supposed to overwrite files,
2263         use fopen_excl to open the file and recompute the file name.
2264
2265         * log.c (redirect_output): Use unique_create to avoid a race
2266         condition.
2267
2268         * mswindows.c (fake_fork_child): Use unique_create.
2269
2270         * utils.c (fopen_excl): New function that opens a stdio stream
2271         with the O_EXCL flag (where available).
2272         (unique_create): New function, like unique_name, but also creating
2273         the file and returning a file pointer.
2274         (fork_to_background): Use unique_create to create the file
2275         immediately to avoid race condition with multiple instances of
2276         wget -b.
2277
2278 2005-02-24  Hrvoje Niksic  <hniksic@xemacs.org>
2279
2280         * host.c (lookup_host): Test for AI_ADDRCONFIG directly, instead
2281         of checking for HAVE_GETADDRINFO_AI_ADDRCONFIG.
2282
2283 2005-02-23  Hrvoje Niksic  <hniksic@xemacs.org>
2284
2285         * host.c (is_valid_ipv6_address): Move here from url.c.
2286         (lookup_host): If the address is numeric, don't print the
2287         "resolving..." line, don't set up DNS timeouts, and set the
2288         AI_NUMERICHOST hint, where available.
2289
2290 2005-02-26  Gisle Vanem  <giva@bgnett.no>
2291
2292         * utils.c: Use the nnnLL syntax under GCC.  Define struct_stat to
2293         struct _stati64 under __MINGW32__ as well as under MS VC.
2294
2295 2005-02-26  Hrvoje Niksic  <hniksic@xemacs.org>
2296
2297         * utils.c: Use the nnnI64 syntax for __int64 constants under all
2298         Windows compilers.
2299         (SPRINTF_WGINT): Use "%I64" under all Windows compilers.
2300
2301         * mswindows.h (WGINT_MAX): Use the nnnI64 syntax for
2302         __int64 constants under all Windows compilers.
2303         (struct_stat): Use `struct stati64' under Borland C.
2304         (fstat): Don't redefine to _fstati64 under Borland.
2305
2306         * mswindows.c: Define str_to_int64 under Borland C as well as
2307         under (older) Visual C.
2308
2309 2005-02-25  Hrvoje Niksic  <hniksic@xemacs.org>
2310
2311         * ftp.c (getftp): Initialize err to suppress compiler warning.
2312
2313 2005-02-24  Hrvoje Niksic  <hniksic@xemacs.org>
2314
2315         * ftp.c (ftp_expected_bytes): Fix bug that caused infloop because
2316         of not correctly skipping the '(' character.
2317
2318 2005-02-24  Hrvoje Niksic  <hniksic@xemacs.org>
2319
2320         * mswindows.c (wget_ftello): Removed.
2321
2322         * mswindows.h: Remove bogus definition of stat.
2323         (wget_ftello): Remove the leftover ftello replacement.
2324
2325 2005-02-20  Hrvoje Niksic  <hniksic@xemacs.org>
2326
2327         * mswindows.c (wget_ftello): Wget's replacement for ftello.
2328
2329         * utils.c (file_size): Use ftello where available.
2330
2331         * ftp-ls.c (ftp_parse_unix_ls): Use str_to_wgint to parse the file
2332         size.
2333         (ftp_parse_winnt_ls): Ditto.
2334
2335         * ftp-basic.c (ftp_size): Use str_to_wgint to convert number to
2336         wgint; pass 10 instead of 0 as the BASE argument.
2337
2338         * ftp.c (ftp_expected_bytes): Use str_to_wgint to parse the file
2339         size.
2340
2341         * sysdep.h (LARGE_INT_FMT): Use __int64 as LARGE_INT on
2342         MSVC/Windows; print it with "%I64".
2343
2344         * wget.h: Define a `wgint' type, normally aliased to (the possibly
2345         64-bit variant of) off_t.
2346
2347         * all: Use `wgint' instead of `long' for numeric variables that
2348         can hold file sizes.
2349
2350         * utils.c (number_to_string): Support printing of `wgint'
2351         argument.
2352         (number_to_static_string): New function.
2353
2354         * all: Replace printf("%ld", long_value) with printf("%s",
2355         number_to_static_string(wgint_value)).
2356
2357 2005-02-18  Mauro Tortonesi <mauro@ferrara.linux.it>
2358
2359         * main.c: Added the --ftp-passwd command line option.
2360
2361         * init.c: Renamed command passwd to ftppasswd.
2362
2363 2005-02-11  Mauro Tortonesi <mauro@ferrara.linux.it>
2364
2365         * string_t.c: Fixed a bug in do_escape and triggered escape of
2366         backslashes in string_escape to avoid ambiguities in the result
2367         string.
2368
2369 2005-02-10  Mauro Tortonesi <mauro@ferrara.linux.it>
2370
2371         * string.h: Renamed to string_t.h to fix a compilation conflict
2372         with the string.h header in the standard C library.
2373
2374         * string.c: Renamed to string_t.c for consistency with string.h.
2375
2376         * string_t.c: Ditto.
2377
2378         * string_t.h: Ditto.
2379
2380 2004-12-31  Mauro Tortonesi <mauro@ferrara.linux.it>
2381
2382         * string.c: New file.
2383
2384         * string.h: New file.
2385
2386         * Makefile.in: Added string.c to the list of modules to compile.
2387
2388         * main.c: Updated copyright.
2389
2390 2004-11-18  Ulf Harnhammar <ulf.harnhammar.9485@student.uu.se>
2391
2392         * ftp-ls.c: Fixed a problem in ftp_parse_winnt_ls that could allow a
2393         malicious remote FTP server to crash wget.
2394
2395 2004-11-18  Hans-Andreas Engel <engel@node.ch>
2396
2397         * http.c: Enable --convert-links (-k) when a single page is downloaded
2398         via --output-document (-O).
2399
2400 2004-11-18  Mauro Tortonesi <mauro@deepspace6.net>
2401
2402         * connect.c: Minor correction to the comment in front of fd_peek.
2403
2404 2004-11-18  Leonid Petrov <nouser@lpetrov.net>
2405
2406         * retr.c: Fix a timeout problem in fd_read_body when using http_proxy.
2407
2408 2004-11-15  YAMAZAKI Makoto <Yamazaki.Makoto@fujixerox.co.jp>
2409
2410         * netrc.c: Fix termination by assertion bug in netrc parsing.
2411
2412 2004-05-09  David Fritz  <zeroxdf@att.net>
2413
2414         * mswindows.c (fake_fork): Pass entire command line to the child
2415         process.
2416
2417 2004-03-31  Hrvoje Niksic  <hniksic@xemacs.org>
2418
2419         * http.c (gethttp): Fix typo: SCHEME_SSL -> SCHEME_HTTPS.
2420
2421 2004-03-30  Hrvoje Niksic  <hniksic@xemacs.org>
2422
2423         * http.c (gethttp): Send the Proxy-Authorization header over
2424         non-SSL connections too.
2425
2426 2004-03-25  David Fritz  <zeroxdf@att.net>
2427
2428         * mswindows.c (fake_fork_child): Ignore error code when
2429         OpenFileMapping() fails; assume it failed because the object does
2430         not exist.
2431
2432 2004-03-24  David Fritz  <zeroxdf@att.net>
2433
2434         * mswindows.c (fake_fork): New function.
2435
2436         * mswindows.c (fork_to_background): Use it.
2437
2438 2004-03-19  David Fritz  <zeroxdf@att.net>
2439
2440         * mswindows.c (ws_hangup): Incorporate old fork_to_background()
2441         code.  Add event name argument.
2442         (fork_to_backgorund): Now a simple wrapper around ws_hangup().
2443         (ws_handler): Correctly handle the case when neither CTRLC_BACKGND
2444         nor CTRLBREAK_BACKGND are defined.  Don't bother handling close,
2445         logoff, or shutdown events.  Call ws_hangup() with the correct
2446         event name; don't assume it was CTRL+Break.
2447
2448 2004-03-19  Hrvoje Niksic  <hniksic@xemacs.org>
2449
2450         * url.c (url_parse): Decode %HH sequences in host name.
2451
2452 2004-03-04  Hrvoje Niksic  <hniksic@xemacs.org>
2453
2454         * convert.c (local_quote_string): Quote "#" as "%23" and "%" as
2455         "%25" when creating links to local files.
2456
2457 2004-03-02  David Fritz  <zeroxdf@att.net>
2458
2459         * mswindows.c (ws_percenttitle): Guard against future changes by
2460         doing nothing if the proper variables have not been initialized.
2461         Clamp percentage value.
2462
2463 2004-03-04  Gisle Vanem  <giva@bgnett.no>
2464
2465         * retr.c (fd_read_body): Don't change console title if quiet.
2466
2467 2004-02-25  David Fritz  <zeroxdf@att.net>
2468
2469         * mswindows.c (set_sleep_mode): Remove argument and return value.
2470         Call GetModuleHandle() instead of LoadLibrary()/FreeLibrary() for
2471         kernel32.dll.  Use typedef for function-pointer.  Don't cast
2472         l-value.  Don't use dereference operator when calling through
2473         function-pointer.
2474         (ws_startup): Update call to set_sleep_mode().
2475         (ws_cleanup): Remove call to set_sleep_mode().
2476
2477 2004-02-23  David Fritz  <zeroxdf@att.net>
2478
2479         * http.c (http_loop): Ditto.
2480
2481         * ftp.c (ftp_loop_internal): Update call to ws_changetitle().
2482
2483         * main.c (main): Don't bother calling ws_changetitle().
2484
2485         * mswindows.h (ws_changetitle): Update prototype.
2486
2487         * mswindows.c (ws_changetitle): Remove second argument.  Use
2488         xfree_null().
2489         (ws_percenttitle): Only update title when percentage has changed.
2490
2491 2004-02-23  David Fritz  <zeroxdf@att.net>
2492
2493         * mswindows.h: Ditto.
2494
2495         * mswindows.c: Misc. formatting/comment tweaks throughout.
2496
2497 2004-02-20  David Fritz  <zeroxdf@att.net>
2498
2499         * main.c (print_help): Remove call to ws_help().
2500
2501         * mswindows.c (ws_help): Remove.
2502
2503         * mswindows.h (ws_help): Remove.
2504
2505 2004-02-16  David Fritz  <zeroxdf@att.net>
2506
2507         * init.c (home_dir): Use aprintf() instead of xmalloc()/sprintf().
2508         Under Windows, if $HOME is not defined, use the directory that
2509         contains the Wget binary instead of hard-coded `C:\'.
2510         (wgetrc_file_name): Under Windows, look for $HOME/.wgetrc then, if
2511         not found, look for wget.ini in the directory of the Wget binary.
2512
2513         * mswindows.c (ws_mypath): Employ slightly more robust methodology.
2514         Strip trailing path separator.
2515
2516 2004-02-06  Hrvoje Niksic  <hniksic@xemacs.org>
2517
2518         * http.c (gethttp): Respect --ignore-length.
2519         (gethttp): Inhibit keep-alive if --ignore-length is specified.
2520
2521 2004-02-06  Hrvoje Niksic  <hniksic@xemacs.org>
2522
2523         * connect.c (sockaddr_set_data): Zero out
2524         sockaddr_in/sockaddr_in6.  Apparently BSD-derived stacks need this
2525         when binding a socket to local address.
2526
2527 2004-02-04  Hrvoje Niksic  <hniksic@xemacs.org>
2528
2529         * hash.c: Make the file compilable outside Wget source tree when
2530         -DSTANDALONE is used.
2531
2532 2004-01-29  Hrvoje Niksic  <hniksic@xemacs.org>
2533
2534         * utils.c (determine_screen_width): Return 0 if not running on
2535         Windows or on a TIOCGWINSZ-capable system.
2536
2537 2004-01-28  David Fritz  <zeroxdf@att.net>
2538
2539         * utils.c (determine_screen_width): Correctly determine console
2540         width under Windows.
2541
2542 2004-01-28  Christian Biere  <christianbiere@gmx.de>
2543
2544         * progress.c (bar_set_params): Fixed syntax error when HAVE_ISATTY
2545         was undefined.
2546
2547         * ftp.c (ftp_loop_internal): Allocate a larger buffer in case
2548         "try" gets translated to something large.  Ditto in http_loop in
2549         http.c.
2550
2551         * http.c (response_header_copy): Don't write to buf[BUFSIZE].
2552
2553         * ftp-opie.c (skey_response): Eliminate unnecessary string
2554         concatenation; just call gen_md5_update twice.
2555
2556 2004-01-25  Hrvoje Niksic  <hniksic@xemacs.org>
2557
2558         * utils.c (xsleep): Don't call usleep with values larger than
2559         1,000,000.
2560
2561 2003-12-16  Hrvoje Niksic  <hniksic@xemacs.org>
2562
2563         * http.c (gethttp): Fix generation of `Content-Length'.
2564
2565 2003-12-15  Gisle Vanem  <giva@bgnett.no>
2566
2567         * url.c (url_skip_credentials): Fixed return value; 'url' if no
2568         credentials.
2569
2570 2003-12-14  Hrvoje Niksic  <hniksic@xemacs.org>
2571
2572         * url.c (url_skip_credentials): Return a pointer directly.
2573
2574 2003-12-14  Hrvoje Niksic  <hniksic@xemacs.org>
2575
2576         * url.c (url_file_name): Ditto.
2577         (parse_errors): Ditto.
2578
2579         * retr.c (retr_rate): Ditto.
2580
2581         * progress.c (create_image): Ditto.
2582
2583         * netrc.c (parse_netrc): Ditto.
2584
2585         * main.c (struct cmdline_option): Ditto.
2586         (redirect_output_signal): Ditto.
2587
2588         * init.c (commands): Ditto.
2589
2590         * ftp-ls.c (ftp_index): Ditto.
2591
2592         * cookies.c (check_domain_match): Declare the pointer to a literal
2593         string as `const'.
2594
2595 2003-12-12  Hrvoje Niksic  <hniksic@xemacs.org>
2596
2597         * retr.c (fd_read_body): Pass total size to progress_create, not
2598         the remaining amount.
2599
2600 2003-12-12  Hrvoje Niksic  <hniksic@xemacs.org>
2601
2602         * retr.c (fd_read_body): Don't fiddle with "interactive timeout"
2603         if read timeout is unset.
2604
2605 2003-12-12  Hrvoje Niksic  <hniksic@xemacs.org>
2606
2607         * connect.c (bind_local): Don't set the IPV6_V6ONLY option on the
2608         socket.
2609
2610 2003-12-06  Hrvoje Niksic  <hniksic@xemacs.org>
2611
2612         * url.c (url_file_name): Respect the setting of
2613         opt.protocol_directories.
2614
2615         * main.c (main): Only check for ret=='?' when longindex is unset.
2616         (option_data): New option --protocol-directories.
2617
2618 2003-12-06  Hrvoje Niksic  <hniksic@xemacs.org>
2619
2620         * ftp.c (getftp): Ditto.
2621
2622         * http.c (gethttp): Correctly calculate bandwidth as total data
2623         read divided with download time.
2624
2625         * retr.c (fd_read_body): Separate the return values for data
2626         written and read.
2627
2628 2003-12-05  Hrvoje Niksic  <hniksic@xemacs.org>
2629
2630         * http.c (H_REDIRECTED): Respect the HTTP/1.1 "303 See Other"
2631         response code.
2632         Suggested by Dan Razzell.
2633
2634 2003-11-30  Hrvoje Niksic  <hniksic@xemacs.org>
2635
2636         * retr.c (fd_read_body): Report the amount of data *written* as
2637         amount_read.  This is not entirely logical, but that's what the
2638         callers expect, and it's not easy to change.
2639
2640         * ftp.c (ftp_loop_internal): Ditto.
2641
2642         * http.c (http_loop): Be smarter about assigning restval; if we're
2643         in the nth pass of a download, simply use the information we have
2644         about how much data has been retrieved as restval.
2645
2646         * ftp.c (getftp): Ditto for FTP "REST" command.
2647
2648         * http.c (gethttp): When the server doesn't respect range, skip
2649         the first RESTVAL bytes of the read body.  Never truncate the
2650         output file.
2651
2652         * retr.c (fd_read_body): Support skipping initial STARTPOS octets.
2653
2654 2003-11-30  Hrvoje Niksic  <hniksic@xemacs.org>
2655
2656         * http.c (skip_short_body): Renamed skip_body to skip_short_body;
2657         don't bother calling fd_read_body.
2658
2659 2003-11-30  Hrvoje Niksic  <hniksic@xemacs.org>
2660
2661         * retr.c (fd_read_body): Sanitize arguments and document them
2662         better.  Make sure the timer is created and updated only if
2663         necessary.  Updated callers.
2664
2665 2003-11-30  Hrvoje Niksic  <hniksic@xemacs.org>
2666
2667         * http.c (skip_body): New function.
2668         (gethttp): Use it to skip the body of the responses we don't care
2669         to download.  That allows us to reuse the connection.
2670         (gethttp): Trust that the HEAD requests will not generate body
2671         data.
2672
2673         * retr.c (fd_read_body): Don't write to OUT if it's NULL.
2674
2675 2003-11-29  Hrvoje Niksic  <hniksic@xemacs.org>
2676
2677         * http.c (gethttp): Initialize SSL only the first time when SSL
2678         URL is downloaded.
2679
2680 2003-11-29  Hrvoje Niksic  <hniksic@xemacs.org>
2681
2682         * cookies.c (cookie_header): Only generate the contents of the
2683         header, not the leading "Cookie: " or the trailing "\r\n".
2684
2685         * http.c (gethttp): When adding headers specified with `--header',
2686         allow them to override the headers generated by Wget.
2687
2688         * init.c (cmd_spec_header): Made opt.user_headers a vector.
2689
2690         * http.c (request_new): New function.  Returns a request structure
2691         which can be modified in various ways, most notably by adding HTTP
2692         headers to the request.
2693         (request_set_header): New function for adding the header to the
2694         request.  If the header is already available, it gets replaced.
2695         (request_send): Construct and send the request.
2696         (gethttp): Use the request_* functions to generate the request.
2697
2698 2003-11-28  Hrvoje Niksic  <hniksic@xemacs.org>
2699
2700         * http.c (gethttp): Don't include the Proxy-Authorization header
2701         in the request tunneled through proxy.
2702
2703 2003-11-28  Hrvoje Niksic  <hniksic@xemacs.org>
2704
2705         * http.c (gethttp): Use the CONNECT handle to establish SSL
2706         passthrough through non-SSL proxies.
2707
2708 2003-11-28  Hrvoje Niksic  <hniksic@xemacs.org>
2709
2710         * init.c: Don't #include netinet/Winsock stuff.
2711
2712 2003-11-28  Hrvoje Niksic  <hniksic@xemacs.org>
2713
2714         * http.c: Deleted the old functions header_process,
2715         header_extract_number, header_exists, header_strdup,
2716         http_process_range, http_process_none, http_process_type, and
2717         http_process_connection.
2718
2719         * http.c (response_new): New function.
2720         (response_header_bounds): Ditto.
2721         (response_header_copy): Ditto.
2722         (response_header_strdup): Ditto.
2723         (response_status): Ditto.
2724         (gethttp): Use the new response_* functions to parse the response.
2725         Support HTTP/0.9 responses.
2726
2727 2003-11-27  Hrvoje Niksic  <hniksic@xemacs.org>
2728
2729         * progress.c (create_image): Don't calculate ETA if nothing has
2730         been downloaded yet, because it causes division by zero.
2731
2732 2003-11-27  Hrvoje Niksic  <hniksic@xemacs.org>
2733
2734         * connect.c (bind_local): Rename sa_len to addrlen because IRIX
2735         headers define sa_len as a macro.
2736
2737 2003-11-26  Hrvoje Niksic  <hniksic@xemacs.org>
2738
2739         * html-parse.c (convert_and_copy): Remove embedded newlines when
2740         AP_TRIM_BLANKS is specified.
2741
2742 2003-11-26  Hrvoje Niksic  <hniksic@xemacs.org>
2743
2744         * ftp.c: Set con->csock to -1 where rbuf_uninitialize was
2745         previously used.
2746
2747 2003-11-26  Hrvoje Niksic  <hniksic@xemacs.org>
2748
2749         * Makefile.in (http$o): Added the trailing backslash that was
2750         missing.
2751
2752 2003-11-21  Hrvoje Niksic  <hniksic@xemacs.org>
2753
2754         * headers.c: Removed.  The file is no longer relevant, now that no
2755         special handling of headers is done by the rbuf code.  Moved
2756         portions to http.c.
2757
2758 2003-11-21  Hrvoje Niksic  <hniksic@xemacs.org>
2759
2760         * rbuf.c: Removed.
2761
2762         * ftp-basic.c (ftp_response): Use fd_read_line.  No longer use
2763         struct rbuf.  Updated all callers.
2764
2765         * http.c (gethttp): Use fd_read_head to read all the headers in
2766         one go.
2767         (next_header): New function.
2768
2769         * retr.c (fd_read_line): New function: reads a line from FD,
2770         leaving the rest of the data unread.
2771         (fd_read_head): New function.
2772
2773         * connect.c (fd_peek): New function, implements peeking.
2774         (poll_internal): New function.
2775         (fd_read): Use it.
2776         (fd_write): Ditto.
2777         (fd_peek): Ditto.
2778         (fd_register_transport): Allow registering a "peeker" callback.
2779
2780 2003-11-20  Hrvoje Niksic  <hniksic@xemacs.org>
2781
2782         * connect.c: Renamed xread/xwrite/xclose to
2783         fd_read/fd_write/fd_close.  The "x" prefix is not appropriate
2784         because the semantics have diverged from read/write/close too
2785         significantly.  Updated all callers.
2786
2787 2003-11-20  Hrvoje Niksic  <hniksic@xemacs.org>
2788
2789         * connect.c (sock_write): It's not necessary to initialize RES.
2790
2791 2003-11-19  Hrvoje Niksic  <hniksic@xemacs.org>
2792
2793         * main.c (main): Don't reference opt.ipv4_only and opt.ipv6_only
2794         if IPv6 is disabled.
2795
2796 2003-11-19  Hrvoje Niksic  <hniksic@xemacs.org>
2797
2798         * connect.c (socket_has_inet6): Only compile it if IPv6 is enabled
2799         and AI_ADDRCONFIG is missing.
2800
2801 2003-11-18  Hrvoje Niksic  <hniksic@xemacs.org>
2802
2803         * gen_sslfunc.c (ssl_init_prng): Warn the user when using a weak
2804         random seed.
2805
2806 2003-11-18  Hrvoje Niksic  <hniksic@xemacs.org>
2807
2808         * host.c (address_list_contains): Renamed address_list_find to
2809         address_list_contains because its result is boolean.
2810
2811 2003-11-18  Hrvoje Niksic  <hniksic@xemacs.org>
2812
2813         * connect.c (select_fd): Return 1 if select is not available.
2814
2815 2003-11-17  Hrvoje Niksic  <hniksic@xemacs.org>
2816
2817         * connect.c (connect_to_host): Don't reference address list after
2818         releasing it.
2819
2820 2003-11-17  Hrvoje Niksic  <hniksic@xemacs.org>
2821
2822         * main.c (print_help): Fix alignment of FTP options output.
2823
2824 2003-11-17  Hrvoje Niksic  <hniksic@xemacs.org>
2825
2826         * host.c (lookup_host): Check for the ability to create IPv6
2827         sockets here.
2828
2829         * init.c (defaults): Don't auto-set --inet4-only on IPv6-less
2830         systems.
2831
2832 2003-11-16  Hrvoje Niksic  <hniksic@xemacs.org>
2833
2834         * main.c (print_help): Fix typo in `-O' help message.  Fix docs of
2835         -Y/--proxy.  Fix docs of `--cookies' and `--glob'.  Improve docs
2836         of --convert-links.  Fix docs of SSL options.
2837
2838 2003-11-16  Hrvoje Niksic  <hniksic@xemacs.org>
2839
2840         * ftp-basic.c: Don't include <arpa/inet.h> and others because
2841         they're no longer needed.
2842
2843 2003-11-16  Hrvoje Niksic  <hniksic@xemacs.org>
2844
2845         * main.c (main): Don't allow setting of both opt.ipv4_only and
2846         opt.ipv6_only.
2847
2848         * init.c (defaults): Mark opt.ipv4_only specially when set
2849         automatically.
2850
2851 2003-11-15  Hrvoje Niksic  <hniksic@xemacs.org>
2852
2853         * host.c (lookup_host): Use AI_ADDRCONFIG only if the family is
2854         unspecified.  This ensures that specifying `--no-inet4' on systems
2855         where IPv6 resolves, but doesn't work behaves the same regardless
2856         of the availability of AI_ADDRCONFIG.
2857
2858 2003-11-15  Hrvoje Niksic  <hniksic@xemacs.org>
2859
2860         * host.c: Don't refer to the now-removed function
2861         forget_host_lookup in the documentation of lookup_host.
2862
2863 2003-11-15  Hrvoje Niksic  <hniksic@xemacs.org>
2864
2865         * http.c (persistent_available_p): Correctly specify the endpoint
2866         argument to socket_ip_address.
2867         (gethttp): When printing the "reusing connection to..." message,
2868         specify the host name of the reused connection, not the current
2869         host name.  That makes more sense because it provides a useful
2870         piece of information -- we know to which host we're supposed to
2871         connect anyway!
2872
2873 2003-11-15  Hrvoje Niksic  <hniksic@xemacs.org>
2874
2875         * init.c: Make sure the options are in alphabetic order!
2876
2877         * host.c (lookup_host): Merge lookup_host_passive and lookup_host
2878         after all -- having both would result in some code duplication.
2879         (lookup_host): Set hints.ai_family to AF_INET if ipv4_only is
2880         requested.  Likewise, set it to AF_INET6 for ipv6_only.  Specify
2881         AI_ADDRCONFIG where available.
2882         (lookup_host): New flag LH_REFRESH that specifies that a cached
2883         entry for HOST should be refreshed.
2884         (cache_query): New function.
2885         (cache_store): Ditto.
2886         (cache_remove): Ditto.
2887         (forget_host_lookup): No longer necessary, replaced with static
2888         function cache_remove.
2889
2890 2003-11-14  Hrvoje Niksic  <hniksic@xemacs.org>
2891
2892         * main.c: Enable -4 and -6 only if IPv6 is enabled.
2893
2894 2003-11-14  Hrvoje Niksic  <hniksic@xemacs.org>
2895
2896         * connect.c (register_transport): Renamed from register_extended.
2897         Explain the intended usage.
2898
2899 2003-11-14  Hrvoje Niksic  <hniksic@xemacs.org>
2900
2901         * url.c (uri_merge): Merging "foo" and "bar" should result in
2902         "bar", not in "foo/bar".
2903         (path_simplify): Don't remove empty path elements; don't
2904         special-case leading slash.
2905         (path_simplify): Don't swallow ".."'s at the beginning of string.
2906         E.g. simplify "foo/../../bar" as "../bar", not as "bar".
2907         (append_uri_pathel): Defang ".." path element upon encountering
2908         it.
2909
2910 2003-11-13  Hrvoje Niksic  <hniksic@xemacs.org>
2911
2912         * http.c (persistent_available_p): Don't attempt to talk to two
2913         different SSL sites over the same secure connection.
2914
2915 2003-11-13  Hrvoje Niksic  <hniksic@xemacs.org>
2916
2917         * http.c (gethttp): Ditto.
2918
2919         * ftp.c (getftp): Use retryable_socket_connect_error instead of
2920         CONNECT_ERROR.
2921
2922         * wget.h (CONNECT_ERROR): Removed.
2923
2924         * connect.c (retryable_socket_connect_error): New function instead
2925         of unsupported_socket_family_error.
2926
2927 2003-11-13  Hrvoje Niksic  <hniksic@xemacs.org>
2928
2929         * wget.h (CONNECT_ERROR): Use it.
2930
2931         * connect.c (unsupported_socket_family_error): New function.
2932
2933 2003-11-13  Hrvoje Niksic  <hniksic@xemacs.org>
2934
2935         * connect.c (bind_local): Renamed bindport to bind_local; return
2936         the socket directly.  Updated callers.
2937         (accept_connection): Renamed acceptport to accept_connection;
2938         return the created socket directly.  Updated callers.
2939
2940 2003-11-13  Hrvoje Niksic  <hniksic@xemacs.org>
2941
2942         * init.c (defaults): Turn on opt.ipv4_only if we're compiling with
2943         IPv6, and AI_ADDRINFO is not available, and AF_INET6 sockets can't
2944         be created.
2945
2946 2003-11-13  Hrvoje Niksic  <hniksic@xemacs.org>
2947
2948         * host.c (lookup_host): Document the fact that the addresses are
2949         returned in order.
2950
2951 2003-11-12  Hrvoje Niksic  <hniksic@xemacs.org>
2952
2953         * utils.c: Use limits.h only where available.
2954
2955         * hash.c: Use INVALID_PTR and INVALID_PTR_BYTE.  Include limits.h.
2956
2957 2003-11-11  Hrvoje Niksic  <hniksic@xemacs.org>
2958
2959         * main.c: Added options --inet4-only and --inet6-only.
2960
2961 2003-11-11  Hrvoje Niksic  <hniksic@xemacs.org>
2962
2963         * host.c (host_errstr): Use the more standard message "Unknown
2964         host".
2965
2966 2003-11-10  Hrvoje Niksic  <hniksic@xemacs.org>
2967
2968         * connect.c (connect_to_host): Use that flag to decide whether to
2969         re-resolve the host name.
2970
2971         * host.c (struct address_list): Added a flag that maintains
2972         whether the connection worked at some point.
2973
2974 2003-11-10  Hrvoje Niksic  <hniksic@xemacs.org>
2975
2976         * host.c (lookup_host): Special-case the numeric addresses only in
2977         the non-IPv6 case.
2978
2979 2003-11-10  Hrvoje Niksic  <hniksic@xemacs.org>
2980
2981         * connect.c (resolve_bind_address): Call lookup_host_passive.
2982         Make sure that opt.bind_address is resolved only once.
2983
2984         * host.c (lookup_host_passive): New function, handles "passive"
2985         lookups.
2986         (lookup_host): Remove the passive flags.  Remove the
2987         family-related flags -- use ip_default_family instead.
2988
2989 2003-11-09  Hrvoje Niksic  <hniksic@xemacs.org>
2990
2991         * html-url.c: Get URLs from <object data="...">.
2992
2993 2003-11-09  Hrvoje Niksic  <hniksic@xemacs.org>
2994
2995         * main.c (option_data): Specify the command to use for --mirror.
2996
2997 2003-11-08  Hrvoje Niksic  <hniksic@xemacs.org>
2998
2999         * cookies.c (cookie_handle_set_cookie): Specify exact match for
3000         unspecified domains.
3001
3002 2003-11-08  Hrvoje Niksic  <hniksic@xemacs.org>
3003
3004         * main.c (main): Removed one-letter options `-C', `-g', `-G', and
3005         `-s'.
3006
3007 2003-11-08  Hrvoje Niksic  <hniksic@xemacs.org>
3008
3009         * main.c (main): Add --dont-remove-listing for backward
3010         compatibility with previous versions.
3011         (print_help): Fix typo, spotted by Dennis Smit.
3012
3013 2003-11-08  Gisle Vanem  <giva@bgnett.no>
3014
3015         * ftp-basic.c: Support Windows-2000 ftp servers. Win-2000 *is*
3016         Win-NT 5.0 so calling it ST_WINNT is okay I guess.
3017
3018 2003-11-08  Hrvoje Niksic  <hniksic@xemacs.org>
3019
3020         * progress.c (update_speed_ring): Clear the speed ring when the
3021         download stalls.
3022
3023         * retr.c (get_contents): Specify 0.95s read timeout, so that the
3024         progress gauge can be updated even when data arrives very slowly
3025         or stalls.
3026
3027 2003-11-08  Hrvoje Niksic  <hniksic@xemacs.org>
3028
3029         * utils.c (wtimer_allocate): Bless the use of wtimer_read on a
3030         timer that has merely been allocated because get_contents() does
3031         that.
3032         (wtimer_update): Abort if the timer is not initialized.
3033
3034 2003-11-08  Hrvoje Niksic  <hniksic@xemacs.org>
3035
3036         * retr.c (get_contents): Pass the timer to limit_bandwidth().
3037
3038         * utils.c (wtimer_update): New function instead of wget_elapsed;
3039         just update the timer, but don't return anything.
3040         (wtimer_read): Read and return the last known value of the timer.
3041
3042 2003-11-08  Hrvoje Niksic  <hniksic@xemacs.org>
3043
3044         * http.c (persistent_available_p): Instead of matching all the
3045         addresses of HOST and last host, determine the peer's IP address
3046         with socket_ip_address and see if that address is one of those
3047         HOST resolves to.
3048
3049         * host.c (address_list_match_all): Removed.
3050         (address_list_find): New function, finds an IP address in the
3051         address list.
3052
3053         * ftp.c (ftp_do_pasv): Get the peer's address here, and pass it to
3054         ftp_epsv so it doesn't need to call getpeername.
3055
3056         * ftp-basic.c (ftp_port): Use socket_ip_address instead of
3057         getpeername.
3058         (ftp_lprt): Ditto.
3059
3060         * connect.c (socket_ip_address): Replaces conaddr, generalized to
3061         either get peer's or local address.
3062         (sockaddr_get_data): Made local to this file.
3063
3064 2003-11-08  Hrvoje Niksic  <hniksic@xemacs.org>
3065
3066         * hash.c (HASH_POSITION): Explicitly accept the hash function.
3067         (grow_hash_table): Extract ht->hash_function outside the loop.
3068         (hash_table_remove): Ditto.
3069         (hash_table_clear): Fill entries with 0xff to clear them.
3070         (hash_table_remove): Mark entries as deleted with the correct
3071         marker.
3072
3073 2003-11-08  Hrvoje Niksic  <hniksic@xemacs.org>
3074
3075         * http.c (persistent_available_p): No reason for the host lookup
3076         to be silent -- it's a lookup like any other.
3077
3078 2003-11-08  Hrvoje Niksic  <hniksic@xemacs.org>
3079
3080         * connect.c (register_extended): Check that fd >= 0.
3081
3082 2003-11-07  Hrvoje Niksic  <hniksic@xemacs.org>
3083
3084         * connect.c (LAZY_RETRIEVE_INFO): Set LAST_INFO.
3085
3086 2003-11-07  Hrvoje Niksic  <hniksic@xemacs.org>
3087
3088         * hash.c (NON_EMPTY): Use the all-bit-set value as the marker that
3089         the field is empty.  This allows NULL pointer and 0 value to be
3090         used as keys, which is necessary for the connect.c code to work
3091         when fd==0.
3092         (hash_table_new): Fill mappings with 0xff.
3093         (grow_hash_table): Ditto.
3094
3095 2003-11-07  Hrvoje Niksic  <hniksic@xemacs.org>
3096
3097         * url.c (url_parse): Allow empty ports.
3098
3099 2003-11-07  Hrvoje Niksic  <hniksic@xemacs.org>
3100
3101         * main.c (print_help): Break the help string into multiple chunks.
3102         (cmdline_option): New option handler OPT_FUNCALL.  Generalized
3103         HANDLE_CMD to generic DATA.
3104         (option_data): Use the new OPT_FUNCALL feature.
3105
3106 2003-11-06  Hrvoje Niksic  <hniksic@xemacs.org>
3107
3108         * log.h: Declare log_init, log_close, and
3109         log_request_redirect_output here.
3110
3111 2003-11-05  Dennis Smit  <ds@nerds-incorporated.org>
3112
3113         * main.c: (main): added --preserve-permissions option.
3114
3115         * ftp.c (ftp_retrieve_list): added support for
3116         --preserve-permissions option.
3117
3118         * init.c: added support for --preserve-permission option.
3119
3120         * option.h: added support for --preserve-permission option.
3121
3122 2003-11-06  Hrvoje Niksic  <hniksic@xemacs.org>
3123
3124         * main.c (init_switches): New function.  Convert option_data to
3125         long_options and short_options, which can be fed to getopt_long.
3126         (main): Execute command-line options by consulting option_data.
3127
3128 2003-11-06  Hrvoje Niksic  <hniksic@xemacs.org>
3129
3130         * gen_sslfunc.c (ssl_read): Implement a more correct check for
3131         EINTR.
3132         (ssl_write): Ditto.
3133         (init_ssl): Use a global SSL context.
3134
3135 2003-11-06  Hrvoje Niksic  <hniksic@xemacs.org>
3136
3137         * connect.c (xclose): Free INFO even if it doesn't provide a
3138         closer.
3139
3140 2003-11-06  Hrvoje Niksic  <hniksic@xemacs.org>
3141
3142         * connect.c: Updated all callers of
3143         iread/ssl_iread/iwrite/ssl_iwrite to use xread and xwrite instead.
3144
3145         * rbuf.h (struct rbuf): Removed the SSL member because SSL is
3146         handled automatically by xread.
3147
3148         * hash.c (ptrhash): Made private.
3149         (ptrcmp): Ditto.
3150         (inthash): Removed.
3151
3152         * connect.c (select_fd): Don't set errno, leave it to the caller.
3153
3154         * gen_sslfunc.c (connect_ssl): Use register_extended to register
3155         SSL callbacks for communication with SSL-enabled endpoints.
3156         (ssl_read): New function.
3157         (ssl_write): Ditto.
3158         (ssl_poll): Ditto.
3159         (ssl_close): Ditto.
3160
3161         * connect.c (register_extended): New function -- register
3162         callbacks for basic socket operations.
3163         (xread): Ditto.
3164         (xwrite): Ditto.
3165         (xclose): Ditto.
3166         (sock_read): New function, default implementation for reading.
3167         (sock_write): Ditto for writing.
3168         (sock_poll): Ditto for polling.
3169         (sock_close): Ditto for closing.
3170
3171 2003-11-05  Hrvoje Niksic  <hniksic@xemacs.org>
3172
3173         * connect.c (bindport): Fix compilation under pre-C99 compilers.
3174
3175 2003-11-05  Hrvoje Niksic  <hniksic@xemacs.org>
3176
3177         * connect.c (connect_to_ip): More compact error checking.
3178         (bindport): Don't treat failed setsockopt as a fatal error.
3179
3180 2003-11-05  Hrvoje Niksic  <hniksic@xemacs.org>
3181
3182         * connect.c (resolve_bind_address): Use a more accurate error
3183         message -- we're not binding to ANY, we're disabling bind
3184         altogether.
3185
3186 2003-11-05  Hrvoje Niksic  <hniksic@xemacs.org>
3187
3188         * cookies.c (save_cookies_mapper): Respect the setting of
3189         keep-session-cookies.
3190         (cookie_jar_load): Import session cookies.
3191         Based on code submitted by Nicolas Schodet.
3192
3193         * utils.c (datetime_str): Use information in TM when it's
3194         non-NULL.
3195
3196         * main.c (main): New option `--keep-session-cookies'.
3197
3198 2003-11-04  Hrvoje Niksic  <hniksic@xemacs.org>
3199
3200         * Makefile.in (realclean): Delete config.h.in.
3201
3202 2003-11-04  Hrvoje Niksic  <hniksic@xemacs.org>
3203
3204         * config-post.h: New file, included from now autogenerated
3205         config.h.in.
3206
3207 2003-11-04  Hrvoje Niksic  <hniksic@xemacs.org>
3208
3209         * progress.c (progress_handle_sigwinch): Don't call
3210         determine_screen_width() from the signal handler.  Instead, just
3211         set a volatile variable.
3212         (bar_create): Check whether SIGWINCH was received.
3213         (bar_update): Ditto.
3214
3215         * sysdep.h: Define SYSTEM_FNMATCH only if HAVE_FNMATCH_H is true.
3216
3217 2003-11-03  Hrvoje Niksic  <hniksic@xemacs.org>
3218
3219         * utils.c (xsleep): New function.  Uses nanosleep where available,
3220         resuming sleeps interrupted by signals.  Updated callers of sleep
3221         and usleep to use xsleep.
3222
3223 2003-11-03  Hrvoje Niksic  <hniksic@xemacs.org>
3224
3225         * ftp-basic.c (ftp_login): Remove shadowing (and bogus)
3226         declaration of SEED.
3227
3228 2003-11-03  Hrvoje Niksic  <hniksic@xemacs.org>
3229
3230         * log.c (logvprintf): Documented better.  Renamed to
3231         log_vprintf_internal to avoid confusion with the public API
3232         functions logprintf and logputs.
3233
3234 2003-11-03  Hrvoje Niksic  <hniksic@xemacs.org>
3235
3236         * wget.h (N_): Don't parenthesize argument.
3237
3238 2003-11-03  Hrvoje Niksic  <hniksic@xemacs.org>
3239
3240         * host.h (ADDRESS_IPV4_DATA): Don't take the address of in.s_addr
3241         because that doesn't work on machines that define it as bitfield.
3242
3243 2003-11-03  Hrvoje Niksic  <hniksic@xemacs.org>
3244
3245         * connect.c (select_fd): Generalize the third argument into WAIT,
3246         so that the caller can request waiting for both read and write.
3247         Updated callers.
3248
3249 2003-11-02  Hrvoje Niksic  <hniksic@xemacs.org>
3250
3251         * html-url.c (cleanup_html_url): Destroy the hash tables, don't
3252         just call free on them.
3253         (init_interesting): Use hash_table_put instead of string_set_add
3254         because we don't need the strdup that the latter function
3255         performs.
3256
3257         * init.c (cleanup): Don't pass NULL to cookie_jar_delete.
3258
3259         * xmalloc.c (xfree_real): Abort when passed a NULL pointer.
3260         (xfree_debug): Print at the file and line of the offending call to
3261         free.
3262
3263 2003-11-02  Hrvoje Niksic  <hniksic@xemacs.org>
3264
3265         * wget.h: Retired the `boolean' type.  Moved the DEFAULT_LOGFILE
3266         define to log.h.  Moved the INFINITE_RECURSION define to recur.h.
3267
3268         * xmalloc.h: Renamed FREE_MAYBE to xfree_null and moved the
3269         definition from wget.h to xmalloc.h.
3270
3271 2003-11-02  Hrvoje Niksic  <hniksic@xemacs.org>
3272
3273         * html-parse.c (decode_entity): New function; split the decoding
3274         of entities here.
3275         (convert_and_copy): Use it to decode entities.
3276         (decode_entity): Handle the &apos entity.
3277         (decode_entity): Don't decode Latin 1 numeric entities.  Don't
3278         decode &#0.
3279
3280 2003-11-01  Hrvoje Niksic  <hniksic@xemacs.org>
3281
3282         * ftp-opie.c (calculate_skey_response): Use uint32_t instead of
3283         `unsigned long' for the cheksum array.  Document the function.
3284
3285 2003-11-01  Hrvoje Niksic  <hniksic@xemacs.org>
3286
3287         * connect.c (acceptport): Don't call select_fd when timeout is not
3288         requested.
3289
3290 2003-11-01  Hrvoje Niksic  <hniksic@xemacs.org>
3291
3292         * host.c: Removed the ip_default_family global variable.
3293
3294         * host.c (lookup_host): Document the function.  Fixed declaration
3295         of VEC.
3296
3297 2003-10-31  Hrvoje Niksic  <hniksic@xemacs.org>
3298
3299         * various: Use new macros xnew, xnew0, xnew_array, and xnew0_array
3300         in various places.
3301
3302 2003-10-31  Hrvoje Niksic  <hniksic@xemacs.org>
3303
3304         * wget.h: Move declarations of malloc and logging code to
3305         xmalloc.h and log.h respectively to unclutter this file.
3306         (STRDUP_ALLOCA): Made it side-effect free.
3307
3308         * xmalloc.h: New files.  Define macros xnew, xnew0, xnew_array,
3309         and xnew0_array.
3310
3311         * xmalloc.c: New file.  Move the xmalloc routines here.
3312
3313 2003-10-31  Hrvoje Niksic  <hniksic@xemacs.org>
3314
3315         * connect.c (sockaddr_set_data): Remove the broken code that
3316         checked for NULL address.
3317
3318 2003-10-31  Hrvoje Niksic  <hniksic@xemacs.org>
3319
3320         * host.c (address_list_from_single): Removed.
3321         (address_list_from_ipv4_addresses): Renamed from
3322         address_list_from_vector.
3323
3324 2003-10-31  Hrvoje Niksic  <hniksic@xemacs.org>
3325
3326         * sysdep.h (CLOSE): Don't call close on file descriptors less than
3327         0, i.e. on uncreated sockets.
3328
3329         * connect.c (resolve_bind_address): Work on struct sockaddr
3330         directly.
3331         (connect_to_host): Replacement for connect_to_many.  Resolve HOST
3332         and connect to any of its addresses.  If we can't connect and the
3333         host name lookup was cached, try to resolve it again.  This should
3334         fix problems with hosts behind dynamic DNS.  Updated all callers.
3335         (connect_to_ip): Replacement for connect_to_one.  Removed SILENT;
3336         added the argument PRINT instead.  Updated all callers.
3337         (set_connection_host_name): Removed.
3338
3339         * host.c (address_list_address_at): New function instead of
3340         address_list_copy_one. It returns a pointer to ip_address *, so
3341         it's not necessary to copy the data.
3342         (address_list_cached_p): New function.
3343         (forget_host_lookup): Ditto.
3344
3345         * connect.c: Got rid of the MSOCK global variable.  Made bindport
3346         return the local socket it creates.  Added a new argument to
3347         acceptport, the socket to call accept on.  Updated callers.
3348         (closeport): Removed.
3349
3350         * connect.c: Moved the sockaddr code from host.c to this file,
3351         because most of that stuff is used for connecting, and has nothing
3352         to do with host names anyway.
3353         (sockaddr_set_data, sockaddr_get_data): New functions, replace the
3354         old sockaddr_set_address, sockaddr_set_port, sockaddr_get_address,
3355         and sockaddr_get_port.
3356
3357 2003-10-30  Hrvoje Niksic  <hniksic@xemacs.org>
3358
3359         * sysdep.h: Use `S >= 8' rather than `S == 8' when looking for
3360         large integers.
3361
3362 2003-10-30  Hrvoje Niksic  <hniksic@xemacs.org>
3363
3364         * url.c (append_uri_pathel): New argument ESCAPED_P that says
3365         whether [B, E) is to be treated as URL-escaped or not.  If
3366         ESCAPED_P is false, don't unescape the region.
3367         (url_file_name): u->file is not URL-escaped.
3368
3369 2003-10-30  Hrvoje Niksic  <hniksic@xemacs.org>
3370
3371         * retr.c (retrieve_from_file): Use retrieve_tree for
3372         page-requisites.
3373
3374         * main.c (main): Don't define opt.recursive when -p is used.
3375         Instead, make sure that recursion is used for HTTP in that case.
3376
3377 2003-10-29  Hrvoje Niksic  <hniksic@xemacs.org>
3378
3379         * host.h: Defined accessors for elements of ip_address.  Updated
3380         all callers.
3381         (address_list_match_all): Use memcmp in the non-IPv6 case.
3382
3383         * wget.h (CONNECT_ERROR): Don't retry connecting if connect()
3384         returned EAFNOSUPPORT.
3385
3386 2003-10-27  Mauro Tortonesi <mauro@deepspace6.net>
3387
3388         * connect.h: changed bindport prototype and added the related
3389         BIND_ON_IPV4_ONLY and BIND_ON_IPV6_ONLY flags.
3390
3391         * connect.c: changed bindport and resolve_bind_address to allow
3392         protocol-version specific DNS resolution. modified conaddr,
3393         acceptport and connect_to_one to make use of struct
3394         sockaddr_storage and of the new ip_address structure.
3395
3396         * ftp-basic.c: added LPRT/LPSV (RFC1639) support, refactored
3397         PORT/PASV (RFC959) and EPRT/EPSV (RFC2428) support code.
3398
3399         * ftp.c: added the ftp_do_port and ftp_do_pasv functions to
3400         handle FTP over IPv6.
3401
3402         * ftp.h: changed prototype of ftp_epsv and added prototypes for
3403         ftp_lpsv, ftp_lprt and ftp_eprt.
3404
3405         * host.c: renamed the
3406         wget_sockaddr_set_address and wget_sockaddr_get_addr, and
3407         wget_sockaddr_{s,g}et_port couples to sockaddr_{s,g}et_address and
3408         sockaddr_{g,s}et_port respectively.  changed
3409         address_list_match_all, address_list_from_addrinfo sockaddr_len,
3410         pretty_print_address, lookup_host, sockaddr_{s,g}et_address and
3411         sockaddr_{g,s}et_port to make use of struct sockaddr_storage and
3412         of the new ip_address structure.  removed map_ipv4_to_ip and
3413         map_ip_to_ipv4.
3414
3415         * host.h: redefined structure ip_address and removed structure
3416         wget_sockaddr.
3417
3418 2003-10-26  Hrvoje Niksic  <hniksic@xemacs.org>
3419
3420         * sysdep.h: Include inttypes.h where available.
3421
3422         * host.c: Switch from u_int32_t to uint32_t.
3423
3424 2003-10-26  Hrvoje Niksic  <hniksic@xemacs.org>
3425
3426         * netrc.c (parse_netrc): Reset the QUOTE flag after the closing
3427         quote.
3428
3429 2003-10-25  Hrvoje Niksic  <hniksic@xemacs.org>
3430
3431         * url.c (is_valid_ipv6_address): Reformat to GNU coding style.
3432         Use enums for NS_IN* constants.  Use ISXDIGIT.
3433
3434         * convert.c (construct_relative): Document better how the function
3435         works.
3436
3437 2003-10-23  Hrvoje Niksic  <hniksic@xemacs.org>
3438
3439         * config.h.in: Deploy preprocessor magic to avoid Ultrix's
3440         <netdb.h> include <bitypes.h> which defines its own u_int32_t.
3441         Reported by Bernhard Simon.
3442
3443 2003-10-23  Hrvoje Niksic  <hniksic@xemacs.org>
3444
3445         * version.c: Bump version.
3446
3447 2003-10-23  Hrvoje Niksic  <hniksic@xemacs.org>
3448
3449         * url.c: Ditto.
3450
3451         * html-parse.c (advance_declaration): Don't use trailing comma in
3452         enum because older compilers don't support it.
3453
3454         * utils.c: Don't redefine HAVE_SIGSETJMP.
3455
3456 2003-10-16  Hrvoje Niksic  <hniksic@xemacs.org>
3457
3458         * convert.c (construct_relative): Don't handle absolute files
3459         specially -- for example, -P/tmp/foo shouldn't imply that
3460         converted files must refer to "/tmp/foo/..."!
3461
3462 2003-10-15  Hrvoje Niksic  <hniksic@xemacs.org>
3463
3464         * http.c: Consider status 307 a valid redirect.
3465
3466 2003-10-15  Philip Stadermann  <philip.stadermann@credativ.de>
3467
3468         * ftp.c (ftp_retrieve_glob): Correctly loop through the list whose
3469         elements might have been deleted.
3470
3471 2003-10-13  Hrvoje Niksic  <hniksic@xemacs.org>
3472
3473         * html-url.c (tag_handle_meta): Set the Refresh link to expect
3474         HTML.
3475         (append_one_url): Renamed to append_url.
3476
3477 2003-10-13  Hrvoje Niksic  <hniksic@xemacs.org>
3478
3479         * sysdep.h: Only define u_int32_t.
3480
3481 2003-10-11  Hrvoje Niksic  <hniksic@xemacs.org>
3482
3483         * utils.c (large_int_to_string): Use snprintf() to print the
3484         number.  This will work even on systems where libc doesn't
3485         understand %lld, but the compiler does, because it will use our
3486         snprintf replacement.
3487
3488         * init.c (parse_bytes_helper): New function.
3489         (cmd_bytes): Use it to parse bytes, but cast the result to long.
3490         (cmd_bytes_large): Ditto, but store the result to LARGE_INT.  Used
3491         for --quota so that --quota=10G works even on machines without
3492         long long.
3493
3494         * options.h (struct options): Declare quota as LARGE_INT.
3495
3496         * retr.c (downloaded_exceeds_quota): Removed.
3497         (downloaded_increase): Ditto.
3498         (total_downloaded_bytes): New variable, replaces opt.downloaded,
3499         which was the wrong place for it anyway.  Updated callers of
3500         downloaded_exceeds_quota and downloaded_increase to check this
3501         variable directly.
3502
3503         * sysdep.h: Get rid of VERY_LONG_TYPE.  Use LARGE_INT for the same
3504         purpose, defined as `long', `long long' or `double', depending on
3505         size of long and whether long long is available.
3506
3507 2003-10-11  Hrvoje Niksic  <hniksic@xemacs.org>
3508
3509         * sysdep.h: Also check size of short for int32_t.
3510
3511 2003-10-11  Hrvoje Niksic  <hniksic@xemacs.org>
3512
3513         * host.c (lookup_host): Use u_int32_t to store the result of
3514         inet_addr().  That removes the need for offset fiddling, caring
3515         about endian-ness, etc.
3516
3517         * sysdep.h: Define int32_t and u_int32_t if not available.
3518
3519 2003-10-11  Hrvoje Niksic  <hniksic@xemacs.org>
3520
3521         * ftp-basic.c (ftp_epsv): Use socklen_t * as the third argument to
3522         getpeername.
3523
3524         * config.h.in: Define socklen_t stub.
3525
3526         * host.c (sockaddr_len): Return socklen_t.
3527
3528         * connect.c (conaddr): Use socklen_t as the third argument to
3529         accept, getsockname, and connect.
3530
3531 2003-10-10  Hrvoje Niksic  <hniksic@xemacs.org>
3532
3533         * recur.c (retrieve_tree): Don't descend into documents that are
3534         not expected to contain HTML, regardless of their content-type.
3535
3536         * html-url.c (tag_url_attributes): Record which attributes are
3537         supposed to yield HTML links that can be followed.
3538         (tag_find_urls): Propagate that information to the caller through
3539         struct urlpos.
3540
3541 2003-10-10  Hrvoje Niksic  <hniksic@xemacs.org>
3542
3543         * hash.c (find_mapping): Return the next available mapping when
3544         the key is not found, not NULL.
3545         (hash_table_put): Use find_mapping to find the storage for the new
3546         data.
3547         (hash_table_put): Grow the table before exceeding maximum
3548         fullness, not afterwards.
3549
3550 2003-10-10  Hrvoje Niksic  <hniksic@xemacs.org>
3551
3552         * hash.c (hash_table_new): Slightly change the meaning of the
3553         first parameter.  Instead of being the minimum initial size, it is
3554         now the minimum number of items that the hash table can take
3555         without needing to resize.
3556
3557 2003-10-09  Hrvoje Niksic  <hniksic@xemacs.org>
3558
3559         * html-url.c (init_interesting): Initialize interesting_tags and
3560         interesting_attributes as hash tables.  This simplifies the code
3561         immensely because hash tables handle allocation and remove
3562         duplicates automatically.
3563         (find_tag): Removed.
3564         (collect_tags_mapper): Instead of calling find_tag, simply get the
3565         entry from interesting_tags hash table, which is both simpler and
3566         faster.
3567
3568 2003-10-09  Hrvoje Niksic  <hniksic@xemacs.org>
3569
3570         * hash.c (hash_table_get): Declare hash-table argument as const.
3571         (find_mapping): Ditto.
3572         (hash_table_get_pair): Ditto.
3573         (hash_table_contains): Ditto.
3574         (hash_table_count): Ditto.
3575
3576 2003-10-08  Hrvoje Niksic  <hniksic@xemacs.org>
3577
3578         * html-url.c (get_urls_html): Parse the appropriate flags to
3579         html-parse.c.
3580
3581         * html-parse.c (map_html_tags): Accept FLAGS from the caller
3582         instead of examining OPT.
3583
3584 2003-10-08  Hrvoje Niksic  <hniksic@xemacs.org>
3585
3586         * html-url.c (find_tag): Switch to binary search.
3587
3588 2003-10-08  Hrvoje Niksic  <hniksic@xemacs.org>
3589
3590         * main.c (print_help): Fix typo; stured -> stored.
3591
3592 2003-10-08  Hrvoje Niksic  <hniksic@xemacs.org>
3593
3594         * getopt.c: Add definitions of getopt_long and getopt_long_only.
3595
3596 2003-10-08  Hrvoje Niksic  <hniksic@xemacs.org>
3597
3598         * config.h.in: Renamed DEBUG to ENABLE_DEBUG.  ENABLE_DEBUG is, I
3599         think, a better name, because it implies that debugging output is
3600         merely possible, not "on by default", as might be construed from
3601         just DEBUG.
3602
3603 2003-10-08  Hrvoje Niksic  <hniksic@xemacs.org>
3604
3605         * ftp.c (has_insecure_name_p): Define it here.
3606
3607         * utils.c (has_wildcards_p): Define it here.
3608
3609         * sysdep.h: Declare fnmatch-related macros here, if not using
3610         system fnmatch().  Update .c files to not declare fnmatch.h
3611         directly.
3612
3613         * cmpt.c (fnmatch): Moved here.  Use it only under non-GNU libc.
3614
3615 2003-10-08  Hrvoje Niksic  <hniksic@xemacs.org>
3616
3617         * getopt.c: Newer version, imported from Free libit.
3618
3619 2003-10-07  Hrvoje Niksic  <hniksic@xemacs.org>
3620
3621         * cookies.c (struct cookie): Remove unused backpointer to cookie
3622         jar.
3623
3624 2003-10-07  Hrvoje Niksic  <hniksic@xemacs.org>
3625
3626         * cmpt.c (memmove): Comment out, since it's no longer used.
3627
3628         * cookies.c (cookie_jar_generate_cookie_header): Allocate room for
3629         chains in one pass.
3630         (find_chains_of_host): Assume that the caller has allocated DEST
3631         to be sufficiently large to take all the data.
3632         (eliminate_dups): Run through the array and eliminate dups on the
3633         fly instead of using memmove.
3634         (cookie_jar_process_set_cookie): Free cookie->domain before
3635         re-setting it.
3636
3637 2003-10-05  Gisle Vanem  <giva@bgnett.no>
3638
3639         * mswindows.c (set_sleep_mode): Fix type of
3640         _SetThreadExecutionState.
3641
3642 2003-10-05  Hrvoje Niksic  <hniksic@xemacs.org>
3643
3644         * utils.c (file_size): Return -1 if fopen() returns NULL.  Prior
3645         to this patch, wget --post-file=nosuchfile dumped core.
3646
3647 2003-10-04  Gisle Vanem  <giva@bgnett.no>
3648
3649         * mswindows.c (run_with_timeout): Use WaitForSingleObject to wait
3650         for thread termination.
3651
3652 2003-10-04  Hrvoje Niksic  <hniksic@xemacs.org>
3653
3654         * log.c: Use `...' in function definitions; ansi2knr will convert
3655         them to va_dcl.  This allowed removal of the ugly VA_START_1 and
3656         VA_START_2 macros.
3657
3658 2003-10-03  Gisle Vanem  <giva@bgnett.no>
3659
3660         * connect.c: And don't include them here.
3661
3662         * mswindows.h: Include winsock headers here.
3663
3664 2003-10-03  Hrvoje Niksic  <hniksic@xemacs.org>
3665
3666         * html-parse.c (convert_and_copy): Move variable declarations
3667         before statements.
3668
3669 2003-10-02  Gisle Vanem  <giva@bgnett.no>
3670
3671         * mswindows.c (run_with_timeout): For Windows: Run the 'fun' in a
3672         thread via a helper function. Continually query the thread's
3673         exit-code until finished or timed out.
3674
3675 2003-10-02  Hrvoje Niksic  <hniksic@xemacs.org>
3676
3677         * wget.h (XMALLOC_ARRAY): Removed.
3678         (ALLOCA_ARRAY): Ditto.
3679
3680         * html-parse.c: Renamed alloca_p to resized.
3681         (GROW_ARRAY): Renamed DO_REALLOC_FROM_ALLOCA to GROW_ARRAY and
3682         returned it to html-parse.c, since nothing else was using it.
3683
3684 2003-10-02  Hrvoje Niksic  <hniksic@xemacs.org>
3685
3686         * retr.c (retrieve_url): Initialize DUMMY storage for DT.  Caught
3687         by valgrind.
3688
3689 2003-10-02  Hrvoje Niksic  <hniksic@xemacs.org>
3690
3691         * html-parse.c (convert_and_copy): Handle numeric entities in
3692         hexadecimal, &#xHH.
3693         (convert_and_copy): Copy the contents directly to the pool without
3694         a stack-allocated intermediary.
3695
3696 2003-10-02  Hrvoje Niksic  <hniksic@xemacs.org>
3697
3698         * utils.c (alarm_set): New function; use either setitimer or alarm
3699         to set up the alarm.
3700         (alarm_cancel): New function; cancel the alarm set up by
3701         alarm_set.
3702         (run_with_timeout): Use them.
3703
3704 2003-10-01  Hrvoje Niksic  <hniksic@xemacs.org>
3705
3706         * url.c (url_parse): Don't leak memory when a reencoded URL turns
3707         out to be invalid.
3708
3709         * url.c (parse_errors): Mark error messages for translation.
3710         (url_error): Translate error messages returned to the caller.
3711
3712 2003-10-01  Hrvoje Niksic  <hniksic@xemacs.org>
3713
3714         * ftp.c (ftp_loop_internal): Initialize TMRATE to NULL to shut up
3715         the compiler.
3716
3717 2003-09-26  Gisle Vanem  <giva@bgnett.no>
3718
3719         * src/mswindows.c: Added ws_percenttitle() showing progress in the
3720         window titlebar. Called from retr.c. Secured ws_mypath().
3721
3722         * windows/config.h.ms: alloca() prototype not needed.  Removed
3723         "#undef ENABLE_NLS"; should be in Makefile IMHO. Moved
3724         WGET_USE_STDARG from mswindows.h to config.ms.h because of #ifdef
3725         in log.c. (MSVC's vararg.h and stdarg.h are incompatible).
3726
3727 2003-09-29  Aaron Hawley <Aaron.Hawley@uvm.edu>
3728
3729         * ftp.c (getftp): --spider option should now work with FTP
3730         downloads.
3731         (ftp_loop_internal): quiet reports and calculations of downloads
3732         when --spider option set, nor try deleting when --delete-after
3733         also set.
3734         (ftp_loop): --spider will skip HTML-ification of .listing file.
3735
3736 2003-09-26  Gisle Vanem  <giva@bgnett.no>
3737
3738         * mswindows.c (read_registry): Removed.
3739         (set_sleep_mode): New function.
3740         (windows_main_junk): Call it.
3741
3742 2003-09-26  Gisle Vanem  <giva@bgnett.no>
3743
3744         * mswindows.c (read_registry): Fix invocation of registry
3745         functions.
3746
3747         * mswindows.c (read_registry): Condition definitions of sleep and
3748         usleep with not HAVE_SLEEP and HAVE_USLEEP respectively.  Define
3749         HAVE_SLEEP and HAVE_USLEEP under __DMC__.
3750
3751 2003-09-24  Hrvoje Niksic  <hniksic@xemacs.org>
3752
3753         * url.c (url_escape_1): Revert unintentional change to lowercase
3754         xdigit escapes.
3755         (url_escape_dir): Document that this function depends on the
3756         output of url_escape_1.
3757
3758 2003-09-23  Hrvoje Niksic  <hniksic@xemacs.org>
3759
3760         * progress.c (create_image): Print the current ETA if we're done
3761         with the download.
3762         (create_image): Change '-' display char to '+' in the progress bar.
3763
3764         * Makefile.in (clean): Remove .libs.
3765
3766 2003-09-23  Hrvoje Niksic  <hniksic@xemacs.org>
3767
3768         * cookies.c (struct cookie): New flag domain_exact.
3769         (update_cookie_field): Skip leading dot in domain.
3770         (find_matching_chains): Match numeric addresses exactly; don't
3771         needlessly copy HOST to the stack.
3772         (matching_cookie): Added argument HOST.  If cookie->domain_exact
3773         is set, check that HOST is equal to cookie->domain.
3774         (cookie_jar_load): Only use TAB as delimiter.  Document the
3775         meaning of DOMAIN-FLAG.  Skip leading dot in domain.
3776         (cookie_jar_load): Don't ignore DOMAIN-FLAG -- instead, set
3777         domain_exact to true if DOMAIN-FLAG is false.
3778         (save_cookies_mapper): If domain_exact is false, prepend the
3779         domain with dot, like Mozilla does.
3780
3781 2003-09-22  Hrvoje Niksic  <hniksic@xemacs.org>
3782
3783         * progress.c (create_image): Print the initial part of the
3784         download with '-' characters, analogous to how dot progress prints
3785         the initial part with ','.
3786
3787         * hash.c (ptrhash): New function.
3788         (ptrcmp): Ditto.
3789         (hash_table_new): Default to identity hash table.
3790
3791 2003-09-22  Hrvoje Niksic  <hniksic@xemacs.org>
3792
3793         * safe-ctype.h (_sch_test): The cast of BIT to unsigned char was
3794         broken -- _sch_istable bitmasks are 16-bit, not 8-bit!  Cast BIT
3795         to unsigned short instead.
3796
3797 2003-09-22  Hrvoje Niksic  <hniksic@xemacs.org>
3798
3799         * url.c (path_simplify): Instead of calls to memmove, handle "./"
3800         and "../" by advancing pointers.
3801
3802 2003-09-22  Hrvoje Niksic  <hniksic@xemacs.org>
3803
3804         * retr.c (getproxy): Moved from url.c.
3805
3806         * convert.c: Split off link conversion from url.c into separate
3807         file.  Also included the book-keeping stuff from recur.c.
3808
3809 2003-09-21  Hrvoje Niksic  <hniksic@xemacs.org>
3810
3811         * init.c: Improved documentation of functions.
3812         (cmd_boolean): Attempt to make code that tries to avoid calling
3813         strcmp for "speed" a bit more readable.
3814
3815         * init.c (simple_atof): Report error on encountering non-digit,
3816         non-"." character.
3817         (simple_atoi): Replacement for myatoi(), calling interface
3818         compatible with simple_atof.  Updated myatoi's callers.
3819
3820 2003-09-21  Bertrand Demiddelaer  <bert@b3rt.org>
3821
3822         * url.c (path_simplify): Would read two bytes past the end of the
3823         string in the "./" case.
3824
3825 2003-09-21  Matthew J. Mellon  <mellon@tymenet.com>
3826
3827         * http.c (gethttp): Recognize content-type "application/xhtml+xml"
3828         as what Wget considers "text/html".
3829
3830 2003-09-21  Hrvoje Niksic  <hniksic@xemacs.org>
3831
3832         * connect.c (connect_with_timeout): Made timeout type double.
3833
3834         * options.h (struct options): New members read_timeout,
3835         dns_timeout, and connect_timeout.
3836         Use them.
3837
3838 2003-09-21  Hrvoje Niksic  <hniksic@xemacs.org>
3839
3840         * init.c (simple_atof): New function.
3841         (cmd_time): Use it.
3842         (cmd_bytes): Accept things like "1.5k" and such.  Use simple_atof
3843         to parse decimals.
3844
3845         * retr.c (limit_bandwidth): Adjust each sleep by the error of the
3846         previous one.
3847
3848 2003-09-21  Hrvoje Niksic  <hniksic@xemacs.org>
3849
3850         * main.c (main): Use setoptval() for setting the options.  Use
3851         run_command for `-e'.
3852
3853         * init.c (parse_line): Rewritten to return COMIND right away.
3854         Changed linkage to static.
3855         (run_wgetrc): Use the available comind when calling setval, so it
3856         doesn't have to be computed twice.
3857         (setval_internal): New function, runs the command's action without
3858         any error checking.
3859         (setoptval): New function, does what setval used to do, but exits
3860         in case of error.
3861         (run_command): New function.
3862
3863 2003-09-21  Hrvoje Niksic  <hniksic@xemacs.org>
3864
3865         * connect.c (select_fd): Change MAXTIME's type to double.  Handle
3866         its decimal part.
3867
3868         * retr.c (sleep_between_retrievals): In the random-wait case, use
3869         random_float() to wait between 0 and 2*opt.wait seconds.
3870
3871         * utils.c (run_with_timeout): Accept `double' timeouts.  Correctly
3872         handle timeout values in (0, 1) range.
3873         (random_float): New function.
3874
3875         * options.h (struct options): Change the types of wait, waitretry,
3876         and timeout to double.
3877
3878         * init.c (cmd_time): Accept floating point time.
3879
3880 2003-09-20  Hrvoje Niksic  <hniksic@xemacs.org>
3881
3882         * retr.c (get_contents): Cosmetic fixes.
3883
3884 2003-09-20  Hrvoje Niksic  <hniksic@xemacs.org>
3885
3886         * url.c (uri_merge): Get rid of uri_merge_1.
3887         (uri_merge): Merge "foo//", "bar" as "foo//bar", not "foo///bar",
3888         i.e. don't add an extra slash merely because BASE ends with two
3889         slashes.
3890         (parse_credentials): Renamed from parse_uname.  Rewrittern in
3891         standard [beg, end) calling style.
3892         (url_skip_credentials): Renamed from url_skip_uname.  Made static.
3893         (url_skip_credentials): Include # and ; as terminators.  Old code
3894         would mistakenly consider "http://foo.com#hniksic@iskon.hr" to
3895         contain a username.
3896         (url_skip_scheme): Removed because it was unused.
3897         (url_has_scheme): Require "scheme" to be at least one char long.
3898
3899 2003-09-19  Hrvoje Niksic  <hniksic@xemacs.org>
3900
3901         * url.c (url_file_name): Expect NULL dir_prefix.
3902
3903         * init.c (cmd_file): Use a macro to prevent multiple #ifdef
3904         WINDOWS.
3905         (defaults): Set dir_prefix to NULL by default.
3906
3907 2003-09-19  Hrvoje Niksic  <hniksic@xemacs.org>
3908
3909         * safe-ctype.h (_sch_test): Cast BIT to unsigned char, like latest
3910         gcc does.
3911
3912 2003-09-19  Hrvoje Niksic  <hniksic@xemacs.org>
3913
3914         * wget.h (BOUNDED_TO_ALLOCA): Evaluate PLACE only once.
3915         (ARRAY_SIZE): Renamed to countof.  All callers updated.
3916
3917 2003-09-19  Hrvoje Niksic  <hniksic@xemacs.org>
3918
3919         * main.c (main): New option --strict-comments.
3920
3921         * html-parse.c (find_comment_end): New function: simple BM search
3922         for "-->".
3923         (map_html_tags): Use it if looking at a comment and not in strict
3924         comments mode.
3925
3926 2003-09-17  Aurelien Marchand  <artaxerxes@users.sf.net>
3927
3928         * ftp.h: Added OS400 system in enum
3929         * ftp-basic.c: recognize OS400 systems
3930         * ftp.c: don't prepend the CWD if talking to OS400, since it
3931         breaks the change in library
3932
3933 2003-09-18  Hrvoje Niksic  <hniksic@xemacs.org>
3934
3935         * retr.c (get_contents): Pass the correct argument to ssl_iread.
3936
3937 2003-09-18  Hrvoje Niksic  <hniksic@xemacs.org>
3938
3939         * safe-ctype.h: Don't #define ctype.h macros to errors because
3940         that loses when someone #include's ctype.h after safe-ctype.h.
3941
3942 2003-09-17  Hrvoje Niksic  <hniksic@xemacs.org>
3943
3944         * url.c: Undef U, W, C after use.
3945
3946 2003-09-17  Hrvoje Niksic  <hniksic@xemacs.org>
3947
3948         * init.c (cmd_spec_restrict_file_names): Allow the OS setting to
3949         be augmented by ",nocontrol" which means don't escape the control
3950         characters, but otherwise keep OS settings.
3951
3952         * url.c (file_unsafe_char): Deleted.
3953         (append_uri_pathel): Query filechr_table directly.
3954         (filechr_table): Separated Unix, Windows, and control-unsafe
3955         characters.
3956
3957 2003-09-17  Hrvoje Niksic  <hniksic@xemacs.org>
3958
3959         * url.c (url_escape_1): New function.
3960         (url_escape): Use it.
3961         (sync_path): Handle pathological cases where u->file and u->dir
3962         contain really strange characters.
3963         (ENCODE): Deleted.
3964         (REENCODE): Deleted.
3965
3966 2003-09-16  Hrvoje Niksic  <hniksic@xemacs.org>
3967
3968         * url.c (url_file_name): Don't reallocate FNAME if the file
3969         doesn't exist, as is usually the case.
3970
3971         * utils.c (unique_name): New flag allow_passthrough.
3972
3973 2003-09-16  Hrvoje Niksic  <hniksic@xemacs.org>
3974
3975         * utils.c (wtimer_sys_diff): Convert the time difference to signed
3976         __int64, then to double.  This works around MS VC++ 6 which can't
3977         convert unsigned __int64 to double directly.
3978
3979 2003-09-16  Hrvoje Niksic  <hniksic@xemacs.org>
3980
3981         * Makefile.in (clean): Also remove the core.<number> files
3982         produced by recent Linux systems.
3983
3984 2003-09-16  Hrvoje Niksic  <hniksic@xemacs.org>
3985
3986         * http.c (post_file): Don't pad the file if it's not large
3987         enough.  Bail out instead.
3988
3989 2003-09-15  Hrvoje Niksic  <hniksic@xemacs.org>
3990
3991         * retr.c (get_contents): Reduce the buffer size to the amount of
3992         data that may pass through for one second.  This prevents long
3993         sleeps when limiting bandwidth.
3994
3995         * connect.c (connect_to_one): Reduce the socket's RCVBUF when
3996         bandwidth limitation to small values is requested.
3997
3998 2003-09-15  Hrvoje Niksic  <hniksic@xemacs.org>
3999
4000         * progress.c (update_speed_ring): Moved the speed ring update to a
4001         separate function and documented it better.
4002
4003         * progress.c: Use `double' for most timers to support granularity
4004         smaller than 1ms.
4005
4006 2003-09-15  Hrvoje Niksic  <hniksic@xemacs.org>
4007
4008         * wget.h (XDIGIT_TO_XCHAR): Implement as index into a literal
4009         string.
4010         (XDIGIT_TO_xchar): Ditto.
4011
4012 2003-09-15  Hrvoje Niksic  <hniksic@xemacs.org>
4013
4014         * utils.c: Change the type of timer-related functions from long to
4015         double, for better precision.  On machines supporting gettimeofday
4016         the timers now work with granularity of less than one millisecond.
4017
4018 2003-09-15  Hrvoje Niksic  <hniksic@xemacs.org>
4019
4020         * cookies.c (parse_set_cookies): Fixed the parser to handle more
4021         edge conditions.
4022         (test_cookies): New function, contains a test suite for
4023         parse_set_cookies.
4024
4025 2003-09-15  Hrvoje Niksic  <hniksic@xemacs.org>
4026
4027         * url.c (strpbrk_or_eos): Implement as a macro under Gcc.
4028
4029 2003-09-15  Hrvoje Niksic  <hniksic@xemacs.org>
4030
4031         * cookies.c (parse_set_cookies): Allow trailing space in
4032         set-cookies header.  Also, allow any amount of whitespace, not
4033         only one character.  Allow empty set-cookies header without
4034         spewing an error.
4035
4036 2003-09-14  Hrvoje Niksic  <hniksic@xemacs.org>
4037
4038         * url.c (append_uri_pathel): Use opt.restrict_file_names when
4039         calling file_unsafe_char.
4040
4041         * init.c: New command restrict_file_names.
4042
4043         * main.c (main): New option --restrict-file-names[=windows,unix].
4044
4045         * url.c (url_file_name): Renamed from url_filename.
4046         (url_file_name): Add directory and hostdir prefix here, not in
4047         mkstruct.
4048         (append_dir_structure): New function, does part of the work that
4049         used to be in mkstruct.  Iterates over path elements in u->path,
4050         calling append_uri_pathel on each one to append it to the file
4051         name.
4052         (append_uri_pathel): URL-unescape a path element and reencode it
4053         with a different set of rules, more appropriate for handling of
4054         files.
4055         (file_unsafe_char): New function, uses a lookup table to decide
4056         whether a character should be escaped for use in file name.
4057         (append_string): New utility function.
4058         (append_char): Ditto.
4059         (file_unsafe_char): New argument restrict_for_windows, decide
4060         whether Windows file names should be escaped in run-time.
4061
4062         * connect.c: Include <stdlib.h> to get prototype for abort().
4063
4064 2003-09-14  Hrvoje Niksic  <hniksic@xemacs.org>
4065
4066         * utils.c (wtimer_sys_set): Extracted the code that sets the
4067         current time here.
4068         (wtimer_reset): Call it.
4069         (wtimer_sys_diff): Extracted the code that calculates the
4070         difference between two system times here.
4071         (wtimer_elapsed): Call it.
4072         (wtimer_elapsed): Don't return a value smaller than the previous
4073         one, which could previously happen when system time is set back.
4074         Instead, reset start time to current time and note the elapsed
4075         offset for future calculations.  The returned times are now
4076         guaranteed to be monotonically nondecreasing.
4077
4078 2003-09-10  Hrvoje Niksic  <hniksic@xemacs.org>
4079
4080         * host.c (lookup_host): Print the result of the DNS lookup.
4081
4082 2003-09-10  Hrvoje Niksic  <hniksic@xemacs.org>
4083
4084         * init.c (cmd_boolean): Accept yes/no along with on/off.
4085         (cmd_lockable_boolean): Ditto.
4086
4087 2003-09-10  Hrvoje Niksic  <hniksic@xemacs.org>
4088
4089         * init.c: New command dns_cache.
4090
4091         * main.c (main): New option --dns-cache[=off].
4092
4093 2003-09-09  Hrvoje Niksic  <hniksic@xemacs.org>
4094
4095         * config.h.in: Initialize HAVE_GETADDRINFO and ENABLE_IPV6.
4096
4097         * all: Use #ifdef ENABLE_IPV6 instead of the older INET6.  Use
4098         HAVE_GETADDRINFO for getaddrinfo-related stuff.
4099
4100 2003-09-09  Hrvoje Niksic  <hniksic@xemacs.org>
4101
4102         * url.c (url_parse): Return an error if the URL contains a [...]
4103         IPv6 numeric address and we don't support IPv6.
4104
4105 2003-09-05  Hrvoje Niksic  <hniksic@xemacs.org>
4106
4107         * url.c (is_valid_ipv6_address): Modified to not require
4108         zero-terminated strings.
4109         (is_valid_ipv4_address): Ditto.
4110
4111 2003-09-05  Mauro Tortonesi <mauro@deepspace6.net>
4112
4113         src/url.c: added RFC 2732 compliance for URL parsing. The
4114         functions is_*_address valid are a modified version of
4115         glibc 2.3.2 inet_pton's code.
4116
4117 2003-09-03  Ahmon Dancy  <dancy@dancysoft.com>
4118
4119         * main.c init.c options.h: Added --retry-connrefused option so
4120         that Connection Refused failures are treated as non-fatal (when
4121         trying to retrieve from busy servers).
4122
4123         * wget.h: New CONNECT_ERROR macro for encapsulating this
4124         modification.
4125
4126         * ftp.c http.c : Use CONNECT_ERROR macro in places where
4127         ECONNREFUSED was checked.
4128
4129 2003-01-11  Ian Abbott  <abbotti@mev.co.uk>
4130
4131         * ftp.c (ftp_retrieve_glob): Reject insecure filenames as determined
4132         by calling new function has_insecure_name_p.  This is based on a
4133         patch by Red Hat.
4134
4135         * fnmatch.c (has_insecure_name_p): New function: returns non-zero
4136         if filename starts with `/' or contains `../' and is therefore
4137         considered insecure.
4138
4139         * fnmatch.h: Declare has_insecure_name_p().
4140
4141 2002-08-03  Hrvoje Niksic  <hniksic@xemacs.org>
4142
4143         * init.c (cmd_file): Allocate RESULT correctly.
4144
4145 2002-07-24  Hrvoje Niksic  <hniksic@xemacs.org>
4146
4147         * recur.c (retrieve_tree): Check whether downloaded_html_set is
4148         non-NULL before using it.
4149
4150 2002-05-27  Hrvoje Niksic  <hniksic@arsdigita.com>
4151
4152         * html-parse.c (NAME_CHAR_P): Allow almost any character here.
4153
4154 2002-05-24  Hrvoje Niksic  <hniksic@arsdigita.com>
4155
4156         * progress.c (bar_set_params): Fall back to dot progress if the
4157         terminal type is "emacs".
4158
4159 2002-05-20  Hrvoje Niksic  <hniksic@arsdigita.com>
4160
4161         * log.c: Don't #undef WGET_USE_STDARG.
4162
4163 2002-05-16  Hrvoje Niksic  <hniksic@arsdigita.com>
4164
4165         * hash.c (prime_size): Store the offset of the prime number in the
4166         prime table.  When searching, start with the given offset.
4167         (hash_table_new): Pass the pointer to ht->prime_offset to
4168         prime_size.
4169         (grow_hash_table): Ditto.
4170         (prime_size): Make 13 the first prime to make empty hash tables
4171         slightly smaller.
4172
4173 2002-05-16  Ian Abbott  <abbotti@mev.co.uk>
4174
4175         * recur.c (download_child_p): Minor optimization to avoid an
4176         unnecessary additional call to schemes_are_similar_p function.
4177
4178 2002-05-16  Ian Abbott  <abbotti@mev.co.uk>
4179
4180         * url.c (schemes_are_similar_p): New function to test enumerated
4181         scheme codes for similarity.
4182
4183         * url.h: Declare it.
4184
4185         * recur.c (download_child_p): Use it to compare schemes.  This
4186         also fixes a bug that allows hosts to be spanned (without the
4187         -H option) when the parent scheme is https and the child's is
4188         http or vice versa.
4189
4190 2002-05-14  Bill Richardson  <bill@riverstonenet.com>
4191
4192         * ftp.c (getftp): Don't ftruncate stdout.
4193
4194         * http.c (gethttp): Don't ftruncate stdout.
4195
4196 2002-05-09  Ian Abbott  <abbotti@mev.co.uk>
4197
4198         * cmpt.c (strptime_internal): Synched with glibc-2.1.3.
4199         (get_number): Ditto.
4200         (get_alt_number): Ditto.
4201         (__isleap): New function-like macro used by strptime.
4202         (day_of_the_week): New function used by strptime.
4203         (day_of_the_year): Ditto.
4204         (__mon_yday): Now shared by mktime and strptime implementations.
4205
4206 2002-05-08  Hrvoje Niksic  <hniksic@arsdigita.com>
4207
4208         * cookies.c (check_domain_match): Use match_tail in case
4209         insensitive mode.
4210
4211         * utils.c (match_tail): Allow the caller to specify case
4212         insensitive mode.
4213
4214         * cookies.c (store_cookie): When expiry_time is 0, print it as
4215         undefined, not indefinite.
4216
4217 2002-05-07  Ian Abbott  <abbotti@mev.co.uk>
4218
4219         * cookies.c (cookie_jar_process_set_cookie): Do not store
4220         discarded cookie.
4221
4222 2002-04-21  Hrvoje Niksic  <hniksic@arsdigita.com>
4223
4224         * cookies.c (check_domain_match): Allow cookies to be set for
4225         subdomains of unknown top-level domains under some circumstances.
4226
4227 2002-04-21  Thomas Lussnig  <thomas.lussnig@bewegungsmelder.de>
4228
4229         * gen_ssl.c:
4230         - allow checking of server cert
4231         - allow defining client cert type
4232         - allow limit of ssl protocol
4233         - check more return values
4234         - added debug message on break
4235
4236 2002-04-21  Hrvoje Niksic  <hniksic@arsdigita.com>
4237
4238         * recur.c (download_child_p): Revert order of items in check
4239         number 6 for clarity.
4240
4241 2002-04-20  Hrvoje Niksic  <hniksic@arsdigita.com>
4242
4243         * init.c: Ditto.
4244
4245         * main.c: Ditto.
4246
4247         * http.c: Use the new interface.
4248
4249         * cookies.c: Provide an OO-style "cookie jar" interface to enable
4250         separate cookie jars.
4251
4252         * http.c (http_atotm): Declare argument as const.
4253
4254 2002-04-20  Hrvoje Niksic  <hniksic@arsdigita.com>
4255
4256         * cookies.c (cookie_new): Default to PORT_ANY.
4257         (find_cookie_chain_exact): Only search by DOMAIN.
4258         (find_matching_cookie): Also check that PORT matches.
4259         (store_cookie): Only match the domain.
4260         (set_cookie_header_cb): When a cookie "fakes" a domain, assume it
4261         is valid for that host rather than discarding it completely.
4262         (find_matching_chains): Don't search by PORT.
4263         (matching_cookie): Also match PORT.
4264         (load_cookies): Set the port if specified, otherwise leave it as
4265         ANY.
4266         (save_cookies_mapper): Save the port if specified, otherwise leave
4267         it empty.
4268
4269 2002-04-19  Thomas Lussnig  <thomas.lussnig@bewegungsmelder.de>
4270
4271         * init.c: The option `egdfile' was not in sort order.
4272
4273 2002-04-16  Hrvoje Niksic  <hniksic@arsdigita.com>
4274
4275         * ftp.c (getftp): Treat directories that begin with <letter>: as
4276         absolute.
4277         (getftp): Strip trailing slashes from con->id before merging it
4278         with TARGET.
4279
4280 2002-04-16  Hrvoje Niksic  <hniksic@arsdigita.com>
4281
4282         * http.c (gethttp): If Content-Type is not given, assume
4283         text/html.
4284
4285 2002-04-15  Hrvoje Niksic  <hniksic@arsdigita.com>
4286
4287         * recur.c (download_child_p): Don't ignore rejection of HTML
4288         documents that are themselves leaves of recursion.
4289
4290 2002-04-15  Ian Abbott  <abbotti@mev.co.uk>
4291
4292         Makefile.in: Updated several dependencies for object files to take
4293         account of nested include files.
4294
4295 2002-04-15  Ian Abbott  <abbotti@mev.co.uk>
4296
4297         Makefile.in: The target `connect$o' (connect.o) now depends on
4298         `utils.h'
4299
4300 2002-04-15  Ian Abbott  <abbotti@mev.co.uk>
4301
4302         * host.c (SET_H_ERRNO): New function-like macro to set `h_errno'.
4303         (gethostbyname_with_timeout): Use it.
4304
4305         * utils.c: Don't define `SETJMP()', `run_with_timeout_env' or
4306         `abort_run_with_timeout()' when `USE_SIGNAL_TIMEOUT' is undefined.
4307
4308 2002-04-15  Hrvoje Niksic  <hniksic@arsdigita.com>
4309
4310         * host.c (getaddrinfo_with_timeout): New function.
4311         (gethostbyname_with_timeout): Ditto.
4312         (lookup_host): Use them.
4313
4314 2002-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
4315
4316         * utils.c (number_to_string): Handle the case when n < -INT_MAX.
4317
4318 2002-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
4319
4320         * init.c (comind): Use a marginally faster implementation of
4321         binary search.  To quote Martin Buchholz, "a nanosecond saved is a
4322         nanosecond earned."
4323
4324 2002-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
4325
4326         * main.c (print_help): Document `--post-data' and `--post-file'.
4327
4328 2002-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
4329
4330         * http.c (gethttp): Ditto.
4331
4332         * retr.c (retrieve_url): Initialize variables to appease the
4333         compiler.
4334
4335         * gen_sslfunc.c (ssl_iread): Don't handle EINTR when calling
4336         select_fd.
4337         (ssl_iwrite): Ditto.
4338
4339         * connect.c (select_fd): Rewrite to handle EINTR.  Set errno to
4340         ETIMEDOUT in case of timeout.
4341         (iread): No need to handle EINTR when calling select_fd.
4342         (iwrite): Ditto.
4343
4344 2002-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
4345
4346         * retr.c (retrieve_url): Make sure that POST is not honored for
4347         redirections.
4348
4349         * http.c (gethttp): Send the POST data when requested.
4350         (post_file): New function.
4351         (gethttp): Use it.
4352
4353         * main.c (main): Ditto.
4354
4355         * init.c: Add new options.
4356
4357         * options.h (struct options): New options post_data and
4358         post_file_name.
4359
4360 2002-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
4361
4362         * connect.c (connect_with_timeout): Firing SIGALRM can result in
4363         connect() exiting with EINTR.  Treat EINTR the same as ETIMEDOUT.
4364
4365 2002-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
4366
4367         * connect.c (connect_with_timeout): Use it.
4368
4369         * utils.c (run_with_timeout): New function.
4370
4371 2002-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
4372
4373         * url.c (getproxy): Accept a struct url argument.  This obviates
4374         the need for USE_PROXY_P.
4375
4376         * retr.c (retrieve_url): Allow proxy to be a non-FTP URL.
4377
4378         * ftp.c (getftp): Recognize FWTK-style proxy.
4379
4380 2002-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
4381
4382         * config.h.in: Only define _VA_LIST when compiled with gcc.
4383
4384 2002-04012  Ian Abbott  <abbotti@mev.co.uk>
4385
4386         * http.c (http_loop): Compensate for MS Windows two-second
4387         granularity of file modification time when comparing timestamps.
4388
4389         * ftp.c (ftp_retrieve_list): Ditto.
4390
4391 2002-04-12  Ian Abbott  <abbotti@mev.co.uk>
4392
4393         * utils.c (has_html_suffix_p): New function to test filename for
4394         common html extensions.
4395
4396         * utils.h: Declare it.
4397
4398         * http.c (http_loop): Use it instead of previous test.
4399
4400         * retr.c (retrieve_url): Ditto.
4401
4402         * recur.c (download_child_p): Ditto.
4403
4404 2002-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
4405
4406         * config.h.in: Define _VA_LIST on Solaris to prevent stdio.h from
4407         declaring va_list.
4408         From Kevin Rodgers <kevinr@ihs.com>.
4409
4410 2002-04-12  Ian Abbott  <abbotti@mev.co.uk>
4411
4412         * Makefile.in: Specify libtool mode explicitly when linking.
4413
4414 2002-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
4415
4416         * connect.c (connect_with_timeout): New function.
4417         (connect_to_one): Use it.
4418
4419         * config.h.in: Add stubs for HAVE_SIGSETJMP, HAVE_SIGBLOCK, and
4420         HAVE_SETJMP_H.
4421
4422 2002-04-11  Hrvoje Niksic  <hniksic@arsdigita.com>
4423
4424         * log.c: Set WGET_USE_STDARG if __STDC__ is defined and stdarg.h
4425         is present.
4426
4427 2002-04-11  Hrvoje Niksic  <hniksic@arsdigita.com>
4428
4429         * progress.c (bar_create): If INITIAL is larger than TOTAL, fix
4430         TOTAL.
4431         (bar_finish): Likewise.
4432
4433 2002-04-11  Hrvoje Niksic  <hniksic@arsdigita.com>
4434
4435         * html-url.c (tag_handle_form): New function.  Pick up form
4436         actions and mark them for conversion only.
4437
4438 2002-04-11  Hrvoje Niksic  <hniksic@arsdigita.com>
4439
4440         * progress.c (struct progress_implementation): Use PARAMS when
4441         declaring the parameters of *create, *update, *finish, and
4442         *set_params.
4443
4444         * netrc.c: Ditto.
4445
4446         * http.c: Reformat some function definitions so that ansi2knr can
4447         read them.
4448
4449         * hash.c (struct hash_table): Use the PARAMS macro around
4450         parameters in the declaration of hash_function and test_function.
4451         (prime_size): Spell 2580823717UL and 3355070839UL as (unsigned
4452         long)0x99d43ea5 and (unsigned long)0xc7fa5177 respectively, so
4453         that pre-ANSI compilers can read them.
4454         (find_mapping): Use PARAMS when declaring EQUALS.
4455         (hash_table_put): Ditto.
4456
4457         * ftp.h: Wrap the parameters of ftp_index declaration in PARAMS.
4458
4459         * cookies.c (cookie_new): Use (unsigned long)0 instead of 0UL,
4460         which was unsupported by pre-ANSI compilers.
4461
4462         From Nelson H. F. Beebe <beebe@math.utah.edu>, for the most part.
4463
4464 2002-04-11  Hrvoje Niksic  <hniksic@arsdigita.com>
4465
4466         * url.c (url_filename): Use compose_file_name regardless of
4467         whether opt.dirstruct is set.
4468         (mkstruct): Don't handle the query and the reencoding of DIR; that
4469         is done in compose_file_name.
4470
4471 2002-04-10  Hrvoje Niksic  <hniksic@arsdigita.com>
4472
4473         * wget.h: Ditto for extern char *exec_name.
4474
4475         * options.h: Don't guard against OPTIONS_DEFINED_HERE -- it is
4476         perfectly legal to follow an `extern' with a non-`extern' ones,
4477         provided the types match.
4478
4479         * main.c: Don't define OPTIONS_DEFINED_HERE.
4480
4481 2002-04-10  Hrvoje Niksic  <hniksic@arsdigita.com>
4482
4483         * progress.c (create_image): Revert to calculating ETA based on
4484         average download speed.
4485         (create_image): Don't print ETA until the download has been active
4486         for at least 3 seconds.
4487         (create_image): When ETA is not available, don't print anything.
4488         The previous version would print --:--.
4489
4490 2002-04-10  Hrvoje Niksic  <hniksic@arsdigita.com>
4491
4492         * progress.c (bar_update): Keep updating a subinterval until it
4493         reaches or exceeds a watermark.  That way the measurement will be
4494         guaranteed to span a configurable minimum of time.  The current
4495         default is 3s in 30 100ms intervals.
4496
4497 2002-04-09  Hrvoje Niksic  <hniksic@arsdigita.com>
4498
4499         * progress.c (bar_update): Maintain an array of the time it took
4500         to perform previous 30 network reads.
4501         (create_image): Calculate the download speed and ETA based on the
4502         last 30 reads, not the entire download.
4503         (create_image): Make sure that the ETA is not changed more than
4504         once per second.
4505
4506 2002-04-09  Ian Abbott  <abbotti@mev.co.uk>
4507
4508         * mswindows.c (borland_utime): New function conditionally defined
4509         when `HACK_BCC_UTIME_BUG' is defined.  A reimplementation of
4510         `utime()' as Borland's `utime()' function is broken on Windows 9x
4511         systems.  (Original patch by Chin-yuan Kuo <sr1111111@yahoo.com.tw>.)
4512
4513 2002-04-08  Hrvoje Niksic  <hniksic@arsdigita.com>
4514
4515         * ftp.c (ftp_loop): Propagate the result of ftp_retrieve_glob.
4516
4517 2002-03-26  Ian Abbott  <abbotti@mev.co.uk>
4518
4519         * Makefile.in: Updated several dependencies for object files.
4520
4521 2002-03-20  Ian Abbott  <abbotti@mev.co.uk>
4522
4523         * mswindows.c: Include "utils.h".
4524
4525 2002-03-18  Ian Abbott  <abbotti@mev.co.uk>
4526
4527         * host.h: Don't include netdb.h on windows.
4528
4529 2002-02-19  Hrvoje Niksic  <hniksic@arsdigita.com>
4530
4531         * recur.c (retrieve_tree): Handle the case when start_url doesn't
4532         parse.
4533
4534 2002-02-19  Andreas Damm  <andreas-sourceforge@radab.org>
4535
4536         * wget.h (DO_REALLOC_FROM_ALLOCA): Multiply with sizeof(type) when
4537         calling xmalloc and memcpy.
4538
4539 2002-02-19  Hrvoje Niksic  <hniksic@arsdigita.com>
4540
4541         * host.h: Include Unix-specific includes #ifndef WINDOWS.
4542         Patch originally provided by Christian Lackas.
4543
4544 2002-02-11  Christian Lackas  <delta@lackas.net>
4545
4546         * recur.c: recurive downloading for https fixed.
4547
4548 2002-02-19  Alan Eldridge  <alane@geeksrus.net>
4549
4550         * host.h: Also include <netinet/in.h> and <sys/socket.h>.
4551
4552         * ftp-basic.c: Also include <netinet/in.h>.
4553
4554 2002-02-05  Ian Abbott  <abbotti@mev.co.uk>
4555
4556         * http.c (gethttp): when -c used, mark already fully retrieved
4557         file as successfully retrieved.
4558
4559 2002-02-19  Hrvoje Niksic  <hniksic@arsdigita.com>
4560
4561         * url.c (url_parse): Don't treat '?' as query string separator
4562         when parsing FTP URLs.
4563
4564 2002-02-01  Hrvoje Niksic  <hniksic@arsdigita.com>
4565
4566         * html-url.c (tag_handle_meta): Don't crash on <meta
4567         http-equiv=refresh> where content is missing.
4568
4569 2002-01-31  Herold Heiko  <Heiko.Herold@previnet.it>
4570
4571         * ftp-basic.c, host.c: don't include sys/socket.h, arpa/inet.h,
4572         netdb.h on windows.
4573
4574 2002-01-30  Hrvoje Niksic  <hniksic@arsdigita.com>
4575
4576         * retr.c (retrieve_url): Remove redirection cycle detection.  This
4577         is because some sites legitimately redirect the user back to the
4578         same location, e.g. after an authorization check performed by
4579         another page.  MAX_REDIRECTIONS is still used to prevent infinite
4580         redirection loops.
4581
4582 2002-01-26  Hrvoje Niksic  <hniksic@arsdigita.com>
4583
4584         * http.c (gethttp): Wrap host name in square brackets if it
4585         contains a colon.
4586
4587 2002-01-26  Hrvoje Niksic  <hniksic@arsdigita.com>
4588
4589         * url.c (url_parse): Allow all hex digits, not only decimal ones,
4590         to form an IP address.
4591
4592 2002-01-26  Hrvoje Niksic  <hniksic@arsdigita.com>
4593
4594         * url.c (urlchr_table): Make square braces reserved, so we can
4595         parse http://[::1]/.
4596         (url_parse): Handle host in braces.
4597         (url_string): If url->host contains colons, wrap it in braces.
4598
4599 2002-01-24  Hrvoje Niksic  <hniksic@arsdigita.com>
4600
4601         * connect.c (resolve_bind_address): New function.
4602         (connect_to_one): Use it.
4603         (bindport): Ditto.
4604
4605         * init.c: Don't resolve bind-address here.
4606
4607         * host.c (wget_sockaddr_set_address): Would bug out with ADDR == NULL.
4608
4609 2002-01-24  Hrvoje Niksic  <hniksic@arsdigita.com>
4610
4611         * host.c (lookup_host): Use sizeof(ip4_address) to calculate the
4612         offset.
4613         (address_list_new): Use map_ipv4_to_ip.
4614         (wget_sockaddr_set_address): Convert ADDR to IPv4 before using it
4615         in IPv4 context.
4616
4617 2002-01-24  Hrvoje Niksic  <hniksic@arsdigita.com>
4618
4619         * source: Integrated IPv6 support.
4620         Written by Thomas Lussnig <thomas.lussnig@bewegungsmelder.de>.
4621
4622 2002-01-15  Ian Abbott  <abbotti@mev.co.uk>
4623
4624         * init.c (cmd_file): Change `\' to `/' for Windows (yes, really!)
4625         (cmd_directory): New function. Like cmd_file(), but strips
4626         trailing directory separators.
4627         (commands): Change action for "dirprefix" from `cmd_file' to
4628         `cmd_directory'.
4629
4630         * utils.c (make_directory): Allow intermediate `mkdir' calls to
4631         fail, as not all path components that do not exist should be
4632         directory components, especially under Windows.
4633
4634 2002-01-17  Hrvoje Niksic  <hniksic@arsdigita.com>
4635
4636         * netrc.c (parse_netrc): Skip leading whitespace before testing
4637         whether the line is empty.  Empty lines still contain the line
4638         terminator.
4639
4640 2002-01-15  Hrvoje Niksic  <hniksic@arsdigita.com>
4641
4642         * gen_sslfunc.c (ssl_iread): Call select on the file descriptor
4643         only if no data is pending in SSL buffers.
4644         From tony@bluetail.com.
4645
4646 2002-01-14  Hrvoje Niksic  <hniksic@arsdigita.com>
4647
4648         * headers.c (header_get): Strip trailing whitespace from the
4649         header.
4650
4651 2002-01-14  Hrvoje Niksic  <hniksic@arsdigita.com>
4652
4653         * url.c (parse_uname): URL-decode *USER and *PASSWD.
4654
4655 2002-01-07  Ian Abbott <abbotti@mev.co.uk>
4656
4657         * url.c (uri_merge_1): Deal with "net path" relative URL (one that
4658         starts with "//").
4659
4660 2002-01-14  Hrvoje Niksic  <hniksic@arsdigita.com>
4661
4662         * http.c (gethttp): Invalidate SOCK if get_contents encountered an
4663         error.
4664
4665 2001-12-24  Hrvoje Niksic  <hniksic@arsdigita.com>
4666
4667         * version.c: Wget 1.8.1 is released.
4668
4669 2001-12-19  Hrvoje Niksic  <hniksic@arsdigita.com>
4670
4671         * version.c: Wget 1.8.1-pre3 is released.
4672
4673 2001-12-19  Hrvoje Niksic  <hniksic@arsdigita.com>
4674
4675         * recur.c (retrieve_tree): Enqueue the canonical representation of
4676         start_url, so that the test against dl_url_file_map works.
4677
4678 2001-12-19  Hrvoje Niksic  <hniksic@arsdigita.com>
4679
4680         * log.c (logputs): Check for requested verbosity before printing
4681         anything.
4682
4683 2001-12-19  Hrvoje Niksic  <hniksic@arsdigita.com>
4684
4685         * html-url.c (tag_handle_link): Treat the "shortcut icon" link as
4686         inline.
4687
4688 2001-12-18  Hrvoje Niksic  <hniksic@arsdigita.com>
4689
4690         * recur.c (retrieve_tree): Make a copy of file obtained from
4691         dl_url_file_map because the code calls xfree(file) later.
4692
4693 2001-12-18  Hrvoje Niksic  <hniksic@arsdigita.com>
4694
4695         * recur.c (register_html): Maintain a hash table of HTML files
4696         along with the list.  Disallow duplicates.
4697         (retrieve_tree): Use downloaded_html_set to check whether the file
4698         found in dl_url_file_map is an HTML file, and descend into it if
4699         so.
4700         (convert_all_links): Don't guard against duplicates in
4701         downloaded_html_list, since they are no longer possible.
4702
4703 2001-12-18  Ian Abbott  <abbotti@mev.co.uk>
4704
4705         * recur.c (retrieve_tree): Pass on referring URL when retrieving
4706         recursed URL.
4707
4708 2001-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
4709
4710         * version.c: Wget 1.8.1-pre2 is released.
4711
4712 2001-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
4713
4714         * retr.c (sleep_between_retrievals): Simplify indentation.
4715
4716 2001-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
4717
4718         * gen_sslfunc.c (ssl_init_prng): Use random_number to get a byte
4719         of "randomness" at a time.
4720         (ssl_init_prng): Don't seed the PRNG; random_number will do that.
4721
4722         * retr.c (sleep_between_retrievals): Use it.  Make sure that the
4723         random amount averages in opt.wait.
4724         (sleep_between_retrievals): Don't seed the PRNG; random_number
4725         will do that.
4726
4727         * utils.c (random_number): New function.
4728
4729 2001-12-14  Hrvoje Niksic  <hniksic@arsdigita.com>
4730
4731         * url.c (path_simplify): Move here from utils.c, and make static.
4732
4733 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
4734
4735         * init.c (wgetrc_file_name): Print correct message when loading
4736         getenv("WGETRC") fails.
4737
4738 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
4739
4740         * recur.c (register_download): Don't abort when one URL references
4741         two different files.
4742
4743 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
4744
4745         * http.c (gethttp): Check for conn->scheme, not u->scheme, before
4746         calling ssl_iwrite.
4747
4748 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
4749
4750         * version.c: Wget 1.8.1-pre1 is released.
4751
4752 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
4753
4754         * res.c (matches): Fix broken URL in the docstring.
4755
4756 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
4757
4758         * html-url.c (tag_url_attributes): Mark <embed href=...> as
4759         external.
4760
4761 2001-12-12  Hrvoje Niksic  <hniksic@arsdigita.com>
4762
4763         * url.c (get_urls_file): Cosmetic changes.
4764
4765 2001-12-12  Hrvoje Niksic  <hniksic@arsdigita.com>
4766
4767         * html-url.c (append_one_url): Resurrect warning when unable to
4768         resolve a relative link.
4769
4770 2001-12-12  Hrvoje Niksic  <hniksic@arsdigita.com>
4771
4772         * html-url.c (collect_tags_mapper): Break into several functions.
4773         (tag_url_attributes): Collect <embed href=...>.
4774
4775 2001-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
4776
4777         * host.c: New type ipv4_address.  Use it consistently instead of
4778         `unsigned char[4]' and `unsigned char *'.
4779         (pretty_print_address): Accept a `const void *', to require even
4780         less casting.
4781
4782 2001-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
4783
4784         * ftp-ls.c (ftp_parse_vms_ls): Fix obvious memory leaks.
4785
4786 2001-12-10  Hrvoje Niksic  <hniksic@arsdigita.com>
4787
4788         * main.c (main): Initialize progress after fork_to_background, so
4789         that it knows when to use dots.
4790
4791         * mswindows.c (ws_hangup): Call log_request_redirect_output.
4792
4793         * utils.c (fork_to_background): Print the PID of the child
4794         process.
4795
4796         * log.c (log_request_redirect_output): Set a flag that output
4797         redirection has been requested.  Doing anything else in a signal
4798         handler is unsafe.
4799         (check_redirect_output): New function: check whether redirection
4800         has been requested and, if so, call redirect_output().
4801         (logputs): Call check_redirect_output.
4802         (logprintf): Ditto.
4803         (debug_logprintf): Ditto.
4804         (redirect_output): Print clearer messages.
4805
4806         * main.c (redirect_output_signal): Don't call
4807         redirect_output_signal directly.  Instead, call
4808         log_request_redirect_output.
4809
4810         * utils.c (memfatal): Ditto.
4811
4812         * progress.c (display_image): Use it.
4813
4814         * log.c (log_set_save_context): New function: allow the caller to
4815         turn off saving log context lines.
4816
4817 2001-12-10  Hrvoje Niksic  <hniksic@arsdigita.com>
4818
4819         * host.c (address_list_set_faulty): Uncomment a sanity check.
4820
4821 2001-12-10  Hrvoje Niksic  <hniksic@arsdigita.com>
4822
4823         * utils.c (long_to_string): Return a pointer after where the
4824         number ends.
4825         (long_to_string): Rename to number_to_string.
4826
4827 2001-12-10  Hrvoje Niksic  <hniksic@arsdigita.com>
4828
4829         * utils.c (path_simplify): Correctly handle the unlikely case that
4830         b starts out as path + 1.
4831
4832 2001-12-10  Hrvoje Niksic  <hniksic@arsdigita.com>
4833
4834         * utils.c (path_simplify): Rewrite, with better comments, and
4835         without the use of strcpy to move overlapping blocks.
4836
4837 2001-12-09  Hrvoje Niksic  <hniksic@arsdigita.com>
4838
4839         * init.c (cmd_spec_progress): Resurrect.  Check whether VAL is a
4840         valid progress type before setting it.
4841
4842 2001-12-09  Hrvoje Niksic  <hniksic@arsdigita.com>
4843
4844         * main.c (main): Remove stray debugging message.
4845
4846 2001-12-09  Hrvoje Niksic  <hniksic@arsdigita.com>
4847
4848         * progress.c (create_image): Fix ETA padding when hours are prined.
4849
4850 2001-12-09  Hrvoje Niksic  <hniksic@arsdigita.com>
4851
4852         * version.c: Wget 1.8 is released.
4853
4854 2001-12-09  Hrvoje Niksic  <hniksic@arsdigita.com>
4855
4856         * url.c (reencode_string): Declare static.
4857
4858         * res.c (registered_specs): Declare static.
4859
4860         * progress.c (current_impl_locked): Declare static.
4861
4862         * log.c (flush_log_p): Declare static.
4863         (needs_flushing): Ditto.
4864
4865         * http.c (digest_authentication_encode): Declare static.
4866
4867         * html-url.c (init_interesting): Declare static.
4868
4869         * host.c (host_name_addresses_map): Declare static.
4870
4871         * cookies.c (find_matching_chains): Declare static.
4872
4873         * ftp-ls.c (ftp_parse_vms_ls): Warn about the memory leak
4874         indicated by lint.
4875
4876         * utils.c (path_simplify): Remove unused variable STUB_CHAR.
4877
4878         * host.c (address_list_set_faulty): Document that INDEX is
4879         currently unused.
4880
4881         * url.c (rewrite_shorthand_url): Remove unused variable PATH.
4882
4883 2001-12-08  Hrvoje Niksic  <hniksic@arsdigita.com>
4884
4885         * version.c: Wget 1.8-pre2 is released.
4886
4887 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
4888
4889         * progress.c (progress_handle_sigwinch): Set up the signal again.
4890
4891         * utils.c: Include <sys/termios.h>, where Solaris defines
4892         TIOCGWINSZ.
4893
4894         * progress.c (bar_create): Don't use the last column on the screen.
4895         (create_image): Pad ETA to constant size.  Pad SIZE to nine digits
4896         only until it exceeded them.
4897
4898 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
4899
4900         * version.c: Wget 1.8-pre1 is released.
4901
4902 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
4903
4904         * progress.c (progress_create): Make sure that, when the output is
4905         redirected, the progress implementation gets changed to the
4906         fallback one.
4907         (bar_set_params): Set current_impl_locked to 1 when "force" is
4908         specified.
4909         (progress_create): Don't change the progress implementation if
4910         current_impl_locked is non-zero.
4911
4912         * main.c (redirect_output_signal): Call
4913         progress_schedule_redirect.
4914
4915         * progress.c (progress_schedule_redirect): New function.
4916
4917 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
4918
4919         * log.c (logvprintf): Restructure to allow being called multiple
4920         times.
4921         (logprintf): Call logvprintf in a loop.
4922         (debug_logprintf): Ditto.
4923
4924 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
4925
4926         * gen_sslfunc.c (ssl_init_prng): Allow the user to disable EGD by
4927         setting egd_file it to empty string.
4928
4929         * main.c (main): Change the option name from --sslegdsock to
4930         --egd-file.
4931
4932 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
4933
4934         * gen_sslfunc.c (ssl_init_prng): Make the printed message
4935         translatable.
4936
4937 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
4938
4939         * url.c (scheme_disable): New function.
4940
4941         * main.c (main): Call ssl_init_prng from here rather than from
4942         init_ssl, so that it has a chance to disable support for https
4943         before a URL has been resolved.
4944
4945         * gen_sslfunc.c (ssl_init_prng): Seed with rand() if all else
4946         failed.
4947         (ssl_init_prng): Disable support for https if seeding the PRNG
4948         fails.
4949
4950 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
4951
4952         * utils.c (read_whole_line): Handle lines beginning with \0.
4953
4954 2001-12-05  Hrvoje Niksic  <hniksic@arsdigita.com>
4955
4956         * recur.c (convert_all_links): Guard against duplicates in
4957         downloaded_html_files.
4958         (register_download): Don't invalidate similar-looking URLs.
4959         (match_except_index): New function.
4960
4961 2001-12-05  Hrvoje Niksic  <hniksic@arsdigita.com>
4962
4963         * utils.c (path_simplify): Document with test cases.
4964
4965 2001-12-04  Hrvoje Niksic  <hniksic@arsdigita.com>
4966
4967         * gen_sslfunc.c: Ditto.
4968
4969         * rbuf.c: Include <string.h>.
4970
4971 2001-12-04  Hrvoje Niksic  <hniksic@arsdigita.com>
4972
4973         * recur.c (retrieve_tree): Check whether the URL was already
4974         downloaded before downloading it again.
4975         (descend_child_p): Renamed to download_child_p.
4976         (register_download): When one URL is downloaded to a file already
4977         "owned" by another URL, delete all references that map any URL to
4978         that file.
4979         (register_delete_file): New function.
4980         (retrieve_tree): Use it after deleting a file.
4981
4982         * url.c (url_parse): Re-canonicalize the URL also if the path is
4983         empty, so that e.g. "http://www.server.com" ->
4984         "http://www.server.com/".
4985         (lowercase_str): Use ISUPPER instead of !ISLOWER.
4986
4987         * retr.c (retrieve_url): Use the canonical URL form when calling
4988         register_download().
4989
4990 2001-12-04  Ian Abbott <abbotti@mev.co.uk>
4991
4992         * snprintf.c (dopr): Use `unsigned int' as the second argument to
4993         va_arg when casting to `unsigned short' is intended.
4994
4995 2001-12-04  Herold Heiko  <Heiko.Herold@previnet.it>
4996
4997         * gen_sslfunc.c: on windows provide ssl crypto random
4998           initialization through RAND_screen(); could possibly
4999           be not enough for strong ssl communication (see the
5000           relevant manual page from the openssl package).
5001
5002 2001-12-04  Hrvoje Niksic  <hniksic@arsdigita.com>
5003
5004         * url.c (local_quote_string): Reenable quoting of question marks,
5005         but only when `--html-extension' is used.
5006
5007 2001-12-03  Hrvoje Niksic  <hniksic@arsdigita.com>
5008
5009         * version.c: Wget 1.8-beta3 is released.
5010
5011 2001-12-03  Hrvoje Niksic  <hniksic@arsdigita.com>
5012
5013         * snprintf.c (dopr): Cast the result of va_arg to short int and
5014         short unsigned int where these types are expected to be used.
5015
5016 2001-12-03  Hrvoje Niksic  <hniksic@arsdigita.com>
5017
5018         * snprintf.c (dopr): Replace `short int' and `unsigned short int'
5019         with `int' when using it as the second argument to `va_arg'.
5020
5021 2001-12-03  Hrvoje Niksic  <hniksic@arsdigita.com>
5022
5023         * host.c (address_list_new_one): New function.
5024         (lookup_host): Use it.
5025
5026 2001-12-03  Andre Majorel  <amajorel@teaser.fr>
5027
5028         * host.c (lookup_host): Don't initialize TMPSTORE directly because
5029         it's not legal C.
5030
5031 2001-12-03  Hrvoje Niksic  <hniksic@arsdigita.com>
5032
5033         * ftp-basic.c (ftp_port): Don't return HOSTERR if we fail getting
5034         the socket data.
5035
5036         * ftp.c: Ditto.
5037
5038         * http.c: No need to declare h_errno.
5039
5040         * host.c: Declare h_errno.
5041
5042 2001-12-02  Hrvoje Niksic  <hniksic@arsdigita.com>
5043
5044         * utils.c (file_merge): If BASE doesn't contain a slash, just
5045         return a copy of FILE.
5046
5047 2001-12-02  Hrvoje Niksic  <hniksic@arsdigita.com>
5048
5049         * version.c: Wget 1.8-beta2 is released.
5050
5051 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
5052
5053         * ftp.c (getftp): When PWD fails, assume "/".
5054
5055         * ftp-basic.c (ftp_syst): Fix indentation.
5056
5057 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
5058
5059         * url.c (get_urls_file): If opt.base_href is specified, merge each
5060         URL with the base.
5061
5062 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
5063
5064         * main.c (print_help): Don't document the removed `-nh'.
5065
5066 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
5067
5068         * url.c (url_full_path): Document better.
5069
5070         * http.c (gethttp): Use the full path when creating digest
5071         authorization.
5072
5073 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
5074
5075         * cookies.c (path_matches): Return 0 if PREFIX doesn't begin with
5076         '/'.
5077
5078 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
5079
5080         * cookies.c (path_matches): FULL_PATH doesn't begin with '/', but
5081         PREFIX does.
5082
5083 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
5084
5085         * cookies.c (check_domain_match): Reimplement to match Netscape's
5086         "preliminary specification" for cookies.
5087
5088 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
5089
5090         * url.c (replace_attr_refresh_hack): New function.
5091         (convert_links): Call replace_attr_refresh_hack for Refresh
5092         links.  It will add the "TMOUT; URL=" junk before the link.
5093
5094         * html-url.c (collect_tags_mapper): Set ID to the ID of the
5095         "content" attribute, not "http-equiv".
5096         (collect_tags_mapper): Don't use OFFSET to hack the raw_* values;
5097         instead, store the information that this entry belongs to a
5098         "refresh" link.
5099
5100 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
5101
5102         * version.c: Wget 1.8-beta1 is released.
5103
5104 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
5105
5106         * recur.c (retrieve_tree): Allow -p retrievals to exceed maximum
5107         depth by more than one.
5108
5109 2001-11-30  Hrvoje Niksic  <hniksic@arsdigita.com>
5110
5111         * retr.c (retrieve_url): Don't allow more than 20 redirections.
5112
5113 2001-11-30  Hrvoje Niksic  <hniksic@arsdigita.com>
5114
5115         * recur.c (retrieve_tree): Skip the non-inline entries when
5116         enqueuing the children of a leaf HTML node in -p mode.
5117         (descend_url_p): Ignore opt.no_parent when in -p mode and UPOS is
5118         "inline".
5119
5120         * html-url.c (get_urls_html): Don't accept dash_p_leaf_HTML.
5121         (collect_tags_mapper): When an entry is "inline", mark it as such.
5122
5123         * recur.c (descend_url_p): Fix test when checking for
5124         acceptance/rejection rules.
5125
5126 2001-10-31 Daniel BODEA <dali@dali-designs.com>
5127
5128         * netrc.c (search_netrc): When slack_default is 0, still look for
5129         an account with matching password, just not the "default account".
5130         HTTP Authorization using .netrc should now work as expected.
5131
5132 2001-11-30  T. Bharath  <TBharath@responsenetworks.com>
5133
5134         * http.c (persistent_available_p): Call SHUTDOWN_SSL if
5135         test_socket_open fails.
5136
5137 2001-11-30  Hrvoje Niksic  <hniksic@arsdigita.com>
5138
5139         * progress.c (display_image): Just print one CR to reset the
5140         cursor position.
5141
5142 2001-11-30  Christian Fraenkel  <c.fraenkel@gmx.net>
5143
5144         * init.c: New command `ssl_egd_sock'.
5145
5146         * main.c (main): New option `--sslegdsock'.
5147
5148         * gen_sslfunc.c (ssl_init_prng): Seed the RNG using EGD.
5149
5150 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
5151
5152         * cmpt.c (memmove): Include a simple memmove implementation.
5153
5154 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
5155
5156         * headers: Guard against header files being included twice.
5157
5158 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
5159
5160         * gen-md5.c: Use unsigned char * as the buffer argument to
5161         gen_md5_update.
5162
5163 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
5164
5165         * connect.h: Declare select_fd.
5166
5167 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
5168
5169         * recur.c (descend_url_p): When resolving no_parent, compare with
5170         start_url, not parent url.  Otherwise link from /a/b/ to /a/c/
5171         wouldn't be followed, although the download started from /a/.
5172
5173 2001-01-23  Herold Heiko  <Heiko.Herold@previnet.it>
5174
5175         * config.h.ms, mswindows.h: defined HAVE_ISATTY, use _isatty for
5176         MS VC; somebody with Borland compiler please check and provide
5177         patch if possible;
5178
5179         * cmpt.c: provided a usleep emulation.
5180
5181 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
5182
5183         * host.c (address_list_new): Initialize al->faulty.
5184
5185 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
5186
5187         * http.c (http_process_range): Accept the broken output of
5188         "JavaWebServer/1.1.1".
5189
5190 2001-11-28  Hrvoje Niksic  <hniksic@arsdigita.com>
5191
5192         * progress.c (dot_set_params): If PARAMS is unspecified, use
5193         dot_style, if available.
5194
5195         * init.c: Ditto.
5196
5197         * main.c (main): Resurect --dot-style.
5198
5199         * progress.c (dot_finish): Print the quantity if we're left at the
5200         beginning of a row.
5201
5202 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
5203
5204         * cmpt.c (random): Removed.
5205
5206         * retr.c (sleep_between_retrievals): Use the more portable rand()
5207         instead of random().
5208
5209 2001-11-27  Ian Abbott <abbotti@mev.co.uk>
5210
5211         * retr.c (retrieve_from_file): Initialize `new_file' to NULL to
5212         prevent seg fault.
5213
5214 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
5215
5216         * connect.c (connect_to_many): Use address_list_set_faulty to
5217         prevent the faulty address from being reused.
5218
5219         * host.c (address_list_set_faulty): New function.
5220         (address_list_get_bounds): New function, instead of
5221         address_list_count.
5222
5223 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
5224
5225         * url.c (convert_links): Don't translate %d-%d.
5226
5227         * main.c (print_help): Remove stray HAVE_RANDOM code.
5228
5229 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
5230
5231         * ftp.c (getftp): Improve output after sending PASV.  Don't
5232         attempt to "look up" the IP address we already know; call
5233         connect_to_one directly.
5234
5235 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
5236
5237         * progress.c: Change the default progress implementation to "bar".
5238
5239 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
5240
5241         * progress.c (bar_create): Print two newlines.
5242
5243 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
5244
5245         * cmpt.c (random): New function, a simple-minded replacement for
5246         random() on systems that don't have it.
5247
5248 2001-11-26  Hrvoje Niksic  <hniksic@arsdigita.com>
5249
5250         * config.h.in: Put a HAVE_USLEEP stub.
5251
5252         * cmpt.c (usleep): Replacement implementation of usleep using
5253         select.
5254
5255         * init.c: New option init_rate.
5256
5257         * main.c (main): New option --limit-rate.
5258
5259         * retr.c (limit_bandwidth): New function.
5260         (get_contents): Call it to limit the bandwidth used when
5261         downloading.
5262
5263         * progress.c (dot_update): Would print the wrong download speed on
5264         rows other than the first one when the download was continued.
5265         (dot_finish): Ditto.
5266
5267 2001-11-26  Ian Abbott <abbotti@mev.co.uk>
5268
5269         * http.c (gethttp): fix undeclared variable 'err' when compiled
5270         with HAVE_SSL.
5271
5272 2001-11-26  Hrvoje Niksic  <hniksic@arsdigita.com>
5273
5274         * progress.c: Don't allocate new timers; use the timing data
5275         propagated from the caller.
5276
5277         * retr.c (get_contents): Allocate and use a timer.
5278
5279 2001-11-26  Hrvoje Niksic  <hniksic@arsdigita.com>
5280
5281         * http.c (last_host_ip): Made into an address_list.
5282         (invalidate_persistent): Release pc_last_host_ip.
5283         (register_persistent): Use lookup_host.
5284         (persistent_available_p): Check for equality of hosts using
5285         address_list_match_all.  Call address_list_release.
5286         (http_cleanup): New function.
5287
5288         * ftp.c (getftp): Use lookup_host and connect_to_many.
5289
5290         * http.c (gethttp): Use lookup_host and connect_to_many.
5291
5292         * connect.c (make_connection): Removed.
5293         (connect_to_one): New function.
5294         (connect_to_many): Ditto.
5295         (set_connection_host_name): Ditto.
5296
5297         * host.c (lookup_host): New function; new return type.
5298         (address_list_new): New function.
5299         (address_list_count): Ditto.
5300         (address_list_copy_one): Ditto.
5301         (address_list_delete): Ditto.
5302         (address_list_release): Ditto.
5303         (pretty_print_address): Ditto.
5304
5305 2001-11-26  Hrvoje Niksic  <hniksic@arsdigita.com>
5306
5307         * recur.c (retrieve_tree): In case of followed redirection,
5308         blacklist the pre-redirection URL.
5309
5310 2001-11-26  Hrvoje Niksic  <hniksic@arsdigita.com>
5311
5312         * recur.c (descend_redirect_p): New function.
5313         (retrieve_tree): Make sure redirections are not blindly followed.
5314
5315 2001-11-04  Alan Eldridge  <alane@geeksrus.net>
5316
5317         * config.h.in: added HAVE_RANDOM.
5318
5319         * options.h: added random_wait to struct options.
5320
5321         * main.c (print_help [HAVE_RANDOM], main): added arg parsing, help
5322         for --random-wait.
5323
5324         * retr.c (sleep_between_retrievals) [HAVE_RANDOM]: added
5325         implementation of random wait times.
5326
5327         * init.c (commands): added "randomwait" keyword.
5328
5329 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
5330
5331         * recur.c (descend_url_p): Be more conservative with blacklisting
5332         URLs.
5333         (convert_all_links): Print how many files have been converted, and
5334         how long it took.
5335
5336         * progress.c (create_image): Place the number of downloaded bytes
5337         right after the progress bar.
5338
5339         * utils.c (suffix): Return a pointer into the string.
5340
5341 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
5342
5343         * url.c (convert_links): Handle CO_NULLIFY_BASE.
5344
5345         * recur.c (retrieve_tree): Ignore download-ignorable children.
5346         (convert_all_links): Specify CO_NULLIFY_BASE when link_base_p.
5347
5348         * html-url.c (handle_link): Return the newly created urlpos.
5349         (collect_tags_mapper): When dealing with BASE, store the base
5350         reference and mark it as download-ignorable.
5351
5352 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
5353
5354         * url.c (convert_links): Attempt to quote '?' as "%3F" when
5355         linking to local files.  Given up on the attempt, as it breaks
5356         local browsing.
5357
5358 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
5359
5360         * main.c (private_initialize): Removed.
5361         (main): Don't call private_initialize.
5362
5363         * http.c: Call lookup_host.
5364
5365         * host.c (host_init): Removed.
5366         (add_host_to_cache): Initialize host_name_address_map here, on
5367         demand.
5368         (ngethostbyname): Commented out.
5369
5370         * connect.c (make_connection): Remove dead code; use lookup_host.
5371
5372         * host.c (store_hostaddress): Renamed to lookup_host and reversed
5373         the args.
5374         Removed host_address_name_map and host_slave_master_map.
5375
5376 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
5377
5378         * progress.c (dot_create): Align the "[ skipping ... ]" string
5379         with the dots.
5380
5381         * retr.c (rate): Split into two functions: calc_rate and
5382         retr_rate.
5383
5384         * progress.c (create_image): Draw a dummy progress bar even when
5385         total size is unknown.
5386         (display_image): Place the text cursor at the end of the "image".
5387
5388 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
5389
5390         * url.c (reencode_string): Use unsigned char, not char --
5391         otherwise the hex digits come out wrong for 8-bit chars such as
5392         nbsp.
5393         (lowercase_str): New function.
5394         (url_parse): Canonicalize u->url if needed.
5395         (get_urls_file): Parse each URL, and return only the valid ones.
5396         (free_urlpos): Call url_free.
5397         (mkstruct): Add :port if the port is non-standard.
5398         (mkstruct): Append the query string to the file name, if any.
5399         (urlpath_length): Use strpbrk_or_eos.
5400         (uri_merge_1): Handle the cases where LINK is an empty string,
5401         where LINK consists only of query, and where LINK consists only of
5402         fragment.
5403         (convert_links): Count and report both kinds of conversion.
5404         (downloaded_file): Use a hash table, not a list.
5405         (downloaded_files_free): Free the hash table.
5406
5407         * retr.c (retrieve_from_file): Ditto.
5408
5409         * main.c (main): Call either retrieve_url or retrieve_tree
5410         for each URL, not both.
5411
5412         * retr.c (register_all_redirections): New function.
5413         (register_redirections_mapper): Ditto.
5414         (retrieve_url): Register the redirections.
5415         (retrieve_url): Make the string "Error parsing proxy ..."
5416         translatable.
5417
5418         * res.c (add_path): Strip leading slash from robots.txt paths so
5419         that the path representations are "compatible".
5420         (free_specs): Free each individual path, too.
5421         (res_cleanup): New function.
5422         (cleanup_hash_table_mapper): Ditto.
5423
5424         * recur.c (url_queue_new): New function.
5425         (url_queue_delete): Ditto.
5426         (url_enqueue): Ditto.
5427         (url_dequeue): Ditto.
5428         (retrieve_tree): New function, replacement for recursive_retrieve.
5429         (descend_url_p): New function.
5430         (register_redirection): New function.
5431
5432         * progress.c (create_image): Cosmetic changes.
5433
5434         * init.c (cleanup): Do all those complex cleanups only if
5435         DEBUG_MALLOC is defined.
5436
5437         * main.c: Removed --simple-check and the corresponding
5438         simple_host_check in init.c.
5439
5440         * html-url.c (handle_link): Parse the URL here, and propagate the
5441         parsed URL to the caller, who would otherwise have to parse it
5442         again.
5443
5444         * host.c (xstrdup_lower): Moved to utils.c.
5445         (realhost): Removed.
5446         (same_host): Ditto.
5447
5448 2001-11-24  Hrvoje Niksic  <hniksic@arsdigita.com>
5449
5450         * utils.c (path_simplify): Preserver the (non-)existence of
5451         leading slash.  Return non-zero if changes were made.
5452
5453 2001-11-24  Hrvoje Niksic  <hniksic@arsdigita.com>
5454
5455         * progress.c (bar_update): Don't modify bp->total_length if it is
5456         zero.
5457
5458 2001-11-24  Hrvoje Niksic  <hniksic@arsdigita.com>
5459
5460         * retr.c (retrieve_url): When the redirection URL doesn't parse,
5461         print the correct error message rather than "UNKNOWN".
5462
5463 2001-11-24  Hrvoje Niksic  <hniksic@arsdigita.com>
5464
5465         * progress.c (bar_finish): If the timer didn't record any time
5466         since the download beginning, fake 1ms.
5467
5468 2001-11-24  Hrvoje Niksic  <hniksic@arsdigita.com>
5469
5470         * recur.c (recursive_retrieve): Fix typo.
5471
5472 2001-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
5473
5474         * progress.c (create_image): Don't translate "%ld ".
5475
5476 2001-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
5477
5478         * progress.c (bar_set_params): Allow the user to force the use of
5479         the bar.
5480
5481 2001-11-23  Lemble Gregory  <gregory.lemble@st.com>
5482
5483         * gen_sslfunc.c (ssl_init_prng): New function; seed the SSL RNG.
5484
5485 2001-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
5486
5487         * progress.c: Renamed dp_* functions to dot_* for greater clarity
5488         and consistency with bar_*.
5489         (print_download_speed): Get rid of the unneeded '@' character.
5490         (create_image): Fix download rate geometry.
5491
5492         * progress.c (print_elapsed): Remove spurious space.
5493         (print_elapsed): Renamed to print_download_speed, since that's
5494         what it does.
5495
5496 2001-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
5497
5498         * progress.c (bar_update): If the downloaded amount becomes larger
5499         than the expected amount, adjust the expected amount accordingly.
5500
5501 2001-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
5502
5503         * utils.c (determine_screen_width): New function.
5504
5505         * main.c (main): New option `--progress=TYPE'.
5506         (main): Implement compatibility with the old option `--dot-style'.
5507
5508         * init.c: Removed cmd_spec_dotstyle -- that logic is now in
5509         dp_set_params.
5510         (cmd_spec_progress): New function.
5511
5512         * retr.c (get_contents): Use the progress_* functions instead of
5513         the old show_progress().
5514         (show_progress): Removed.
5515         (rate): Print "xxxx.xx K/s" instead of "KB/s".  Ditto for MB/s,
5516         etc.
5517
5518         * progress.c (set_progress_implementation): New function.
5519         (valid_progress_implementation_p): Ditto.
5520         (progress_create): Ditto.
5521         (progress_update): Ditto.
5522         (progress_finish): Ditto.
5523         (dp_create): Ditto.
5524         (dp_update): Ditto.
5525         (dp_finish): Ditto.
5526         (dp_set_params): Ditto.
5527         (print_elapsed): Ditto.
5528
5529 2001-11-22  Hrvoje Niksic  <hniksic@arsdigita.com>
5530
5531         * retr.c (show_progress): Use it.
5532
5533         * log.c (log_set_flush): New function.
5534
5535 2001-11-22  Hrvoje Niksic  <hniksic@arsdigita.com>
5536
5537         * utils.c (path_simplify): Don't remove trailing slashes.
5538
5539         * ftp.c (ftp_get_listing): Use it.
5540
5541         * utils.c (file_merge): New function.
5542
5543         * url.c (opt_url): Removed.
5544
5545         * recur.c (recursive_retrieve): Inline "opt_url" logic.
5546
5547         * main.c (main): Use xfree(), not free().
5548
5549         * url.c (rewrite_url_maybe): Renamed to rewrite_shorthand_url.
5550
5551         * ftp.c (ccon): Move `ccon' typedef here, since it's only used
5552         internally.
5553
5554         * config.h.in: Include a stub for HAVE_STRPBRK.
5555
5556         * cmpt.c (strpbrk): Include a replacement for systems without
5557         strpbrk().
5558
5559         * ftp.c: Use url_set_dir and url_set_file when modifying the URL.
5560
5561         * url.c (url_set_dir): New function.
5562         (url_set_file): Ditto.
5563
5564         * ftp-basic.c (ftp_process_type): Process FTP type here; the URL
5565         parser makes the URL "params" available, so we can do that in this
5566         function.
5567
5568         * retr.c: Ditto.
5569
5570         * ftp.c: Ditto; pass the local file information in `ccon'.
5571
5572         * http.c: Get rid of the ugly kludge that had URL being replaced
5573         with the proxy URL when proxy retrieval was requested.  Use a
5574         separate parameter to http_loop and gethttp for the proxy URL.
5575
5576         * http.c: Changed to reflect the fact that local file, proxy, and
5577         referer information are no longer stored in struct url.  The local
5578         file information is passed in `struct hstat' now.
5579
5580         * url.c: Reworked URL parsing to be more regular.  Reencode the
5581         URL using reencode_string.
5582         Removed non-URL-related information from struct url.  This
5583         includes fields `proxy', `local', and `referer'.
5584
5585 2001-11-22  Jochen Hein  <jochen@jochen.org>
5586
5587         * main.c (main): Split the copyright notice for easier
5588         translation.
5589
5590 2001-08-21  Dave Turner <dct25@hermes.cam.ac.uk>
5591
5592         * ftp-basic.c (ftp_size): New function to send non-standard SIZE
5593           command to server to request file size.
5594         * ftp.h (ftp_size): Export it.
5595         * ftp.c (getftp): Use new ftp_size function if restoring
5596           transfer of a file with unknown size.
5597
5598 2001-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
5599
5600         * url.c (parseurl): Don't depend on the now-obsolete TYPE.
5601
5602 2001-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
5603
5604         * url.c (getproxy): Handle URL shorthands.
5605
5606 2001-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
5607
5608         * main.c: Remove --wait / --waitretry backwards compatibility
5609         code.
5610
5611 2001-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
5612
5613         * main.c (main): Use it.
5614
5615         * url.c (rewrite_url_maybe): New function.
5616
5617 2001-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
5618
5619         * url.c: Clean up handling of URL schemes.
5620
5621 2001-05-13  Hrvoje Niksic  <hniksic@arsdigita.com>
5622
5623         * url.c: Get rid of `protostrings'.
5624         (skip_proto): Don't use protostrings.
5625         (has_proto): Ditto.
5626
5627 2001-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
5628
5629         * Makefile.in: Conditionally compile getopt.o.
5630
5631 2001-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
5632
5633         * md5.h: Renamed to gnu-md5.h.
5634
5635         * md5.c: Renamed to gnu-md5.c.
5636
5637         * http.c: Ditto.
5638
5639         * ftp-opie.c: Use the new macros.
5640
5641         * sysdep.h: Define md5-related macros.
5642
5643         * config.h.in: Define HAVE_SOLARIS_MD5 or HAVE_BUILTIN_MD5
5644         depending on which md5 implementation is used.
5645
5646 2001-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
5647
5648         * res.c (res_register_specs): Initialize OLD and HP_OLD to appease
5649         the compiler.
5650
5651 2001-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
5652
5653         * http.c (gethttp): Print the whole response line when printing
5654         headers is requested.
5655
5656 2001-05-12  Hrvoje Niksic  <hniksic@arsdigita.com>
5657
5658         * res.c: New file.  Implement all RES-related code here.
5659
5660 2001-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
5661
5662         * version.c: Wget 1.7.1 is released.
5663
5664 2001-11-16  Hrvoje Niksic  <hniksic@arsdigita.com>
5665
5666         * headers.c (header_extract_number): Ignore trailing whitespace.
5667
5668 2001-08-24  Ian Abbott  <abbotti@mev.co.uk>
5669
5670         * html-url.c (collect_tags_mapper): Fix bug converting links
5671         with -k option for tags with multiple link attributes by
5672         handling links in the order they appear.
5673
5674 2001-08-15  Ian Abbott  <abbotti@mev.co.uk>
5675
5676         * ftp.c (ftp_loop_internal): Avoid a potential buffer overflow in
5677           the call to the 'rate' function by moving it past the error
5678           checking for the 'getftp' function return value.
5679
5680 2001-11-16  Hrvoje Niksic  <hniksic@arsdigita.com>
5681
5682         * html-parse.c (advance_declaration): Use 0x22 instead of '"' or
5683         '\"'.  Different compilers' assert macros are broken in different
5684         ways.
5685
5686 2001-09-29  Christian Fraenkel  <c.fraenkel@gmx.net>
5687
5688         * http.c (gethttp): print debug output for errors occuring during
5689         the ssl handshake.
5690
5691 2001-11-16  Chris Seawood  <cls@seawood.org>
5692
5693         * init.c: Ditto.
5694
5695         * host.c: Ditto.
5696
5697         * connect.c: Ditto.
5698
5699         * sysdep.h: Support compilation under BEOS.
5700
5701 2001-06-08  Edward J. Sabol  <sabol@alderaan.gsfc.nasa.gov>
5702
5703         * url.c (url_equal): Fix a memory leak when parseurl returns an
5704         error on the second URL. Also, since url_equal is not used at the
5705         moment, do not compile it.
5706
5707         * url.h: Ditto for the prototype of url_equal.
5708
5709 2001-11-16  Hrvoje Niksic  <hniksic@arsdigita.com>
5710
5711         * html-parse.c (map_html_tags): Support XML-style empty tags.
5712
5713 2001-06-26  Hrvoje Niksic  <hniksic@arsdigita.com>
5714
5715         * wget.h (DO_REALLOC_FROM_ALLOCA): Check for do_realloc_newsize in
5716         loop condition because we're no longer setting SIZEVAR here.
5717
5718 2001-06-26  Hrvoje Niksic  <hniksic@arsdigita.com>
5719
5720         * wget.h (DO_REALLOC_FROM_ALLOCA): Set SIZEVAR after the memcpy()
5721         call because it needs the old value.
5722
5723 2001-06-18  Hrvoje Niksic  <hniksic@arsdigita.com>
5724
5725         * cookies.c (ATTR_NAME_CHAR): Allow almost any character to be in
5726         an attribute name.
5727
5728 2001-06-18  Hrvoje Niksic  <hniksic@arsdigita.com>
5729
5730         * url.c (url_filename): Make sure that slashes that sneak in to
5731         u->file via query string get protected.
5732         (file_name_protect_query_string): New function.
5733
5734 2001-06-14  Hrvoje Niksic  <hniksic@arsdigita.com>
5735
5736         * recur.c (recursive_retrieve): Also check undesirable_urls with
5737         canonicalized URL.
5738
5739 2001-06-14  Hrvoje Niksic  <hniksic@arsdigita.com>
5740
5741         * http.c (gethttp): Search `.netrc' with real host, not the proxy
5742         one.
5743
5744 2001-06-14  Hrvoje Niksic  <hniksic@arsdigita.com>
5745
5746         * sysdep.h (MAP_FAILED): Provide MAP_FAILED for systems that don't
5747         define it.
5748
5749 2001-06-09  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
5750
5751         * ftp.h: Provide correct prototype for ftp_parse_ls().
5752
5753 2001-06-04  Hrvoje Niksic  <hniksic@arsdigita.com>
5754
5755         * version.c: Wget 1.7 is released.
5756
5757 2001-06-03  Karl Eichwalder  <ke@suse.de>
5758
5759         * ftp-ls.c (ftp_parse_ls): Fix typo.
5760
5761 2001-05-27  Hrvoje Niksic  <hniksic@arsdigita.com>
5762
5763         * all: Update copyright information.
5764
5765 2001-05-26  Hrvoje Niksic  <hniksic@arsdigita.com>
5766
5767         * http.c (gethttp): Indicate that the continued download failed
5768         for *this* file.
5769
5770 2001-05-26  Hrvoje Niksic  <hniksic@arsdigita.com>
5771
5772         * version.c: Wget 1.7-pre1 is released.
5773
5774 2001-05-26  Hrvoje Niksic  <hniksic@arsdigita.com>
5775
5776         * version.c: Updated version to 1.7-pre1.
5777
5778 2001-05-14  Hrvoje Niksic  <hniksic@arsdigita.com>
5779
5780         * gen_sslfunc.c: Don't include <sys/time.h> directly.
5781
5782 2001-05-14  Hrvoje Niksic  <hniksic@arsdigita.com>
5783
5784         * http.c (gethttp): Use real URL data for cookies, not the proxy
5785         stuff.
5786
5787 2001-05-12  Hrvoje Niksic  <hniksic@arsdigita.com>
5788
5789         * main.c (print_help): Document `--no-http-keep-alive'.
5790
5791         * utils.c (numdigit): Handle negative numbers *correctly*.
5792
5793         * hash.c (make_nocase_string_hash_table): Use term "nocase" rather
5794         than the confusing "unsigned".
5795
5796         * utils.c (string_set_contains): Renamed from string_set_exists.
5797
5798         * hash.c (hash_table_contains): Renamed from hash_table_exists.
5799
5800         * cookies.c: Move case-insensitive hash tables to hash.c.
5801
5802 2001-05-09  Hrvoje Niksic  <hniksic@arsdigita.com>
5803
5804         * http.c (gethttp): Before concluding that the file is already
5805         fully retrieved, make sure that the file existed and `Range' was
5806         actually requested.
5807
5808 2001-05-09  Hrvoje Niksic  <hniksic@arsdigita.com>
5809
5810         * cookies.c (eliminate_dups): New function.
5811         (build_cookies_request): Use it.
5812         (build_cookies_request): Set chain_store_size after reallocating
5813         all_chains.
5814         (check_domain_match): Annotated for easier future debugging.
5815         (store_cookie): In the debug message, print whether the cookie is
5816         permanent.
5817
5818 2001-05-08  Hrvoje Niksic  <hniksic@arsdigita.com>
5819
5820         * http.c (http_loop): Reset no_truncate before deciding whether to
5821         set it.
5822         (gethttp): Further clarify "-c conflicts with existing file" error
5823         message, based on input from Herold Heiko.
5824
5825 2001-05-07  Hrvoje Niksic  <hniksic@arsdigita.com>
5826
5827         * http.c (http_loop): If restval is set, set no_truncate to 1
5828         unconditionally.
5829
5830 2001-05-02  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
5831
5832         * ftp-ls.c (ftp_parse_winnt_ls): Assure months are being correctly
5833         converted. Pointed out by <Stefan.Weil@de.heidelberg.com>.
5834         (ftp_parse_vms_ls): Ditto.
5835
5836 2001-04-30  Hrvoje Niksic  <hniksic@arsdigita.com>
5837
5838         * init.c (cmd_address): Zero SIN before using it; apparently
5839         needed on *BSD.
5840
5841 2001-04-29  Hrvoje Niksic  <hniksic@arsdigita.com>
5842
5843         * ftp.c (ftp_loop_internal): Don't set NO_TRUNCATE if the file is
5844         empty.
5845
5846 2001-04-29  Hrvoje Niksic  <hniksic@arsdigita.com>
5847
5848         * main.c (main): Make `--cookies' respect its argument.
5849
5850 2001-04-28  Hrvoje Niksic  <hniksic@arsdigita.com>
5851
5852         * main.c (main): Removed undocumented option `--email-address'.
5853
5854         * netrc.c: Use the latest read_whole_line.
5855
5856         * init.c (defaults): Set opt.ftp_pass to "-wget@".
5857
5858         * mswindows.c (pwd_cuserid): Ditto.
5859
5860         * utils.c (pwd_cuserid): Removed.
5861
5862         * host.c (ftp_getaddress): Removed.
5863
5864 2001-04-28  Hrvoje Niksic  <hniksic@arsdigita.com>
5865
5866         (http_loop): Allocate space for filename_plus_orig_suffix with
5867         alloca; this is more efficient and removes the need to free it
5868         before each and every return.
5869
5870 2001-04-28  Hrvoje Niksic  <hniksic@arsdigita.com>
5871
5872         * http.c (gethttp): Return RETRUNNEEDED when the retrieval is
5873         unneeded because the file is already there and fully downloaded,
5874         and -c is specified.
5875         (http_loop): Handle RETRUNNEEDED.
5876
5877         * wget.h (uerr_t): New value RETRUNNEEDED.
5878
5879         * http.c (http_loop): Set no_truncate for files that both exist
5880         and are non-empty.
5881         (gethttp): Consider the download finished when restval >= contlen,
5882         not only when restval==contlen.
5883         (gethttp): Handle redirection before giving up due to -c.
5884         (gethttp): Clarify error message which explains that -c will not
5885         truncate the file.
5886         (gethttp): When returning CONTNOTSUPPORTED, don't forget to free
5887         the stuff that needs freeing and release the socket.
5888
5889 2001-04-27  Hrvoje Niksic  <hniksic@arsdigita.com>
5890
5891         * main.c (print_help): Wget booleans accept "off", not "no".
5892
5893 2001-04-27  Hrvoje Niksic  <hniksic@arsdigita.com>
5894
5895         * http.c (http_loop): If allow_cache is zero, always disable
5896         caching, not only when retrieving through proxy.
5897
5898         * init.c: Ditto.
5899
5900         * options.h (struct options): Rename proxy_cache to allow_cache.
5901
5902 2001-04-27  Hrvoje Niksic  <hniksic@arsdigita.com>
5903
5904         * http.c (mktime_from_utc): Improve documentation.
5905         (http_atotm): Put format strings into a separate array.
5906
5907 2001-04-27  Hrvoje Niksic  <hniksic@arsdigita.com>
5908
5909         * safe-ctype.h: Instead of throwing #error when isalpha is
5910         defined, redefine it to something that will throw a compile-time
5911         error if actually *used*.  Do the same for the rest of the
5912         standard C macros.
5913
5914 2001-04-26  Hrvoje Niksic  <hniksic@arsdigita.com>
5915
5916         * url.c (getproxy): Ignore empty proxy vars.
5917
5918 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
5919
5920         * http.c (http_loop): Would load cookies every time.
5921
5922         * cookies.c (load_cookies): Handle cookies whose values contain
5923         embedded spaces.
5924
5925 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
5926
5927         * utils.c: Define each DIGITS_* in one line.
5928
5929 2001-04-25  Roger L. Beeman  <beeman@cisco.com>
5930
5931         * http.c (http_atotm): Initialize t.tm_isdst to 0.
5932         (mktime_from_utc): Prevent mktime() from having discontinuities at
5933         DST transition points.
5934
5935 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
5936
5937         * html-url.c (get_urls_html): Fix documentation.
5938
5939 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
5940
5941         * url.c (UNSAFE_CHAR): Reimplement using a static table.
5942         (url_init): Removed.
5943         (init_unsafe_char_table): Removed.
5944
5945 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
5946
5947         * snprintf.c (dopr): Replace ISDIGIT with '0' <= ch && ch <= '9'.
5948
5949 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
5950
5951         * utils.c: Document timer functions.
5952
5953         * retr.c (rate): Use it.
5954         (rate): Print in GB/s if transfer rate exceeds 1 GB/s.
5955
5956         * utils.c (wtimer_granularity): New function.
5957
5958 2001-04-24  Hrvoje Niksic  <hniksic@arsdigita.com>
5959
5960         * retr.c (show_progress): Ditto.
5961
5962         * ftp.c (getftp): Ditto.
5963
5964         * http.c (gethttp): Use new timer functions.
5965
5966         * utils.c (wtimer_allocate): New function.
5967         (wtimer_new): Ditto.
5968         (wtimer_delete): Ditto.
5969         (wtimer_reset): Ditto.
5970         (wtimer_elapsed): Ditto.
5971
5972 2001-04-24  Hrvoje Niksic  <hniksic@arsdigita.com>
5973
5974         * utils.c (long_to_string): New, faster version.  Favors smaller
5975         numbers; much of the calculation is now done at compile-time.
5976
5977 2001-04-24  Hrvoje Niksic  <hniksic@arsdigita.com>
5978
5979         * utils.c (numdigit): Handle negative numbers.
5980
5981 2001-04-23  Hrvoje Niksic  <hniksic@arsdigita.com>
5982
5983         * retr.c (show_progress): Print the download rate even when the
5984         percentages are not available.
5985
5986 2001-04-21  Hrvoje Niksic  <hniksic@arsdigita.com>
5987
5988         * ftp.c (getftp): Adjust expected_bytes if the length is
5989         authoritative.
5990
5991 2001-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
5992
5993         * url.c: Don't declare `construct'.
5994
5995         * hash.c (grow_hash_table): Speed up rehashing; inline storing of
5996         mappings to new locations.
5997         (hash_table_new): Make resize_threshold a field in the hash table,
5998         so we don't have to recalculate it in each hash_table_put.
5999         (grow_hash_table): Update resize_threshold.
6000         (MAX): Remove unused macro.
6001         (prime_size): Made static.
6002
6003 2001-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
6004
6005         * retr.c (retrieve_url): Call uri_merge, not url_concat.
6006
6007         * html-url.c (collect_tags_mapper): Call uri_merge, not
6008         url_concat.
6009
6010         * url.c (mkstruct): Use encode_string instead of xstrdup followed
6011         by URL_CLEANSE.
6012         (path_simplify_with_kludge): Deleted.
6013         (contains_unsafe): Deleted.
6014         (construct): Renamed to uri_merge_1.
6015         (url_concat): Renamed to uri_merge.
6016
6017 2001-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
6018
6019         * url.c (str_url): Use encode_string instead of the unnecessary
6020         CLEANDUP.
6021         (encode_string_maybe): New function, returns input string if no
6022         encoding is needed.
6023         (encode_string): Call encode_string_maybe to do the dirty work,
6024         xstrdup if no work needed.
6025
6026 2001-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
6027
6028         * wget.h (XDIGIT_TO_xchar): Define here.
6029
6030         * url.c (decode_string): Use new name.
6031         (encode_string): Ditto.
6032
6033         * http.c (XDIGIT_TO_xchar): Rename HEXD2asc to XDIGIT_TO_xchar.
6034         (dump_hash): Use new name.
6035
6036         * wget.h: Rename ASC2HEXD and HEXD2ASC to XCHAR_TO_XDIGIT and
6037         XDIGIT_TO_XCHAR respectively.
6038
6039 2001-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
6040
6041         * init.c: Include cookies.h.
6042
6043         * cookies.h: Declare cookies_cleanup.
6044
6045         * cookies.c (check_domain_match): Remove unused variable.
6046         (save_cookies): Remove extraneous argument from debug statement.
6047
6048         * host.c (same_host): Don't call skip_url.
6049
6050         * url.c (skip_url): Removed.  Removed its calls from various
6051         functions in url.c.
6052
6053 2001-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
6054
6055         * cookies.c (unsigned_string_hash): Use the new code in
6056         string_hash as reference.
6057
6058         * hash.c (hash_table_map): Allow deletion and change of the
6059         element processed by MAPFUN.
6060         (string_hash): Use the function from glib.
6061
6062 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
6063
6064         * config.h.in: Include #undef stub.
6065
6066         * hash.c (hash_table_remove): Rewrite to actually clear deleted
6067         entries instead of just marking them as deleted.
6068
6069 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
6070
6071         * hash.h: Declare hash_table_get_pair and hash_table_count.
6072
6073 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
6074
6075         * cookies.c: Declare http_atotm.
6076
6077 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
6078
6079         * ftp-ls.c (ftp_parse_unix_ls): Use octal constants for
6080         permissions.  A compiler that doesn't accept octal constants is
6081         seriously broken and shouldn't be used -- octal constants were
6082         present in K&R C!
6083
6084 2001-01-20  Karl Eichwalder  <ke@suse.de>
6085
6086         * Makefile.in: Provide and use DESTDIR according to the Coding
6087         Standards.
6088
6089 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
6090
6091         * ftp-ls.c (ftp_parse_vms_ls): Make seconds optional in time
6092         specification.
6093
6094 2001-04-11  Hrvoje Niksic  <hniksic@arsdigita.com>
6095
6096         * url.c (parseurl): Don't strip trailing slash when u->dir is "/"
6097         because that strips the *leading* slash, thus forcing relative
6098         FTP retrieval.
6099
6100 2001-04-10  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
6101
6102         * ftp.c (getftp): Convert initial FTP directory from VMS to UNIX
6103         notation for VMS servers.
6104         (ftp_retrieve_dirs): Do not prepend '/' to f->name when
6105         odir is an empty string.
6106
6107 2001-04-10  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
6108
6109         * ftp-ls.c (ftp_parse_winnt_ls): Made the fix for AM/PM more
6110         effective. Suggested by Edward J. Sabol.
6111
6112 2001-04-10  Hrvoje Niksic  <hniksic@arsdigita.com>
6113
6114         * cookies.c (build_cookies_request): Use and sort cookies from all
6115         matching domains.
6116         (build_cookies_request): Check for duplicates before generating
6117         the `Cookies' header.
6118
6119         * main.c (main): Don't load cookies here.
6120         (main): Make loadcookies and savecookies call the correct command.
6121
6122         * http.c (http_loop): Load cookies on-demand.
6123
6124 2001-04-09  Hrvoje Niksic  <hniksic@arsdigita.com>
6125
6126         * http.c (gethttp): Fix indentation of SSL ifdef.
6127
6128 2001-04-09  Hrvoje Niksic  <hniksic@arsdigita.com>
6129
6130         * ftp.c (ftp_retrieve_dirs): Don't forcibly prepend "/" to u->dir;
6131         that hack is no longer necessary.
6132         (getftp): Prepend initial directory to *non*-absolute u->dir's.
6133
6134 2001-04-09  Hrvoje Niksic  <hniksic@arsdigita.com>
6135
6136         * init.c (cmd_file): New function.
6137         (enable_tilde_expansion): New variable.
6138         (run_wgetrc): Use it.
6139         (cmd_file): Use it.
6140
6141 2001-04-08  Hrvoje Niksic  <hniksic@arsdigita.com>
6142
6143         * init.c: Include cookie-related options.
6144
6145         * main.c (main): Include cookie-specific options.
6146         (main): Load cookies before download is finished.
6147         (main): Save cookies when done.
6148
6149         * http.c (gethttp): Process the `Set-Cookie' header.
6150         (gethttp): Include cookies in the response.
6151
6152         * cookies.c: New file.
6153
6154 2001-04-08  Hrvoje Niksic  <hniksic@arsdigita.com>
6155
6156         * utils.c (datetime_str): New function.
6157
6158 2001-04-08  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
6159
6160         * ftp-ls.c (ftp_parse_winnt_ls): The AM/PM change did assume
6161         12:01PM == 00:01, which was obviously wrong. Taken care of this
6162         anomaly.
6163
6164         * ChangeLog: Removed an excess conflict marker. Reformatted the
6165         entry by Philipp Thomas from 2001-03-09.
6166
6167         * ftp-ls.c (ftp_parse_winnt_ls): Ensure that adjusted PM hours lay
6168         between 0 and 23. Elminate unused variable `sec'.
6169
6170 2001-04-08  Hrvoje Niksic  <hniksic@arsdigita.com>
6171
6172         * hash.c (hash_table_count): New function.
6173
6174 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
6175
6176         * utils.c (read_file): Cast MAP_FAILED to char *.  Enforced by
6177         Digital Unix cc.
6178
6179 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
6180
6181         * config.h.in: Oops, do the namespace tweaks only on systems we
6182         know about.
6183
6184 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
6185
6186         * hash.c: Include <string.h>.
6187
6188 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
6189
6190         * config.h.in: Define "compilation environment" options that work
6191         under Linux and Solaris.  To be reviewed on other OS'es.
6192
6193 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
6194
6195         * http.c (gethttp): Prepend literal newline with `\n\'.
6196
6197 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
6198
6199         * sysdep.h: Don't define VERY_LONG_FORMAT.
6200
6201         * utils.c (very_long_to_string): New function.
6202         (legible_very_long): Use it; don't use VERY_LONG_FORMAT.
6203
6204 2001-04-04  Christian Fraenkel  <christian.fraenkel@gmx.net>
6205
6206         * url.c (parse_uname): Would run past the end of the string if the
6207         username was present, but the URL did not contain a slash, e.g.
6208         http://foo:bar@myhost.
6209
6210 2001-04-03  KOJIMA Hajime  <kjm@rins.ryukoku.ac.jp>
6211
6212         * http.c (http_atotm): Use %A instead of %a to match full
6213         weekday.  (On most systems there is no difference.)
6214
6215 2001-04-03  Paul Bludov  <paul@ozero.net>
6216
6217         * mswindows.c (sleep): Use SleepEx() instead of Sleep().
6218         (ws_changetitle): Use alloca() instead of malloc() to avoid memory
6219         leak.
6220         (ws_mypath): Use GetModuleFileName instead of argv[0].
6221         (ws_startup): Use data.wVersion for comparison.
6222
6223 2001-04-02  Hrvoje Niksic  <hniksic@arsdigita.com>
6224
6225         * http.c (http_loop): Ditto.
6226
6227         * ftp.c (ftp_loop_internal): Made the check whether to continue
6228         retrieval `-O'-friendly.
6229
6230 2001-04-02  Hrvoje Niksic  <hniksic@arsdigita.com>
6231
6232         * netrc.c (parse_netrc): Don't trim the line endings explicitly;
6233         they will be handled as whitespace.
6234         (parse_netrc): Correctly handle lines that end with whitespace.
6235
6236 2001-04-02  Hrvoje Niksic  <hniksic@arsdigita.com>
6237
6238         * retr.c (retrieve_url): New variable global_download_count used
6239         to identify first retrieval.
6240
6241         * ftp.c (getftp): Ditto.
6242
6243         * http.c (gethttp): Rewind opt.dfp only on first retrieval.
6244
6245 2001-04-02  Hrvoje Niksic  <hniksic@arsdigita.com>
6246
6247         * init.c (cmd_address): Heap-allocate the address that gets stored
6248         to CLOSURE.  Old code would simply assign an address on the stack.
6249
6250 2001-04-01  Nicolas Lichtmaier <nick@debian.org>
6251
6252         * ftp.c (ftp_get_listing): Propagate error status.
6253         (ftp_retrieve_glob): Use it.
6254         (ftp_loop): Ditto.
6255
6256 2001-04-01  Nicolas Lichtmaier <nick@debian.org>
6257
6258         * main.c (main): Add -C to the string that is the third arg to
6259         getopt_long().
6260
6261 2001-04-01  Hrvoje Niksic  <hniksic@arsdigita.com>
6262
6263         * ftp.c (getftp): Don't start the download from scratch if `-c'
6264         was specified, but the file is already fully downloaded.
6265
6266         * http.c (gethttp): Don't truncate a pre-existing file if `-c' was
6267         specified and the server doesn't support continued download.
6268         (gethttp): Don't start the download from scratch if `-c' was
6269         specified, but the file is already fully downloaded.
6270
6271 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
6272
6273         (recursive_retrieve): Don't clear the hash tables at this point at
6274         all; it interferes with the normal operation of register_download.
6275
6276 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
6277
6278         * recur.c (recursive_retrieve): Clear the hash tables only when
6279         they are defined.
6280
6281 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
6282
6283         * http.c (gethttp): Make sure the socket is closed with
6284         CLOSE_INVALIDATE before we have drained the body.
6285
6286 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
6287
6288         * retr.c (retrieve_url): Call register_download() for downloaded
6289         files and register_html() for downloaded HTML files.
6290
6291         * recur.c (register_download): New function; register here that a
6292         file has been downloaded, rather than in recursive_retrieve().
6293         (register_html): New function; enqueue the location of HTML files
6294         here rather than in recursive_retrieve().
6295
6296 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
6297
6298         * main.c (print_help): Use multiple fputs instead of a single ugly
6299         printf().
6300         (main): Consistently assign numbers >128 to options without a
6301         corresponding character.
6302
6303 2001-03-09  Philipp Thomas  <pthomas@suse.de>
6304
6305         * safe-ctype.h: New file. Locale independent ctype.h replacement
6306         taken from libiberty.
6307
6308         * safe-ctype.c: New file. Tables for above.
6309
6310         * Makefile.in: Add safe-ctype$o to OBJS.  Add dependencies for
6311         safe-ctype$o.
6312
6313         * cmpt.c: Remove include of ctype.h. Use ISSPACE instead of
6314         isspace.
6315
6316         * ftp-basic.c: Don't include ctype.h.
6317
6318         * ftp-ls.c: Likewise.
6319
6320         * ftp.c: Likewise.
6321
6322         * headers.c: Likewise.
6323
6324         * host.c: Likewise.
6325
6326         * html-parse.c: Likewise.
6327
6328         * html-url.c: Likewise.
6329
6330         * http.c: Likewise.
6331
6332         * init.c: Likewise.
6333
6334         * main.c: Likewise. Set LC_CTYPE along with LC_MESSAGES.
6335
6336         * netrc.c: Likewise.
6337
6338         * recur.c: Likewise.
6339
6340         * retr.c: Likewise.
6341
6342         * snprintf.c: Replace ctype.h with safe-ctype.h. Use ISDIGIT
6343         instead of isdigit.
6344
6345         * sysdep.h: Remove defines of ctype macros as they aren't needed
6346         for safe-ctype-h.
6347
6348         * url.c: Don't include ctype.h.
6349
6350         * utils.c: Likewise.
6351
6352         * wget.h: Include safe-ctype.h.
6353
6354 2001-03-27  Dan Harkless  <wget@harkless.org>
6355
6356         * Makefile.in: Moved top_builddir out of "User configuration
6357         section" of top Makefile and analogous spot in this one.
6358
6359 2001-03-17  Dan Harkless  <wget@harkless.org>
6360
6361         * Makefile.in: Include @SSL_INCLUDES@ substition in INCLUDES.
6362         Define top_builddir.  Link wget with libtool so the user doesn't
6363         have to supply a bunch of custom environment variables to
6364         correctly link with the OpenSSL shared libraries.
6365
6366 2001-03-06  Hack Kampbjorn  <hack@hackdata.com>
6367
6368         * http.c (gethttp): skip :port in host header if it is the
6369         DEFAULT_HTTPS_PORT when using SSL.
6370
6371         * url.c: move the #define of DEFAULT_HTTP_PORT, DEFAULT_FTP_PORT
6372         and DEFAULT_HTTPS_PORT to the header file so it can be use in the
6373         rest of the code.
6374         * url.h: Ditto
6375
6376 2001-03-01  Jonas Jensen  <bones@huleboer.dk>
6377
6378         * retr.c (show_progress): Correctly calculate the number of bytes
6379         in the first line of the download that have been actually
6380         downloaded in this run.
6381
6382 2001-02-23  Dan Harkless  <wget@harkless.org>
6383
6384         * main.c (print_help): --help documentation for -N said it would
6385         re-download files if they had the _same_ timestamp on server.
6386         (print_help): -nr belongs in "FTP options" section of --help
6387         output, not "Recursive retrieval" section.  Alphabetized FTP
6388         options by long option name.
6389
6390 2001-02-16  Dan Harkless  <wget@harkless.org>
6391
6392         * init.c (commands): Hack Kampbjørn <hack@hackdata.com> discovered
6393         that "httpsproxy" had been inserted into commands[] out of
6394         alphabetical order, causing "BUG: unknown command `httpuser'".
6395
6396 2001-02-13  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
6397
6398         * ftp-ls.c (ftp_parse_ls): Added support of ST_MACOS (Unix-like
6399         listing without correct permissons).
6400
6401         * ftp.h (stype): Added ST_MACOS to identify the NetPresenz MacOS
6402         FTP server.
6403
6404         * ftp.c (ftp_retrieve_list): New mirroring logic: A remote file
6405         shall be donwloaded only when it's newer than the local copy or
6406         when it has the same timeestamp but its size is different. ST_VMS
6407         and ST_MACOS as special cases that lie about file size.
6408
6409         * ftp-ls.c (ftp_parse_ls): Support for ST_MACOS.
6410
6411         * Makefile.in: Removed dependency on ftpparse library due to unclear
6412         copyright issues and absence of any feedback to our queries.
6413
6414         * ftp-ls.c: Removed dependency on ftpparse library due to unclear
6415         copyright issues and absence of any feedback to our queries.
6416         (ftp_parse_ls): Added a warning message when remote server system
6417         does not seem to be suported by wget.
6418         (ftp_parse_vms_ls): New function for parsing VMS ftp
6419         server listing output.
6420         (clean_line): New function responsible for removing
6421         end-of-line characters from FTP listing texts.
6422
6423         * ftp.c (getftp): Global variables pwd and host_type are now
6424         member of the ccon structure under names ccon.id and ccon.rs.
6425
6426         * ftp.h (struct ccon): Added formed global variables from ftp.c,
6427         enum stype rs (remote system identification) and char *id (initial
6428         working directory), as suggested by Hrvoje.
6429
6430         * url.c (parse_uname): Added support for passwords containing '@'
6431         characters.
6432         (skip_uname): Ditto.
6433
6434 2001-02-11  Hrvoje Niksic  <hniksic@arsdigita.com>
6435
6436         * ftp.c (ftp_loop): Reset con.
6437
6438 2001-01-06  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
6439
6440         * url.c (parse_uname): Added support for passwords containing '@'
6441         characters.
6442         (skip_uname): Ditto.
6443
6444 2001-02-11  Hack Kampbjørn  <hack@hackdata.com>
6445
6446         * url.c (parseurl): Debug-print u->ftp_type.
6447
6448 2001-02-11  Hrvoje Niksic  <hniksic@arsdigita.com>
6449
6450         * ftp.c (ftp_loop_internal): Disable padding.
6451         (getftp): Ditto.
6452
6453         * http.c (http_loop): Disable padding.
6454
6455         * retr.c (show_progress): Use it to enable padding.
6456
6457         * retr.c (rate): Optional parameter PAD for padding the rate.
6458
6459 2001-02-10  Hrvoje Niksic  <hniksic@arsdigita.com>
6460
6461         * retr.c (show_progress): Make sure that the last output line
6462         includes progress.
6463
6464 2001-02-10  Jonas Jensen  <bones@huleboer.dk>
6465
6466         * retr.c (show_progress): Print the download rate along with the
6467         percentages.
6468         Along with Anders Thorsby <anders@thorsby.dk>.
6469
6470 2001-02-10  Tim Mooney  <mooney@dogbert.cc.ndsu.NoDak.edu>
6471
6472         * ftp.h: Rename enums `command' to `wget_ftp_command' and
6473         `fstatus' to `wget_ftp_status' because old names clash with Tru64
6474         net/if.h.
6475
6476 2001-02-08  Christian Fraenkel <christian.fraenkel@gmx.net>
6477
6478         * gen_sslfunc.c: verify_callback is now static
6479
6480         * gen_sslfunc.c (init_ssl): load certificate if specified
6481
6482         * gen_sslfunc.c (ssl_printerr): new function
6483
6484         * init.c: added new --sslcertfile and --sslcertkey switches
6485
6486         * main.c: ditto
6487
6488         * options.h: ditto
6489
6490         * http.c (gethttp): abort when init_ssl fails
6491
6492 2001-01-23  Herold Heiko  <Heiko.Herold@previnet.it>
6493
6494         * mswindows.h: Include <malloc.h>; it's needed for alloca().
6495
6496 2001-01-10  Dan Harkless  <wget@harkless.org>
6497
6498         * url.c (str_url): Clarified this function's comment header after
6499         Hrvoje answered my question on the list as to when hide != 1.
6500         Also Hrvoje pointed out I need to use xstrdup() on the string literal.
6501
6502 2001-01-06  Hrvoje Niksic  <hniksic@arsdigita.com>
6503
6504         * connect.c (bindport): Declare addrlen as int.  Diagnosed by
6505         Drazen Kacar <dave@arsdigita.com>.
6506         (conaddr): Ditto.
6507
6508 2001-01-09  Dan Harkless  <wget@harkless.org>
6509
6510         * html-url.c: A bunch of fixup of `--page-requisites'-related
6511         comments to reflect Hrvoje's changes to my code when transplanting
6512         it into this new file, to fix spelling mistakes, to clarify, etc.
6513
6514         * url.c (write_backup_file): Clarified a comment.
6515         (str_url): Henrik van Ginhoven pointed out on the list that we
6516         shouldn't give away the number of characters in the password by
6517         replacing each character with a 'x'.  Use "<password>" instead.
6518
6519         * ftp.c (ftp_retrieve_dirs): The bug where recursion into FTP
6520         directories didn't work if logging in put you in a directory other
6521         than "/" is fixed now.  Removed the comment here warning of the bug.
6522
6523         * main.c (print_help): --continue's description was misleading.
6524         We don't "restart", we "resume".  Also, better to say
6525         "partially-downloaded file" rather than just "existing file".
6526
6527 2001-01-06  Dan Harkless  <wget@harkless.org>
6528
6529         * ChangeLog: The '[Not in 1.6 branch.]'s were decided not to be
6530         the best way to go about my aim.  Removed them in favor of:
6531
6532         * ChangeLog-branches/1.6_branch.ChangeLog: New file.
6533
6534 2001-01-04  Hrvoje Niksic  <hniksic@arsdigita.com>
6535
6536         * url.c (replace_attr): New function, to be used by both
6537         TO_COMPLETE and TO_RELATIVE case in convert_links.
6538         (find_fragment): New function for finding URL fragments.
6539         (replace_attr): Better handle the case where the original string
6540         is not quoted.  Use find_fragment.
6541         (convert_links): Use replace_attr().
6542
6543 2000-12-31  Dan Harkless  <wget@harkless.org>
6544
6545         * ChangeLog: Since this flat file doesn't have multiple branches,
6546         looking at the dates would make you think that things went into
6547         1.6 that actually just went into the 1.7-dev branch.  Added "[Not
6548         in 1.6 branch.]" where appropriate to clarify.
6549
6550 2000-12-30  Dan Harkless  <wget@harkless.org>
6551
6552         * ftp.c, http.c:  Applied Hack Kampbjørn <hack@hackdata.com>'s
6553         patch to deal with h_errno not being defined in netdb.h under Cygwin.
6554
6555 2000-12-18  Csaba Raduly  <csaba.raduly@sophos.com>
6556
6557         * sysdep.h: Include <malloc.h> and <io.h> under Watcom.
6558
6559 2000-12-17  Igor Khristophorov  <igor@atdot.org>
6560
6561         * http.c (check_end): Fix test for '+' or '-'.
6562
6563 2000-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
6564
6565         * url.c (parseurl): Rename inner loop var from i to ind to avoid
6566         clash with the function top-level-declared variable i.
6567         (str_url): Likewise, rename inner-loop i to j.
6568
6569         * recur.c (parse_robots): Don't declare LEN at top of function.
6570         (robots_match): Renamed parameter FORBIDDEN to avoid hiding of
6571         global variable.
6572
6573         * main.c (main): Change erroneous use of bitwise and to logical.
6574
6575         * init.c (cmd_address): Don't heap-allocate `sin'; it can be on
6576         the stack because it will be copied to closure.
6577
6578         Thanks to Csaba Raduly's run of PC-LINT over the sources.
6579
6580 2000-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
6581
6582         * http.c (basic_authentication_encode): Use xmalloc(), not
6583         malloc().  Thanks to Csaba Raduly's run of PC-LINT over the
6584         sources.
6585
6586 2000-12-17  Csaba Raduly  <csaba.raduly@sophos.com>
6587
6588         * sysdep.h: Test for __EMX__ rather than for EMXOS2 for OS/2
6589         compilation.
6590
6591 2000-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
6592
6593         * mswindows.c: Include <errno.h>.
6594
6595         * gen_sslfunc.c: Include <errno.h>.
6596
6597         * ftp-basic.c: Don't attempt to declare errno or h_errno because
6598         they're not used.
6599
6600         * main.c: Include <errno.h> because errno is used.
6601
6602         * ftp.c: Ditto.
6603
6604         * http.c: Include <netdb.h> for h_errno.
6605
6606 2000-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
6607
6608         * html-parse.c (advance_declaration): MSVC assert() chokes on
6609         '\"'.  Use '"' instead.
6610
6611 2000-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
6612
6613         * utils.c (xfree_real): Removed.
6614         (xfree_debug): Just call free().
6615
6616         * wget.h (xfree): Make it an alias for free.
6617
6618 2000-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
6619
6620         * http.c (http_loop): Furthermore, touch output_document only if
6621         it is known to be an existing regular file.
6622
6623 2000-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
6624
6625         * ftp.c (ftp_retrieve_list): Ditto.
6626
6627         * http.c (http_loop): Touch output_document if that is used for
6628         output.
6629
6630 2000-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
6631
6632         * http.c: Include gen_sslfunc.h after including Wget's headers.
6633         (persistent_available_p): Needed coma before `int ssl'.
6634
6635 2000-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
6636
6637         * ftp.c (ftp_loop_internal): Ditto.
6638
6639         * http.c (http_loop): Use it.
6640
6641         * retr.c (sleep_between_retrievals): New function that handles the
6642         logic of opt.wait and opt.waitretry.
6643
6644 2000-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
6645
6646         * rbuf.h: Implement only a single version of RBUF_READCHAR, using
6647         rbuf_read_bufferful when the buffer is depleted.
6648
6649         * rbuf.c (rbuf_read_bufferful): New function.
6650
6651 2000-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
6652
6653         * gen_sslfunc.h: Use ansi2knr style function declarations.
6654
6655         * gen_sslfunc.c: Reformat according to the GNU coding standards.
6656         More should be done.
6657
6658         * http.c (persistent_available_p): Place the cheap SSL test nearer
6659         the top of the function.
6660         (CLOSE_FINISH, CLOSE_INVALIDATE): Define only one version of each.
6661
6662 2000-12-05  Hrvoje Niksic  <hniksic@arsdigita.com>
6663
6664         * url.c (init_unsafe_char_table): Reinstate space as an unsafe
6665         char.
6666
6667 2000-12-03  Christian Fraenkel <christian.fraenkel@gmx.net>
6668
6669         * Makefile.in: added gen_sslfunc object
6670         * config.h.in: added HAVE_SSL define
6671         * connect.c: changed select_fd from static int to int
6672         * connect.h: ditto
6673         * gen_sslfunc.h: New file
6674         * gen_sslfunc.c: ditto
6675         * http.c: added HTTPS fuctionality
6676         * retrc.c: ditto
6677         * url.c: ditto
6678         * init.c: added opt.httpsproxy
6679         * options.h: ditto
6680         * rbuf.h: added alternate rbuf struct
6681         * wget.h: added CONSSLERR
6682         * rbuf.c: ditto
6683
6684         * http.c: Added HTTPS fuctionality.
6685
6686         * retrc.c: Ditto.
6687
6688         * url.c: Ditto.
6689
6690         * init.c: Added opt.httpsproxy.
6691
6692         * options.h: Ditto.
6693
6694         * rbuf.h: Added alternate rbuf struct.
6695
6696         * wget.h: Added CONSSLERR.
6697
6698         * rbuf.c: Ditto.
6699
6700 2000-11-30  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
6701
6702         * ftp-ls.c (ftp_parse_unix_ls): Added second parameter
6703         "ignore_perms" to ignore file and directory permissions for
6704         Windows NT FTP server listings.
6705         (ftp_parse_winnt_ls): New function.
6706         (ftp_parse_ls): Parses UNIX and Windows NT listings
6707         separately. Simple heuristics for distinguishing between UNIX and
6708         MS-DOS-like FTP listing provided by Windows NT FTP service.
6709
6710 2000-11-18  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
6711
6712         * ftpparse.c, ftpparse.h: New files.
6713
6714         * ftp-ls.c (ftp_parse_ls): Use ftp_parse_unix_ls for UNIX servers
6715         only. Use ftp_parse_nonunix_ls otherwise.
6716         (ftp_parse_nonunix_ls): Stub to the ftpparse library handling all
6717         exotic FTP servers.
6718
6719         * ftp.h (stype): New enum, distinguishes UNIX, VMS, and "other"
6720         FTP servers.
6721
6722         * ftp.c: New static wariables host_type, pwd, and pwd_len.
6723         (getftp): Support for VMS. Support for FTP servers that do not
6724         place you in the root directory after login.
6725         (ftp_retrieve_list): VMS is silent about the real file size, issue
6726         a more appropriate message.
6727         (ftp_get_listing): Pass host_type to ftp_parse_ls.
6728
6729         * ftp-basic.c (ftp_pwd, ftp_syst): New functions.
6730
6731 2000-11-30  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
6732
6733         * ftp-ls.c (ftp_parse_unix_ls): Added second parameter
6734         "ignore_perms" to ignore file and directory permissions for
6735         Windows NT FTP server listings.
6736         (ftp_parse_winnt_ls): New function.
6737         (ftp_parse_ls): Parses UNIX and Windows NT listings
6738         separately. Simple heuristics for distinguishing between UNIX
6739         and MS-DOS-like FTP listing provided by Windows NT FTP service.
6740
6741 2000-11-29  John Summerfield  <summer@OS2.ami.com.au>
6742
6743         * netrc.c (parse_netrc): Get rid of line ending.
6744
6745 2000-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
6746
6747         * ftp.c (ftp_retrieve_list): Undo typo "fix" until resolution by
6748         Dan.
6749
6750 2000-11-24  Karl Eichwalder  <ke@suse.de>
6751
6752         * main.c (print_help): Untabify.
6753
6754 2000-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
6755
6756         * utils.c (xrealloc_debug): Do the unregister/register thing only
6757         if the pointer has actually changed.
6758         (xmalloc_real): Declare `static' in DEBUG_MALLOC builds.
6759         (xfree_real): Ditto.
6760         (xrealloc_real): Ditto.
6761         (xstrdup_real): Ditto.
6762
6763 2000-11-22  Hrvoje Niksic  <hniksic@arsdigita.com>
6764
6765         * ftp.c (getftp): ftp_getaddress() returns a malloc'ed copy of the
6766         string; no need to strdup() it.
6767         (getftp): Make pwd_len a local variable.
6768         (ftp_loop): Free PWD before returning.
6769
6770         * init.c (cleanup): Free opt.ftp_pass only if it's non-NULL.
6771
6772 2000-11-22  Hrvoje Niksic  <hniksic@arsdigita.com>
6773
6774         * all: Use xfree() instead of free.
6775
6776         * utils.c (xfree): New function.
6777
6778 2000-11-21  Hrvoje Niksic  <hniksic@arsdigita.com>
6779
6780         * url.c (convert_links): HTML-quote the converted string.
6781
6782         * utils.c (html_quote_string): Move here from ftp-ls.c
6783         (html_quote_string): Make non-static; declare in utils.h.
6784         (html_quote_string): Convert SP to &#32;.
6785
6786 2000-11-21  Hrvoje Niksic  <hniksic@arsdigita.com>
6787
6788         * ftp.c (getftp): Reformat Jan's code according to GNU coding
6789         standards; remove (debugging?) printf's; use '\0' for the ASCII
6790         zero character.  Use alloca() instead of malloc() for
6791         inter-function temporary allocations.
6792
6793 2000-11-18  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
6794
6795         * ftpparse.c, ftpparse.h: New files.
6796
6797         * ftp-ls.c (ftp_parse_ls): Use ftp_parse_unix_ls for UNIX servers
6798         only. Use ftp_parse_nonunix_ls otherwise.
6799         (ftp_parse_nonunix_ls): Stub to the ftpparse library handling all
6800         exotic FTP servers.
6801
6802         * ftp.h (stype): New enum, distinguishes UNIX, VMS, and "other"
6803         FTP servers.
6804
6805         * ftp.c: New static wariables host_type, pwd, and pwd_len.
6806         (getftp): Support for VMS. Support for FTP servers that do not
6807         place you in the root directory after login.
6808         (ftp_retrieve_list): VMS is silent about the real file size, issue
6809         a more appropriate message.
6810         (ftp_get_listing): Pass host_type to ftp_parse_ls.
6811
6812         * ftp-basic.c (ftp_pwd, ftp_syst): New functions.
6813
6814 2000-11-21  Hrvoje Niksic  <hniksic@arsdigita.com>
6815
6816         * hash.c (hash_table_put): Don't overwrite deleted mappings.
6817
6818 2000-11-21  Hrvoje Niksic  <hniksic@arsdigita.com>
6819
6820         * hash.c (find_mapping): New function.
6821         (hash_table_get): Use it.
6822         (hash_table_get_pair): Ditto.
6823         (hash_table_exists): Ditto.
6824         (hash_table_remove): Ditto.
6825         (hash_table_remove): Really delete the entry if the mapping
6826         following LOCATION is empty.
6827
6828         * utils.c (string_set_add): Check whether the element has existed
6829         before.
6830
6831         * hash.c (hash_table_get_pair): New function.
6832
6833 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
6834
6835         * http.c (http_process_type): Ignore trailing whitespace; use
6836         strdupdelim().
6837
6838         * recur.c (recursive_retrieve): Use the new `convert' field.
6839         (convert_all_links): Ditto.
6840         (convert_all_links): Don't respect meta_disallow_follow.
6841
6842         * html-url.c (handle_link): Fill out link_relative_p and
6843         link_complete_p.
6844
6845         * url.h (struct _urlpos): Make elements more readable.
6846
6847         * recur.c (recursive_retrieve): Call slist_prepend instead of
6848         slist_append.
6849         (convert_all_links): Call slist_nreverse before iterating through
6850         urls_html.
6851
6852         * utils.c (slist_prepend): New function.
6853         (slist_nreverse): Ditto.
6854
6855 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
6856
6857         * http.c (check_end): Constify.
6858
6859 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
6860
6861         * http.c (http_loop): If username and password are known, try the
6862         `Basic' authentication scheme by default.
6863
6864         * connect.h: Declare test_socket_open.
6865
6866 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
6867
6868         * version.c: Bump version from 1.5.3+dev to 1.7-dev.
6869
6870 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
6871
6872         * http.c (gethttp): Don't use the return value of sprintf().
6873         (gethttp): Inhibit keep-alive if opt.http_keep_alive is 0.
6874
6875 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
6876
6877         * recur.c (recursive_retrieve): Print the "so we don't load"
6878         debugging message only if we really don't load.
6879
6880         * http.c (gethttp): Inhibit keep-alive if proxy is being used.
6881         (gethttp): Don't request keep-alive if keep-alive is inhibited.
6882
6883 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
6884
6885         * http.c (gethttp): Make the HTTP persistent connections more
6886         robust.
6887
6888 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
6889
6890         * retr.c (get_contents): If use_expected, make sure that the
6891         appropriate amount of data is being read.
6892
6893         * http.c (gethttp): Check for both `Keep-Alive: ...' and
6894         `Connection: Keep-Alive'.
6895
6896         * wget.h (DEBUGP): Call debug_logprintf only if opt.debug is
6897         turned on.
6898
6899 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
6900
6901         * http.c (connection_available_p): Use it.
6902
6903         * connect.c (test_socket_open): New function.
6904
6905         * http.c (gethttp): Support persistent connections.  Based on the
6906         ideas, and partly on code, by Sam Horrocks <sam@daemoninc.com>.
6907         (register_persistent): New function.
6908         (connection_available_p): Ditto.
6909         (invalidate_connection): Ditto.
6910
6911 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
6912
6913         * url.c (convert_links): Handle UREL2ABS case.
6914
6915         * recur.c (recursive_retrieve): Instead of the list
6916         urls_downloaded, use hash tables dl_file_url_map and
6917         dl_url_file_map.
6918         (convert_all_links): Use them to retrieve data.
6919
6920         * host.c (clean_hosts): Free the hash tables.
6921
6922         * main.c (private_initialize): Call host_init().
6923
6924         * host.c (store_hostaddress): Use a saner, hash table-based data
6925         model.
6926         (realhost): Ditto.
6927         (host_init): Initialize the hash tables.
6928
6929 2000-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
6930
6931         * utils.c (slist_append): Eviscerate NOSORT.  Hash tables are now
6932         used for what the sorted slists used to be used for.
6933         (slist_contains): Don't rely on the list being sorted.
6934         (slist_append): Simplify the code.
6935
6936         * recur.c (recursive_cleanup): Use free_string_set.
6937
6938         * utils.c (string_set_add, string_set_exists, string_set_free):
6939         New functions for easier freeing of hash tables whose keys are
6940         strdup'ed strings.
6941
6942         * recur.c (recursive_retrieve): Use the hash table functions for
6943         storing undesirable URLs.
6944
6945         * hash.c: New file.
6946
6947 2000-11-17  Hrvoje Niksic  <hniksic@arsdigita.com>
6948
6949         * main.c (private_initialize): Call url_init.
6950         (main): Call private_initialize.
6951
6952         * url.c (unsafe_char_table): New table.
6953         (UNSAFE_CHAR): Use it.
6954         (init_unsafe_char_table): New function.
6955         (url_init): New function; call init_unsafe_char_table.
6956
6957 2000-11-16  Hrvoje Niksic  <hniksic@arsdigita.com>
6958
6959         * mswindows.h: Define snprintf and vsnprintf to _snprintf and
6960         _vsnprintf respectively.
6961
6962 2000-11-15  Hrvoje Niksic  <hniksic@arsdigita.com>
6963
6964         * config.h.in: Do the _XOPEN_SOURCE and _SVID_SOURCE things only
6965         on Linux.
6966
6967 2000-11-15  Hrvoje Niksic  <hniksic@arsdigita.com>
6968
6969         * html-url.c (handle_link): Handle HTML fragment identifiers.
6970
6971         * recur.c (recursive_retrieve): If norobot info is respected and
6972         the file is specified not to be followed by robots, respect that.
6973
6974         * html-url.c (collect_tags_mapper): Handle <meta name=robots
6975         content=X>.  For us the important cases are where X is NONE or
6976         where X contains NOFOLLOW.
6977         (get_urls_html): Propagate that information to the caller.
6978
6979 2000-11-13  Hrvoje Niksic  <hniksic@arsdigita.com>
6980
6981         * url.c (convert_links): Unlink the file we might be reading from
6982         before writing to it.
6983         (convert_links): Use alloca instead of malloc for
6984         filename_plus_orig_suffix.
6985
6986 2000-11-12  Hrvoje Niksic  <hniksic@arsdigita.com>
6987
6988         * host.c (realhost): Add HOST to the list with quality==0 only if
6989         it wasn't already there.
6990         Based on analysis by Lu Guohan <feng@public.bjnet.edu.cn>.
6991
6992 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
6993
6994         * url.c (get_urls_file): Ditto.
6995         (convert_links): Ditto.
6996
6997         * html-url.c (get_urls_html): Use read_file() instead of
6998         load_file().
6999
7000         * utils.c (read_file): New function, instead of the old
7001         load_file().
7002         (read_file_free): Ditto.
7003
7004         * url.c (findurl): Search only for the supported protocols.
7005         (convert_links): Use fwrite() when writing out a region of
7006         characters.
7007
7008 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
7009
7010         * ftp-ls.c: Move html_quote_string and ftp_index here.
7011
7012         * url.c: Remove get_urls_html, since that's now in html-url.c.
7013
7014         * html-url.c: New file.
7015
7016         * html-parse.c: New file.
7017
7018 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
7019
7020         * init.c (run_wgetrc): Don't bother killing off '\r' since
7021         pars_line() skips whitespace at end of line anyway.
7022         (parse_line): Oops, it didn't.  Now it does.
7023
7024         * recur.c (parse_robots): Ditto here.
7025
7026         * ftp-ls.c (ftp_parse_unix_ls): Kill off the newline character
7027         manually because read_whole_line no longer does.
7028
7029         * utils.c (read_whole_line): Rewrite to: a) use less memory
7030         (reallocates to needed size after work), b) work faster -->
7031         fgets() instead of getc, c) be more correct --> doesn't kill the
7032         newline character at the end of line.
7033
7034 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
7035
7036         * init.c (comind): Initialize MAX to array size - 1.
7037
7038 2000-11-08  Hrvoje Niksic  <hniksic@arsdigita.com>
7039
7040         * url.c (construct): Changed last_slash[-1] to *(last_slash - 1).
7041         Suggested by Edward J. Sabol.
7042
7043 2000-11-08  Hrvoje Niksic  <hniksic@arsdigita.com>
7044
7045         * url.c (construct): Handle the case where host name is not
7046         followed by a slash.
7047
7048 2000-11-06  Hrvoje Niksic  <hniksic@arsdigita.com>
7049
7050         * init.c: commands[] need to be sorted!  ("base" wasn't.)
7051
7052 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
7053
7054         * wget.h (DO_REALLOC_FROM_ALLOCA): Use braces to disambiguate
7055         `if'.
7056
7057 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
7058
7059         * url.c (construct): Insert unneeded initialization for the
7060         compiler to shut up.
7061
7062         * config.h.in: Define _XOPEN_SOURCE to 500 to get the prototype
7063         for strptime() (*duh*).  Define _SVID_SOURCE to get S_IFLNK which
7064         otherwise gets lost when you define _XOPEN_SOURCE.
7065
7066         * utils.c (touch): Include the file name in the error message.
7067         From Debian.
7068
7069 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
7070
7071         * log.c (logvprintf): Use vsnprintf() in all cases.  If necessary,
7072         resize the buffer to fit the formated message.  That way, messages
7073         of arbitrary size may be printed.
7074         (logvprintf): Use saved_append() to optionally log the last
7075         several lines of output.
7076         (logputs): Ditto.
7077         (log_close): Adapt to new data structures.
7078         (log_dump): Ditto.
7079         (redirect_output): Print messages to stderr, not to stdout.
7080
7081         * log.c (saved_append_1): New function.  Replaces the old logging
7082         system ("log all output until 10M characters") with a new, much
7083         more reasonable one ("log last screenful of text").
7084         (saved_append): New function; call saved_append_1.
7085         (free_log_line): New function.
7086
7087 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
7088
7089         * url.c (construct): Fix comment.
7090         (find_last_char): Document.
7091
7092 2000-11-04  Hrvoje Niksic  <hniksic@arsdigita.com>
7093
7094         * snprintf.c: New file.
7095
7096 2000-11-03  Hrvoje Niksic  <hniksic@arsdigita.com>
7097
7098         * wget.h: If HAVE_STDARG_H is not defined, don't declare argument
7099         types to logprintf() and debug_logprintf().
7100
7101 2000-11-02  Hrvoje Niksic  <hniksic@arsdigita.com>
7102
7103         * ftp.c (ftp_loop_internal): Hide the password from the URL when
7104         printing non-verbose.  Problem spotted by Dariusz Mlynarczyk
7105         <darekm@bydg.lomac.com.pl>.
7106
7107 2000-11-02  Junio Hamano  <junio@twinsun.com>
7108
7109         * ftp-basic.c (ftp_login): Make comparison case-insensitive.
7110
7111 2000-11-02  Tyler Riddle  <triddle@liquidmarket.com>
7112
7113         * http.c (known_authentication_scheme_p): Recognize NTML
7114         authentication.
7115         (create_authorization_line): Treat NTML the same as `Basic'.
7116
7117 2000-11-02  Hrvoje Niksic  <hniksic@arsdigita.com>
7118
7119         * retr.c (retrieve_url): Free url before returning.
7120         (retrieve_url): Free mynewloc before returning.
7121         Spotted by Mark A. Mankins <Mankins_Mark@prc.com>.
7122
7123 2000-11-02  Hrvoje Niksic  <hniksic@arsdigita.com>
7124
7125         * url.c (parseurl): Remove possible reading past the end of
7126         sup_protos[].  Spotted by Mark A. Mankins <Mankins_Mark@prc.com>.
7127
7128 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
7129
7130         * main.c (main): In case of opt.downloaded overflowing, print
7131         <overflow> instead of a totally bogus random value.
7132
7133         * retr.c (retrieve_from_file): Ditto.
7134
7135         * recur.c (recursive_retrieve): Ditto.
7136
7137         * main.c (main): Ditto.
7138
7139         * http.c (http_loop): Ditto.
7140
7141         * ftp.c (ftp_loop_internal): Use downloaded_increase() instead of
7142         `+=', and downloaded_exceeds_quota() instead of the simple-minded
7143         check.
7144         (ftp_retrieve_list): Ditto.
7145         (ftp_retrieve_dirs): Ditto.
7146         (ftp_retrieve_glob): Ditto.
7147
7148         * retr.c (downloaded_increase): New function.  Notice overflows of
7149         opt.downloaded.
7150         (downloaded_exceeds_quota): Make sure that opt.downloaded is not
7151         used if it overflowed.
7152
7153         * options.h (struct options): New member downloaded_overflow.
7154
7155 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
7156
7157         * wget.h (enum): Remove extra space after last enumeration.
7158
7159 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
7160
7161         * main.c (main): Use legible_very_long() for printing
7162         opt.downloaded.
7163
7164         * utils.c (legible_1): New function that operates on strings and
7165         does the brunt of legible()'s work.
7166         (legible): Use legible_1().
7167         (legible_very_long): New function; dump the argument with
7168         sprintf(), and call legible_1().
7169
7170         * options.h (struct options): Use VERY_LONG_TYPE for
7171         opt.downloaded.
7172
7173         * sysdep.h (VERY_LONG_TYPE): Define it to have a 64-bit or greater
7174         type.
7175
7176         * config.h.in: Make sure that SIZEOF_LONG and SIZEOF_LONG_LONG get
7177         defined.  Define HAVE_LONG_LONG if long long is available.
7178
7179 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
7180
7181         * utils.c (long_to_string): Update with a later, better version.
7182
7183 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
7184
7185         * url.c (path_simplify_with_kludge): New function.
7186         (path_simplify_with_kludge): Disable it.  Instead...
7187         (parse_dir): ...make sure that at this point the right thing is
7188         done, i.e. that "query" part of the URL (?...) is always assigned
7189         to the file, never to the directory portion of the path.
7190
7191 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
7192
7193         * retr.c (retrieve_url): Detect redirection cycles.
7194
7195 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
7196
7197         * url.c (get_urls_html): Decode HTML entities using
7198         html_decode_entities.
7199
7200         * html.c (htmlfindurl): Don't count the `#' in numeric entities
7201         (&#NNN;) as an HTML fragemnt.
7202         (html_decode_entities): New function.
7203
7204 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
7205
7206         * html.c (htmlfindurl): Fix recognition of # HTML fragments.
7207
7208 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
7209
7210         * url.c (construct): Rewritten for clarity.  Avoids the
7211         unnecessary copying and stack-allocation the old version
7212         performed.
7213
7214 2000-10-31  Hrvoje Niksic  <hniksic@arsdigita.com>
7215
7216         * ftp.c (getftp): Ditto.
7217
7218         * http.c (gethttp): Rewind the stream when retrying from scratch.
7219
7220 2000-10-31  Hrvoje Niksic  <hniksic@arsdigita.com>
7221
7222         * retr.c (retrieve_url): Use url_concat() to handle relative
7223         redirections instead of /ad hoc/ code.
7224
7225         * url.c (url_concat): New function encapsulating weird
7226         construct().
7227         (urllen_http_hack): New function.
7228         (construct): When constructing new URLs, recognize that `?' does
7229         not form part of the file name in HTTP.
7230
7231 2000-10-13  Adrian Aichner  <adrian@xemacs.org>
7232
7233         * retr.c: Add msec timing support for WINDOWS.
7234         * retr.c (reset_timer): GetSystemTime() on WINDOWS.
7235         * retr.c (elapsed_time): Calculate delta time to msec on WINDOWS.
7236
7237 2000-10-27  Dan Harkless  <wget@harkless.org>
7238
7239         * retr.c (retrieve_url): Manually applied T. Bharath
7240         <TBharath@responsenetworks.com>'s patch to get wget to grok
7241         illegal relative URL redirects.  Reformatted and re-commented it.
7242
7243 2000-10-23  Dan Harkless  <wget@harkless.org>
7244
7245         * connect.c (make_connection and bindport): Manually applied Rob
7246         Mayoff <mayoff@dqd.com>'s 1.5.3 patch to add --bind-address,
7247         changing coding style to GNU's.
7248
7249         * ftp.c (ftp_loop_internal): --delete-after wasn't implemented for
7250         files downloaded via FTP.  Per a comment, .listing files were not
7251         counted towards number of bytes and files downloaded because they're
7252         deleted anyway.  Well, they aren't under -nr, so count them then.
7253
7254         * init.c: Manually applied Rob Mayoff's 1.5.3 patch to add
7255         --bind-address, alphabetizing, changing coding style to GNU's,
7256         commenting, and renaming cmd_ip_address() to cmd_address() to
7257         imply hostnames also okay.
7258
7259         * main.c (main): --delete-after didn't delete the root of the
7260         tree.  Ignore --convert-links if --delete-after was specified.
7261         Manually applied Rob Mayoff's 1.5.3 patch to add --bind-address,
7262         fixing duplicate use of added-since-1.5.3 case value.
7263         (print_help): Clarified that --delete-after deletes local files.
7264         Rob forgot to add a line for his new --bind-address option.
7265
7266         * options.h (struct options): Manually applied Rob Mayoff's patch
7267         to add --bind-address (bind_address structure member).
7268
7269         * recur.c (recursive_retrieve): Improved comment; added DEBUGP().
7270         Ignore --convert-links if --delete-after was specified.
7271
7272         * retr.c (retrieve_from_file): Just added a DEBUGP().
7273
7274 2000-10-19  Dan Harkless  <wget@harkless.org>
7275
7276         * ftp.c (ftp_loop_internal): downloaded_file() enumerators changed.
7277         (getftp): Applied Piotr Sulecki <Piotr.Sulecki@ios.krakow.pl>'s
7278         patch to work around FTP servers that incorrectly respond to the
7279         "REST" command with the remaining size rather than the total file size.
7280
7281         * http.c (gethttp): Improved a comment and added code to tack on
7282         ".html" to text/html files without that extension when -E specified.
7283         (http_loop): Use new downloaded_file() enumerators and deal with
7284         the case of gethttp() called xrealloc() on u->local.
7285
7286         * init.c (commands): Added new "htmlextension" command.
7287         Also renamed John Daily's cmd_quad() to the more descriptive
7288         cmd_lockable_boolean(), alpha-sorted the CMD_DECLARE()s and
7289         removed duplicate cmd_boolean() declaration.
7290
7291         * main.c (print_help): Added my new -E / --html-extension option.
7292         (main): Undocumented --email-address option previously used -E synonym.
7293         Stole it away for the much more deserving --html-extension's use.
7294
7295         * options.h (struct options): Added html_extension field.
7296
7297         * url.c (convert_links): URL X that we saved as X.html locally due
7298         to -E needs to be backed up as X.orig, not X.html.orig.  Added comments.
7299         (downloaded_file): Now remembers if we added .html extension to a file.
7300
7301         * url.h (downloaded_file_t): Added extra enumerators to support above.
7302         (downloaded_file): Now takes and returns a downloaded_file_t.
7303
7304         * wget.h (unnamed "dt" enum): Added ADDED_HTML_EXTENSION enumerator.
7305
7306 2000-10-09  Dan Harkless  <wget@harkless.org>
7307
7308         * html.c (htmlfindurl): Added unneeded initialization to quiet warning.
7309
7310         * main.c (print_help): Clarified what --retr-symlinks does.
7311
7312 2000-09-15  John Daily  <jdaily@cyberdude.com>
7313
7314         * init.c: Add support for "always" and "never" values to allow
7315         .wgetrc to override commandline (useful e.g. with .pm files
7316         calling `wget --passive-ftp' when your firewall doesn't allow that).
7317
7318         * ftp.c (getftp): passive_ftp is first option to support always/never.
7319
7320 2000-08-30  Dan Harkless  <wget@harkless.org>
7321
7322         * ftp.c (ftp_retrieve_list): Use new INFINITE_RECURSION #define.
7323
7324         * html.c: htmlfindurl() now takes final `dash_p_leaf_HTML' parameter.
7325         Wrapped some > 80-column lines.  When -p is specified and we're at a
7326         leaf node, do not traverse <A>, <AREA>, or <LINK> tags other than
7327         <LINK REL="stylesheet">.
7328
7329         * html.h (htmlfindurl): Now takes final `dash_p_leaf_HTML' parameter.
7330
7331         * init.c: Added new -p / --page-requisites / page_requisites option.
7332
7333         * main.c (print_help): Clarified that -l inf and -l 0 both allow
7334         infinite recursion.  Changed the unhelpful --mirrior description
7335         to simply give the options it's equivalent to.  Added new -p option.
7336         (main): Added some comments; handle new -p / --page-requisites.
7337
7338         * options.h (struct options): Added new page_requisites field.
7339
7340         * recur.c: Changed "URL-s" to "URLs" and "HTML-s" to "HTMLs".
7341         Calculate and pass down new `dash_p_leaf_HTML' parameter to
7342         get_urls_html().  Use new INFINITE_RECURSION #define.
7343
7344         * retr.c: Changed "URL-s" to "URLs".  get_urls_html() now takes
7345         final `dash_p_leaf_HTML' parameter.
7346
7347         * url.c: get_urls_html() and htmlfindurl() now take final
7348         `dash_p_leaf_HTML' parameter.
7349
7350         * url.h (get_urls_html): Now takes final `dash_p_leaf_HTML' parameter.
7351
7352         * wget.h: Added some comments and new INFINITE_RECURSION #define.
7353
7354 2000-08-23  Dan Harkless  <wget@harkless.org>
7355
7356         * main.c (print_help): -B / --base was not mentioned.
7357
7358 2000-08-22  Dan Harkless  <wget@harkless.org>
7359
7360         * main.c (print_help): Modified -nc description to mention that it
7361         also prevents the creation of multiple versions of the same file
7362         with ".<number>" suffixes.
7363
7364 2000-07-14  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
7365
7366         * retr.c (retrieve_url): Consistently strdup opt.referer when
7367         setting u->referer.
7368
7369 2000-06-09  Dan Harkless  <wget@harkless.org>
7370
7371         * main.c (print_help): --help output for --waitretry was over 80 cols.
7372
7373 2000-06-09  Hrvoje Niksic  <hniksic@iskon.hr>
7374
7375         * url.c (encode_string): Fix comment.
7376         Suggested by Herold Heiko <Heiko.Herold@previnet.it>.
7377
7378 2000-06-01  Const Kaplinsky  <const@ce.cctpu.edu.ru>
7379
7380         * ftp.c (ftp_retrieve_list): Change permissions only on plain
7381         files.
7382
7383 2000-06-01  Hrvoje Niksic  <hniksic@iskon.hr>
7384
7385         * url.c (str_url): Print the port number only if it's different
7386         from the default port number for that protocol.
7387
7388 2000-05-22  Dan Harkless  <wget@harkless.org>
7389
7390         * main.c (print_help): Added --help line for Damir Dzeko
7391         <ddzeko@zesoi.fer.hr>'s until-now-undocumented --referer option.
7392         Removed comments that --referer and --waitretry were undocumented.
7393         Changed "`.wgetrc' command" to "`.wgetrc'-style command" on --help
7394         line for --execute.
7395
7396 2000-05-18  Hrvoje Niksic  <hniksic@iskon.hr>
7397
7398         * ftp.c (getftp): Ditto.
7399
7400         * http.c (gethttp): Check for return value of fclose/fflush.
7401
7402 2000-04-12  Hrvoje Niksic  <hniksic@iskon.hr>
7403
7404         * host.c (store_hostaddress): Instead of shifting ADDR, start
7405         copying from the correct address.
7406
7407 2000-04-12  Hrvoje Niksic  <hniksic@iskon.hr>
7408
7409         * http.c (gethttp): Don't free REQUEST -- it was allocated with
7410         alloca().
7411         Pointed out by Gisle Vanem <gvanem@eunet.no>.
7412
7413 2000-04-04  Dan Harkless  <wget@harkless.org>
7414
7415         * host.c (store_hostaddress): R. K. Owen's patch introduces a
7416         "left shift count >= width of type" warning on 32-bit
7417         architectures.  Got rid of it by tricking the compiler w/ a variable.
7418
7419         * url.c (UNSAFE_CHAR): The macro didn't include all the illegal
7420         characters per RFC1738, namely everything above '~'.  It also
7421         generated a warning on OSes where char =~ unsigned char.  Fixed.
7422
7423 1998-10-17  Hrvoje Niksic  <hniksic@srce.hr>
7424
7425         * http.c (http_process_type): Removed needless strdup(), a memory
7426         leak.
7427
7428 1998-09-25  Hrvoje Niksic  <hniksic@srce.hr>
7429
7430         * html.c (htmlfindurl): Set PH to the first occurrence of `#'.
7431
7432 1998-09-25  Simon Munton  <simonm@m4data.co.uk>
7433
7434         * init.c (wgetrc_file_name): Don't free HOME under Windows.
7435
7436 1998-12-01  "R. K. Owen"  <rkowen@Nersc.GOV>
7437
7438         * host.c (store_hostaddress): Fix for big endian 64-bit machines.
7439
7440 1998-12-01  Hrvoje Niksic  <hniksic@srce.hr>
7441
7442         * url.c (UNSAFE_CHAR): New macro.
7443         (contains_unsafe): Use it.
7444         (encode_string): Ditto.
7445
7446 1998-12-01  Hrvoje Niksic  <hniksic@srce.hr>
7447
7448         * main.c (i18n_initialize): Use LC_MESSAGES only if available.
7449
7450 2000-03-31  Hrvoje Niksic  <hniksic@srce.hr>
7451
7452         * Use TOUPPER/TOLOWER.
7453
7454 1998-12-22  Alexander V. Lukyanov  <lav@yars.free.net>
7455
7456         * ftp-opie.c (btoe): Zero-terminate OSTORE.
7457
7458 2000-03-21  Hrvoje Niksic  <hniksic@iskon.hr>
7459
7460         * wget.h (DO_REALLOC_FROM_ALLOCA): Ditto.
7461
7462         * sysdep.h (ISALNUM): New macro.
7463         (TOLOWER): Ditto.
7464         (TOUPPER): Ditto.
7465
7466 2000-03-10  Dan Harkless  <wget@harkless.org>
7467
7468         * html.c (idmatch): Implemented checking of my new --follow-tags
7469         and --ignore-tags options.
7470
7471         * init.c (commands): Added comment reminding people adding new
7472         entries doing allocation to add corresponding freeing in cleanup().
7473         (commands): Added new followtags and ignoretags commands.
7474         (cleanup): Free storage for new followtags and ignoretags.
7475
7476         * main.c: Use of "comma-separated list" was random -- normalized
7477         it.  Did some alphabetization.  Added comments pointing out
7478         "Options without arguments" and "Options accepting an argument"
7479         sections of long_options[].  Added new options --follow-tags and
7480         -G / --ignore-tags.  Added comment that Damir's --referer is
7481         currently undocumented.  Added comment that Heiko's --waitretry is
7482         partially undocumented (mentioned in --help but not in
7483         wget.texi).  Moved improperly sorted 24, 129, and 'G' cases.
7484
7485         * options.h (struct options): Added new fields follow_tags and
7486         ignore_tags.
7487
7488         * wget.h: Added "#define EQ 0" so we can say "strcmp(a, b) == EQ".
7489
7490 2000-03-02  Dan Harkless  <wget@harkless.org>
7491
7492         * ftp.c (ftp_loop_internal): Heiko introduced "suggest explicit
7493         braces to avoid ambiguous `else'" warnings.  Eliminated them.
7494
7495         * http.c (gethttp): Dan Berger's query string patch is totally
7496         bogus.  If you have two different URLs, gen_page.cgi?page1 and
7497         get_page.cgi?page2, they'll both be saved as get_page.cgi and the
7498         second will overwrite the first.  Also, parameters to implicit
7499         CGIs, like "http://www.host.com/db/?2000-03-02" cause the URLs to
7500         be printed with trailing garbage characters, and could seg fault.
7501         Backing out the patch, which Dan B. informed me by email was just
7502         a kludge to download StarOffice from Sun made necessary due to
7503         wget's unconditional escaping of certain characters (room for an
7504         option there?).
7505         (http_loop): Heiko introduced "suggest explicit braces to avoid
7506         ambiguous `else'" warnings.  Eliminated them.
7507
7508         * main.c: Heiko's --wait / --waitretry backwards compatibility
7509         code looks to have been totally untested -- automatic variable
7510         'wr' was used without being initialized, and a long int was passed
7511         into setval()'s char* val parameter.
7512
7513         * recur.c (parse_robots): Applied Edward J. Sabol
7514         <sabol@alderaan.gsfc.nasa.gov>'s patch for Guan Yang's reported
7515         problem with "User-agent:<space>*<space>" lines in robots.txt.
7516
7517         * url.c (parseurl, str_url): Removing Dan Berger's code (see
7518         http.c above for explanation).
7519
7520 1999-08-25  Heiko Herold  <Heiko.Herold@previnet.it>
7521
7522         * ftp.c: Respect new option waitretry.
7523
7524 2000-01-30  Damir Dzeko  <ddzeko@zesoi.fer.hr>
7525
7526         * http.c (gethttp): Send custom Referer, if required.
7527
7528 1999-09-24  Charles G Waldman  <cgw@fnal.gov>
7529
7530         * netrc.c (parse_netrc): Allow passwords to contain spaces.
7531
7532         * netrc.c (parse_netrc): New function.
7533
7534 1999-09-17  Dan Berger  <dberger@ix.netcom.com>
7535
7536         * http.c (gethttp): Send it.
7537
7538         * url.c (parseurl): Detect query string in HTTP URL-s.
7539         (str_url): Print it.
7540
7541 2000-03-02  HIROSE Masaaki  <hirose31@t3.rim.or.jp>
7542
7543         * html.c (html_allow): Add <link href=...> and <script src=...>.
7544
7545 1999-05-02  andrew deryabin  <djsf@softhome.net>
7546
7547         * http.c (gethttp): Specify port in `Host' header only if it's
7548         different from 80.
7549
7550 1998-11-03  Edward J. Sabol  <sabol@alderaan.gsfc.nasa.gov>
7551
7552         * recur.c (recursive_retrieve): If a finite maximum depth is
7553         specified, and we're are already at that depth, don't download the
7554         HTML file for parsing.
7555
7556 2000-03-01  Dan Harkless  <wget@harkless.org>
7557
7558         * ftp.c (ftp_loop_internal): Call new downloaded_file() function,
7559         even though we don't do conversion on HTML files retrieved via
7560         FTP, so _current_ usage of downloaded_file() makes this call unneeded.
7561         (ftp_retrieve_list): Added a comment saying where we need to
7562         stat() a .orig file if FTP'd HTML file conversion is ever implemented.
7563         (ftp_retrieve_list): "Local file '%s' is more recent," is sometimes
7564         a lie -- reworded as "Server file no newer than local file '%s' --".
7565
7566         * http.c (http_loop): Fixed a typo and clarified a comment.
7567         (http_loop): When -K and -N are specified together, compare size
7568         and timestamp of server file X against local file X.orig (if
7569         extant) rather than converted local file X.
7570         (http_loop): "Local file '%s' is more recent," is sometimes a lie
7571         -- reworded as "Server file no newer than local file '%s' --".
7572         (http_loop): Call new downloaded_file() function to prevent
7573         wrongful overwriting of .orig file when -N is specified.
7574
7575         * url.c (convert_links): When -K specified, only rename X to
7576         X.orig if downloaded_file() returns TRUE.  Otherwise when we skip
7577         file X due to -N, we clobber an X.orig from a previous invocation.
7578         (convert_links): Call the failsafe xstrdup(), not the real strdup().
7579         (convert_links): Added a note asking anyone who understands how
7580         multiple URLs can correspond to a single file to comment it.
7581         (downloaded_file): Added this new function.
7582
7583         * url.h (downloaded_file): Added prototype for this new function
7584         as well as its downloaded_file_t enum type.
7585
7586         * wget.h (boolean): Added this new typedef and TRUE and FALSE #defines.
7587
7588 2000-02-29  Dan Harkless  <wget@harkless.org>
7589
7590         * version.c: Upped version to developer-only "1.5.3+dev".
7591
7592 2000-02-18  Dan Harkless  <wget@harkless.org>
7593
7594         * init.c (backup_converted): Added this new option.
7595
7596         * main.c (-K / --backup-converted): Added this new option.
7597
7598         * options.h (backup_converted): Added this new option.
7599
7600         * url.c (convert_links): When backup_converted is specified, save
7601         file X as X.orig before converting.
7602
7603         * url.h (urlpos): Fixed typo -- said "Rekative" instead of "Relative".
7604
7605 1998-09-21  Hrvoje Niksic  <hniksic@srce.hr>
7606
7607         * version.c: Wget 1.5.3 is released.
7608
7609 1998-09-21  Hrvoje Niksic  <hniksic@srce.hr>
7610
7611         * host.c (ftp_getaddress): Don't warn when reverse-lookup of local
7612         address doesn't yield FQDN.
7613
7614 1998-09-21  Andreas Schwab  <schwab@issan.informatik.uni-dortmund.de>
7615
7616         * cmpt.c (strerror): Fix declaration of sys_errlist.
7617
7618 1998-09-11  Hrvoje Niksic  <hniksic@srce.hr>
7619
7620         * main.c (main): Don't use an array subscript as the first
7621         argument to STRDUP_ALLOCA.
7622         From Kaveh R. Ghazi.
7623
7624 1998-09-11  Szakacsits Szabolcs  <szaka@sienet.hu>
7625
7626         * html.c (htmlfindurl): Download table background.
7627
7628 1998-09-11  Hans Grobler  <grobh@conde.ee.sun.ac.za>
7629
7630         * init.c (parse_line): Would free *com before allocating it.
7631         (parse_line): Would free com instead of *com.
7632
7633 1998-09-10  Howard Gayle  <howard@fjst.com>
7634
7635         * url.c (get_urls_html): Would drop the last character of the
7636         link.
7637
7638 1998-09-10  Hrvoje Niksic  <hniksic@srce.hr>
7639
7640         * http.c (http_loop): Don't print status code if quiet.
7641
7642 1998-09-10  Kaveh R. Ghazi  <ghazi@caip.rutgers.edu>
7643
7644         * log.c: Use <stdarg.h> only when __STDC__.
7645
7646 1998-09-10  Adam D. Moss  <adam@foxbox.org>
7647
7648         * html.c (htmlfindurl): Download <layer src=...>.
7649
7650 1998-09-10  Howard Gayle  <howard@fjst.com>
7651
7652         * ftp.c (ftp_retrieve_list): Don't update the time stamp of a file
7653         not retrieved.
7654
7655 1998-06-27  Hrvoje Niksic  <hniksic@srce.hr>
7656
7657         * utils.c: Include <libc.h> on NeXT.
7658
7659 1998-06-26  Heinz Salzmann  <heinz.salzmann@intermetall.de>
7660
7661         * url.c (get_urls_html): Fix calculation of URL position.
7662
7663 1998-06-23  Hrvoje Niksic  <hniksic@srce.hr>
7664
7665         * version.c: Wget 1.5.2 is released.
7666
7667 1998-06-23  Dave Love  <d.love@dl.ac.uk>
7668
7669         * ftp.c, init.c, netrc.c: Include errno.h.
7670
7671         * http.c: Include errno.h and time header.
7672
7673         * Makefile.in (exext): Define.
7674         (install.bin, uninstall.bin): Use it.
7675
7676 1998-06-21  Hrvoje Niksic  <hniksic@srce.hr>
7677
7678         * http.c (http_loop): Don't attempt to compare local and remote
7679         sizes if the remote size is unknown.
7680
7681 1998-06-16  Hrvoje Niksic  <hniksic@srce.hr>
7682
7683         * url.c (get_urls_html): Use malloc() instead of alloca in the
7684         loop.
7685
7686 1998-06-13  Hrvoje Niksic  <hniksic@srce.hr>
7687
7688         * version.c: Wget 1.5.2-b4 is released.
7689
7690 1998-06-13  Hrvoje Niksic  <hniksic@srce.hr>
7691
7692         * url.c (get_urls_html): Ignore spaces before and after the URI.
7693
7694 1998-06-08  Wanderlei Antonio Cavassin  <cavassin@conectiva.com.br>
7695
7696         * ftp.c (getftp): Translate `done'.
7697
7698 1998-06-06  Hrvoje Niksic  <hniksic@srce.hr>
7699
7700         * version.c: Wget 1.5.2-b3 is released.
7701
7702 1998-06-06  Alexander Kourakos  <awk@bnt.com>
7703
7704         * init.c (cleanup): Close dfp, don't free it.
7705
7706 1998-06-06  Hrvoje Niksic  <hniksic@srce.hr>
7707
7708         * utils.c (make_directory): Twiddle.
7709
7710         * config.h.in: Added template for access().
7711
7712 1998-06-05  Mathieu Guillaume  <mat@cythere.com>
7713
7714         * html.c (htmlfindurl): Download <input src=...>
7715
7716 1998-06-03  Hrvoje Niksic  <hniksic@srce.hr>
7717
7718         * utils.c (file_exists_p): Use access() with two arguments.
7719
7720 1998-05-27  Martin Kraemer  <Martin.Kraemer@mch.sni.de>
7721
7722         * netrc.c (parse_netrc): Correct logic.
7723
7724 1998-05-27  Hrvoje Niksic  <hniksic@srce.hr>
7725
7726         * ftp.c (getftp): Added `break'; suggested by Lin Zhe Min
7727         <ljm@ljm.wownet.net>.
7728
7729 1998-05-24  Hrvoje Niksic  <hniksic@srce.hr>
7730
7731         * version.c: Wget 1.5.2-b2 is released.
7732
7733 1998-05-18  Juan Jose Rodriguez  <jcnsoft@jal1.telmex.net.mx>
7734
7735         * mswindows.h: Don't translate mkdir to _mkdir under Borland.
7736
7737 1998-05-17  Hrvoje Niksic  <hniksic@srce.hr>
7738
7739         * retr.c (elapsed_time): Return correct value when
7740         HAVE_GETTIMEOFDAY is undefined.
7741
7742 1998-05-13  Hrvoje Niksic  <hniksic@srce.hr>
7743
7744         * version.c: Wget 1.5.2-b1 is released.
7745
7746 1998-05-08  Hrvoje Niksic  <hniksic@srce.hr>
7747
7748         * getopt.c (_getopt_internal): Use exec_name instead of argv[0].
7749         (_getopt_internal): Don't translate `#if 0'-ed strings.
7750
7751 1998-05-06  Douglas E. Wegscheid  <wegscd@whirlpool.com>
7752
7753         * mswindows.c (ws_handler): Use fork_to_background().
7754
7755 1998-05-05  Hrvoje Niksic  <hniksic@srce.hr>
7756
7757         * version.c: Wget 1.5.1 is released.
7758
7759 1998-05-05  Hrvoje Niksic  <hniksic@srce.hr>
7760
7761         * http.c (parse_http_status_line): Avoid `minor' and `major'
7762         names.
7763
7764 1998-05-02  Hrvoje Niksic  <hniksic@srce.hr>
7765
7766         * utils.c (mkdirhier): Renamed to make_directory.
7767
7768 1998-05-01  Hrvoje Niksic  <hniksic@srce.hr>
7769
7770         * mswindows.c (fork_to_background): Define under Windows.
7771
7772         * utils.c (fork_to_background): New function.
7773
7774         * html.c (htmlfindurl): Removed rerdundant casts.
7775
7776 1998-05-01  Douglas E. Wegscheid  <wegscd@whirlpool.com>
7777
7778         * mswindows.c (ws_mypath): Cache the path.
7779
7780 1998-04-30  Douglas E. Wegscheid  <wegscd@whirlpool.com>
7781
7782         * ftp.h: Prefix enum ftype members with FT_.
7783
7784         * ftp-ls.c, ftp.c, html.h: Adjust accordingly.
7785
7786         * mswindows.h: Use stat under Borland, _stat under MSVC.
7787
7788 1998-04-28  Hrvoje Niksic  <hniksic@srce.hr>
7789
7790         * http.c (known_authentication_scheme_p): New function.
7791         (gethttp): Handle authorization more correctly.
7792
7793         * ftp-basic.h: Removed.
7794
7795         * cmpt.h: Removed.
7796
7797         * utils.c: Include <unistd.h> before <pwd.h>; needed under SunOS
7798         with gcc 2.8.
7799         (numdigit): Use `while' loop.
7800
7801         * http.c (create_authorization_line): Detect authentication
7802         schemes case-insensitively.
7803
7804         * http.c (extract_header_attr): Use strdupdelim().
7805         (digest_authentication_encode): Move declaration of local
7806         variables to smaller scope.
7807         (digest_authentication_encode): Reset REALM, OPAQUE and NONCE.
7808         (create_authorization_line): Detect authentication schemes
7809         case-insensitively.
7810
7811         * utils.c (touch): Constify.
7812
7813         * http.c (gethttp): Report a nicer error when no data is received.
7814
7815         * rbuf.h (RBUF_READCHAR): Ditto.
7816
7817         * ftp-basic.c (ftp_response): Use sizeof.
7818
7819 1998-04-27  Hrvoje Niksic  <hniksic@srce.hr>
7820
7821         * retr.c (print_percentage): EXPECTED is long, not int.
7822         (print_percentage): Use floating-point arithmetic to avoid
7823         overflow with large files' sizes multiplied with 100.
7824
7825 1998-04-27  Gregor Hoffleit  <flight@mathi.uni-heidelberg.de>
7826
7827         * config.h.in: Added pid_t stub.
7828
7829         * sysdep.h (S_ISREG): Moved here from mswindows.h (NeXT doesn't
7830         define it).
7831
7832 1998-04-20  Hrvoje Niksic  <hniksic@srce.hr>
7833
7834         * version.c: Wget 1.5.0 is released.
7835
7836 1998-04-18  Hrvoje Niksic  <hniksic@srce.hr>
7837
7838         * url.c (str_url): Ditto.
7839
7840         * ftp-basic.c (ftp_rest): Use new name.
7841
7842         * utils.c (long_to_string): Renamed from prnum().
7843
7844 1998-04-16  Hrvoje Niksic  <hniksic@srce.hr>
7845
7846         * version.c: Wget 1.5-b17 is released.
7847
7848 1998-04-08  Hrvoje Niksic  <hniksic@srce.hr>
7849
7850         * headers.c (header_get): New argument FLAGS.
7851
7852         * http.c (gethttp): If request is malformed, bail out of the
7853         header loop.
7854         (gethttp): Check for empty header *after* the status line checks.
7855         (gethttp): Disallow continuations for status line.
7856
7857 1998-04-08  Hrvoje Niksic  <hniksic@srce.hr>
7858
7859         * version.c: Wget 1.5-b16 is released.
7860
7861 1998-04-08  Hrvoje Niksic  <hniksic@srce.hr>
7862
7863         * init.c (commands): Renamed `always_rest' to `continue'.
7864
7865 1998-04-05  Hrvoje Niksic  <hniksic@srce.hr>
7866
7867         * all: Use it.
7868
7869         * log.c (logputs): New argument.
7870         (logvprintf): Ditto.
7871         (logprintf): Ditto.
7872
7873 1998-04-04  Hrvoje Niksic  <hniksic@srce.hr>
7874
7875         * http.c (http_atotm): Update comment.
7876
7877         * main.c (i18n_initialize): Set LC_MESSAGES, not LC_ALL.
7878
7879         * wget.h: Renamed ENABLED_NLS to HAVE_NLS.
7880
7881         * main.c (i18n_initialize): New function.
7882         (main): Use it.
7883
7884         * log.c: Include <unistd.h>.
7885
7886         * retr.c (show_progress): Cast alloca to char *.
7887
7888 1998-04-04  Hrvoje Niksic  <hniksic@srce.hr>
7889
7890         * version.c: Wget 1.5-b15 is released.
7891
7892 1998-04-04  Hrvoje Niksic  <hniksic@srce.hr>
7893
7894         * utils.h: Declare file_non_directory_p().
7895
7896 1998-04-03  Hrvoje Niksic  <hniksic@srce.hr>
7897
7898         * main.c (main): It's `tries', not `numtries' now.
7899
7900 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
7901
7902         * init.c (getperms): Removed.
7903
7904 1998-04-01  Tim Charron  <tcharron@interlog.com>
7905
7906         * log.c (logvprintf): Don't use ARGS twice.
7907
7908 1998-04-01  John  <john@futuresguide.com>
7909
7910         * mswindows.c: Cleaned up.
7911
7912 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
7913
7914         * version.c: Wget 1.5-b14 is released.
7915
7916 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
7917
7918         * ftp-opie.c (STRLEN4): New macro.
7919         (btoe): Use it.
7920
7921 1998-04-01  Junio Hamano  <junio@twinsun.com>
7922
7923         * http.c: Document all the Digest functions.
7924
7925 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
7926
7927         * utils.c (file_non_directory_p): Renamed from isfile().
7928
7929         * mswindows.h (S_ISREG): New macro, suggested by Tim Adam.
7930
7931 1998-03-31  Hrvoje Niksic  <hniksic@srce.hr>
7932
7933         * utils.c (mkdirhier): Use 0777 instead of opt.dirmode.
7934
7935         * init.c (cmd_spec_dotstyle): Use 48 dots per line for binary
7936         style.
7937         (cmd_permissions): Removed.
7938
7939         * config.h.in: Add template for WORDS_BIGENDIAN.
7940
7941 1998-03-31  Junio Hamano  <junio@twinsun.com>
7942
7943         * http.c (HEXD2asc): New macro.
7944         (dump_hash): Use it.
7945
7946 1998-03-31  Hrvoje Niksic  <hniksic@srce.hr>
7947
7948         * version.c: Wget 1.5-b13 is released.
7949
7950 1998-03-31  Hrvoje Niksic  <hniksic@srce.hr>
7951
7952         * main.c (main): Don't try to use `com'.
7953
7954 1998-03-30  Hrvoje Niksic  <hniksic@srce.hr>
7955
7956         * init.c (cmd_permissions): New function.
7957
7958 1998-03-30  Hrvoje Niksic  <hniksic@srce.hr>
7959
7960         * version.c: Wget 1.5-b12 is released.
7961
7962 1998-03-30  Hrvoje Niksic  <hniksic@srce.hr>
7963
7964         * init.c (commands): Renamed `numtries' to `tries'.
7965         (cmd_spec_debug): Removed.
7966         (home_dir): Under Windows, return `C:\' if HOME is undefined.
7967
7968 1998-03-29  Hrvoje Niksic  <hniksic@srce.hr>
7969
7970         * config.h.in: Define _XOPEN_SOURCE.
7971
7972         * init.c (check_user_specified_header): New function.
7973         (cmd_spec_header): Use it.
7974         (cmd_spec_useragent): New function.
7975
7976 1998-03-29  Hrvoje Niksic  <hniksic@srce.hr>
7977
7978         * version.c: Wget 1.5-b11 is released.
7979
7980 1998-03-28  Hrvoje Niksic  <hniksic@srce.hr>
7981
7982         * wget.h: Include <libintl.h> only if NLS is enabled.
7983
7984 1998-03-26  Hrvoje Niksic  <hniksic@srce.hr>
7985
7986         * options.h (struct options): Made `wait' a long.
7987         (struct options): Ditto for `timeout'.
7988
7989 1998-03-19  Hrvoje Niksic  <hniksic@srce.hr>
7990
7991         * utils.c (exists): Renamed to file_exists_p.
7992         (file_exists_p): Use access() if available.
7993
7994 1998-03-17  Hrvoje Niksic  <hniksic@srce.hr>
7995
7996         * utils.c (memfatal): Set save_log_p to 0 to avoid potential
7997         infloop.
7998
7999         * log.c: do_logging -> save_log_p.
8000
8001         * config.h.in: Added template for HAVE_VSNPRINTF.
8002
8003 1998-03-16  Hrvoje Niksic  <hniksic@srce.hr>
8004
8005         * init.c: Ditto.
8006
8007         * http.c: Protect declaration against non-ANSI compiler.
8008
8009         * log.c (logvprintf): Use vsnprintf() if available.
8010
8011         * getopt.c (main): Don't translate test stuff.
8012
8013 1998-03-16  Hrvoje Niksic  <hniksic@srce.hr>
8014
8015         * version.c: Wget 1.5-b10 is released.
8016
8017 1998-03-11  Hrvoje Niksic  <hniksic@srce.hr>
8018
8019         * ftp.c (getftp): Don't translate "CWD %s".
8020
8021         * wget.h (GCC_FORMAT_ATTR): Renamed from FORMAT_ATTR.
8022
8023 1998-03-07  Hrvoje Niksic  <hniksic@srce.hr>
8024
8025         * ftp-opie.c (btoe): Use memcpy() instead of strncat().
8026
8027         * log.c (logputs): New function.
8028         (logvprintf): Renamed from vlogmsg; use logputs().
8029
8030         * retr.c (show_progress): Print `[100%]' when the retrieval is
8031         finished.
8032
8033         * init.c (run_wgetrc): Use FILE, not PATH.
8034         (wgetrc_file_name): Ditto.
8035
8036 1998-03-07  Tim Adam  <tma@osa.com.au>
8037
8038         * recur.c (parse_robots): Correctly reset `entries' on empty
8039         disallow.
8040
8041 1998-03-07  Hrvoje Niksic  <hniksic@srce.hr>
8042
8043         * init.c (cmd_spec_debug): Use cmd_boolean().
8044
8045 1998-02-23  Hrvoje Niksic  <hniksic@srce.hr>
8046
8047         * http.c (gethttp): Create proxy-authorization correctly.
8048
8049 1998-02-22  Hrvoje Niksic  <hniksic@srce.hr>
8050
8051         * md5.c: Ditto.
8052
8053         * getopt.c: Use ANSI function definitions.
8054
8055         * ftp-opie.c: New file.
8056
8057         * options.h: Don't redefine EXTERN.
8058
8059         * init.c: Sort it correctly.
8060
8061 1998-02-22  Hrvoje Niksic  <hniksic@srce.hr>
8062
8063         * version.c: Wget 1.5-b9 is released.
8064
8065 1998-02-22  Hrvoje Niksic  <hniksic@srce.hr>
8066
8067         * recur.c (recursive_retrieve): Reset `first_time'.
8068
8069         * ftp.c (getftp): Added `default' clause to switches of uerr_t.
8070
8071         * rbuf.c (rbuf_peek): Simplified.
8072         (rbuf_flush): Use MINVAL.
8073
8074         * wget.h (MINVAL): Moved from url.h.
8075
8076         * rbuf.h (RBUF_FD): New macro.
8077
8078         * url.c (add_url): Add to the head of the list.
8079
8080         * ftp.c (ftp_retrieve_list): Set the permissions to downloaded
8081         file.
8082         (getftp): Set the default permissions to 0600.
8083
8084 1998-02-21  Hrvoje Niksic  <hniksic@srce.hr>
8085
8086         * url.c (get_urls_html): Ditto.
8087         (convert_links): Ditto.
8088
8089         * recur.c (parse_robots): Ditto.
8090
8091         * html.c (ftp_index): Ditto.
8092
8093         * ftp-ls.c (ftp_parse_unix_ls): Open file as binary.
8094
8095         * init.c (defaults): Initialize `opt' to zero via memset.
8096
8097         * http.c (digest_authentication_encode): goto considered harmful.
8098
8099 1998-02-19  Hrvoje Niksic  <hniksic@srce.hr>
8100
8101         * ftp.c (delelement): Simplify and fix leak.
8102
8103 1998-02-18  Hrvoje Niksic  <hniksic@srce.hr>
8104
8105         * http.c (dump_hash): Use HEXD2ASC instead of home-grown stuff.
8106
8107         * url.h (HEXD2ASC): Removed warning.
8108
8109         * init.c (comind): Use binary search.
8110         (commands): Reorganized.
8111         (setval): Ditto.
8112         (cmd_boolean): New function.
8113         (cmd_number): Ditto.
8114         (cmd_number_inf): Ditto.
8115         (cmd_string): Ditto.
8116         (cmd_vector): Ditto.
8117         (cmd_directory_vector): Ditto.
8118         (cmd_bytes): Ditto.
8119         (cmd_time): Ditto.
8120         (cmd_spec_debug): Ditto.
8121         (cmd_spec_dirmode): Ditto.
8122         (cmd_spec_dirstruct): Ditto.
8123         (cmd_spec_dotstyle): Ditto.
8124         (cmd_spec_header): Ditto.
8125         (cmd_spec_htmlify): Ditto.
8126         (cmd_spec_mirror): Ditto.
8127         (cmd_spec_outputdocument): Ditto.
8128         (cmd_spec_recursive): Ditto.
8129         (settime): Merged with cmd_time().
8130         (setbytes): Merged with cmd_bytes().
8131         (setonoff): Merged with cmd_boolean().
8132         (onoff): Ditto.
8133
8134 1998-02-17  Hrvoje Niksic  <hniksic@srce.hr>
8135
8136         * Makefile.in (distclean): Remove `config.h'.
8137
8138 1998-02-17  Hrvoje Niksic  <hniksic@srce.hr>
8139
8140         * version.c: Wget 1.5-b8 is released.
8141
8142 1998-02-17  Hrvoje Niksic  <hniksic@srce.hr>
8143
8144         * http.c (digest_authentication_encode): New function.
8145         (create_authorization_line): Use it.
8146         (dump_hash): New function.
8147         (digest_authentication_encode): Use it.
8148
8149         * fnmatch.c: Renamed from `mtch.c'.
8150
8151 1998-02-15  Karl Eichwalder  <ke@suse.de>
8152
8153         * main.c (main): Tag "Written by..." string as translatable.
8154
8155 1998-02-15  Hrvoje Niksic  <hniksic@srce.hr>
8156
8157         * wget.h (FREE_MAYBE): New macro.
8158
8159         * http.c (create_authorization_line): Don't use ANSI C string
8160         concatenation feature.
8161         (basic_authentication_encode): Use alloca() for temporary
8162         variables.
8163
8164         * recur.h: Ditto.
8165
8166         * http.c: Ditto.
8167
8168         * headers.h: Ditto.
8169
8170         * ftp-basic.c: Protect declaration against non-ANSI compiler.
8171
8172         * http.c (create_authorization_line): Cast `unsigned char *' to
8173         `char *' for sprintf, to shut up the noisy Digital Unix cc.
8174
8175 1998-02-15  Hrvoje Niksic  <hniksic@srce.hr>
8176
8177         * version.c: Wget 1.5-b7 is released.
8178
8179 1998-02-15  Hrvoje Niksic  <hniksic@srce.hr>
8180
8181         * cmpt.c (strstr): Synched with glibc-2.0.6.
8182
8183         * ftp-basic.c (calculate_skey_response): Ditto.
8184         (calculate_skey_response): Use alloca().
8185
8186         * http.c (create_authorization_line): Work with FSF's version of
8187         md5.c.
8188
8189         * md5.c: New file, from GNU libc.
8190
8191 1998-02-14  Hrvoje Niksic  <hniksic@srce.hr>
8192
8193         * url.h (URL_CLEANSE): Name the temporary variable more carefully.
8194
8195 1998-02-13  Hrvoje Niksic  <hniksic@srce.hr>
8196
8197         * http.c (basic_authentication_encode): New function, instead of
8198         the macro.
8199
8200 1998-02-13  Junio Hamano  <junio@twinsun.com>
8201
8202         * http.c: Add HTTP-DA support.
8203         * ftp-basic.c: Add Opie/S-key support.
8204         * config.h.in, Makefile.in: Add HTTP-DA and Opie/S-key support.
8205         * md5.c, md5.h: New files.
8206
8207 1998-02-13  Hrvoje Niksic  <hniksic@srce.hr>
8208
8209         * http.c (http_process_range): Renamed from hprocrange().
8210         (http_process_range): Parse the whole header.
8211
8212         * headers.c: New file.
8213         (header_process): New function.
8214         (header_get): Renamed from fetch_next_header.
8215
8216         * all: Include utils.h only where necessary.
8217
8218         * wget.h: Declare xmalloc(), xrealloc() and xstrdup() here.
8219
8220         * wget.h: Add provisions for dmalloc.
8221
8222 1998-02-12  Hrvoje Niksic  <hniksic@srce.hr>
8223
8224         * version.c: Wget 1.5-b6 is released.
8225
8226 1998-02-12  Hrvoje Niksic  <hniksic@srce.hr>
8227
8228         * ftp.c (ftp_loop): Determine `filename' more precisely.
8229
8230         * init.c (setval): Don't set `opt.quiet' if output-document is
8231         `-'.
8232
8233         * log.c (log_init): Print to STDERR instead of STDOUT.
8234         (vlogmsg): Use STDERR by default.
8235         (logflush): Ditto.
8236
8237 1998-02-11  Simon Josefsson  <jas@pdc.kth.se>
8238
8239         * host.c: Use addr_in again.
8240
8241 1998-02-08  Karl Eichwalder  <karl@suse.de>
8242
8243         * http.c (gethttp): Fixed typo.
8244
8245 1998-02-08  Hrvoje Niksic  <hniksic@srce.hr>
8246
8247         * version.c: Wget 1.5-b5 is released.
8248
8249 1998-02-08  Hrvoje Niksic  <hniksic@srce.hr>
8250
8251         * retr.c (show_progress): Use it.
8252
8253         * log.c (logflush): New function.
8254
8255         * wget.h: Utilize __attribute__ if on gcc.
8256
8257 1998-02-07  Hrvoje Niksic  <hniksic@srce.hr>
8258
8259         * http.c (base64_encode_line): New argument LENGTH.
8260         (BASIC_AUTHENTICATION_ENCODE): Use it.
8261         (BASIC_AUTHENTICATION_ENCODE): Take length of HEADER into account.
8262
8263         * main.c (main): Fixed fprintf() format mismatch.
8264
8265 1998-02-06  Hrvoje Niksic  <hniksic@srce.hr>
8266
8267         * version.c: Wget 1.5-b4 is released.
8268
8269 1998-02-03  Simon Josefsson  <jas@pdc.kth.se>
8270
8271         * host.c: use sockaddr_in instead of addr_in.
8272
8273 1998-02-04  Hrvoje Niksic  <hniksic@srce.hr>
8274
8275         * init.c (cleanup): Use it.
8276
8277         * recur.c (recursive_cleanup): New function.
8278
8279         * retr.c (retrieve_from_file): Ditto.
8280
8281         * main.c (main): Use it.
8282
8283         * recur.c (recursive_reset): New function.
8284
8285         * retr.c (retrieve_from_file): Ditto.
8286
8287         * main.c (main): Simplify call to recursive_retrieve().
8288
8289         * recur.c (recursive_retrieve): Removed FLAGS argument.
8290
8291         * http.c (gethttp): Changed call to iwrite().
8292
8293 1998-02-03  Hrvoje Niksic  <hniksic@srce.hr>
8294
8295         * url.c (get_urls_html): Ditto.
8296         (free_urlpos): Ditto.
8297         (mkstruct): Ditto.
8298         (construct): Ditto.
8299
8300         * retr.c (retrieve_url): Move declaration of local variables to
8301         smaller scope.
8302
8303         * url.c (urlproto): Use it.
8304         (parseurl): Ditto.
8305         (str_url): Ditto.
8306         (get_urls_html): Ditto.
8307
8308         * utils.h (ARRAY_SIZE): New macro.
8309
8310         * url.c (proto): Moved from url.h.
8311
8312         * url.h (URL_CLEANSE): Reformatted.
8313         (USE_PROXY_P): Renamed from USE_PROXY.
8314
8315         * ftp-basic.c: Adjust to the new interface of iwrite().
8316
8317         * ftp-basic.c (ftp_port): Use alloca().
8318
8319 1998-02-03  Hrvoje Niksic  <hniksic@srce.hr>
8320
8321         * version.c: Wget 1.5-b3 is released.
8322
8323         * host.c (ftp_getaddress): Don't print to stderr directly.
8324
8325         * init.c (setbytes): Support `g' for gigabytes.
8326         (cmdtype): New specification CTIME.
8327         (setval): Use it with settime().
8328         (commands): Use it for WAIT and TIMEOUT.
8329
8330 1998-02-02  Hrvoje Niksic  <hniksic@srce.hr>
8331
8332         * http.c (BASIC_AUTHENTICATION_ENCODE): New macro.
8333         (gethttp): Use it.
8334
8335         * utils.c (unique_name_1): Moved from url.c.
8336         (unique_name): Ditto.
8337
8338         * url.c (url_filename): Ditto.
8339
8340         * log.c (redirect_output): Changed call to unique_name().
8341
8342         * url.c (unique_name_1): Renamed from unique_name().
8343         (unique_name): Changed interface.
8344
8345         * init.c (enum cmdid): Moved from init.h.
8346         (cmdtype): Ditto.
8347         (struct cmd): Ditto.
8348
8349         * main.c (main): Use it.
8350         (main): Moved `--backups' to not have a short option.
8351
8352         * options.h (struct options): New member BACKGROUND.
8353
8354         * main.c (print_help): Rearranged.
8355         (main): New long options for -n* short options: --no-directories,
8356         --no-host-directories, --non-verbose, --no-host-lookup and
8357         --dont-remove-listing.
8358
8359 1998-02-01  Hrvoje Niksic  <hniksic@srce.hr>
8360
8361         * main.c (main): Use log_close().
8362
8363         * log.c: New variable LOGFP.
8364         (vlogmsg): Use it.
8365         (redirect_output): Don't open /dev/null; set LOGFP to stdin
8366         instead.
8367         (log_close): New function.
8368
8369         * options.h (struct options): Removed LFILE.
8370
8371         * log.c (log_enable): Removed.
8372
8373         * main.c (main): Use it.
8374
8375         * log.c (log_init): New function.
8376
8377         * url.c (get_urls_html): Removed needless assignment to BASE.
8378
8379         * host.c (add_hlist): Don't set CMP needlessly.
8380
8381         * utils.c (match_backwards): Ditto.
8382         (in_acclist): Ditto.
8383
8384         * url.c (findurl): Ditto.
8385
8386         * netrc.c (parse_netrc): Ditto.
8387
8388         * log.c (log_dump): Ditto.
8389
8390         * html.c (html_quote_string): Ditto.
8391
8392         * ftp-basic.c (ftp_request): Made static.
8393
8394         * connect.c: Made global variables static.
8395
8396         * url.c (construct): Ditto.
8397
8398         * init.c (init_path): Avoid assignment inside `if'-condition.
8399
8400         * ftp.c: Don't include in.h or winsock.h.
8401
8402         * ftp.c (ftp_loop): Use SZ.
8403
8404         * connect.c (bindport): Cast &addrlen to int *.
8405         (conaddr): Ditto.
8406
8407         * init.c (initialize): Don't use SYSTEM_WGETRC unconditionally.
8408
8409 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
8410
8411         * ftp.c (getftp): Initialize opt.ftp_pass here.
8412         (ftp_retrieve_dirs): Use alloca().
8413
8414         * init.c (defaults): Don't initialize opt.ftp_pass.
8415
8416         * sysdep.h (S_ISLNK): Declare for OS/2; ditto for lstat.
8417         From Ivan F. Martinez <ivanfm@ecodigit.com.br>.
8418
8419 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
8420
8421         * recur.c (parse_robots): Check for comments more correctly.
8422
8423         * host.c (ftp_getaddress): Use STRDUP_ALLOCA.
8424         (ftp_getaddress): Add diagnostics when reverse-lookup yields only
8425         hostname.
8426
8427 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
8428
8429         * version.c: Wget 1.5-b2 is released.
8430
8431         * netrc.c (NETRC_FILE_NAME): Moved from netrc.h.
8432
8433         * utils.c (proclist): Pass FNM_PATHNAME to fnmatch().
8434
8435         * ftp-basic.c (ftp_pasv): Avoid unnecessary casting to unsigned
8436         char.
8437
8438         * log.c: Don't attempt to hide arguments from ansi2knr.
8439
8440         * cmpt.c: Synched strptime() and mktime() with glibc-2.0.6.
8441
8442         * ansi2knr.c: Use a later version, from fileutils-3.16l alpha.
8443
8444         * ftp.c (getftp): Ditto.
8445
8446         * http.c (gethttp): Use it.
8447
8448         * retr.c (get_contents): New argument EXPECTED; pass it to
8449         show_progress().
8450         (show_progress): New argument EXPECTED; use it to display
8451         percentages.
8452
8453         * init.c (setval): Ditto.
8454
8455         * http.c (gethttp): Ditto.
8456         (http_loop): Ditto.
8457
8458         * ftp.c (getftp): Ditto.
8459         (ftp_loop_internal): Ditto.
8460
8461         * ftp-ls.c (ftp_parse_unix_ls): Use abort() instead of assert(0).
8462
8463         * sysdep.h (CLOSE): Simplify; use DEBUGP.
8464
8465         * netrc.c (search_netrc): Use alloca().
8466
8467         * init.c (defaults): Initialize no_flush.
8468
8469         * log.c (vlogmsg): Don't flush if no_flush.
8470
8471         * options.h (struct options): New variable no_flush.
8472
8473         * main.c (main): Don't play games with buffering.
8474
8475         * log.c (vlogmsg): Flush the output after every message.
8476
8477 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
8478
8479         * init.c (parse_line): Ditto.
8480
8481         * url.c (get_urls_html): Ditto.
8482
8483         * main.c (main): Don't cast to unsigned char.
8484
8485         * init.c (run_wgetrc): Don't cast to unsigned char.
8486         (parse_line): Accept char instead of unsigned char.
8487
8488         * html.c (htmlfindurl): Use char instead of unsigned char.
8489
8490         * all: Use them.
8491
8492         * sysdep.h: Add wrappers to ctype macros to make them
8493         eight-bit-clean:
8494
8495 1998-01-30  Hrvoje Niksic  <hniksic@srce.hr>
8496
8497         * html.c (htmlfindurl): Download <img lowsrc=...>
8498
8499         * main.c (main): Ignore SIGPIPE.
8500
8501         * connect.c (select_fd): New argument WRITEP.
8502         (iwrite): Call select_fd().
8503
8504 1997-02-27  Fila Kolodny <fila@ibi.com>
8505
8506         * ftp.c (ftp_retrieve_list): If retrieving symlink and the proper
8507         one already exists, just skip it.
8508
8509 1998-01-30  Hrvoje Niksic  <hniksic@srce.hr>
8510
8511         * http.c (gethttp): Cosmetic changes.
8512
8513         * http.c (check_end): Allow `+D...' instead of `GMT'.
8514         From Fabrizio Pollastri <pollastri@cstv.to.cnr.it>.
8515
8516         * url.c (process_ftp_type): New function.
8517         (parseurl): Use it.
8518
8519         * connect.c (iwrite): Allow writing in a few chunks.
8520         (bindport): Made SRV static, so addr can point to it.
8521         (select_fd): Removed HPUX kludge.
8522
8523         * host.c (free_hlist): Incorporated into clean_hosts().
8524
8525 1998-01-29  Hrvoje Niksic  <hniksic@srce.hr>
8526
8527         * host.c (hlist): Made static.
8528         (search_address): Cosmetic change.
8529
8530 1998-01-29  Hrvoje Niksic  <hniksic@srce.hr>
8531
8532         * version.c: Wget v1.5-b1 is released.
8533
8534         * http.c (hgetlen): Use sizeof() to get the header length.
8535         (hgetrange): Ditto.
8536         (hgettype): Ditto.
8537         (hgetlocation): Ditto.
8538         (hgetmodified): Ditto.
8539         (haccepts_none): Ditto.
8540
8541         * main.c (main): Updated `--version' and `--help' output, as per
8542         Francois Pinard's suggestions.
8543
8544         * main.c: Include locale.h; call setlocale(), bindtextdomain() and
8545         textdomain().
8546
8547         * config.h.in: Define stubs for I18N3.
8548
8549         * wget.h: Include libintl.h.
8550
8551 1998-01-28  Hrvoje Niksic  <hniksic@srce.hr>
8552
8553         * url.c (mkstruct): Check for opt.cut_dirs.
8554         (mkstruct): alloca()-te more, xmalloc() less.
8555
8556         * utils.c (load_file): Check for ferror().
8557
8558         * url.c (get_urls_file): Close only the files we opened.
8559         (get_urls_html): Ditto.
8560         (count_slashes): New function.
8561
8562         * http.h: Removed.
8563
8564         * http.c (gethttp): Respect username and password provided by
8565         proxy URL.
8566         (base64_encode_line): Write into an existing buffer instead of
8567         malloc-ing a new one.
8568         (struct http_stat): Moved from http.h
8569
8570         * retr.c (retrieve_url): Free SUF.
8571
8572         * all: Removed lots of unnecessary .h dependencies.
8573
8574         * html.c (global_state): Made static.
8575
8576         * utils.h (ALLOCA_ARRAY): New macro.
8577
8578         * main.c (main): New option `--cut-dirs'.
8579
8580         * url.c (construct): Use alloca() for T.
8581
8582         * utils.c (mkdirhier): Use STRDUP_ALLOCA.
8583
8584         * host.c (_host_t): Moved from host.h.
8585         (struct host): Renamed from _host_t.
8586         (store_hostaddress): Use STRDUP_ALLOCA for INET_S.
8587         (realhost): Ditto.
8588
8589         * host.h: Don't include url.h.
8590
8591         * ftp.c (LIST_FILENAME): Moved from ftp.h.
8592
8593         * init.c (DEFAULT_FTP_ACCT): Moved from ftp.h.
8594
8595         * main.c (main): Enable log if the output goes to a TTY.
8596
8597         * connect.h: Removed unused constant `BACKLOG'.
8598
8599         * config.h.in: Check for isatty().
8600
8601         * Makefile.in (LINK): Use CFLAGS when linking.
8602
8603 1998-01-27  Hrvoje Niksic  <hniksic@srce.hr>
8604
8605         * mswindows.c (ws_hangup): Use redirect_output().
8606
8607         * main.c (redirect_output_signal): New function; use
8608         redirect_output().
8609
8610         * log.c (redirect_output): New function, based on hangup(), which
8611         is deleted.
8612
8613         * log.c (vlogmsg): New function.
8614
8615         * wget.h (DEBUGP): Use debug_logmsg().
8616
8617         * main.c (hangup): Use it.
8618
8619         * log.c (log_dump): New function.
8620
8621         * utils.h (DO_REALLOC): Use `long' for various sizes.
8622
8623         * http.c (hskip_lws): Use `while', for clarity.
8624         (HTTP_DYNAMIC_LINE_BUFFER): New constant.
8625         (fetch_next_header): Use it instead of DYNAMIC_LINE_BUFFER.
8626
8627         * ftp-basic.c (FTP_DYNAMIC_LINE_BUFFER): New constant.
8628         (ftp_response): Use it instead of DYNAMIC_LINE_BUFFER.
8629
8630         * utils.c (DYNAMIC_LINE_BUFFER): Moved from utils.c.
8631         (LEGIBLE_SEPARATOR): Ditto.
8632         (FILE_BUFFER_SIZE): Ditto.
8633
8634         * retr.c (BUFFER_SIZE): Moved from retr.h.
8635
8636         * log.c: New file.
8637         (logmsg): Moved from utils.c.
8638         (debug_logmsg): New function.
8639
8640         * mswindows.h: Include it here.
8641
8642         * init.c: Ditto.
8643
8644         * utils.c: Don't include <windows.h>.
8645
8646 1998-01-25  Hrvoje Niksic  <hniksic@srce.hr>
8647
8648         * host.c (ftp_getaddress): Ditto.
8649
8650         * main.c (main): Use it.
8651
8652         * utils.h (STRDUP_ALLOCA): New macro.
8653
8654         * init.c: Prepend `wget: ' to error messages printed on stderr.
8655
8656         * utils.c (mkdirhier): Renamed from mymkdir.
8657         (touch): Renamed from my_touch.
8658         (pwd_cuserid): Renamed from my_cuserid().
8659
8660 1998-01-24  Andy Eskilsson  <andy.eskilsson@telelogic.se>
8661
8662         * utils.c (accdir): Process wildcards.
8663         (proclist): New function.
8664         (accdir): Use it to avoid code repetition.
8665
8666 1998-01-24  Hrvoje Niksic  <hniksic@srce.hr>
8667
8668         * recur.c (parse_robots): Respect opt.useragent; use alloca().
8669
8670         * http.c (gethttp): Construct useragent accordingly.
8671
8672         * version.c: Changed version string to numbers-only.
8673
8674         * main.c (print_help): List all the options.
8675
8676         * mswindows.c (windows_main_junk): Initialize argv0 here.
8677
8678 1998-01-24  Karl Heuer  <kwzh@gnu.org>
8679
8680         * netrc.c (search_netrc): Initialize `l' only after processing
8681         netrc.
8682
8683         * main.c (main): Don't trap SIGHUP if it's being ignored.
8684
8685 1998-01-24  Hrvoje Niksic  <hniksic@srce.hr>
8686
8687         * all: Use logmsg().
8688
8689         * utils.c (time_str): Moved from retr.c.
8690         (logmsg): New function.
8691         (logmsg_noflush): Ditto.
8692
8693         * rbuf.c: New file, moved buf_* functions here.
8694
8695         * ftp.c (ftp_expected_bytes): Moved from ftp-basic.c.
8696
8697         * ftp-basic.c (ftp_rest): Use prnum().
8698
8699         * ftp-basic.c: Ditto.
8700
8701         * ftp.c: Use the new reading functions and macros.
8702
8703         * retr.c (buf_initialize): New function.
8704         (buf_initialized_p): Ditto.
8705         (buf_uninitialize): Ditto.
8706         (buf_fd): Ditto.
8707
8708         * http.c (fetch_next_header): Use the BUF_READCHAR macro for
8709         efficiency.
8710         (gethttp): Use alloca() where appropriate.
8711
8712         * retr.c (buf_readchar): Use it.
8713         (buf_peek): Use rstreams.
8714
8715         * retr.h (BUF_READCHAR): New macro.
8716
8717         * init.c (home_dir): Rewritten for clarity.
8718         (init_path): Ditto.
8719
8720         * mswindows.c (ws_backgnd): Made static.
8721         (read_registry): Ditto.
8722         (ws_cleanup): Ditto.
8723         (ws_handler): Ditto.
8724
8725 1998-01-23  Hrvoje Niksic  <hniksic@srce.hr>
8726
8727         * alloca.c: New file.
8728
8729         * Makefile.in (ALLOCA): Define.
8730
8731         * mswindows.c (ws_help): Constify.
8732         (ws_help): Use alloca.
8733
8734         * mswindows.c: Reformat.
8735
8736         * all: Added _(...) annotations for I18N snarfing and translation.
8737
8738         * host.c (ftp_getaddress): Nuke SYSINFO.
8739         (ftp_getaddress): Don't use getdomainname().
8740         (ftp_getaddress): Use uname(), where available.
8741
8742         * http.c (gethttp): Protect a stray fprintf().
8743
8744         * init.c (settime): New function.
8745         (setval): Treat WAIT specially, allowing suffixes like `m' for
8746         minutes, etc.
8747
8748 1998-01-21  Hrvoje Niksic  <hniksic@srce.hr>
8749
8750         * url.c (get_urls_html): Use alloca() for TEMP.
8751
8752 1998-01-21  Jordan Mendelson  <jordy@wserv.com>
8753
8754         * url.c (rotate_backups): New function.
8755
8756         * http.c (gethttp): Ditto.
8757
8758         * ftp.c (getftp): Rotate backups.
8759
8760 1997-12-18  Hrvoje Niksic  <hniksic@srce.hr>
8761
8762         * all: Renamed nmalloc(), nrealloc() and nstrdup() to xmalloc(),
8763         xrealloc() and xstrdup().  Use the new functions.
8764
8765         * url.c (decode_string): Made static.
8766         (has_proto): Ditto.
8767         (parse_dir): Ditto.
8768         (parse_uname): Ditto.
8769         (mkstruct): Ditto.
8770         (construct): Ditto.
8771         (construct_relative): Ditto.
8772
8773         * retr.c (show_progress): Made static.
8774
8775         * recur.c (robots_url): Made static.
8776         (retrieve_robots): Ditto.
8777         (parse_robots): Ditto.
8778         (robots_match): Ditto.
8779
8780         * main.h: Removed.
8781
8782         * main.c (printhelp): Made static.
8783         (hangup): Ditto.
8784
8785         * init.c (comind): Made static.
8786         (defaults): Ditto.
8787         (init_path): Ditto.
8788         (run_wgetrc): Ditto.
8789         (onoff): Ditto.
8790         (setonoff): Ditto.
8791         (setnum): Ditto.
8792         (myatoi): Ditto.
8793         (getperms): Ditto.
8794         (setbytes): Ditto.
8795
8796         * http.c (fetch_next_header): Made static.
8797         (hparsestatline): Ditto.
8798         (hskip_lws): Ditto.
8799         (hgetlen): Ditto.
8800         (hgetrange): Ditto.
8801         (hgettype): Ditto.
8802         (hgetlocation): Ditto.
8803         (hgetmodified): Ditto.
8804         (haccepts_none): Ditto.
8805         (gethttp): Ditto.
8806         (base64_encode_line): Ditto.
8807         (mktime_from_utc): Ditto.
8808         (http_atotm): Ditto.
8809
8810         * html.c (idmatch): Made static.
8811
8812         * host.c (search_host): Made static.
8813         (search_address): Ditto.
8814         (free_hlist): Ditto.
8815
8816         * ftp.c (getftp): Made static.
8817         (ftp_loop_internal): Ditto.
8818         (ftp_get_listing): Ditto.
8819         (ftp_retrieve_list): Ditto.
8820         (ftp_retrieve_dirs): Ditto.
8821         (ftp_retrieve_glob): Ditto.
8822         (freefileinfo): Ditto.
8823         (delelement): Ditto.
8824
8825         * ftp-ls.c (symperms): Made static.
8826         (ftp_parse_unix_ls): Ditto.
8827
8828         * connect.c (select_fd): Made static.
8829
8830         * utils.c (xmalloc): Renamed from nmalloc.
8831         (xrealloc): Renamed from nrealloc.
8832         (xstrdup): Renamed from nstrdup.
8833
8834         * getopt.c (exchange): Use alloca.
8835
8836         * mswindows.c (mycuserid): Use strncpy.
8837
8838         * New files mswindows.c, mswindows.h, sysdep.h.  winjunk.c,
8839         systhings.h, windecl.h and winjunk.h removed.
8840
8841         * mswindows.c (sleep): New function.
8842
8843         * utils.c: Include <windows.h> under Windows.
8844
8845 1997-06-12  Darko Budor  <dbudor@zesoi.fer.hr>
8846
8847         * url.h (URL_UNSAFE): Change default under Windows.
8848
8849         * retr.c (retrieve_from_file): Respect opt.delete_after.
8850
8851         * main.c (main): Call ws_help on Windows.
8852
8853         * winjunk.c (windows_main_junk): New function.
8854
8855         * main.c (main): Junk-process argv[0].
8856
8857         * http.c (mktime_from_utc): Return -1 if mktime failed.
8858
8859         * http.c (http_loop): Ditto.
8860
8861         * ftp.c (ftp_loop_internal): Change title on Windows when using a
8862         new URL.
8863
8864         * winjunk.c (getdomainname): Lots of functions.
8865
8866 1997-06-12  Hrvoje Niksic  <hniksic@srce.hr>
8867
8868         * cmpt.c (strptime_internal): Handle years more correctly for
8869         `%y'.
8870
8871 1997-06-09  Mike Thomas <mthomas@reality.ctron.com>
8872
8873         * http.c (gethttp): Allocate enough space for
8874         `Proxy-Authorization' header.
8875
8876 1997-05-10  Hrvoje Niksic  <hniksic@srce.hr>
8877
8878         * version.c: Wget/1.4.5 is released.
8879
8880 1997-05-10  Hrvoje Niksic  <hniksic@srce.hr>
8881
8882         * retr.c (get_contents): Check return value of fwrite more
8883         carefully.
8884
8885 1997-03-30  Andreas Schwab  <schwab@issan.informatik.uni-dortmund.de>
8886
8887         * cmpt.c (strptime_internal) [case 'Y']: Always subtract 1900 from
8888         year, regardless of century.
8889
8890 1997-03-30  Hrvoje Niksic  <hniksic@srce.hr>
8891
8892         * utils.c (isfile): Use `lstat' instead of `stat'.
8893
8894 1997-03-29  Hrvoje Niksic  <hniksic@srce.hr>
8895
8896         * utils.c (numdigit): Use explicit test.
8897
8898 1997-03-21  Hrvoje Niksic  <hniksic@srce.hr>
8899
8900         * http.c (http_loop): Always use `url_filename' to get u->local.
8901
8902 1997-03-20  Hrvoje Niksic  <hniksic@srce.hr>
8903
8904         * url.c: Recognize https.
8905
8906 1997-03-13  Hrvoje Niksic  <hniksic@srce.hr>
8907
8908         * recur.c (recursive_retrieve): Lowercase just the host name.
8909
8910 1997-03-09  Hrvoje Niksic  <hniksic@srce.hr>
8911
8912         * url.c (get_urls_file): Use the correct test.
8913         (get_urls_html): Ditto.
8914
8915 1997-03-07  Hrvoje Niksic  <hniksic@srce.hr>
8916
8917         * connect.c: Reverted addrlen to int.
8918
8919         * init.c (parse_line): Check for -1 instead of NONE.
8920
8921         * version.c: Changed version to 1.4.5.
8922
8923 1997-02-17  Hrvoje Niksic  <hniksic@srce.hr>
8924
8925         * init.c: New option netrc.
8926         (initialize): Don't parse .netrc.
8927
8928         * cmpt.c (recursive): Return rp.
8929         (strptime_internal): Match the long strings first, the abbreviated
8930         second.
8931
8932 1997-02-16  Hrvoje Niksic  <hniksic@srce.hr>
8933
8934         * http.c (check_end): New function.
8935         (http_atotm): Use it.
8936
8937 1997-02-13  gilles Cedoc  <gilles@cedocar.fr>
8938
8939         * http.c (gethttp): Use them.
8940
8941         * init.c: New options proxy_user and proxy_passwd.
8942
8943 1997-02-14  Hrvoje Niksic  <hniksic@srce.hr>
8944
8945         * ftp.c (ftp_retrieve_list): Create links even if not relative.
8946
8947 1997-02-10  Hrvoje Niksic  <hniksic@srce.hr>
8948
8949         * recur.c (recursive_retrieve): Lowercase the host name, if the
8950         URL is not "optimized".
8951
8952         * host.c (realhost): Return l->hostname, even if it matches with
8953         host.
8954
8955 1997-02-10  Marin Purgar  <pmc@asgard.hr>
8956
8957         * connect.c: Make addrlen size_t instead of int.
8958         (conaddr): Ditto.
8959
8960 1997-02-09  Gregor Hoffleit  <flight@mathi.uni-heidelberg.DE>
8961
8962         * systhings.h: Define S_ISLNK on NeXT too.
8963
8964 1997-02-09  Hrvoje Niksic  <hniksic@srce.hr>
8965
8966         * version.c: Released 1.4.3.
8967
8968         * url.c: Futher update to list of protostrings.
8969         (skip_proto): Skip `//' correctly for FTP and HTTP.
8970
8971         * url.c (get_urls_html): Handle bogus `http:' things a little
8972         different.
8973
8974         * main.c (main): Removed `follow-ftp' from `f'.
8975         (main): Dumped the `prefix-files' and `file-prefix' options and
8976         features; old and bogus.
8977         (main): Exit on failed setval() in `-e'.
8978
8979         * http.c (fetch_next_header): Use it to detect header continuation
8980         correctly.
8981
8982         * retr.c (buf_peek): New function.
8983
8984 1997-02-08  Hrvoje Niksic  <hniksic@srce.hr>
8985
8986         * wget.h: Include time.h and stuff.
8987
8988 1997-02-08  Roger Beeman  <beeman@cisco.com>
8989
8990         * ftp.c: Include <time.h>
8991
8992 1997-02-07  Hrvoje Niksic  <hniksic@srce.hr>
8993
8994         * url.c (findurl): Would read over buffer limits.
8995
8996 1997-02-06  Hrvoje Niksic  <hniksic@srce.hr>
8997
8998         * ftp-ls.c (ftp_parse_unix_ls): Allow spaces in file names.
8999
9000 1997-02-05  Hrvoje Niksic  <hniksic@srce.hr>
9001
9002         * http.c (http_atotm): Initialize tm.is_dst.
9003
9004 1997-02-02  Hrvoje Niksic  <hniksic@srce.hr>
9005
9006         * http.c (gethttp): Don't print the number of retrieved headers.
9007
9008         * main.c (main): New option `--no-clobber', alias for `-nc'.
9009
9010         * url.c: Recognize `https://'.
9011
9012 1997-02-01  Hrvoje Niksic  <hniksic@srce.hr>
9013
9014         * host.c (herrmsg): Don't use h_errno.
9015
9016 1997-01-30  Hrvoje Niksic  <hniksic@srce.hr>
9017
9018         * host.c (accept_domain): Use it.
9019
9020         * main.c (main): New option `--exclude-domains'.
9021
9022         * retr.c (retrieve_url): Use it.
9023         (retrieve_url): Bail out when an URL is redirecting to itself.
9024
9025         * url.c (url_equal): New function.
9026
9027 1997-01-29  Hrvoje Niksic  <hniksic@srce.hr>
9028
9029         * connect.c: Include arpa/inet.h instead of arpa/nameser.h.
9030
9031         * http.c (mk_utc_time): New function.
9032         (http_atotm): Use it; handle time zones correctly.
9033
9034 1997-01-28  Hrvoje Niksic  <hniksic@srce.hr>
9035
9036         * http.c: Ditto.
9037
9038         * ftp-basic.c: Use it instead of WRITE.
9039
9040         * connect.c (iwrite): New function.
9041
9042 1997-01-27  Hrvoje Niksic  <hniksic@srce.hr>
9043
9044         * cmpt.c (mktime): New function.
9045
9046         * netrc.c: Include <sys/types.h>.
9047
9048         * main.c (main): Wouldn't recognize --spider.
9049
9050         * retr.c (rate): Use `B', `KB' and `MB'.
9051         (reset_timer,elapsed_time): Moved from utils.c.
9052
9053         * ftp.c (ftp_retrieve_list): Ditto.
9054
9055         * http.c (http_loop): Don't touch the file if opt.dfp.
9056
9057 1997-01-24  Hrvoje Niksic  <hniksic@srce.hr>
9058
9059         * cmpt.c: New file.
9060
9061         * ftp.c (ftp_retrieve_glob): New argument semantics.
9062         (ftp_retrieve_dirs): Use it.
9063         (ftp_loop): Ditto.
9064
9065         * html.c (htmlfindurl): Recognize `'' as the quote char.
9066
9067 1997-01-23  Hrvoje Niksic  <hniksic@srce.hr>
9068
9069         * ftp.c (ftp_loop_internal): Use it.
9070
9071         * utils.c (remove_link): New function.
9072
9073 1997-01-22  Hrvoje Niksic  <hniksic@srce.hr>
9074
9075         * retr.c (retrieve_url): Require STRICT redirection URL.
9076
9077         * url.c (parseurl): New argument STRICT.
9078
9079         * http.c (hparsestatline): Be a little-bit less strict about
9080         status line format.
9081
9082 1997-01-21  Hrvoje Niksic  <hniksic@srce.hr>
9083
9084         * http.c (gethttp): Use it.
9085
9086         * main.c (main): Don't use '<digit>' as options.
9087
9088         * init.c: New option ignore_length.
9089
9090         * http.c (gethttp): Ditto.
9091         (http_loop): Check for redirection without Location:.
9092         (gethttp): Don't print Length unless RETROKF.
9093
9094         * ftp.c (getftp): Use it.
9095
9096         * url.c (mkalldirs): New function.
9097
9098         * utils.c (mymkdir): Don't check for existing non-directory.
9099
9100         * url.c (mkstruct): Don't create the directory.
9101
9102 1997-01-20  Hrvoje Niksic  <hniksic@srce.hr>
9103
9104         * init.c (setval): Removed NO_RECURSION checks.
9105
9106 1997-01-19  Hrvoje Niksic  <hniksic@srce.hr>
9107
9108         * version.c: "Released" 1.4.3-pre2.
9109
9110         * recur.c (recursive_retrieve): Bypass host checking only if URL
9111         is ftp AND parent URL is not ftp.
9112
9113         * ftp-basic.c (ftp_request): Print out Turtle Power.
9114
9115         * ftp.c (ftp_loop): Call ftp_retrieve_glob with 0 if there's no
9116         wildcard.
9117         (ftp_retrieve_glob): Call ftp_loop_internal even on empty list, if
9118         not glob.
9119
9120         * http.c (gethttp): Be a little bit smarter about status codes.
9121
9122         * recur.c (recursive_retrieve): Always reset opt.recursive when
9123         dealing with FTP.
9124
9125 1997-01-18  Hrvoje Niksic  <hniksic@srce.hr>
9126
9127         * retr.c (retrieve_url): New variable location_changed; use it for
9128         tests instead of mynewloc.
9129         (retrieve_url): Allow heuristic adding of html.
9130
9131         * url.c (url_filename): Don't use the `%' in Windows file names.
9132
9133         * http.c (http_loop): Always time-stamp the local file.
9134
9135         * http.c (http_loop): Ditto.
9136
9137         * ftp.c (ftp_retrieve_list): Use it.
9138
9139         * utils.c (my_touch): New function.
9140
9141         * ftp.c (ftp_retrieve_list): Use #ifdef HAVE_STRUCT_UTIMBUF
9142         instead of #ifndef NeXT.
9143
9144         * utils.c (strptime): New version, by Ulrich Drepper.
9145
9146 1997-01-17  Hrvoje Niksic  <hniksic@srce.hr>
9147
9148         * http.c (haccepts_none): Renamed from `haccepts_bytes'.
9149         (gethttp): If haccepts_none(), disable ACCEPTRANGES.
9150         (http_loop): Would remove ACCEPTRANGES.
9151
9152         * ftp.c (getftp): Call ftp_list with NULL.
9153
9154 1997-01-15  Hrvoje Niksic  <hniksic@srce.hr>
9155
9156         * html.c (ftp_index): Don't print minutes and seconds if we don't
9157         know them; beautify the output.
9158
9159         * ftp.c (getftp): Don't close the socket on FTPNSFOD.
9160
9161 1997-01-14  Hrvoje Niksic  <hniksic@srce.hr>
9162
9163         * utils.c (strptime): New function.
9164         (strptime): Don't use get_alt_number.
9165         (strptime): Don't use locale.
9166         (match_string): Made it a function.
9167
9168 1997-01-12  Hrvoje Niksic  <hniksic@srce.hr>
9169
9170         * http.c (http_atotm): New function.
9171         (http_loop): Use it.
9172
9173         * atotm.c: Removed from the distribution.
9174
9175         * http.c (base64_encode_line): Rewrite.
9176
9177 1997-01-09  Hrvoje Niksic  <hniksic@srce.hr>
9178
9179         * ftp.c (getftp): Use ftp_expected_bytes; print size.
9180
9181         * ftp-basic.c (ftp_response): Use ftp_last_respline.
9182         (ftp_expected_bytes): New function.
9183
9184         * ftp.c (getftp): Print the unauthoritative file length.
9185
9186         * ftp-ls.c: Renamed from ftp-unix.c.
9187         (ftp_parse_ls): Moved from ftp.c.
9188         (ftp_parse_unix_ls): Recognize seconds in time spec.
9189         (ftp_parse_unix_ls): Recognize year-less dates of the previous
9190         year.
9191
9192 1997-01-08  Hrvoje Niksic  <hniksic@srce.hr>
9193
9194         * ftp-basic.c: Don't declare errno if #defined.
9195
9196         * host.c (ftp_getaddress): Check for sysinfo legally.
9197
9198 1997-01-08  Darko Budor  <dbudor@diana.zems.fer.hr>
9199
9200         * connect.c (iread): Use READ.
9201
9202 1996-12-23  Hrvoje Niksic  <hniksic@srce.hr>
9203
9204         * url.c: Recognize finger, rlogin, tn3270, mid and cid as valid
9205         schemes.
9206
9207 1996-12-22  Hrvoje Niksic  <hniksic@srce.hr>
9208
9209         * host.c (ftp_getaddress): Allow `.' in hostname.
9210
9211 1996-12-26  Darko Budor <dbudor@zems.fer.hr>
9212
9213         * wget.h: READ and WRITE macros for use instead of read and write
9214         on sockets, grep READ *.c, grep WRITE *.c
9215
9216         * wsstartup.c: new file - startup for winsock
9217
9218         * wsstartup.h: new file
9219
9220         * win32decl.h: new file - fixup for <errno.h> and winsock trouble
9221
9222         * configure.bat: Configure utility for MSVC
9223
9224         * src/Makefile.ms,config.h.ms: new files for use with MSVC 4.x
9225
9226 1996-12-22  Hrvoje Niksic  <hniksic@srce.hr>
9227
9228         * version.c: Released 1.4.3-pre.
9229
9230         * utils.c (prnum): Accept long.
9231         (legible): Use prnum().
9232
9233         * connect.c (make_connection): Accept port as short.
9234         (bindport): Ditto.
9235
9236         * http.c (gethttp): Use search_netrc.
9237
9238 1996-12-21  Hrvoje Niksic  <hniksic@srce.hr>
9239
9240         * ftp.c (getftp): Use search_netrc.
9241
9242         * netrc.c (free_netrc): New function.
9243
9244         * init.c (home_dir): New function.
9245
9246         * url.c (convert_links): Allow REL2ABS changes.
9247
9248 1996-12-21  Gordon Matzigkeit  <gord@gnu.ai.mit.edu>
9249
9250         * netrc.c: New file.
9251         (parse_netrc, maybe_add_to_list): New functions.
9252
9253 1996-12-17  Hrvoje Niksic  <hniksic@srce.hr>
9254
9255         * retr.c (retrieve_url): Reset opt.recursion before calling
9256         ftp_loop if it is reached through newloc.
9257
9258         * init.c (run_wgetrc): Print the wgetrc path too, when reporting
9259         error; don't use "Syntax error", since we don't know if it is
9260         really a syntax error.
9261
9262 1996-12-16  Hrvoje Niksic  <hniksic@srce.hr>
9263
9264         * utils.c (acceptable): Extract the filename part of the path.
9265
9266         * recur.c (recursive_retrieve): Call acceptable() with the right
9267         argument; would bug out on wildcards.
9268
9269         * init.c (parse_line): Likewise.
9270
9271         * html.c (htmlfindurl): Cast to char * when calling stuff.
9272
9273 1996-12-15  Hrvoje Niksic  <hniksic@srce.hr>
9274
9275         * ftp.c (getftp): Use ftp_pasv.
9276
9277         * ftp-basic.c (ftp_request): Accept NULL value.
9278         (ftp_pasv): New function.
9279
9280         * options.h (struct options): Add passive FTP option.
9281
9282 1996-12-15  Hrvoje Niksic  <hniksic@srce.hr>
9283
9284         * url.c (parseurl): Debug output.
9285
9286         * utils.c (path_simplify): New one, adapted from bash's
9287         canonicalize_pathname().
9288
9289 1996-12-14  Hrvoje Niksic  <hniksic@srce.hr>
9290
9291         * ftp.c (getftp): Don't discard the buffer.
9292
9293         * retr.c (get_contents): New parameter nobuf.
9294
9295 1996-12-13  Shawn McHorse  <riffraff@txdirect.net>
9296
9297         * html.c (htmlfindurl): Recognize <meta contents="d; URL=...".
9298
9299         * init.c (setval): Strip the trailing slashes on CVECDIR.
9300
9301 1996-12-13  Hrvoje Niksic  <hniksic@srce.hr>
9302
9303         * init.c: Make excludes and includes under CVECDIR instead of
9304         CVEC.
9305
9306 1996-12-13  Shawn McHorse  <riffraff@txdirect.net>
9307
9308         * url.c (get_urls_html): Skip "http:".
9309
9310 1996-12-13  Hrvoje Niksic  <hniksic@srce.hr>
9311
9312         * utils.c (strcasecmp): From glibc.
9313         (strncasecmp): Also.
9314         (strstr): Also.
9315
9316         * url.c: Added javascript: to the list of URLs prefixes.
9317
9318 1996-12-12  Shawn McHorse  <riffraff@txdirect.net>
9319
9320         * recur.c (retrieve_robots): Print the warning message only if
9321         verbose.
9322
9323 1996-12-12  Gregor Hoffleit  <flight@mathi.uni-heidelberg.DE>
9324
9325         * ftp.c (ftp_retrieve_list): Use NeXT old utime interface.
9326
9327 1996-12-12  Hrvoje Niksic  <hniksic@srce.hr>
9328
9329         * systhings.h: New file.
9330
9331         * ../configure.in: Check for utime.h
9332
9333         * ftp.c: Check whether we have unistd.h.
9334
9335 1996-11-27  Hrvoje Niksic  <hniksic@srce.hr>
9336
9337         * recur.c (recursive_retrieve): Send the canonical URL as referer.
9338         (recursive_retrieve): Call get_urls_html with the canonical URL.
9339
9340 1996-12-13  Kaveh R. Ghazi  <ghazi@caip.rutgers.edu>
9341
9342         * (configure.in, config.h.in, src/Makefile.in, src/*.[ch]): Add
9343         ansi2knr support for compilers which don't support ANSI style
9344         function prototypes and signatures.
9345
9346         * (aclocal.m4, src/ansi2knr.c, src/ansi2knr.1): New files.
9347
9348 1996-11-26  Hrvoje Niksic  <hniksic@srce.hr>
9349
9350         * url.c: Use it; Recognize paths ending with "." and ".." as
9351         directories.
9352         (url_filename): Append .n whenever file exists and could be a
9353         directory.
9354
9355         * url.h (ISDDOT): New macro.
9356
9357         * init.c (parse_line): Use unsigned char.
9358
9359         * url.c (get_urls_html): Cast to unsigned char * when calling
9360         htmlfindurl.
9361
9362         * html.c (htmlfindurl): Use unsigned char.
9363
9364         * version.c: Changed version to 1.4.3.
9365
9366 1996-11-25  Hrvoje Niksic  <hniksic@srce.hr>
9367
9368         * version.c: Released 1.4.2.
9369
9370         * ftp.c (getftp): Simplified assertion.
9371         (ftp_loop_internal): Remove symlink before downloading.
9372         (ftp_retrieve_list): Unlink the symlink name before attempting to
9373         create a symlink!
9374
9375         * options.h (struct options): Renamed print_server_response to
9376         server_response.
9377
9378         * ftp.c (rel_constr): Removed.
9379         (ftp_retrieve_list): Don't use it.
9380         (ftp_retrieve_list): Use opt.retr_symlinks.
9381
9382 1996-11-24  Hrvoje Niksic  <hniksic@srce.hr>
9383
9384         * main.c (main): New option retr_symlinks.
9385
9386         * url.c (convert_links): Print verbose message.
9387
9388 1996-11-24  Hrvoje Niksic  <hniksic@srce.hr>
9389
9390         * http.c (http_loop): Reset newloc in the beginning of function;
9391         would cause FMR in retrieve_url.
9392
9393 1996-11-23  Hrvoje Niksic  <hniksic@srce.hr>
9394
9395         * recur.c (convert_all_links): Find the URL of each HTML document,
9396         and feed it to get_urls_html; would bug out.
9397         (convert_all_links): Check for l2 instead of dl; removed dl.
9398
9399         * url.c (convert_links): Don't refer to freed newname.
9400
9401         * recur.c (recursive_retrieve): Add this_url to urls_downloaded.
9402
9403         * main.c (main): Print the OS_TYPE in the debug output, too.
9404
9405         * recur.c (recursive_retrieve): Check for opt.delete_after.
9406
9407         * main.c (main): New option delete-after.
9408
9409         * init.c (setval): Cleaned up.
9410
9411 1996-11-21  Hrvoje Niksic  <hniksic@srce.hr>
9412
9413         * Makefile.in (wget): Make `wget' the default target.
9414
9415         * ftp.c (ftp_loop_internal): Move noclobber checking out of the
9416         loop.
9417         (ftp_retrieve_list): Warn about non-matching sizes.
9418
9419         * http.c (http_loop): Made -nc non-dependent on opt.recursive.
9420
9421         * init.c (setnum): Renamed from setnuminf; New argument flags.
9422         (setval): Use it.
9423
9424         * main.c (main): Sorted the options.
9425         (main): New option --wait.
9426
9427 1996-11-21  Shawn McHorse  <riffraff@txdirect.net>
9428
9429         * html.c (htmlfindurl): Reset s->in_quote after getting out of
9430         quotes.
9431
9432 1996-11-20  Hrvoje Niksic  <hniksic@srce.hr>
9433
9434         * version.c: Changed version to 1.4.2.
9435
9436 1996-11-20  Hrvoje Niksic  <hniksic@srce.hr>
9437
9438         * version.c: Released 1.4.1.
9439
9440         * html.c (html_quote_string): New function.
9441         (ftp_index): Use it.
9442         (htmlfindurl): A more gentle ending debug message.
9443
9444         * ftp.c (ftp_loop): Check for opt.htmlify.
9445
9446         * init.c: New command htmlify.
9447
9448         * ftp.c (getftp): Nicer error messages, with `'-encapsulated
9449         strings.
9450         (ftp_loop): Print size of index.html.
9451
9452         * init.c (setval): Implement "styles".
9453
9454         * main.c (main): New option dotstyle.
9455
9456 1996-11-19  Hrvoje Niksic  <hniksic@srce.hr>
9457
9458         * ftp.c (getftp): Close the master socket in case of errors, after
9459         bindport().
9460
9461         * connect.c (bindport): Initialize msock to -1.
9462
9463         * ftp.c (getftp): Initialize dtsock to -1.
9464
9465         * connect.c (closeport): Don't close sock if sock == -1.
9466
9467 1996-11-18  Hrvoje Niksic  <hniksic@srce.hr>
9468
9469         * init.c (setnuminf): Nuked default value -- just leave unchanged.
9470         (setval): Don't send default values.
9471         (defaults): Use DEFAULT_TIMEOUT -- aaargh.
9472
9473         * options.h (struct options): Use long for dot_bytes.
9474
9475         * init.c (setquota): Renamed to setbytes.
9476         (setval): Use setbytes on DOTBYTES.
9477
9478 1996-11-17  Hrvoje Niksic  <hniksic@srce.hr>
9479
9480         * ftp.c (getftp): Initialize con->dltime.
9481
9482         * recur.c (recursive_retrieve): Use same_host instead of
9483         try_robots; simply load robots_txt whenever the host is changed.
9484         (recursive_retrieve): Free forbidden before calling parse_robots.
9485
9486 1996-11-16  Hrvoje Niksic  <hniksic@srce.hr>
9487
9488         * retr.c (show_progress): Use them.
9489
9490         * options.h (struct options): New options dot_bytes, dots_on_line
9491         and dot_spacing.
9492
9493 1996-11-16  Mark Boyns  <boyns@sdsu.edu>
9494
9495         * recur.c (recursive_retrieve): Retrieve directories regardless of
9496         acc/rej rules; check for empty u->file.
9497
9498 1996-11-14  Hrvoje Niksic  <hniksic@srce.hr>
9499
9500         * init.c (setval): Use it.
9501
9502         * utils.c (merge_vecs): New function.
9503
9504         * init.c (setval): Reset the list-type functions when encountering
9505         "".
9506
9507 1996-11-14  Shawn McHorse  <riffraff@txdirect.net>
9508
9509         * recur.c (recursive_retrieve): Use base_url instead of this_url
9510         for no_parent.
9511
9512 1996-11-14  Shawn McHorse  <riffraff@txdirect.net>
9513
9514         * html.c (htmlfindurl): Reset s->in_quote after exiting the quote.
9515
9516 1996-11-13  Hrvoje Niksic  <hniksic@srce.hr>
9517
9518         * utils.c (sepstring): Rewrote; don't use strtok.
9519
9520         * recur.c (recursive_retrieve): Enter assorted this_url to slist
9521         when running the first time.
9522         (retrieve_robots): Warn to ignore errors when robots are loaded.
9523
9524         * utils.c (load_file): Moved from url.c.
9525
9526         * http.c: Made static variables const too in h* functions.
9527
9528         * main.c (main): Renamed --continue-ftp to --continue.
9529
9530         * recur.c (recursive_retrieve): Use it.
9531
9532         * utils.c (frontcmp): New function.
9533
9534         * url.c (accdir): New function.
9535
9536         * html.c (htmlfindurl): Recognize <area href=...>.
9537
9538         * ftp.c (ftp_retrieve_dirs): Implemented opt.includes.
9539
9540         * init.c (setval): Free the existing opt.excludes and
9541         opt.includes, if available.
9542
9543         * main.c (main): New option -I.
9544
9545 1996-11-12  Hrvoje Niksic  <hniksic@srce.hr>
9546
9547         * ftp.c (ftp_retrieve_glob): Do not weed out directories.
9548
9549         * version.c: Changed version to 1.4.1.
9550
9551 1996-11-11  Hrvoje Niksic  <hniksic@srce.hr>
9552
9553         * version.c: Released 1.4.0.
9554
9555 1996-11-10  Hrvoje Niksic  <hniksic@srce.hr>
9556
9557         * main.c (main): Free com and val after parse_line.
9558         (printhelp): Reorder the listing.
9559
9560         * http.c: More robust header parsing.
9561
9562         * http.c: Allow any number of spaces, or no spaces, precede ':'.
9563         (hskip_lws): New function.
9564         (haccepts_bytes): New function.
9565         (gethttp): Use it.
9566
9567         * init.c (setval): Check header sanity.
9568         (setval): Allow resetting of headers.
9569
9570 1996-11-10  Hrvoje Niksic  <hniksic@srce.hr>
9571
9572         * http.c (http_loop): Don't use has_wildcards.
9573
9574         * http.c (gethttp): Free all_headers -- would leak.
9575
9576         * recur.c (recursive_retrieve): Initialize depth to 1 instead of
9577         0 -- this fixes a long-standing bug in -rl.
9578
9579 1996-11-09  Hrvoje Niksic  <hniksic@srce.hr>
9580
9581         * ftp.c: Use -1 as "impossible" value for con->fd.
9582
9583         * url.h (URL_SEPARATOR): Don't treat `*' and `+' as separators.
9584
9585         * init.c (parse_line): Use isalpha.
9586
9587         * ftp-unix.c: Use HAVE_UNISTD_H.
9588
9589         * mtch.c (has_wildcards): Don't match \.
9590
9591         * http.c (http_loop): Warn on HTTP wildcard usage.
9592
9593 1996-11-08  Hrvoje Niksic  <hniksic@srce.hr>
9594
9595         * url.c (url_filename): Do not create numbered suffixes if
9596         opt.noclobber -- would bug out on -nc.
9597
9598 1996-11-07  Hrvoje Niksic  <hniksic@srce.hr>
9599
9600         * recur.c (parse_robots): Don't chuck out the commands without
9601         arguments (`Disallow:<empty>' didn't work).
9602         (parse_robots): Compare versions lowercase.
9603         (parse_robots): Match on base_version, not version_string!
9604         (parse_robots): Handle comments properly.
9605         (parse_robots): Match versions in a sane way.
9606
9607         * init.c: Print nicer error messages.
9608
9609         * version.c: Changed version to 1.4.0.
9610
9611 1996-11-06  Hrvoje Niksic  <hniksic@srce.hr>
9612
9613         * version.c: Released 1.4.0-test2.
9614
9615         * init.c (run_wgetrc): Close fp.
9616
9617         * ftp.c (ftp_retrieve_dirs): Allocate the correct length for
9618         u->dir.
9619
9620 1996-11-06  Hrvoje Niksic  <hniksic@srce.hr>
9621
9622         * init.c (setquota): Allow inf as quota specification.
9623
9624 1996-11-05  Hrvoje Niksic  <hniksic@srce.hr>
9625
9626         * ftp.c (ftp_retrieve_dirs): Return QUOTEXC if quota exceeded.
9627         (ftp_retrieve_glob): Return QUOTEXC on quota exceeded.
9628
9629         * main.c (main): Check for quota by comparison with downloaded
9630         stuff, not from status.
9631
9632         * connect.c (select_fd): Should compile on HPUX without warnings now.
9633
9634         * ftp.c (ftp_get_listing): Check whether ftp_loop_internal
9635         returned RETROK.
9636
9637 1996-11-04  Hrvoje Niksic  <hniksic@srce.hr>
9638
9639         * ftp.c (ftp_retrieve_glob): Print the pattern nicely.
9640         (getftp): Return FTPRETRINT on control connection error.
9641
9642         * html.c (htmlfindurl): Recognize <embed src=...> and
9643         <bgsound src=...>.
9644         (ftp_index): Handle username and password correctly.
9645
9646         * main.c (main): Made `-np' a synonim for --no-parent.
9647
9648 1996-11-02  Hrvoje Niksic  <hniksic@srce.hr>
9649
9650         * ftp.c (ftp_loop): Check for opt.ftp_glob too before calling
9651         ftp_retrieve_glob.
9652
9653         * version.c: Changed version to 1.4.0-test2.
9654
9655 1996-11-02  Hrvoje Niksic  <hniksic@srce.hr>
9656
9657         * version.c: Released 1.4.0-test1.
9658
9659         * url.c (str_url): Don't use sprintf when creating %2F-prefixed
9660         directory.
9661         (convert_links): Removed definition of make_backup.
9662
9663         * http.h: Removed definition of MAX_ERROR_LENGTH.
9664
9665         * host.c (ftp_getaddress): Check for "(none)" domains.
9666
9667         * ftp.c (ftp_retrieve_dirs): Docfix.
9668
9669         * http.c (gethttp): Use ou->referer instead of u->referer.
9670
9671         * retr.c (retrieve_url): Reset u to avoid freeing pointers twice;
9672         this was known to cause coredumps on Linux.
9673
9674         * html.c (ftp_index): Cast the argument to local_time to time_t *.
9675
9676 1996-11-01  Hrvoje Niksic  <hniksic@srce.hr>
9677
9678         * connect.c (select_fd): Use exceptfds -- once and for all.
9679
9680         * retr.c (retrieve_from_file): Free filename after
9681         recursive_retrieve.
9682         (retrieve_from_file): Send RFIRST_TIME to recursive_retrieve on
9683         first-time retrieval.
9684         (retrieve_from_file): Return uerr_t; new argument, count.
9685         (retrieve_from_file): Break on QUOTEXC.
9686
9687         * init.c (setquota): Fixed a bug that caused rejection of
9688         non-postfixed values..
9689
9690 1996-10-30  Hrvoje Niksic  <hniksic@srce.hr>
9691
9692         * version.c: Changed name to wget.
9693
9694         * connect.c (iread): Smarter use of select.
9695         (select_fd): Set errno on timeout.  If not timeout, return 1
9696         instead of 0.
9697
9698 1996-10-29  Hrvoje Niksic  <hniksic@srce.hr>
9699
9700         * ftp.c (ftp_loop_internal): Don't use con->cmd before
9701         establishing it.
9702
9703 1996-10-26  Hrvoje Niksic  <hniksic@srce.hr>
9704
9705         * http.c (gethttp): Send correct referer when using proxy.
9706         (gethttp): Use struct urlinfo ou to access the relevant data; send
9707         correct authorization in all cases.
9708
9709         * host.c (same_host): Use skip_uname to skip username and
9710         password.
9711
9712         * url.c (skip_uname): New function.
9713         (parseurl): Use it.
9714
9715         * host.c (same_host): Do not assume HTTP -- same_host should now
9716         be totally foolproof.
9717
9718         * url.c (skip_proto): New function.
9719         (parse_uname): Use it.
9720
9721         * http.c (gethttp): Create local user and passwd from what is
9722         given.
9723
9724         * url.c (parseurl): Check for HTTP username and password too.
9725
9726 1996-10-25  Hrvoje Niksic  <hniksic@srce.hr>
9727
9728         * config.h.in: Removed #define gethostbyname R...
9729
9730 1996-10-22  Hrvoje Niksic  <hniksic@srce.hr>
9731
9732         * version.c: Changed version to 1.4.0-test1.
9733
9734 1996-10-21  Hrvoje Niksic  <hniksic@srce.hr>
9735
9736         * version.c: "Released" 1.4b29.
9737
9738         * recur.c (recursive_retrieve): Check for no_parent.
9739
9740         * init.c (setval): Option update.
9741
9742         * main.c (main): New option no-parent.
9743
9744         * options.h (struct options): New variable no_parent.
9745
9746         * recur.c (recursive_retrieve): Only files are checked for
9747         opt.accepts and opt.rejects.
9748         (recursive_retrieve): Check directories for opt.excludes.
9749         (recursive_retrieve): Make the dir absolute when checking
9750         opt.excludes.
9751
9752         * html.c (htmlfindurl): Recognize <applet code=...> and <script
9753         src=...>
9754
9755 1996-10-18  Hrvoje Niksic  <hniksic@srce.hr>
9756
9757         * ftp.c (getftp): Do not line-break assert entries at all.
9758         (ftp_retrieve_dirs): docfix.
9759
9760         * connect.c (select_fd): Use fd + 1 as nfds.
9761
9762         * version.c: Changed version to 1.4b29.
9763
9764 1996-10-18  Hrvoje Niksic  <hniksic@srce.hr>
9765
9766         * version.c: "Released" 1.4b28.
9767
9768         * ftp.c (ftp_loop_internal): Check whether f->size == len and
9769         don't continue the loop if it is.
9770         (ftp_get_listing): Remove list_filename on unsuccesful loop.
9771
9772 1996-10-17  Hrvoje Niksic  <hniksic@srce.hr>
9773
9774         * ftp.c (ftp_loop_internal): Use strcpy to initialize tmp.
9775         (getftp): Do not use multiline assert.
9776
9777         * http.c (hparsestatline): Use mjr and mnr instead of major and
9778         minor, which don't compile on Ultrix.
9779         (http_loop): Use strcpy() to initialize tmp.
9780
9781         * all: Geturl -> Fetch
9782
9783 1996-10-17  Hrvoje Niksic  <hniksic@srce.hr>
9784
9785         * recur.c (parse_robots): Fixed an off-by-one bug when looking for
9786         ':'.
9787
9788         * html.c (htmlfindurl): Fixed several possible off-by-one bugs by
9789         moving `bufsize &&' to the beginning of each check in for-loops.
9790
9791         * recur.c (parse_robots): Close fp on exit.
9792
9793         * url.c (mymkdir): Check for each directory before creating.
9794
9795 1996-10-16  Hrvoje Niksic  <hniksic@srce.hr>
9796
9797         * version.c: Changed version to 1.4b28.
9798
9799 1996-10-16  Hrvoje Niksic  <hniksic@srce.hr>
9800
9801         * version.c: "Released" 1.4b27.
9802
9803         * init.c (parse_line): Use isspace.
9804         (parse_line): Free *com on all errors.
9805
9806         * ftp.c (ftp_loop): Change FTPOK to RETROK before exiting.
9807         (delelement): Use next instead of f->next and prev instead of
9808         f->prev.
9809         (delelement): Free the members of the deleted element.
9810
9811         * http.c (http_loop): Do not return RETROK on code != 20x.
9812
9813         * init.c (cleanup): Free opt.user_header.
9814         (cleanup): Free opt.domains.
9815
9816         * url.c (freelists): Moved to cleanup().
9817
9818         * http.c (hparsestatline): Docfix.
9819
9820         * main.c (main): Return with error status on unsuccesful
9821         retrieval.
9822
9823         * init.c (setval): Do not remove listing when mirroring.
9824
9825         * url.c (url_filename): Use opt.fileprefix.
9826
9827         * ftp.c (ftp_get_listing): Use url_filename to get filename for
9828         .listing.
9829
9830         * main.c (main): New option: -rn.
9831
9832 1996-10-15  Hrvoje Niksic  <hniksic@srce.hr>
9833
9834         * Makefile.in (RM): Added RM = rm -f.
9835
9836         * host.c (clean_hosts): New function.
9837         (free_hlist): Just free the list, no reset.
9838
9839         * version.c: Changed version to 1.4b27.
9840
9841 1996-10-13  Hrvoje Niksic  <hniksic@srce.hr>
9842
9843         * version.c: "Released" 1.4b26.
9844
9845         * retr.c (retrieve_from_file): If call get_urls_html with
9846         opt.spider to make it silent in spider mode.
9847
9848         * url.c (str_url): Use CLEANDUP instead of URL_CLEANSE.
9849
9850         * url.h (CLEANDUP): New macro.
9851
9852         * http.c (gethttp): Fixed a bug that freed location only when it
9853         was NULL.
9854
9855         * retr.c (retrieve_url): Free url if it will not be stored,
9856         i.e. newloc is NULL.
9857
9858         * html.c (htmlfindurl): Handle exiting from quotes correctly; the
9859         old version would bug out on <a href="x#a"href="y">.
9860
9861         * html.h (state_t): New member in_quote.
9862
9863         * html.c (htmlfindurl): Free s->attr at the beginning of
9864         attr-loop.
9865
9866         * recur.c (recursive_retrieve): Recognize RCLEANUP.
9867         (tried_robots): Make hosts a global variable.
9868         (recursive_retrieve): Free constr after URL host optimization.
9869         (tried_robots): Free urlinfo before exiting.
9870
9871         * utils.c (free_slist): New function.
9872
9873         * recur.c (recursive_retrieve): Use flags to add cleanup
9874         possibility.
9875
9876         * main.c (main): Free filename after recursive_retrieve.
9877
9878         * http.c (gethttp): Store successful responses too.
9879
9880 1996-10-12  Hrvoje Niksic  <hniksic@srce.hr>
9881
9882         * all: Constified the whole source.  This required some minor
9883         changes in many functions in url.c, possibly introducing bugs -- I
9884         hope not.
9885
9886         * ftp-basic.c: Removed last_respline.
9887
9888         * http.c (gethttp): Free type.
9889
9890         * host.c (same_host): Free real1 and real2.
9891
9892         * main.c (main): New option --spider.
9893
9894         * retr.c (get_contents): Don't reset errno.
9895
9896         * main.c (main): Sorted the options.
9897
9898         * connect.c (iread): Set errno to ETIMEDOUT only if it was left
9899         uninitialized by select().
9900
9901         * http.c (http_loop): Print the time when the connection is
9902         closed.
9903         (gethttp): Debug-print the HTTP request.
9904
9905 1996-10-11  Hrvoje Niksic  <hniksic@srce.hr>
9906
9907         * connect.c (iread): Do not try reading after timeout.
9908
9909         * main.c (main): Would bug out on -T.
9910
9911         * connect.c (select_fd): Do not use exceptfds.
9912         (iread): Set ETIMEDOUT on select_fd <= 0.
9913
9914         * version.c: Changed version to 1.4b26.
9915
9916 1996-10-10  Hrvoje Niksic  <hniksic@srce.hr>
9917
9918         * version.c: "Released" 1.4b25.
9919
9920         * ftp-unix.c (ftp_parse_unix_ls): Ignore lines without file name
9921         or link name.
9922
9923         * http.c (gethttp): Add errcode to struct hstat.
9924         (http_loop): Use it.
9925
9926         * url.c (no_proxy_match): Simplify using char** for no_proxy.
9927
9928         * options.h (struct options): Make opt.no_proxy a vector.
9929
9930         * utils.c (sepstring): Use !*s instead of !strlen(s).
9931
9932         * init.c (setval): Set opt.maxreclevel to 0 on --mirror.
9933         (getperms): Use ISODIGIT instead of isdigit.
9934
9935         * ftp.c (getftp): Print time.
9936
9937         * main.c (main): Use legible output of downloaded quantity.
9938
9939         * ftp.c (getftp): Use elapsed_time().
9940         (ftp_loop_internal): Use rate().
9941
9942         * http.c (http_loop): Add download ratio output; Use rate().
9943
9944         * utils.c (rate): New function.
9945
9946 1996-10-09  Hrvoje Niksic  <hniksic@srce.hr>
9947
9948         * http.c (http_loop): Use timer.
9949
9950         * ftp.c: Split to ftp-basic.c and ftp.c
9951
9952         * utils.c (reset_timer): New function.
9953         (elapsed_time): New function.
9954
9955         * retr.c (show_progress): Make bytes_in_line and offs long; should
9956         work on 16-bit machines.
9957
9958 1996-10-08  Hrvoje Niksic  <hniksic@srce.hr>
9959
9960         * url.c (in_acclist): New argument backward.
9961
9962         * ftp.c (ftp_retrieve_glob): Use acceptable() to determine whether
9963         a file should be retrieved according to suffix.
9964         (ftp_get_listing): Check the return value of unlink; Do not call
9965         ftp_retrieve_dirs if depth reached maxreclevel.
9966         (ftp_retrieve_dirs): Check whether the directory is in
9967         exclude-list.
9968
9969         * main.c (main): Print the version number at the beginning of
9970         DEBUG output.
9971         (main): Use strrchr when creating exec_name.
9972
9973         * ftp.c (ftp_retrieve_glob): Do not close control connection.
9974
9975         * version.c: Changed version to 1.4b25.
9976
9977 1996-10-07  Hrvoje Niksic  <hniksic@srce.hr>
9978
9979         * version.c: "Released" 1.4b24.
9980
9981         * Makefile.in: Rewrite.
9982
9983         * ftp.c (ftp_loop_internal): Likewise.
9984
9985         * retr.c (time_str): Check for failed time().
9986
9987         * html.c (htmlfindurl): Recognize <fig src> and <overlay src> from
9988         HTML3.0.
9989
9990         * retr.c (time_str): Return time_t *.
9991
9992         * connect.c (bindport): Close msock on unsuccesful bind.
9993         (bindport): The same for getsockname and listen.
9994
9995         * retr.c (retrieve_url): Allow any number of retries on
9996         proxy.
9997
9998         * http.c (gethttp): Do not treat errno == 0 as timeout.
9999         (http_loop): Likewise.
10000         (http_loop): Cosmetic changes.
10001
10002         * connect.c (iread): Set errno to ETIMEDOUT in case of timeout.
10003
10004         * retr.c (get_contents): Reset errno.
10005
10006         * ftp.c (getftp): Minor fixes.
10007
10008 1996-10-06  Hrvoje Niksic  <hniksic@srce.hr>
10009
10010         * http.c: Do not use backups.
10011
10012         * geturl.1 (WARNING): Warn that man-page could be obsolete.
10013
10014         * getopt.c (getopt_long): Moved to getopt.c
10015
10016         * geturl.texi: Enhanced.
10017
10018         * main.c (main): Use it.
10019
10020         * recur.c (convert_all_links): New function.
10021
10022         * utils.c (add_slist): New argument flags.
10023
10024         * recur.c (recursive_retrieve): Update a list of downloaded URLs.
10025         (parse_robots): Do not chuck out empty value fields.
10026         (parse_robots): Make yourself welcome on empty Disallow.
10027
10028         * version.c: Changed version to 1.4b24.
10029
10030 1996-10-06  Hrvoje Niksic  <hniksic@srce.hr>
10031
10032         * version.c: "Released" 1.4b23.
10033
10034         * ftp.c (ftp_loop_internal): Get the time after getftp.
10035
10036         * Makefile.in (install.info): New target.
10037         (install): Use it.
10038
10039         * http.c (http_loop): Fix output when doing -O.
10040
10041 1996-10-05  Hrvoje Niksic  <hniksic@srce.hr>
10042
10043         * geturl.texi: New file.
10044
10045         * main.c (main): Do not print the warnings and download summary if
10046         opt.quiet is set.
10047
10048         * version.c: Changed version to 1.4b23.
10049
10050 1996-10-05  Hrvoje Niksic  <hniksic@srce.hr>
10051
10052         * "Released" 1.4b22.
10053
10054         * atotm.c (atotm): Use True and False instead of TRUE and FALSE,
10055         to avoid redefinition warnings.
10056
10057         * host.c (store_hostaddress): Use memcpy() to copy the address
10058         returned by inet_addr.
10059
10060         * version.c: Changed version to 1.4b22.
10061
10062 1996-10-04  Hrvoje Niksic  <hniksic@srce.hr>
10063
10064         * version.c: "Released" 1.4b21.
10065
10066         * ftp-unix.c (ftp_parse_ls): Renamed to ftp_parse_unix_ls.
10067
10068         * ftp.c (ftp_port): Use conaddr.
10069         (getftp): Print the file length.
10070         (ftp_retrieve_list): Check the stamps of plain files only.
10071
10072         * connect.c (closeport): Do not call shutdown().
10073         (conaddr): New function.
10074
10075         * html.c (ftp_index): Made it dfp-aware.
10076
10077         * init.c (cleanup): New name of freemem. Close opt.dfp.
10078
10079         * ftp.c (getftp): Use opt.dfp if it is set.
10080
10081         * ftp-unix.c (ftp_parse_ls): Recognize time in h:mm format.
10082
10083         * ftp.c (ftp_retrieve_dirs): Fixed a bug that caused incorrect
10084         CWDs to be sent with recursive FTP retrievals.
10085
10086 1996-10-03  Hrvoje Niksic  <hniksic@srce.hr>
10087
10088         * recur.c (parse_robots): Made it more compliant with "official"
10089         specifications.
10090
10091         * http.c: New function.
10092
10093         * ftp-unix.c (ftp_parse_ls): Added better debug output.
10094
10095         * ftp.c (getftp): Print out the LIST in case of
10096         opt.print_server_response.
10097
10098         * version.c: Changed version to 1.4b21.
10099
10100 1996-10-01  Hrvoje Niksic  <hniksic@srce.hr>
10101
10102         * version.c: "Released" 1.4b20.
10103
10104         * README: Update.
10105
10106         * http.c (gethttp): Preset lengths of various headers instead of
10107         calculating them dynamically.
10108         (gethttp): Check for 206 partial contents.
10109
10110 1996-09-30  Hrvoje Niksic  <hniksic@srce.hr>
10111
10112         * configure.in: Set SYSTEM_GETURLRC to $libdir/geturlrc
10113
10114         * http.c (gethttp): Send the port number in the Host: header.
10115
10116 1996-09-29  Hrvoje Niksic  <hniksic@srce.hr>
10117
10118         * http.c (gethttp): Send host: header.
10119         (gethttp): Add the possibility of user-defined headers.
10120         (gethttp): Move decision about pragma: no-cache to http_loop,
10121         where it belongs.
10122         (gethttp): Pass a struct instead of enormous argument list.
10123         (http_loop): Use a new, fancier display format.
10124         (ftp_loop): Likewise.
10125
10126         * main.c: (hangup): Turn off buffering of the new log file.
10127
10128         * install-sh: Likewise.
10129
10130         * config.sub: Replace with the one in autoconf-2.10
10131
10132         * geturl.1: Update.
10133
10134         * init.c: New options httpuser and httppasswd.
10135
10136         * http.c: (base64_encode_line): New function.
10137         (gethttp): Send authentication.
10138
10139         * connect.c (make_connection): Use store_hostaddress.
10140
10141 1996-09-28  Hrvoje Niksic  <hniksic@srce.hr>
10142
10143         * host.c (store_hostaddress): New function.
10144
10145         * NEWS: Update.
10146
10147         * http.c (hgetrange): New function.
10148         (gethttp): Use ranges.
10149
10150         * utils.c (numdigit): Accept long instead of int.
10151
10152         * http.c (http_loop): Add restart capabilities.
10153
10154         * ftp.c (ftp_retrieve_glob): Fixed a bug that could cause matchres
10155         being used uninitialized.
10156         (ftp_retrieve_list): Similar fix.
10157
10158         * host.c (add_hlist): Fixed a bug that could cause cmp being used
10159         uninitialized.
10160
10161         * url.c (construct_relative): New function.
10162
10163         * recur.c (recursive_retrieve): Use it.
10164
10165         * retr.c (convert_links): New function.
10166
10167 1996-09-27  Hrvoje Niksic  <hniksic@srce.hr>
10168
10169         * url.c (free_urlpos): New function.
10170
10171         * recur.c (recursive_retrieve): Adapt.
10172
10173         * url.c (get_urls_html): Return a linked list instead of a vector.
10174
10175         * url.c (get_urls_file): Return a linked list instead of a vector.
10176
10177         * geturl.1: Update.
10178
10179         * http.c (gethttp): Implement it.
10180
10181         * init.c (setval): New option: SAVEHEADERS
10182
10183         * ftp.c (ftp_loop_internal): Do not set restval if listing is to
10184         be retrieved. Lack of this test caused bugs when the connection
10185         was lost during listing.
10186
10187         * retr.c (retrieve_url): Fixed a bug that caused
10188         coredumps. *newloc is now reset by default.
10189         (retrieve_url): Lift the twenty-tries limit on proxies.
10190
10191         * version.c: Changed version to 1.4b20.
10192
10193 1996-09-20  Hrvoje Niksic  <hniksic@srce.hr>
10194
10195         * version.c: "Released" 1.4b19.
10196
10197 1996-09-19  Hrvoje Niksic  <hniksic@srce.hr>
10198
10199         * ftp.c (ftp_loop_internal): Renamed from ftp_1fl_loop.
10200         (getftp): Changed prototype to accept ccon *.
10201
10202 1996-09-17  Hrvoje Niksic  <hniksic@srce.hr>
10203
10204         * ftp.c (ftp_retrieve_list): Fixed a bug that caused setting
10205         incorrect values to files pointed to by symbolic links.
10206         (ftp_1fl_loop): Do not count listings among the downloaded URL-s.
10207
10208 1996-09-16  Hrvoje Niksic  <hniksic@srce.hr>
10209
10210         * url.c (mkstruct): Do not prepend "./" in front of a pathname.
10211
10212         * main.c (main): New option: --user-agent.
10213
10214         * geturl.1: Ditto.
10215
10216         * init.h: Ditto.
10217
10218         * init.c (setval): Ditto.
10219
10220         * main.c (main): Rename "server-headers" to "server-response".
10221
10222         * ftp-unix.c (ftp_parse_ls): Check for asterisks at the end of
10223         executables in 'ls -F' listings.
10224
10225 1996-09-15  Hrvoje Niksic  <hniksic@srce.hr>
10226
10227         * url.c (parseurl): Remove realloc() and sprintf().
10228         (str_url): Get rid of sprintf().
10229
10230         * recur.c (recursive_retrieve): Enable FTP recursion through proxy
10231         servers.
10232
10233         * url.h (URL_CLEANSE): Made it else-resistant.
10234         (USE_PROXY): New macro.
10235
10236 1996-09-14  Hrvoje Niksic  <hniksic@srce.hr>
10237
10238         * NEWS: Update.
10239
10240         * version.c: Changed version to 1.4b19.
10241
10242 1996-09-14  Hrvoje Niksic  <hniksic@srce.hr>
10243
10244         * version.c: "Released" 1.4b18.
10245
10246         * url.c: Made it reallocate space exponentially.
10247
10248 1996-09-14  Drazen Kacar  <dave@fly.cc.fer.hr>
10249
10250         * html.c (htmlfindurl): Added <frame src> and <iframe src> among
10251         the list of stuff to fetch.
10252
10253 1996-09-13  Hrvoje Niksic  <hniksic@srce.hr>
10254
10255         * url.c (get_urls_html): Fixed a bug that caused SIGSEGV's with
10256         -Fi.
10257
10258         * html.c (htmlfindurl): Rewrite.
10259
10260         * http.c (gethttp): Use opt.proxy_cache.
10261
10262         * main.c (main): Added --cache option.
10263
10264         * ftp.c (ftp_response): Print server response if opt.print_server
10265         response is set.
10266         (getftp): Print newlines after each request if the server response
10267         is to be printed.
10268         (ftp_response): Copy the last response line to last_respline.
10269
10270         * http.c (gethttp): Add Pragma: nocache for retried
10271         proxy-retrievals.
10272
10273         * ftp.c (getftp): Use it.
10274
10275         * retr.c (buf_discard): New function.
10276
10277         * ftp.c (ftp_response): Use buf_readchar().
10278         (getftp): Flush the control connection buffer before calling
10279         get_contents().
10280
10281         * retr.c (buf_readchar): New function.
10282         (buf_flush): New function.
10283         (get_contents): Use buf_readchar() instead of read(x, x, 1).
10284         (get_contents): Use buf_flush.
10285
10286 1996-09-12  Hrvoje Niksic  <hniksic@srce.hr>
10287
10288         * ftp.c: Incorporate changes to ftp_response.
10289
10290         * ftp.c (ftp_response): Allocate the server response dynamically,
10291         as in read_whole_line and fetch_next_header.
10292
10293         * utils.c (read_whole_line): Fixed a bug that prevented reading
10294         the last line if it is not \n-terminated. Also fixed a possible
10295         memory overflow.
10296
10297         * http.c (fetch_next_header): Return malloc-ed string as large as
10298         needed.
10299         (gethttp): Use new fetch_next_header.
10300
10301 1996-09-12  Hrvoje Niksic  <hniksic@srce.hr>
10302
10303         * http.c (hgetlen): Compute the header length the first time only.
10304         (hgettype): Ditto.
10305         (hgetlocation): Ditto.
10306         (hgetmodified): Ditto.
10307
10308 1996-09-11  Hrvoje Niksic  <hniksic@srce.hr>
10309
10310         * sample.geturlrc: Update.
10311
10312 1996-09-10  Hrvoje Niksic  <hniksic@srce.hr>
10313
10314         * http.c (http_loop): Ditto.
10315
10316         * ftp.c (getftp): Open the output file as binary.
10317
10318         * version.c: Changed version to 1.4b18.
10319
10320 1996-09-10  Hrvoje Niksic  <hniksic@srce.hr>
10321
10322         * version.c: "Released" 1.4b17.
10323
10324         * ftp-unix.c (ftp_parse_ls): If unable to open file, return NULL
10325         instead of failed assertion.
10326
10327 1996-09-09  Hrvoje Niksic  <hniksic@srce.hr>
10328
10329         * ftp.c (ftp_get_listing): Add a numbered suffix to LIST_FILENAME
10330         if a file of that name already exists.
10331
10332 1996-09-05  Hrvoje Niksic  <hniksic@srce.hr>
10333
10334         * ftp.c (ftp_1fl_loop): Handler FTPPORTERR and FOPENERR correctly.
10335
10336         * config.h.in: Define gethostbyname as Rgethostbyname when using
10337         Socks.
10338
10339         * configure.in: Check for -lresolv if using Socks.
10340
10341         * version.c: Changed version to 1.4b17.
10342
10343 1996-07-15  Hrvoje Niksic  <hniksic@srce.hr>
10344
10345         * version.c: "Released" 1.4b16.
10346
10347         * http.c (gethttp): More intelligent check for first line of HTTP
10348         response.
10349         (gethttp): Would bug out on time-stamping.
10350
10351         * version.c: Changed version to 1.4b16.
10352
10353 1996-07-11  Hrvoje Niksic  <hniksic@srce.hr>
10354
10355         * version.c: Released 1.4b15.
10356
10357         * http.c (http_loop): Print \n after the loop entry, not before.
10358
10359         * url.c (url_filename): Use ISDOT.
10360
10361         * url.h (ISDOT): New macro.
10362
10363         * recur.c (recursive_retrieve): Change only opt.recursive for
10364         following FTP.
10365
10366 1996-07-11  Antonio Rosella <antonio.rosella@agip.it>
10367
10368         * socks/geturl.cgi: Fixed version No.
10369
10370         * socks/download-netscape.html: Ditto.
10371
10372         * socks/download.html: Changed socks.html to download.html.
10373
10374 1996-07-11  Hrvoje Niksic  <hniksic@srce.hr>
10375
10376         * url.c (url_filename): Check for opt.dirstruct instead for
10377         opt.recursive && opt.dirstruct.
10378
10379         * init.c (defaults): Ditto.
10380         (defaults): Reset dirstruct by default.
10381         (setval): Set opt.dirstruct whenever setting recursive.
10382
10383         * init.h: Removed FORCEDIRHIER.
10384
10385         * INSTALL: Added -L to socks-description.
10386
10387         * version.c: Changed version to 1.4b15.
10388
10389 1996-07-10  Hrvoje Niksic  <hniksic@srce.hr>
10390
10391         * version.c: "Released" 1.4b14.
10392
10393         * geturl.1: Update AUTHOR to include Rosella as contributor.
10394
10395         * NEWS: Update.
10396
10397         * socks/geturl.cgi: Simplified command creation, nuked <blink>.
10398
10399         * socks/geturl.cgi: Wrap nutscape extensions within if $netscape.
10400         (cal_time): Fix == to eq.
10401
10402         * socks/geturl.cgi: GPL-ized with permission of A. Rosella.
10403
10404         * geturl.1 (hostname): Moved URL CONVENTIONS to the beginning.
10405
10406         * Makefile.in: Use @VERSION@.
10407
10408         * configure.in: Check version from version.c.
10409
10410         * socks/geturl.cgi: Changed /pub/bin/perl to /usr/bin/perl.
10411
10412         * socks/download.html: Created from download-netscape.html, made
10413         HTML-2.0 compliant.
10414
10415         * recur.c (recursive_retrieve): Set opt.force_dir_hier when
10416         following FTP links from recursions.
10417
10418 1996-07-09  Hrvoje Niksic  <hniksic@srce.hr>
10419
10420         * url.c (mymkdir): Fixed a bug that prevented mymkdir() to create
10421         absolute directories correctly.
10422
10423         * version.c: Changed version to 1.4b14.
10424
10425 1996-07-09  Hrvoje Niksic  <hniksic@srce.hr>
10426
10427         * version.c: "Released" 1.4b13.
10428
10429         * url.c (make_backup): New function.
10430
10431         * http.c (http_loop): Make a backup copy of the local file (using
10432         rename(2)) before opening it.
10433
10434         * main.c (main): Added --backups.
10435
10436         * host.c (ftp_getaddress): Bail out on failed mycuserid().
10437         (ftp_getaddress): Check for leading dot on MY_DOMAIN.
10438         (ftp_getaddress): Check for empty, null or (null) domain.
10439
10440         * url.c (get_urls_html): If this_url is NULL, the base must have a
10441         protocol.
10442         (parseurl): Use has_proto.
10443
10444         * retr.c (retrieve_url): Warn when proxy is used with more than 20
10445         retries.
10446
10447         * url.c (mkstruct): Create the directory (calling mymkdir()) only
10448         if it is not already there.
10449         (has_proto): New function.
10450         (get_urls_html): Eliminate the remaining call to findurl -- use
10451         has_proto.
10452
10453         * geturl.1: Ditto.
10454
10455         * main.c: Change -X to -x.
10456
10457         * url.c (url_filename): Simplify creation of filename if
10458         prefix_files is set.
10459         (url_filename): Simplify everything. And I do mean *everything*.
10460         (mkstruct): Add dir_prefix before hostname.
10461         (path_simplify): Fixed a bug that caused writing outside the path
10462         string in case of "." and ".." path strings.
10463
10464 1996-07-06  Hrvoje Niksic  <hniksic@srce.hr>
10465
10466         * init.c: Added --mirror.
10467
10468         * main.c (main): Added -X to force saving of directory hierarchy.
10469
10470         * ftp.c (ftp_retrieve_list): Added recursion depth counter.
10471         (ftp_retrieve_list): Check whether quota is exceeded.
10472
10473         * url.c (get_urls_html): Skip leading blanks for absolute URIs.
10474
10475         * http.c (gethttp): Use referer if present.
10476
10477         * recur.c (recursive_retrieve): Set u->referer before calling
10478         retrieve_url.
10479
10480         * url.c (newurl): Use memset to nullify the struct members.
10481         (freeurl): Free the referer field too.
10482
10483         * url.h: Added referer to urlinfo.
10484
10485         * geturl.1: Updated the manual to document some of the new features.
10486
10487         * utils.c (numdigit): Moved from url.c.
10488
10489         * README: Rewritten.
10490
10491         * config.h.in: Add the support for socks.
10492
10493         * configure.in: Add the support for socks.
10494
10495         * url.c (url_filename): If the dir_prefix is ".", work with just
10496         the file name.
10497         (url_filename): Do not look for .n extensions if timestamping if
10498         turned on.
10499
10500         * retr.c (show_progress): Skip the over-abundant restval data, and
10501         print the rest of it with ',' instead of '.'.
10502
10503 1996-07-05  Hrvoje Niksic  <hniksic@srce.hr>
10504
10505         * retr.c (show_progress): Changed second arg. to long (as it
10506         should be).
10507         (show_progress): Moved to retr.c.
10508         (get_contents): Moved to retr.c.
10509
10510         * version.c: Change version to 1.4b13.
10511
10512 1996-07-05  Hrvoje Lacko <hlacko@fly.cc.fer.hr>
10513
10514         * url.c (in_acclist): Would return after the first suffix.
10515
10516 1996-07-04  Hrvoje Niksic  <hniksic@srce.hr>
10517
10518         * version.c: "Released" 1.4b12.
10519
10520         * url.c (path_simplify): More kludgifications.
10521         (get_urls_html): Use new parameters for htmlfindurl.
10522
10523         * html.c: Removed memorizing "parser states", since the new
10524         organization does not require them.
10525
10526         * init.c (run_geturlrc): Use read_whole_line.
10527
10528         * ftp-unix.c (ftp_parse_ls): Use read_whole_line.
10529
10530         * recur.c (parse_robots): Use read_whole_line.
10531
10532         * utils.c (read_whole_line): New function.
10533
10534         * recur.c (tried_robots): Use add_slist/in_slist, *much* cleaner.
10535
10536         * host.c (ngethostbyname): Call inet_addr just once. Yet to be
10537         tested on OSF and Ultrix.
10538         (add_hlist): New function.
10539         (free_hlist): New function.
10540         (search_host): New function.
10541         (search_address): New function.
10542         (realhost): Use search_host, search_address and add_hlist.
10543         (same_host): Replaced realloc() with strdupdelim(), made
10544         case-insensitive, fixed a memory leak.
10545
10546         * html.c (ftp_index): Fixed tm_min and tm_sec to be tm_hour and
10547         tm_min, like intended.
10548
10549         * version.c: Change user agent information to
10550         Geturl/version.
10551
10552 1996-07-03  Hrvoje Niksic  <hniksic@srce.hr>
10553
10554         * utils.c: Renamed nmalloc.c to utils.c, .h likewise.
10555
10556         * url.c (acceptable): Always accept directories.
10557
10558         * ftp-unix.c (ftp_parse_ls): Support brain-damaged "ls -F"-loving
10559         servers by stripping trailing @ from symlinks and trailing / from
10560         directories.
10561
10562         * ftp.c (ftp_loop): Debugged the "enhanced" heuristics. :-)
10563
10564         * url.c (skip_url): Use toupper instead of UCASE.
10565
10566         * host.c (sufmatch): Made it case-insensitive.
10567
10568         * url.c (match_backwards_or_pattern): Fixed i == -1 to j == -1.
10569         (match_backwards): New function, instead of
10570         match_backwards_or_pattern.
10571
10572         * recur.c (recursive_retrieve): Increased performance by
10573         introducing inl, which reduces number of calls to in_slist to only
10574         one.
10575
10576         * ftp.c (ftp_loop): Enhanced the heuristics that decides which
10577         routine to use.
10578
10579         * main.c (printhelp): Removed the warranty stuff.
10580
10581 1996-07-02  Hrvoje Niksic  <hniksic@srce.hr>
10582
10583         * url.c (add_slist): Simplify.
10584         (match_backwards_or_pattern): New function.
10585         (in_acclist): Use match_backwards_or_pattern.
10586         (matches): Remove.
10587
10588 1996-06-30  Hrvoje Niksic  <hniksic@srce.hr>
10589
10590         * ftp.c (ftp_loop): Call ftp_index on empty file names, if not
10591         recursive.
10592
10593         * html.c (ftp_index): Fixed to work. Beautified the output.
10594
10595         * ftp.c (ftp_retrieve_glob): Another argument to control whether
10596         globbing is to be used.
10597         (ftp_retrieve_list): Compare the time-stamps of local and remote
10598         files to determine whether to download.
10599
10600 1996-06-29  Hrvoje Niksic  <hniksic@srce.hr>
10601
10602         * ftp.c (rel_constr): New function.
10603
10604         * retr.c (retrieve_from_file): Check for text/html before
10605         retrieving recursively.
10606
10607         * main.c (main): Check whether the file is HTML before going into
10608         recursive HTML retrieving.
10609
10610         * ftp.c (ftp_retrieve_list): Manage directories.
10611         (ftp_retrieve_glob): Pass all the file-types to ftp_retrieve_list.
10612         (ftp_1fl_loop): Fixed a bug that caused con->com to be incorrectly
10613         initialized, causing bugchecks in getftp to fail.
10614
10615         * configure.in: Check for symlink.
10616
10617         * ftp.c (ftp_retrieve_list): Added support for symlinks.
10618
10619         * version.c: "Released" 1.4b10.
10620
10621         * atotm.c (atotm): Redeclared as time_t.
10622
10623         * init.c: New variable "timestamping".
10624
10625         * main.c (main): New option 'N'.
10626
10627         * http.c (hgetlocation): Case-insensitive match.
10628         (hgetmodified): New function.
10629         (http_loop): Implement time-stamping.
10630
10631 1996-06-28  Hrvoje Niksic  <hniksic@srce.hr>
10632
10633         * version.c: Changed version to 1.4b10
10634
10635         * atotm.c: New file, from phttpd.
10636
10637         * options.h (struct options): New parameter timestamping.
10638
10639         * version.c: 1.4b9 "released".
10640
10641         * recur.c (recursive_retrieve): Used linked list (ulist) for
10642         faster storing of URLs.
10643
10644         * url.c (get_urls_html): Removed the old kludge with comparing the
10645         outputs of htmlfindurl and findurl.
10646         (get_urls_html): Added better protocol support here.
10647         (create_hash): Removed, as well as add_hash and in_hash.
10648         (addslist): New function.
10649         (in_slist): ditto
10650
10651         * version.c: Released 1.4b8, changed version to b9.
10652
10653 1996-06-27  Hrvoje Niksic  <hniksic@srce.hr>
10654
10655         * ftp.c (freefileinfo): New function.
10656         (delelement): New function.
10657
10658         * everywhere: GPL!
10659
10660         * ftp.c (ftp_loop): Use ccon.
10661         (ftp_retrieve_glob): Likewise.
10662
10663         * ftp.h: Define ccon, to define status of control connection.
10664
10665         * ftp.c (ftp_get_listing): New function.
10666         (ftp_retrieve_more): New function.
10667         (ftp_retrieve_glob): New function.
10668
10669 1996-06-25  Hrvoje Niksic  <hniksic@srce.hr>
10670
10671         * configure.in: Removed the search for cuserid().
10672
10673         * init.c (getmode): Renamed to getperms.
10674
10675 1996-06-24  Hrvoje Niksic  <hniksic@srce.hr>
10676
10677         * version.c: New version.
10678
10679         * main.c (hangup): New function, that handles hangup. Hangup
10680         signal now causes geturl to stop writing on stdout, and to write
10681         to a log file.
10682
10683         * ftp.c (getftp): "Released" 1.4b7.
10684
10685         * html.c (htmlfindurl): Ignore everything inside <head>...</head>.
10686         (ftp_index): Use fileinfo/urlinfo.
10687
10688         * ftp-unix.c (ftp_parse_ls): New function.
10689         (symperms): New function.
10690
10691         * ftp.c (ftp_1fl_loop): New function, to handle 1-file loops.
10692
10693         * retr.c (retrieve_url): Added FTP support.
10694
10695 1996-06-23  Hrvoje Niksic  <hniksic@srce.hr>
10696
10697         * geturl.h: Removed NOTFTP2HTML enum.
10698         Added DO_LOGIN, DO_CWD and DO_LIST. LIST_ONLY is obsolete.
10699
10700         * ftp.c (getftp): Resynched with urlinfo.
10701         (getftp): Removed HMTL-ization of index.html from getftp.
10702
10703         * version.c: 1.4b6 "released".
10704
10705         * options.h (options): New struct, to keep options in.
10706
10707         * http.c (http_loop,gethttp): Synched with proxy.
10708
10709         * retr.c (retrieve_url): Implemented proxy retrieval.
10710
10711         * main.c (main): Use retrieve_from_file.
10712
10713 1996-06-22  Hrvoje Niksic  <hniksic@srce.hr>
10714
10715         * retr.c (retrieve_from_file): New function.
10716
10717         * url.c (parseurl): Modified to return URLOK if all OK. Protocol
10718         can be found in u->proto.
10719
10720         * ftp.c (ftp_response): Fixed to accept multi-line responses as
10721         per RFC 959.
10722
10723         * recr.c (recursive_retrieve): Take newloc from retrieve_url.
10724
10725         * url.c (mymkdir): Removed the file of the same name, if one
10726         exists.
10727         (isfile): New function.
10728         (mkstruct): Fixed the '/' glitches.
10729         (path_simplify): Hacked to treat something/.. correctly.
10730
10731 1996-06-21  Hrvoje Niksic  <hniksic@srce.hr>
10732
10733         * http.c (gethttp): Close the socket after error in headers.
10734         (http_loop): HEOF no longer a fatal header.
10735
10736         * loop.c (retrieve_url): When dt is NULL, do not modify it. This
10737         simplifies the syntax of calling retrieve_url.
10738
10739         * recr.c (recursive_retrieve): Modified to use get_urls_html.
10740
10741         * url.c (get_urls_file): New function.
10742         (get_urls_html): New function.
10743
10744         * recr.c (recursive_retrieve): Patched up to conform to the
10745         standards.
10746
10747         * http.c (gethttp): Synched with the rest...
10748         (gethttp): Treat only CONREFUSED specially, with connection
10749         errors.
10750
10751         * init.c,geturl.1,http.c (http_loop): Removed kill_error.
10752
10753 1996-06-20  Hrvoje Niksic  <hniksic@srce.hr>
10754
10755         * http.c (http_loop): New function.
10756
10757         * loop.c: Removed *lots* of stuff from retrieve_url.
10758
10759         * url.c (parseurl): Changed to work with urlinfo. Integrated
10760         username finding and path parsing.
10761         (newurl): New function.
10762         (freeurl): New function.
10763         (mkstruct): Removed the old bogosities, made it urlinfo-compliant.
10764         (url_filename): Likewise.
10765         (path_simplify): Accept relative paths too.
10766         (opt_url): Made urlinfo-compliant, removed bogosities.
10767         (path_simplify): Expanded to accept relative paths.
10768         (str_url): A replacement for hide_url
10769         (decode_string): Fixed a bug that caused malfunctioning when
10770         encountering an illegal %.. combination.
10771         (opt_url): Removed the argument. Dot-optimizations are now default.
10772
10773         * nmalloc.c (strdupdelim): New function.
10774
10775         * url.h: Added the urlinfo structure
10776
10777 1996-06-19  Hrvoje Niksic  <hniksic@srce.hr>
10778
10779         * url.c (hide_url): Thrown out the protocol assertion. Do not
10780         change the URL if the protocol if not recognized.
10781         (findurl): Put continue instead of break.
10782
10783 1996-06-18  Hrvoje Niksic  <hniksic@srce.hr>
10784
10785         * sample.geturlrc: Changed the defaults to be commented out and
10786         harmless (previous defaults caused pains if copied to
10787         ~/.geturlrc).
10788
10789         * http.c (gethttp): Print the HTTP request in debug mode.
10790
10791         * connect.c (iread): Added EINTR check loop to select-ing
10792         too. EINTR is now correctly handled with select().
10793
10794         * TODO: new file
10795
10796 1996-05-07  Hrvoje Niksic  <hniksic@srce.hr>
10797
10798         * host.c (same_host): Made the function a little bit more
10799         intelligent regarding diversified URL syntaxes.
10800
10801         * url.c (skip_url): Spaces are now skipped after URL:
10802
10803         * Released 1.3.1 with the patch to prevent crashing when sending
10804         NULL to robot* functions and the patch to compile "out of the box"
10805         on AIX.
10806
10807         * recr.c (recursive_retrieve): Added checking whether this_url is
10808         NULL when calling the robot functions.
10809
10810         * ChangeLog: New file.