sjero.net Git - wget/blob - src/ChangeLog

   1 2008-01-25  Micah Cowan  <micah@cowan.name>
   2
   3         * main.c: Added notes to translators regarding (C), diacritics
   4         in names.
   5
   6 2007-12-10  Micah Cowan  <micah@cowan.name>
   7
   8         * main.c: The option is --content-disposition, not
   9         --no-content-disposition (at the moment).
  10
  11 2007-12-08  Hrvoje Niksic  <hniksic@xemacs.org>
  12
  13         * ftp.c (ftp_retrieve_glob): Print both arguments of fnmatch in
  14         fnmatch error message.
  15         (ftp_retrieve_glob): Don't match with fnmatch if we're only
  16         supposed to get one file.
  17
  18 2007-12-07  Micah Cowan  <micah@cowan.name>
  19
  20         * Makefile.am: Plug in vars to include stuff from
  21         $(top_srcdir)/md5 when appropriate.
  22
  23 2007-12-05  Micah Cowan  <micah@cowan.name>
  24
  25         * utils.c (subdir_p): Handle the case where d1 is "".
  26         * convert.c (convert_all_links): Don't return without
  27         deallocating timer.
  28
  29 2007-11-28  Micah Cowan  <micah@cowan.name>
  30
  31         * Makefile.am, cmpt.c, connect.c, connect.h, convert.c,
  32         convert.h, cookies.c, cookies.h, ftp-basic.c, ftp-ls.c,
  33         ftp-opie.c, ftp.c, ftp.h, gen-md5.c, gen-md5.h, gnutls.c,
  34         hash.c, hash.h, host.c, host.h, html-parse.c, html-parse.h,
  35         html-url.c, http-ntlm.c, http-ntlm.h, http.c, http.h, init.c,
  36         init.h, log.c, log.h, main.c, mswindows.c, mswindows.h,
  37         netrc.c, netrc.h, openssl.c, options.h, progress.c, progress.h,
  38         ptimer.c, ptimer.h, recur.c, recur.h, res.c, res.h, retr.c,
  39         retr.h, safe-ctype.c, safe-ctype.h, spider.c, spider.h, ssl.h,
  40         sysdep.h, test.c, test.h, url.c, url.h, utils.c, utils.h,
  41         wget.h, xmalloc.c, xmalloc.h: Updated license exception for
  42         OpenSSL, per the SFLC.
  43
  44 2007-10-30  Micah Cowan  <micah@cowan.name>
  45
  46         * main.c (main): Declare argv parameter as char **argv, rather
  47         than char *const *argv. This fixes usage of getopt_long,
  48         regardless of whether getopt_long has a constified argv or not.
  49
  50 2007-10-22  Gisle Vanem  <gvanem@broadpark.no>
  51
  52         * mswindows.c: Move INHIBIT_WRAP macro definition up with wget.h
  53         inclusion.
  54
  55 2007-10-18  Steven Schweda  <sms@antinode.org>
  56
  57         * sysdep.h: #include <stdint.h> as well as <inttypes.h>, to work
  58         around a glitch on Tru64 systems.
  59
  60 2007-10-18  Micah Cowan  <micah@cowan.name>
  61
  62         * Makefile.am: version.c should not be distributed. Removed
  63         config-post.h. Add version.c dependency and gnulib include path
  64         for libunittest.a.
  65         * sysdep.h: Got contents of config-post.h
  66         * config-post.h: Removed.
  67         * wget.h: #include "config.h".
  68         * alloca.c, cmpt.c, connect.c, convert.c, cookies.c,
  69         ftp-basic.c, ftp-ls.c, ftp-opie.c, ftp.c, gen-md5.c, gnutls.c,
  70         hash.c, host.c, html-parse.c, html-url.c, http-ntlm.c, http.c,
  71         init.c, log.c, main.c, mswindows.c, netrc.c, openssl.c,
  72         progress.c, ptimer.c, recur.c, res.c, retr.c, spider.c, url.c,
  73         utils.c, xmalloc.c: Use wget.h at very top, and instead of
  74         config.h.
  75
  76 2007-10-15  Micah Cowan  <micah@cowan.name>
  77
  78         * Makefile.am: Remove intermediary hg-id file generation, make
  79         version.c-generation more portable.
  80
  81 2007-10-14  Micah Cowan  <micah@cowan.name>
  82
  83         * cmpt.c, cookies.c, ftp-basic.c, ftp-ls.c, ftp.c, hash.c,
  84         host.c, html-parse.c, html-url.c, http-ntlm.c, http.c, init.c,
  85         log.c, main.c, netrc.c, openssl.c, res.c, url.c, utils.c,
  86         wget.h: Replace uses of ISSPACE, etc with c_isspace, etc.
  87         * gnu-md5.c, gnu-md5.h: Removed, in deference to gnulib.
  88         * Makefile.am: Removed gnu-md5.h from wget_SOURCES.
  89         * gen-md5.c: Changed #inclusion of gnu-md5.h to md5.h (gnulib's).
  90         * recur.c (download_child_p): Print error if unlink of
  91         robots.txt fails.
  92         * main.c (main): --spider or --delete-after now implies
  93         --no-directories (thanks, Josh Williams).
  94
  95 2007-10-14  Joshua David Williams  <yurimxpxman@gmail.com>
  96
  97         * recur.c (download_child_p): Remove robots.txt if
  98         --delete-after or --spider is on.
  99
 100 2007-10-13  Micah Cowan  <micah@cowan.name>
 101
 102         * Makefile.am: Make version.c depend on Wget dependencies (source
 103         files, plus such things as LIBOBJS so we get things like
 104         http-ntlm.c). Removed getopt.[ch], as we're now using gnulib for
 105         these.
 106
 107 2007-10-10  Micah Cowan  <micah@cowan.name>
 108
 109         * http-ntlm.c: Include openssl/opensslv.h explicitly, instead of
 110         hoping it'll be included by accident in openssl/des.h.
 111
 112 2007-10-09  Gisle Vanem  <gvanem@broadpark.no>
 113
 114         * mswindows.c: 'argc' and 'argv' in 'windows_main()' are no longer
 115         needed.  Hence simply the prototype. Free 'exec_name' at exit.
 116
 117 2007-10-09  Micah Cowan  <micah@cowan.name>
 118
 119         * gettext.h: Imported from /usr/share/gettext, fuller handling
 120         of --disable-nls.
 121         * wget.h: Remove logic for handling lack of NLS (now in
 122         gettext.h).
 123         * main.c: Use gettext's ENABLE_NLS rather than HAVE_NLS.
 124         * Makefile.am: added @LIBINTL@ to LIBS (though it probably
 125         belongs in LDADD, along with everything else currently assigned
 126         to LIBS).
 127
 128 2007-10-08  Micah Cowan  <micah@cowan.name>
 129
 130         * http.c (http_loop): Add send_head_first conditional back
 131         around code that needs it, but not around the last-modified
 132         header-parsing stuff this time. Removed no-longer-useful (was it
 133         ever?) restart_loop boolean, continuing unconditionally at end
 134         of send_head_first conditional block (if we haven't jumped out).
 135
 136 2007-10-04  Micah Cowan  <micah@cowan.name>
 137
 138         * http.c (http_loop): We've got_name if content_disposition
 139         support isn't on; make sure we continue properly in that case,
 140         even though we're not sending HEAD.
 141         * Makefile.in: Removed, replaced by Makefile.am.
 142         * Makefile.am: Converted from Makefile.in.
 143
 144 2007-10-02  Gisle Vanem  <gvanem@broadpark.no>
 145
 146         * ftp.c: Use "_listing" for MSDOS (".listing" is illegal).
 147
 148         * url.c: Update comment for 'filechr_not_windows'.
 149
 150         * utils.c: Include <process.h> for 'getpid()' on Watcom.
 151
 152 2007-10-02  Micah Cowan  <micah@cowan.name>
 153
 154         * ftp.c (getftp, ftp_loop_internal), http.c (http_loop), main
 155         (main): Use datetime_str instead of time_str, for those who have
 156         potentially long-running sessions. Based on suggestions by Saso
 157         Tomat <miskox@hotmail.com> and Steven M. Schweda
 158         <sms@antinode.org>.
 159         * http.c (gethttp): Warn about host lookup failures. Adjusted
 160         from Stephen Gildea's patch.
 161
 162 2007-10-02  Stephen Gildea  <stepheng+wget@gildea.com>
 163
 164         * connect.c (connect_to_host): Warn about host lookup failures.
 165
 166 2007-09-25  Micah Cowan  <micah@cowan.name>
 167
 168         * Makefile.in: Use EXEEXT instead of exeext.
 169
 170 2007-09-24  Gisle Vanem  <giva@bgnett.no>
 171
 172         * connect.c, init.c, main.c, openssl.c, options.h, sysdep.h,
 173         url.c, utils.c: Added support for building on MS-DOS.
 174
 175 2007-09-24  Jochen Roderburg  <roderburg@uni-koeln.de>
 176
 177         * http.c (http_zero): Remove no-longer-used local_size variable.
 178         Fixes bug #21057.
 179
 180 2007-09-12  Micah Cowan  <micah@cowan.name>
 181
 182         * http.c (http_loop): Remove send_head_first from condition for
 183         parsing timestamp.
 184
 185 2007-08-29  Micah Cowan  <micah@cowan.name>
 186
 187         * openssl.c (ssl_init): Re un-const-ified the meth local
 188         variable, to match current versions of openssl.
 189         * spider.c: Removed visited_url function, as it may be very
 190         inefficient.
 191         (print_broken_links): Removed traversal of referrers, until such
 192         time as a more efficient implementation can be written.
 193         * spider.h: Replaced declaration of visited_url with an
 194         empty-bodied, function-like macro.
 195
 196 2007-08-27  Gisle Vanem  <giva@bgnett.no>
 197
 198         * mswindows.c (run_with_timeout): Ensure that the correct
 199         conversion specification is used for the return result of
 200         the GetLastError function.
 201         * getopt.c: Fix missing (but, accidentally, legal) comment
 202         delimiter after licensing text.
 203         * recur.c (retrieve_tree): Inserted missing cast for strip_auth.
 204         Includes adjustment by Ralf Wildenhues.
 205         * openssl.c (ssl_init): const-ified the meth local variable.
 206         * main.c: Include all the static function definitions in the
 207         "#ifndef TESTING" clause, leaving just the definitions for
 208         exec_name (not set), and opt.
 209         * utils.c (run_with_timeout): Now returns bool, to align with
 210         declaration in utils.h.
 211
 212 2007-08-27  Micah Cowan  <micah@cowan.name>
 213
 214         * wget.h: Added macro replacement for ngettext, for environs
 215         that lack NLS.
 216
 217 2007-08-26  Micah Cowan  <micah@cowan.name>
 218
 219         * spider.c (print_broken_links): Fixed incorrect plurals msgid
 220         usage, switched to use ngettext function.
 221
 222 2007-08-24  Micah Cowan  <micah@cowan.name>
 223
 224         * http.c (http_loop): Introduced time_came_from_head boolean
 225         flag, to help avoid parsing the same Last-Modified header twice.
 226         Replaced spidering returns of RETRUNNEEDED for some situations,
 227         to RETROK, as otherwise it will be interpreted as an error.
 228         RETRUNNEEDED appears never to be referenced outside of
 229         http.c (and wget.h), and, when returned by gethttp, is
 230         translated by http_loop to RETROK.
 231         * url.c (are_urls_equal): Don't call getchar_from_escaped_string
 232         if u2 is shorter than u1.
 233         (getchar_from_escaped_string): Don't decode reserved characters.
 234         Handle illegally appearing '%'s as literal '%'s. Ensure hex
 235         digits before attempting to decode.
 236         (test_are_urls_equal): Added tests to handle u2 shorter than u1,
 237         and %2f not treated the same as /.
 238         * spider.c (in_url_list_p): Don't call are_urls_equal if one of
 239         them is NULL.
 240
 241 2007-08-23  Joshua David Williams  <yurimxpxman@gmail.com>
 242
 243         * spider.c (in_url_list_p): Removed the bool verbose argument
 244
 245 2007-08-22  Mauro Tortonesi  <mauro@ferrara.linux.it>
 246
 247         * http.c (http_loop): Fall back to GET if HEAD fails with a 500 or 501
 248         error code.
 249
 250 2007-08-21  Mauro Tortonesi  <mauro@ferrara.linux.it>
 251
 252         * http.c (http_loop): Send preliminary HEAD request if -N is given and
 253         the destination file exists already.
 254
 255 2007-08-10  Mauro Tortonesi  <mauro@ferrara.linux.it>
 256
 257         * http.c (http_loop): Fixed HTTP HEAD requests logic when --spider is
 258         given.
 259
 260 2007-08-10  Ralf Wildenhues  <Ralf.Wildenhues@gmx.de>
 261
 262         * url.c (append_uri_pathel): Do not assume dest string to be
 263         zero-terminated.
 264         (test_append_uri_pathel): Terminate string to fix test failure.
 265
 266 2007-08-09  Ralf Wildenhues  <Ralf.Wildenhues@gmx.de>
 267
 268         * url.c (url_string): Use comparison, not assignment, in
 269         check for auth_mode == URL_AUTH_HIDE_PASSWD.
 270
 271 2007-08-09  Micah Cowan  <micah@cowan.name>
 272
 273         * http.c (http_loop): If we got a HEAD and then a GET, and the
 274         GET had a timestamp, use that one, not any we may have gotten
 275         from the HEAD.
 276
 277 2007-08-08  Micah Cowan  <micah@cowan.name>
 278
 279         * init.c (defaults): Content disposition will not be default,
 280         since it currently results in extra round-trips.
 281
 282 2007-07-31  Micah Cowan  <micah@cowan.name>
 283
 284         * http.c (gethttp): Set contlen = -1 when we encounter a
 285         negative-valued Content-Length header, so we don't consider it
 286         an internal error later on and call abort().
 287
 288 2007-07-29  Micah Cowan  <micah@cowan.name>
 289
 290         * url.h, url.c (url_string): Replaced bool arg of the url_string
 291         function with enum url_auth_mode, with added option to
 292         completely remove user/pass auth information.
 293         * http.c, ftp.c, url.c, recur.c: Adapted call to url_string
 294         function to fit new usage.
 295         * recur.c (retrieve_tree): Remove auth info from Referer header.
 296
 297 2007-07-28  Micah Cowan  <micah@cowan.name>
 298
 299         * options.h, init.c, retr.c, main.c: renamed opt maxredirect
 300         field to max_redirect, for improved consistency.
 301         * init.c: changed max_redirect parser from cmd_number_inf to
 302         cmd_number, as infinite redirects may not be appropriate.
 303         Alternatively, if cmd_number_inf should be used, then
 304         opt.max_redirect's value should be checked a bit differently in
 305         retr.c, to allow for the "infinite" meaning of zero.
 306
 307 2007-07-25  Micah Cowan  <micah@cowan.name>
 308
 309         * http.c (create_authorization_line)
 310         (basic_authentication_encode, known_authentication_scheme_p)
 311         (load_cookies): Moved declarations up.
 312         (basic_authed_hosts): Added. Tracks what hosts have issued Basic
 313         challenge and been given the global username, password.
 314         (maybe_send_basic_creds): Added. Sends Basic creds for hosts that
 315         have issued Basic challenges.
 316         (register_basic_auth_host): Added. Instantiates
 317         basic_authed_hosts if necessary, then registers the host that
 318         has issued a challenge.
 319         (gethttp) <auth>: Only send authentication credentials after
 320         we've received a challenge from that host. This is a stop-gap
 321         fix until a proper fix can be implemented; still isn't quite
 322         right, as we should only be sending credentials automatically
 323         for authenticated paths and below, and not for the entire host.
 324
 325 2007-07-16  Joshua David Williams  <yurimxpxman@gmail.com>
 326
 327         * options.h: added maxredirect to options struct
 328         * init.c: added maxredirect to list of variables
 329         * retr.c (retrieve_url): replaced MAX_REDIRECTIONS with opt.maxredirect
 330         * main.c: added option --max-redirect
 331
 332 2007-07-16  Joshua David Williams  <yurimxpxman@gmail.com>
 333
 334         * test.h: tests made more verbose; now displays the name
 335         of each test run.
 336
 337 2007-07-10  Mauro Tortonesi  <mauro@ferrara.linux.it>
 338
 339         * http.c (http_loop): Fixed the HTTP requests logic. Now it skips the
 340         preliminary HEAD request if either -O or --no-content-disposition are
 341         given, and neither --spider and -N are given.
 342
 343 2007-07-05  Micah Cowan  <micah@cowan.name>
 344
 345         * cmpt.c, connect.c, connect.h, convert.c, convert.h:
 346         * cookies.c, cookies.h, ftp-basic.c, ftp.c, ftp.h, ftp-ls.c:
 347         * ftp-opie.c, gen-md5.c, gen-md5.h, getopt.c, getopt.h, gnu-md5.c:
 348         * gnu-md5.h, gnutls.c, hash.c, hash.h, host.c, host.h:
 349         * html-parse.c, html-parse.h, html-url.c, http.c, http.h:
 350         * http-ntlm.c, http-ntlm.h, init.c, init.h, log.c, log.h, main.c:
 351         * Makefile.in, mswindows.c, mswindows.h, netrc.c, netrc.h:
 352         * openssl.c, options.h, progress.c, progress.h, ptimer.c:
 353         * ptimer.h, recur.c, recur.h, res.c, res.h, retr.c, retr.h:
 354         * safe-ctype.c, safe-ctype.h, spider.c, spider.h, ssl.h, sysdep.h:
 355         * test.c, test.h, url.c, url.h, utils.c, utils.h, wget.h:
 356         * xmalloc.c, xmalloc.h:
 357         Updated GPL reference to version 3 or later, removed FSF
 358         address.
 359
 360 2007-07-04  Mauro Tortonesi  <mauro@ferrara.linux.it>
 361
 362         * http.c (http_loop): Skip HEAD request and start immediately with GET
 363         if -O is given.
 364
 365 2007-02-02  Hrvoje Niksic  <hniksic@xemacs.org>
 366
 367         * http.c (print_server_response): Escape non-printable characters
 368         in server respone.
 369
 370 2007-02-02  Hrvoje Niksic  <hniksic@xemacs.org>
 371
 372         * netrc.c: Don't make netrc_list static, as it prevents
 373         compilation with DEBUG_MALLOC.
 374
 375         * utils.c (aprintf): Don't use vasprintf when DEBUG_MALLOC is
 376         requested because, in that case, we want the calls to malloc to be
 377         coming from us.
 378
 379 2007-01-23  Hrvoje Niksic  <hniksic@xemacs.org>
 380
 381         * cookies.c (parse_set_cookie): Would erroneously discard cookies
 382         with unparsable expiry time.
 383
 384 2007-01-23  Hrvoje Niksic  <hniksic@xemacs.org>
 385
 386         * progress.c (create_image): Check for ETA overflow.
 387         (print_row_stats): Ditto.
 388
 389 2007-01-09  Mauro Tortonesi  <mauro@ferrara.linux.it>
 390
 391         * init.c (cmd_spec_prefer_family): Small fix to get rid of a gcc
 392         warning about strict-aliasing violation.
 393
 394 2007-01-09  Steven M. Schweda  <sms@antinode.org>
 395
 396         * ftp-basic.c (ftp_syst): Fixed segfault if response text is missing.
 397
 398 2006-12-29  Gisle Vanem  <giva@bgnett.no>
 399
 400         * mswindows.c: Avoid a warning if 'ws_hangup()' is unused.
 401
 402 2006-12-27  Mauro Tortonesi  <mauro@ferrara.linux.it>
 403
 404         * http.c (parse_content_disposition): Consider directory prefix, if
 405         specified.
 406
 407 2006-11-21  Hrvoje Niksic  <hniksic@xemacs.org>
 408
 409         * retr.c (retrieve_from_file): Ditto.
 410         (url_uses_proxy): New function.
 411
 412         * main.c (main): Don't check for opt.use_proxy when deciding
 413         whether to call retrieve_url or retrieve_tree; check whether the
 414         proxy would be used for *this* URL.
 415
 416 2006-10-17  Mike Grant  <mggr@pml.ac.uk>
 417
 418         * ftp.c (ftp_loop_internal): Would incorrectly skip changing
 419         working directory when retrying after a failed FTP attempt.
 420         Originally reported by Nate Eldredge.
 421
 422 2006-10-12  Mauro Tortonesi  <mauro@ferrara.linux.it>
 423
 424         * convert.c (downloaded_file): Fixed bug which used to break -E -k -K
 425         mode.
 426
 427 2006-08-28  Mauro Tortonesi  <mauro@ferrara.linux.it>
 428
 429         * http.c: #include'd spider.h to get rid of compiler warnings.
 430
 431         * main.c: Ditto.
 432
 433         * recur.c: Ditto.
 434
 435 2006-08-24  Mauro Tortonesi  <mauro@ferrara.linux.it>
 436
 437         * Makefile.in: Added spider.c to the list of files to compile and
 438         spider.h to the list of header files. Updated copyright information.
 439
 440         * http.c: Major changes to recursive spider mode. Now for every
 441         resource we are supposed to check, we send a HEAD request to find out
 442         if it exists. If the resource is a HTML file, we retrieve it and parse
 443         it to discover links to other resources.
 444
 445         * recur.c: Ditto.
 446
 447         * res.c (res_retrieve_file): Disable opt.timestamping and opt.spider
 448         when retrieving robots.txt. Updated copyright information.
 449
 450         * convert.c: Moved code tracking broken links to spider.c.
 451
 452         * convert.h: Ditto.
 453
 454         * spider.c: Created new file to keep track of visited URLs in spider
 455         mode.
 456
 457         * spider.h: Ditto.
 458
 459 2006-08-21  Mauro Tortonesi  <mauro@ferrara.linux.it>
 460
 461         * http.c: Fixed timestamping-related bug.
 462
 463 2006-08-16  Mauro Tortonesi  <mauro@ferrara.linux.it>
 464
 465         * http.c: Fixed bug which broke --continue feature. Now if -c is
 466         given, http_loop sends a HEAD request to find out the destination
 467         filename before resuming download.
 468
 469 2006-08-08  Hrvoje Niksic  <hniksic@xemacs.org>
 470
 471         * utils.c (datetime_str): Avoid code repetition with time_str.
 472
 473 2006-07-21  Hrvoje Niksic  <hniksic@xemacs.org>
 474
 475         * init.c (commands): Correctly place "contentdisposition".
 476
 477 2006-07-14  Mauro Tortonesi  <mauro@ferrara.linux.it>
 478
 479         * sysdep.h: If intptr_t isn't defined, simply typedef it to long.
 480
 481         * http.c: Added explicit cast to int in logprintf call to remove
 482         compiler warnings on 64-bit platforms.
 483
 484         * connect.c: Added a few casts to intptr_t to remove compiler warnings
 485         on 64-bit platforms.
 486
 487         * main.c: Disable -r, -p and -N when -O is used. Disable -k when -O is
 488         used and multiple URLs are given. Update maintainer information.
 489
 490         * all: Update copyright information.
 491
 492 2006-07-10  KJKHyperion  <hackbunny@reactos.com>
 493
 494         * url.c (filechr_table): Mark DEL (0x7f) as a control character
 495         and | as a character Windows can't handle.
 496
 497 2006-06-28  Mauro Tortonesi  <mauro@ferrara.linux.it>
 498
 499         * res.c: Implemented is_robots_txt_url function for detection of
 500         robots.txt URLs and related test routine.
 501
 502         * res.h: Ditto.
 503
 504         * url.c: Implemented are_urls_equal function for URL comparison and
 505         related testing routine.
 506
 507         * url.h: Ditto.
 508
 509         * convert.c: Fixes for recursive spider mode: don't consider
 510         non-existing robots.txt as a broken link, and use are_urls_equal
 511         instead of strcasecmp for referrer URLs comparison.
 512
 513         * test.c: Call tests routines for are_urls_equal and
 514         is_robots_txt_url.
 515
 516 2006-06-26  Hrvoje Niksic  <hniksic@xemacs.org>
 517
 518         * wget.h (wgint): Typedef to any 64-bit (or larger) type we can
 519         find, not necessarily off_t or long.
 520
 521 2006-06-26  Hrvoje Niksic  <hniksic@xemacs.org>
 522
 523         * cmpt.c (strtoll): Check for overflow and underflow without
 524         relying on (technically) undefined behavior.  Don't assume that
 525         strtoll_type is 64 bits wide.
 526
 527 2006-06-21  Hrvoje Niksic  <hniksic@xemacs.org>
 528
 529         * utils.c (base64_encode): Cast void pointer to char * before
 530         doing arithmetic.
 531
 532 2006-06-20  Hrvoje Niksic  <hniksic@xemacs.org>
 533
 534         * utils.c (base64_encode): Made TBL const.
 535         (base64_decode): Made the base64_char_to_value table const.
 536
 537 2006-06-19  Hrvoje Niksic  <hniksic@xemacs.org>
 538
 539         * utils.c (base64_encode): Made the DATA pointer void * so the
 540         callers can pass it any kind of pointer (including both signed and
 541         unsigned char pointers).
 542         (base64_decode): Ditto for DEST.
 543
 544 2006-06-19  Hrvoje Niksic  <hniksic@xemacs.org>
 545
 546         * utils.c (base64_encode): Would read past end of STR.
 547         Reported by rick@eckle.org.
 548
 549 2006-06-13  Mauro Tortonesi  <mauro@ferrara.linux.it>
 550
 551         * options.h (struct options): Introduced member restrict_files_case to
 552         keep track of preferences on character case restrictions for
 553         filenames.
 554
 555         * init.c: Modified defaults and cmd_spec_restrict_file_names to
 556         support character case restrictions for filenames. Added
 557         test_cmd_spec_restrict_file_names unit test.
 558
 559         * url.c: Modified append_uri_pathel to support character case
 560         restrictions for filenames. Added test_append_uri_pathel unit test.
 561
 562         * test.c: Added test_cmd_spec_restrict_file_names and
 563         test_append_uri_pathel to the list of unit tests to run.
 564
 565 2006-06-12  Mauro Tortonesi  <mauro@ferrara.linux.it>
 566
 567         * retr.c (retrieve_from_file): Use retrieve_tree and automatically
 568         turn on opt.follow_ftp in case of recursive FTP retrieval through HTTP
 569         proxy.
 570
 571         * main.c: Automatically turn on opt.follow_ftp in case of recursive
 572         FTP retrieval through HTTP proxy.
 573
 574 2006-06-12  Tony Lewis  <tlewis@exelana.com>
 575
 576         * main.c: Improved CHEN Peng's patch by proposing a simpler logic.
 577
 578 2006-06-12  CHEN Peng  <chenpeng@alumni.nus.edu.sg>
 579
 580         * main.c: Use retrieve_tree in case of recursive FTP retrieval through
 581         HTTP proxy.
 582
 583 2006-05-25  Mauro Tortonesi  <mauro@ferrara.linux.it>
 584
 585         * convert.c: Added mechanisms to keep track broken links.
 586
 587         * convert.h: Ditto.
 588
 589         * wget.h: Reordered and enumerated uerr_t constants.
 590
 591         * recur.c: Fixes to support recursive spider mode.
 592
 593         * http.c: Ditto.
 594
 595         * main.c: Print broken links in case of recursive spider mode.
 596
 597         * retr.c: Changed interface of retrieve_url.
 598
 599         * retr.h: Ditto.
 600
 601         * ftp.c: Changed interface of ftp_loop.
 602
 603         * ftp.h: Ditto.
 604
 605         * res.c: Minor change to reflect changes in interface of retrieve_url.
 606
 607 2006-05-18  Lawrence Jones  <lawrence.jones@ugs.com>
 608
 609         * ftp-ls.c (ftp_parse_unix_ls): Correct size parsing, add size
 610         and filename debugging output.
 611
 612 2006-04-28  Mauro Tortonesi  <mauro@ferrara.linux.it>
 613
 614         * http.c: If Content-Disposition header is present, allow unique
 615         filename generation unless -nc is given. Permit to disable parsing of
 616         Content-Disposition header.
 617
 618         * options.h: Added option --no-content-disposition to disable parsing
 619         of HTTP Content-Disposition header.
 620
 621         * init.c: Ditto.
 622
 623         * main.c: Ditto.
 624
 625 2006-04-11  Hrvoje Niksic  <hniksic@xemacs.org>
 626
 627         * hash.c (TOLOWER): Wrap macro arg in parentheses.
 628
 629 2006-04-08  Hrvoje Niksic  <hniksic@xemacs.org>
 630
 631         * http.c (parse_content_disposition): Doc fix.
 632
 633 2006-03-15  Mauro Tortonesi  <mauro@ferrara.linux.it>
 634
 635         * utils.c: Restricted operational semantics of frontcmp and proclist
 636         from generic strings to directory names and them to subdir_p and
 637         dir_matches_p respectively.  Applied George Ogata's one line patch to
 638         restrict algorithm of subdir_p to full directory name matching.  Added
 639         testcases for subdir_p and dir_matches_p.
 640
 641         * utils.h: Changed all frontcmp occurrences to subdir_p.
 642
 643         * recur.c: Ditto.
 644
 645         * test.c: Changed type returned by test functions from char * to const
 646         char *.  Added test_subdir_p and test_dir_matches_p to the list of
 647         tests to run.
 648
 649         * http.c (test_parse_content_disposition): Changed return type from
 650         char * to const char *.
 651
 652 2006-03-14  Mauro Tortonesi  <mauro@ferrara.linux.it>
 653
 654         * recur.c (struct queue_element): Changed type of html_allowed member
 655         to bool.
 656
 657 2006-03-09  Mauro Tortonesi  <mauro@ferrara.linux.it>
 658
 659         * ftp.c (ftp_list): Try `LIST -a' command first and revert to `LIST'
 660         in case of failure.
 661
 662 2006-03-06  Hrvoje Niksic  <hniksic@xemacs.org>
 663
 664         * hash.c (TOLOWER): Fix definition when STANDALONE.
 665         Reported by Beni Serfaty.
 666
 667 2006-03-02  Mauro Tortonesi  <mauro@ferrara.linux.it>
 668
 669         * http.c (http_loop): Fixed recursive HTTP retrieval.
 670
 671 2006-02-28  Hrvoje Niksic  <hniksic@xemacs.org>
 672
 673         * http.c (extract_param): Declare extern so it can be used from
 674         other files.
 675         (extract_param): Return error for empty name.
 676
 677 2006-02-28  Hrvoje Niksic  <hniksic@xemacs.org>
 678
 679         * url.c (find_last_char): Define in terms of memrchr.
 680
 681         * cmpt.c (memrchr): Define it on systems that don't have it.
 682
 683         * http.c (extract_param): New function for parsing header values
 684         with parameters.
 685         (parse_content_disposition): Use it.  Don't allow slashes and
 686         backslashes in the file name.
 687
 688 2006-02-27  Hrvoje Niksic  <hniksic@xemacs.org>
 689
 690         * url.c (path_simplify): Don't preserve ".." at beginning of path.
 691         Suggested by Frank McCown.
 692
 693 2006-02-25  Hrvoje Niksic  <hniksic@xemacs.org>
 694
 695         * http.c (gethttp): Only use FILE.N.html if FILE.html exists.
 696
 697 2006-02-09  Hrvoje Niksic  <hniksic@xemacs.org>
 698
 699         * mswindows.c (run_with_timeout): Made thread_hnd non-static.
 700
 701 2006-02-05  Hrvoje Niksic  <hniksic@xemacs.org>
 702
 703         * retr.c (sleep_between_retrievals): Sleep at a minimum of 1/2 of
 704         the specified wait period.
 705
 706 2006-02-03  Hrvoje Niksic  <hniksic@xemacs.org>
 707
 708         * utils.c (number_to_string): Don't use sprintf for printing
 709         WGINT_MIN; simply divide n by 10 and defer printing the last
 710         digit.
 711         (number_to_string): Removed the SPRINTF_WGINT macro.
 712
 713 2006-02-03  Mauro Tortonesi  <mauro@ferrara.linux.it>
 714
 715         * http.c: Fixed support for Content-Disposition header.
 716
 717         * test.c: Added test_parse_content_disposition to the list of unit
 718         tests to run.
 719
 720 2006-02-02  Hrvoje Niksic  <hniksic@xemacs.org>
 721
 722         * hash.c: Don't define countof if it's already defined.
 723
 724         * hash.c: Obtain the definition of uintptr_t when standalone.
 725
 726 2006-01-30  Mauro Tortonesi  <mauro@ferrara.linux.it>
 727
 728         * http.c: Changed output format. Removed excessively verbose debugging
 729         output.
 730
 731 2005-12-07  Mauro Tortonesi  <mauro@ferrara.linux.it>
 732
 733         * http.c: Fixed pre-download verbose output which was broken by
 734         HTTP code refactoring.
 735
 736 2005-11-23  Mauro Tortonesi  <mauro@ferrara.linux.it>
 737
 738         * http.c: Refactored HTTP code.  If -O is not used, the new code
 739         delays the choice of the file name where the downloaded resource
 740         will be saved until the HTTP headers have been retrieved.
 741         Added support for Content-Disposition header.
 742
 743 2005-11-19  Hrvoje Niksic  <hniksic@xemacs.org>
 744
 745         * hash.c (INVALID_PTR): Use uintptr_t instead of unsigned long.
 746         (hash_pointer): Don't assume a pointer fits in `unsigned long'.
 747
 748 2005-11-02  Mauro Tortonesi  <mauro@ferrara.linux.it>
 749
 750         * Makefile.in: Removed support for unit testing (now it is in
 751         tests/Makefile.in).
 752
 753 2005-10-27  Mauro Tortonesi  <mauro@ferrara.linux.it>
 754
 755         * Makefile.in: Added basic support for unit testing.
 756
 757         * test.c: Ditto.
 758
 759         * test.h: Ditto.
 760
 761 2005-10-13  Daniel Stenberg  <daniel@haxx.se>
 762
 763         * http-ntlm.c (ntlm_output): Fixed buffer overflow vulnerability.
 764
 765 2005-10-09  Russ Allbery  <rra@stanford.edu>
 766
 767         * snprintf.c: Remove round to round_int and pow10 to pow10_int, to
 768         avoid warnings from GCC 4.0.
 769
 770 2005-10-05  Mauro Tortonesi  <mauro@ferrara.linux.it>
 771
 772         * retr.c: Changed semantics of no_proxy_match.
 773
 774 2005-09-17  Hrvoje Niksic  <hniksic@xemacs.org>
 775
 776         * main.c (main): Don't print the summary if nothing has been downloaded.
 777
 778 2005-09-17  Hrvoje Niksic  <hniksic@xemacs.org>
 779
 780         * retr.c (retr_rate): Rename parameter from MSECS to SECS since it
 781         no longer holds milliseconds.
 782
 783 2005-09-01  Hrvoje Niksic  <hniksic@xemacs.org>
 784
 785         * progress.c: Introduce symbolic constants for "magic" values of
 786         0.2 and 0.9, REFRESH_INTERVAL and ETA_REFRESH_INTERVAL.
 787
 788 2005-08-27  Hrvoje Niksic  <hniksic@xemacs.org>
 789
 790         * cmpt.c (strtoll): Correctly handle strtoll("0x", ptr, 0) and
 791         strtoll("0x<nonhexchar>", ptr, 0) -- in both cases *ptr must be
 792         set to the position of 'x', not after it.
 793
 794 2005-08-27  Hrvoje Niksic  <hniksic@xemacs.org>
 795
 796         * hash.c (hash_table_map): Rename to hash_table_for_each and
 797         update callers.
 798         Document the meaning of the callback's return value.
 799         (hash_table_iterate): New function.
 800         (hash_table_iter_next): Likewise.
 801         Update most places that used hash_table_for_each to use the
 802         iteration, which doesn't require a temporary function with
 803         explicit state management.
 804
 805 2005-08-26  Albert Chin  <wget@mlists.thewrittenword.com>
 806
 807         * Makefile.in: Use @datadir@.  Define localedir as $(datadir)/locale.
 808
 809 2005-08-26  Jeremy Shapiro  <jnshapiro@gmail.com>
 810
 811         * openssl.c (ssl_init): Set SSL_MODE_AUTO_RETRY.
 812
 813 2005-08-23  Hrvoje Niksic  <hniksic@xemacs.org>
 814
 815         * host.c (address_list_from_ipv4_addresses): Use IP_INADDR_DATA.
 816
 817 2005-08-12  Hrvoje Niksic  <hniksic@xemacs.org>
 818
 819         * wget.h: Renamed strtoll_return to strtoll_type.
 820
 821 2005-08-11  Hrvoje Niksic  <hniksic@xemacs.org>
 822
 823         * progress.c (eta_to_human_short): Switch to days when printing
 824         more than 48h rather than 100h.  (It's not immediately apparent
 825         how many days there are in 83h.)
 826
 827 2005-08-11  Hrvoje Niksic  <hniksic@xemacs.org>
 828
 829         * cmpt.c (strtoll): Define it if missing on the system and if Wget
 830         needs it.
 831
 832         * mswindows.c (str_to_int64): Move to cmpt.c and rename to strtoll.
 833
 834 2005-08-10  Hrvoje Niksic  <hniksic@xemacs.org>
 835
 836         * host.c (print_address): Always use inet_ntop when IPv6 is
 837         enabled.
 838
 839         * host.h (ip_address): Simplify the data union.
 840
 841 2005-08-09  Hrvoje Niksic  <hniksic@xemacs.org>
 842
 843         * mswindows.c (inet_ntop): Also handle IPv4 addresses for
 844         completeness.
 845
 846 2005-08-09  Hrvoje Niksic  <hniksic@xemacs.org>
 847
 848         * http.c (gethttp): Don't read more than the amount of data
 849         specified by the content-length header.
 850
 851 2005-08-09  Vasil Dimov  <vd@datamax.bg>
 852
 853         * ftp.c (getftp): Don't free RESPLINE if ftp_response returns a
 854         status other than FTPOK.
 855
 856 2005-08-04  Giuseppe Bonacci  <g.bonacci@libero.it>
 857
 858         * ftp-ls.c (ftp_parse_unix_ls): Remember the position of the
 859         previous token instead of backtracking back to it.
 860
 861 2005-07-08  Gisle Vanem  <giva@bgnett.no>
 862
 863         * mswindows.h: Include process.h to get getpid() declaration.
 864
 865 2005-07-08  Hrvoje Niksic  <hniksic@xemacs.org>
 866
 867         * utils.c (aprintf): Use vasprintf where available.
 868
 869 2005-07-08  Hrvoje Niksic  <hniksic@xemacs.org>
 870
 871         * url.c (rewrite_shorthand_url): Simplify code using aprintf and
 872         strspn.
 873
 874 2005-07-07  Hrvoje Niksic  <hniksic@xemacs.org>
 875
 876         * gnutls.c (ssl_check_certificate): Check for the validity of the
 877         presented X509 certificate.
 878
 879 2005-07-07  Hrvoje Niksic  <hniksic@xemacs.org>
 880
 881         * openssl.c (ssl_check_certificate): Print custom error messages
 882         for frequent X509 certificate problems.
 883
 884 2005-07-07  Hrvoje Niksic  <hniksic@xemacs.org>
 885
 886         * mswindows.h: Define an alias for stat and fstat, as requested by
 887         config-compiler.h.
 888         (gai_strerror): Define to windows_strerror if NEED_GAI_STRERROR is
 889         defined.
 890
 891 2005-07-06  Hrvoje Niksic  <hniksic@xemacs.org>
 892
 893         * mswindows.h: Use strtoll where available.
 894
 895 2005-07-06  Hrvoje Niksic  <hniksic@xemacs.org>
 896
 897         * sysdep.h: Add a full declaration of fnmatch.h.
 898
 899 2005-07-06  Hrvoje Niksic  <hniksic@xemacs.org>
 900
 901         * utils.c: Unconditionally include <setjmp.h>.
 902
 903 2005-07-06  Hrvoje Niksic  <hniksic@xemacs.org>
 904
 905         * utils.c (fnmatch_nocase): New function.
 906         (proclist): Use it instead of fnmatch when opt.ignore_case is
 907         requested.
 908         (in_acclist): Respect opt.ignore_case.
 909         (frontcmp): Respect opt.ignore_case.
 910
 911         * options.h (struct options): New flag opt.ignore_case.
 912
 913 2005-07-06  Hrvoje Niksic  <hniksic@xemacs.org>
 914
 915         * ptimer.c: Measure time in seconds rather than milliseconds.
 916         Adjusted all callers.
 917
 918 2005-07-06  Hrvoje Niksic  <hniksic@xemacs.org>
 919
 920         * http.c (gethttp): When freeing MESSAGE, take into account that
 921         it can be NULL.
 922
 923 2005-07-05  Hrvoje Niksic  <hniksic@xemacs.org>
 924
 925         * cmpt.c (timegm): Handle years after 2099.
 926
 927 2005-07-05  Hrvoje Niksic  <hniksic@xemacs.org>
 928
 929         * cmpt.c (timegm): Remove unused variable.
 930
 931 2005-07-05  Hrvoje Niksic  <hniksic@xemacs.org>
 932
 933         * cmpt.c (timegm): Don't call mktime; simply count the seconds
 934         between 1970-01-01 and the specified date.
 935
 936 2005-07-05  Hrvoje Niksic  <hniksic@xemacs.org>
 937
 938         * wget.h (or): Define HAVE_SSL when either HAVE_OPENSSL or
 939         HAVE_GNUTLS are defined.
 940
 941         * gnutls.c: New file.
 942
 943 2005-07-05  Hrvoje Niksic  <hniksic@xemacs.org>
 944
 945         * http.c (gethttp): Don't print the request write error message
 946         twice.
 947
 948 2005-07-04  Hrvoje Niksic  <hniksic@xemacs.org>
 949
 950         * openssl.c (openssl_errstr): Instead of always using a large
 951         static buffer, only allocate the error string when there is an
 952         actual error.
 953
 954 2005-07-04  Hrvoje Niksic  <hniksic@xemacs.org>
 955
 956         * xmalloc.c (debugging_free): Prefix hex pointer value with "0x"
 957         when printing.
 958
 959 2005-07-04  Hrvoje Niksic  <hniksic@xemacs.org>
 960
 961         * utils.c (NEXT_BASE64_CHAR): Rename to NEXT_CHAR and simplify to
 962         get the next non-whitespace character.
 963
 964 2005-07-04  Hrvoje Niksic  <hniksic@xemacs.org>
 965
 966         * utils.c (base64_decode): Don't silently tolerate non-base64
 967         non-white-space characters in the base64 stream.
 968
 969 2005-07-04  Hrvoje Niksic  <hniksic@xemacs.org>
 970
 971         * connect.c (LAZY_RETRIEVE_INFO): Make last_tick unsigned to match
 972         transport_map_modified_tick.
 973
 974 2005-07-04  Hrvoje Niksic  <hniksic@xemacs.org>
 975
 976         * config-post.h (alloca): Updated declaration to not enumerate all
 977         Windows compilers.
 978
 979 2005-07-04  Hrvoje Niksic  <hniksic@xemacs.org>
 980
 981         * openssl.c (openssl_errstr): Separate error messages with "; ".
 982
 983 2005-07-03  Hrvoje Niksic  <hniksic@xemacs.org>
 984
 985         * ftp.c (getftp): Ditto.
 986
 987         * http.c (gethttp): Use fd_errstr.
 988
 989         * connect.c (fd_register_transport): Restructure parameters to
 990         include only a single structure that describes transport
 991         implementation.
 992
 993         * openssl.c (openssl_errstr): New function: dump SSL error strings
 994         into a static buffer and return a pointer to the buffer.
 995
 996         * connect.c (fd_errstr): New function; returns transport-specific
 997         error message, or strerror(errno) if transport doesn't supply one.
 998
 999 2005-07-03  Hrvoje Niksic  <hniksic@xemacs.org>
1000
1001         * mswindows.h: Also wrap accept() and listen().
1002
1003 2005-07-03  Hrvoje Niksic  <hniksic@xemacs.org>
1004
1005         * url.c (path_end): Skip separators appropriate for the scheme.
1006         (strpbrk_or_eos): Remove gcc-specific version, as the optimization
1007         it tried to perform no longer applies.
1008
1009 2005-07-02  Hrvoje Niksic  <hniksic@xemacs.org>
1010
1011         * host.c: Don't include "connect.h" now that we no longer have
1012         socket_has_inet6.
1013
1014 2005-07-02  Hrvoje Niksic  <hniksic@xemacs.org>
1015
1016         * host.c: Remove extraneous definition of netdb.h.
1017
1018 2005-07-02  Hrvoje Niksic  <hniksic@xemacs.org>
1019
1020         * http.c (gethttp): Skip error message body in the keep-alive
1021         case.
1022
1023 2005-07-02  Hrvoje Niksic  <hniksic@xemacs.org>
1024
1025         * url.c (url_parse): Would crash when parsing fragments.  Support
1026         fragments for FTP URLs too.
1027
1028 2005-07-02  Hrvoje Niksic  <hniksic@xemacs.org>
1029
1030         * version.c: Don't use "cvs" in version name, since we're not
1031         using CVS anymore.
1032
1033 2005-07-02  Hrvoje Niksic  <hniksic@xemacs.org>
1034
1035         * progress.c (create_image): Ditto.
1036
1037         * retr.c (retr_rate): Display smaller rate numbers with greater
1038         precision.
1039
1040 2005-07-02  Hrvoje Niksic  <hniksic@xemacs.org>
1041
1042         * http.c (response_head_terminator): Minor optimization.
1043
1044         * retr.c (fd_read_hunk): Call terminator with pointer to the start
1045         of the data and the pointer to the current data.  Changed all
1046         callers.
1047
1048 2005-07-01  Hrvoje Niksic  <hniksic@xemacs.org>
1049
1050         * url.c (url_parse): Make sure u->params is not initialized for
1051         http/https URLs.
1052         (url_parse): Don't crash on garbage following []-delimited IPv6
1053         addresses.
1054
1055 2005-07-01  Hrvoje Niksic  <hniksic@xemacs.org>
1056
1057         * main.c (print_help): Don't refer to the non-existent -nr in
1058         description of --mirror.
1059
1060 2005-06-30  Hrvoje Niksic  <hniksic@xemacs.org>
1061
1062         * host.c (pretty_print_address): Renamed to just print_address.
1063         Clarify documentation.
1064
1065 2005-06-30  Hrvoje Niksic  <hniksic@xemacs.org>
1066
1067         * http.c (gethttp): Explicitly document the different cases when
1068         generating the Host header.
1069
1070 2005-06-30  Hrvoje Niksic  <hniksic@xemacs.org>
1071
1072         * host.c (pretty_print_address): Handle error result from
1073         inet_ntop.
1074
1075 2005-06-30  Gisle Vanem  <giva@bgnett.no>
1076
1077         * mswindows.c (inet_ntop): New function.  Print IPv6 addresses
1078         using WSAAddressToString.
1079
1080 2005-06-27  Hrvoje Niksic  <hniksic@xemacs.org>
1081
1082         * progress.c (dot_update): Remove unused variable row_qty.
1083
1084 2005-06-29  Hrvoje Niksic  <hniksic@xemacs.org>
1085
1086         * main.c: Check for both SIGHUP and SIGUSR1 before using them.
1087
1088 2005-06-29  Hrvoje Niksic  <hniksic@xemacs.org>
1089
1090         * utils.c: Unconditionally include locale.h.
1091
1092 2005-06-29  Hrvoje Niksic  <hniksic@xemacs.org>
1093
1094         * ptimer.c: Include sys/time.h to get struct timeval.
1095
1096 2005-06-29  Hrvoje Niksic  <hniksic@xemacs.org>
1097
1098         * wget.h: Remove obsolete definition of with_thousand_seps_sum.
1099
1100 2005-06-29  Hrvoje Niksic  <hniksic@xemacs.org>
1101
1102         * gnu-md5.h: Unconditionally include limits.h.
1103
1104 2005-06-29  Hrvoje Niksic  <hniksic@xemacs.org>
1105
1106         * utils.c (random_number): Use lrand48 if available.
1107         (random_float): Use drand48 if available.
1108
1109 2005-06-29  Hrvoje Niksic  <hniksic@xemacs.org>
1110
1111         * main.c (secs_to_human_time): Use print_decimal when printing
1112         total download time in seconds.
1113
1114         * progress.c (print_row_stats): Use it to print total download
1115         time at the end of the download.
1116         (create_image): Ditto.
1117
1118         * utils.c (print_decimal): New function; print small decimal
1119         numbers with more precision than large ones.
1120
1121         * progress.c (print_row_stats): New function.  Print ETA after the
1122         download rate at the end of each row.
1123
1124 2005-06-28  Hrvoje Niksic  <hniksic@xemacs.org>
1125
1126         * init.c (parse_line): Check for alphanumerics.
1127
1128 2005-06-28  Hrvoje Niksic  <hniksic@xemacs.org>
1129
1130         * (dot_create): Remove unnecessary casts.
1131
1132 2005-06-28  Hrvoje Niksic  <hniksic@xemacs.org>
1133
1134         * ftp.c (getftp): Delete trailing newlines from LIST output so
1135         lines don't come out with trailing \015\012 with -S.
1136
1137 2005-06-27  Hrvoje Niksic  <hniksic@xemacs.org>
1138
1139         * mswindows.h: Remove superfluous includes.
1140
1141 2005-06-27  Hrvoje Niksic  <hniksic@xemacs.org>
1142
1143         * config-post.h (alloca): Amend alloca declaration to take care of
1144         all Win32 compilers, not just MSVC and MinGW.
1145
1146 2005-06-27  Hrvoje Niksic  <hniksic@xemacs.org>
1147
1148         * utils.c (get_grouping_data): Force separator to "." rather than
1149         " " when "," is taken.
1150
1151 2005-06-27  Hrvoje Niksic  <hniksic@xemacs.org>
1152
1153         * wget.h (PTR_FORMAT): Cast the result of sizeof to int before
1154         passing it to printf's %*.
1155
1156         * retr.h: Declare output_stream and output_stream_regular.
1157
1158         * ftp.h: Declare ftp_last_respline.
1159
1160         * convert.h: Declare dl_url_file_map.
1161
1162         * http.h: New file.
1163
1164 2005-06-27  Hrvoje Niksic  <hniksic@xemacs.org>
1165
1166         * cookies.c: Make cookies_now static.
1167
1168 2005-06-27  Hrvoje Niksic  <hniksic@xemacs.org>
1169
1170         * utils.c (human_readable): Remove intermediary cast to long; MSVC
1171         has problems casting *unsigned* __int64 to double.
1172
1173 2005-06-27  Hrvoje Niksic  <hniksic@xemacs.org>
1174
1175         * sysdep.h: Use the system-provided fnmatch by default.
1176
1177 2005-06-27  Hrvoje Niksic  <hniksic@xemacs.org>
1178
1179         * http.c (mktime_from_utc): Renamed to timegm and moved to cmpt.c.
1180         Don't compile it if GNU timegm is available.
1181         (http_atotm): Use timegm.
1182
1183 2005-06-27  Hrvoje Niksic  <hniksic@xemacs.org>
1184
1185         * http.c (http_atotm): Correctly query the old locale value.
1186
1187 2005-06-27  Hrvoje Niksic  <hniksic@xemacs.org>
1188
1189         * config-post.h (alloca): Don't #define alloca under MinGW32,
1190         which defines it in malloc.h, included from mswindows.h.
1191
1192 2005-06-27  Hrvoje Niksic  <hniksic@xemacs.org>
1193
1194         * utils.c (get_grouping_data): Force the use of separators in C
1195         locale.
1196
1197 2005-06-27  Hrvoje Niksic  <hniksic@xemacs.org>
1198
1199         * main.c (i18n_initialize): Set all locale categories.
1200
1201         * http.c (http_atotm): Temporarily set locale to "C".
1202
1203 2005-06-27  Hrvoje Niksic  <hniksic@xemacs.org>
1204
1205         * http.c (gethttp): Improve "POST data file missing" error
1206         message.
1207
1208 2005-06-27  Hrvoje Niksic  <hniksic@xemacs.org>
1209
1210         * progress.c (set_progress_implementation): Type COLON as const
1211         char *.
1212
1213 2005-06-27  Hrvoje Niksic  <hniksic@xemacs.org>
1214
1215         * utils.c (with_thousand_seps): Handle negative numbers.
1216
1217 2005-06-26  Hrvoje Niksic  <hniksic@xemacs.org>
1218
1219         * progress.c (create_image): Mark the "eta" string for translation.
1220
1221 2005-06-26  Hrvoje Niksic  <hniksic@xemacs.org>
1222
1223         * html-url.c (get_urls_file): Don't explicitly set entry->next to
1224         NULL since entry is already zeroed out.
1225
1226 2005-06-26  Gisle Vanem  <giva@bgnett.no>
1227
1228         * mswindows.h: Define gai_strerror under MinGW.
1229
1230 2005-06-26  Hrvoje Niksic  <hniksic@xemacs.org>
1231
1232         * utils.c (with_thousand_seps): Correctly implement thousand seps
1233         consisting of more than one character.
1234
1235 2005-06-26  Hrvoje Niksic  <hniksic@xemacs.org>
1236
1237         * main.c (secs_to_human_time): Ditto.
1238
1239         * progress.c (create_image): Print more exact duration of very
1240         short downloads.
1241
1242         * main.c (secs_to_human_time): Don't translate time suffixes "h",
1243         "m", and "s", which are not strictly SI, but are "accepted for use
1244         with SI".
1245         (secs_to_human_time): Print really small intervals as 0s, not
1246         0.00s.
1247
1248 2005-06-26  Hrvoje Niksic  <hniksic@xemacs.org>
1249
1250         * config-post.h: Replace the alloca declaration with the one from
1251         the latest Autoconf manual.  This should remove a warning with GCC
1252         on AIX.
1253
1254 2005-06-26  Hrvoje Niksic  <hniksic@xemacs.org>
1255
1256         * ftp.c (getftp): Always invoke SIZE, not only when continuing a
1257         download.
1258
1259         * main.c (main): Ditto here.
1260
1261         * progress.c (create_image): When the download is finished, print
1262         how long it took.
1263
1264 2005-06-26  Hrvoje Niksic  <hniksic@xemacs.org>
1265
1266         * main.c (main): Print the downloaded and quota amounts with the
1267         "human_readable" function.
1268
1269         * ftp.c (print_length): Ditto.
1270
1271         * http.c (gethttp): Don't display thousand separators.
1272
1273         * utils.c (with_thousand_seps): Rewritten to respect locale
1274         settings and to be type size agnostic.
1275
1276 2005-06-25  Hrvoje Niksic  <hniksic@xemacs.org>
1277
1278         * utils.c (human_readable): Divide with 1024 instead of shifting
1279         so the operation can work with non-integer N.
1280
1281 2005-06-25  Hrvoje Niksic  <hniksic@xemacs.org>
1282
1283         * progress.c (eta_to_human): New logic for more human-readable
1284         ETA.
1285
1286 2005-06-25  Hrvoje Niksic  <hniksic@xemacs.org>
1287
1288         * utils.c (with_thousand_seps_sum): Decrease buffer size so it
1289         cannot overrun add_thousand_seps's buffer.
1290
1291 2005-06-25  Hrvoje Niksic  <hniksic@xemacs.org>
1292
1293         * utils.c (SPRINTF_WGINT): The correct format is %I64d, not just
1294         %I64.
1295
1296 2005-06-25  Hrvoje Niksic  <hniksic@xemacs.org>
1297
1298         * http.c (http_loop): Don't warn about wildcards in HTTP URLs if
1299         globbing isn't requested in the first place.
1300
1301         * retr.c (retrieve_url): Temporarily turn off globbing when
1302         processing HTTP->FTP redirects.
1303
1304 2005-06-25  Hrvoje Niksic  <hniksic@xemacs.org>
1305
1306         * utils.c (with_thousand_seps_sum): Now defined only if
1307         SUM_SIZE_INT is double.
1308
1309         * wget.h (SUM_SIZE_INT): Instead of bothering with long, long
1310         long, __int64, and friends, simply either use wgint or double, end
1311         of story.  Since we know how to print either, we no longer need
1312         LARGE_INT_FMT.
1313
1314         * sysdeps.h (LARGE_INT): Renamed to SUM_SIZE_INT to better reflect
1315         its intent, and moved to wget.h.
1316
1317 2005-06-25  Hrvoje Niksic  <hniksic@xemacs.org>
1318
1319         * Makefile.in: No need to clean .libs.
1320
1321 2005-06-25  Hrvoje Niksic  <hniksic@xemacs.org>
1322
1323         * cookies.c (parse_set_cookies): Cast pointer subtraction to int
1324         before using it with %d; AIX compiler warns on this.
1325         Reported by Jens Schleusener.
1326
1327 2005-06-24  Hrvoje Niksic  <hniksic@xemacs.org>
1328
1329         * http.c (gethttp): Don't prepend / here.
1330
1331         * cookies.c (cookie_handle_set_cookie): Prepend / to PATH.
1332         (cookie_header): Ditto.
1333
1334 2005-06-24  Hrvoje Niksic  <hniksic@xemacs.org>
1335
1336         * init.c: opt.verbose must be declared as int.
1337
1338 2005-06-23  Hrvoje Niksic  <hniksic@xemacs.org>
1339
1340         * cmpt.c (strpbrk): Removed.
1341         (mktime): Removed.
1342         Include <time.h>.
1343
1344 2005-06-23  Hrvoje Niksic  <hniksic@xemacs.org>
1345
1346         * utils.c (read_file): Ditto.
1347
1348         * main.c (main): Use struct_fstat.
1349
1350         * mswindows.h (struct_fstat): Define a struct_fstat to deal with
1351         the fact that Borland 5.5 has 64-bit stat, but not 64-bit fstat!
1352
1353 2005-06-23  Hrvoje Niksic  <hniksic@xemacs.org>
1354
1355         * sysdep.h: Remove code that deals with Watcom.
1356
1357 2005-06-22  Hrvoje Niksic  <hniksic@xemacs.org>
1358
1359         * all: Use bool instead of int and false/true instead of 0/non-0
1360         for boolean variables and values.
1361
1362 2005-06-22  Hrvoje Niksic  <hniksic@xemacs.org>
1363
1364         * sysdep.h: Include the stdbool.h/_Bool/bool blurb from Autoconf.
1365
1366 2005-06-22  Hrvoje Niksic  <hniksic@xemacs.org>
1367
1368         * init.c (cmd_lockable_boolean): Removed.
1369
1370 2005-06-22  Hrvoje Niksic  <hniksic@xemacs.org>
1371
1372         * cookies.c (struct cookie): Use 1-bit bitfields for booleans
1373         which makes the structure takes less space at no cost in
1374         complexity.
1375
1376 2005-06-22  Hrvoje Niksic  <hniksic@xemacs.org>
1377
1378         * Makefile.in ($(OBJ)): Add the config.h dependency.
1379
1380 2005-06-22  Hrvoje Niksic  <hniksic@xemacs.org>
1381
1382         * openssl.c, connect.c, host.c: Replace instances of #ifdef
1383         ENABLE_DEBUG if (opt.debug) {...} #endif with IF_DEBUG {...}.
1384
1385         * main.c: Rename the IF_DEBUG defined here to WHEN_DEBUG.
1386
1387         * wget.h (IF_DEBUG): New macro.
1388         (DEBUGP): Define in terms of IF_DEBUG.
1389
1390 2005-06-22  Hrvoje Niksic  <hniksic@xemacs.org>
1391
1392         * http.c (gethttp): Only handle --set-cookies (and assert that
1393         cookie jar exists) if opt.cookies is true.  Failure to do so
1394         triggered the assert when --no-cookies was used and the server
1395         sent a Set-Cookie header.  Ouch!
1396
1397 2005-06-22  Hrvoje Niksic  <hniksic@xemacs.org>
1398
1399         * connect.c (select_fd): Expect select() to exist.
1400
1401         * utils.c (xsleep): Always use select() as sleep fallback on
1402         non-Windows platforms.
1403
1404         * ptimer.c: Delete the implementation of PTIMER_TIME.
1405
1406         * main.c: Assume existence of signal(), test for different signal
1407         names instead.
1408
1409         * cmpt.c: Better document reasons why certain functions are
1410         included.
1411
1412 2005-06-22  Hrvoje Niksic  <hniksic@xemacs.org>
1413
1414         * Makefile.in: Remove the manually maintained dependency list;
1415         make all object files depend on every header.
1416
1417 2005-06-20  Hrvoje Niksic  <hniksic@xemacs.org>
1418
1419         * hash.c: Rename "mapping" to "cell" to avoid confusion with the
1420         term "mapping" (or "map") sometimes being used for the entire hash
1421         table.  Also rename "non-empty" to "occupied" for easier reading
1422         of if (!NON_EMPTY (...)) ... .
1423
1424 2005-06-20  Hrvoje Niksic  <hniksic@xemacs.org>
1425
1426         * main.c, ptimer.c, sysdep.h, utils.c: Use #elif to simplify reading of
1427         chained if-else-else-else-... statements.
1428
1429 2005-06-20  Hrvoje Niksic  <hniksic@xemacs.org>
1430
1431         * all: Return type of signal handlers is `void'.  Include signal.h
1432         unconditionally.
1433
1434         * all: Don't explicitly cast values returned by malloc.  We no
1435         longer support ancient compilers that don't declare malloc, and we
1436         never supported C++ builds.
1437
1438 2005-06-19  Hrvoje Niksic  <hniksic@xemacs.org>
1439
1440         * all: Don't declare errno.  Include both time.h and sys/time.h,
1441         as long as sys/time.h exists.  Don't dereference function pointers
1442         when invoking the functions they point to.
1443
1444         * cmpt.c (memmove): Remove function mandated by C89.
1445         (strerror): Ditto.
1446         (strstr): Ditto.
1447
1448         * all: Undo the K&R-ization changes from 2005-05-03.
1449
1450         * all: Remove support for K&R compilers: use C89 function
1451         declarations, remove definition of PARAMS, remove support for
1452         varargs, and remove ansi2knr.  Assume the presence of time.h,
1453         string.h, and other headers mandated by C89.
1454
1455 2005-06-19  Hrvoje Niksic  <hniksic@xemacs.org>
1456
1457         * init.c (cmd_lockable_boolean): Don't recognize literal "2" and
1458         "-1" values; unlike 0 and 1, those should never be exposed to the
1459         user.  Update the error message to be more self-consistent, as
1460         proposed by Benno Schulenberg.
1461
1462 2005-06-18  Hrvoje Niksic  <hniksic@xemacs.org>
1463
1464         * http.c (gethttp): Don't free "head" before using it to save
1465         headers.
1466
1467 2005-06-18  Hrvoje Niksic  <hniksic@xemacs.org>
1468
1469         * http.c (gethttp): When -E is in use, check for file existence
1470         after appending ".html" to the name and modify the file name if
1471         necessary.
1472
1473 2005-06-17  Hrvoje Niksic  <hniksic@xemacs.org>
1474
1475         * connect.c (socket_has_inet6): Removed.
1476
1477         * host.c (lookup_host): Don't use the AI_ADDRCONFIG getaddrinfo
1478         hint.
1479
1480 2005-06-16  Hrvoje Niksic  <hniksic@xemacs.org>
1481
1482         * init.c (cmd_lockable_boolean): Improve the error message so it
1483         lists the more useful values first.
1484
1485 2005-06-15  Hrvoje Niksic  <hniksic@xemacs.org>
1486
1487         * http.c (gethttp): Also report the system error when the POST
1488         data file is missing.
1489
1490 2005-06-15  Benno Schulenberg  <benno@nietvergeten.nl>
1491
1492         * ftp.c, http.c, connect.c, cookies.c, html-url.c, init.c, res.c:
1493         Gettext-ize messages that were previously missed.
1494
1495 2005-06-15  Hrvoje Niksic  <hniksic@xemacs.org>
1496
1497         * host.h (ip_address): Remove the trailing comma from the type
1498         enum in the no-IPv6 case.
1499
1500         * main.c (struct cmdline_option): Remove the trailing comma from
1501         the enum.
1502
1503         Reported by Jens Schleusener.
1504
1505 2005-05-30  Hrvoje Niksic  <hniksic@xemacs.org>
1506
1507         * url.c (strpbrk_or_eos): Check for a recent GCC version before
1508         using the statement-as-expression extension.
1509
1510 2005-05-30  Hrvoje Niksic  <hniksic@xemacs.org>
1511
1512         * http.c (gethttp): Don't attempt to "skip short body" if we're
1513         issuing a HEAD request (in which case the response head is not
1514         followed by a body).
1515
1516 2005-05-30  Hrvoje Niksic  <hniksic@xemacs.org>
1517
1518         * init.c (cmd_spec_header): Don't split the string along the
1519         commas using cmd_vector; just append the new value using
1520         vec_append instead.
1521
1522         * utils.c (vec_append): New function.
1523
1524 2005-05-27  Andreas Beckmann  <debian@abeckmann.de>
1525
1526         * html-url.c (tag_handle_link): Mark the content from the <link
1527         src="..."> tag as expecting HTML.
1528
1529 2005-05-24  Hrvoje Niksic  <hniksic@xemacs.org>
1530
1531         * http.c (http_atotm): Document the origin of the "cookie date"
1532         format.
1533
1534 2005-05-21  Hrvoje Niksic  <hniksic@xemacs.org>
1535
1536         * init.c (setval_internal): Report exact command name alongside
1537         the "display name".
1538
1539 2005-05-18  Hrvoje Niksic  <hniksic@xemacs.org>
1540
1541         * cookies.c (update_cookie_field): Explicitly cast -1 to time_t to
1542         cope with systems where time_t is unsigned.
1543
1544         * cookies.c: Remove unnecessary casts to time_t from values
1545         already of that type.
1546
1547 2005-05-17  Hrvoje Niksic  <hniksic@xemacs.org>
1548
1549         * ftp.c (ftp_loop_internal): Same here.
1550
1551         * http.c (http_loop): Don't clobber the file when -c is specified
1552         and the first attempt to retrieve the file fails.
1553
1554 2005-05-16  Hrvoje Niksic  <hniksic@xemacs.org>
1555
1556         * openssl.c (ssl_check_certificate): Print all issues with a
1557         certificate.
1558
1559 2005-05-16  Hrvoje Niksic  <hniksic@xemacs.org>
1560
1561         * ftp-basic.c: Don't xfree() the line returned by ftp_response if
1562         the returned code is not FTPOK.
1563
1564 2005-05-16  Hrvoje Niksic  <hniksic@xemacs.org>
1565
1566         * init.c (cleanup): Don't free the non-existent opt.ftp_acc.  Free
1567         the SSL-related stuff.
1568
1569 2005-05-16  Hrvoje Niksic  <hniksic@xemacs.org>
1570
1571         * ftp.c (print_length): Consistently print \n at end of the
1572         "Length" line.
1573
1574 2005-05-14  Hrvoje Niksic  <hniksic@xemacs.org>
1575
1576         * openssl.c (ssl_connect): Announce the beginning and the end of
1577         the SSL handshake when in debug mode.
1578
1579         * wget.h (PTR_FORMAT): New macro for easier printing of pointer
1580         values.  Use %0*lx along with PTR_FORMAT instead of %p.
1581
1582 2005-05-14  Hrvoje Niksic  <hniksic@xemacs.org>
1583
1584         * http.c (gethttp): Would forget to close the connection when
1585         keep_alive was not used.
1586
1587 2005-05-13  Hrvoje Niksic  <hniksic@xemacs.org>
1588
1589         * openssl.c (pattern_match): Document the code that decides
1590         whether "*" matches ".".
1591
1592 2005-05-12  Hrvoje Niksic  <hniksic@xemacs.org>
1593
1594         * ftp-ls.c (ftp_index): Use %d to print the port number, which is
1595         now int.
1596         From Steven M. Schweda's VMS patches.
1597
1598 2005-05-12  Hrvoje Niksic  <hniksic@xemacs.org>
1599
1600         * url.c (rewrite_shorthand_url): Don't rewrite "https://host" to
1601         "ftp://https//host" when SSL is not used.
1602
1603 2005-05-11  Hrvoje Niksic  <hniksic@xemacs.org>
1604
1605         * openssl.c (ssl_check_server_identity): Renamed to
1606         ssl_check_certificate because it does more than just checking the
1607         server's identity.
1608         (ssl_check_certificate): Tell the user about
1609         --no-check-certificate.
1610
1611 2005-05-11  Hrvoje Niksic  <hniksic@xemacs.org>
1612
1613         * openssl.c (ssl_init): Always use SSL_VERIFY_NONE, so that the
1614         handshake finishes even if the certificate is invalid.  That way
1615         ssl_check_server_identity can provide better diagnostics on why
1616         the verification failed.
1617
1618 2005-05-11  Hrvoje Niksic  <hniksic@xemacs.org>
1619
1620         * openssl.c (pattern_match): New function.
1621         (ssl_check_server_identity): Treat peer certificate common name as
1622         wildcard.
1623
1624 2005-05-10  Hrvoje Niksic  <hniksic@xemacs.org>
1625
1626         * openssl.c (ssl_check_server_identity): Print certificate subject
1627         and issuer.
1628
1629 2005-05-10  Hrvoje Niksic  <hniksic@xemacs.org>
1630
1631         * res.c (res_register_specs): Correctly pass pointers to
1632         hash_table_get_pair.
1633
1634 2005-05-10  Hrvoje Niksic  <hniksic@xemacs.org>
1635
1636         * http.c (gethttp): Call ssl_check_server_identity.
1637
1638         * openssl.c (ssl_check_server_identity): New function, verifies
1639         that the host name in the certificate matches the actual host
1640         name.
1641         (verify_cert_callback): Removed, since it didn't do anything
1642         except returning the preverify_ok argument.
1643
1644         * connect.c (fd_transport_context): Allow retrieval of the context
1645         pointer registered with fd_register_transport.
1646
1647 2005-05-09  Hrvoje Niksic  <hniksic@xemacs.org>
1648
1649         * openssl.c (verify_cert_callback): Renamed from verify_callback.
1650         Always return the received "ok" value.  Print the X509 name in
1651         debug mode.
1652         (ssl_init): Enable partial writes in SSL context.
1653
1654 2005-05-08  Hrvoje Niksic  <hniksic@xemacs.org>
1655
1656         * http.c (http_loop): Check for wildcards in the URL path
1657         component, not in the whole URL.
1658
1659         * ftp.c (ftp_loop): Check for wildcards in URL path before
1660         unescaping, so the users can escape globbing metacharacters with %
1661         escapes.
1662
1663 2005-05-08  Hrvoje Niksic  <hniksic@xemacs.org>
1664
1665         * init.c (run_command): Correctly interpret the return value of
1666         parse_line.
1667         (commands): Re-alphabetize.
1668
1669 2005-05-08  Hrvoje Niksic  <hniksic@xemacs.org>
1670
1671         * netrc.c (parse_netrc): Explicitly check for assignment != NULL
1672         to silence warning from Borland C.
1673
1674         * url.c (sync_path): Don't unnecessarily increment p.
1675         (url_parse): Don't unnecessarily set url_encode to NULL just
1676         prior to return from the function.
1677
1678 2005-05-08  Hrvoje Niksic  <hniksic@xemacs.org>
1679
1680         * log.c (escnonprint_internal): Place variable declarations
1681         before other statements.
1682
1683 2005-05-08  Hrvoje Niksic  <hniksic@xemacs.org>
1684
1685         * html-url.c: Include recur.h.
1686
1687         * http.c (request_new): Define as accepting no args.
1688
1689 2005-05-07  Hrvoje Niksic  <hniksic@xemacs.org>
1690
1691         * url.c (strpbrk_or_eos): Made inline.  Use strchr(s, '\0') for
1692         finding the NUL char position.
1693
1694 2005-05-07  Hrvoje Niksic  <hniksic@xemacs.org>
1695
1696         * url.c (decide_copy_method): Renamed to char_needs_escaping.
1697         Since it now returns only two possible values, change it to return
1698         boolean (int).
1699
1700 2005-05-07  Hrvoje Niksic  <hniksic@xemacs.org>
1701
1702         * ftp-basic.c (ftp_request): Prevent newlines in VALUE causing
1703         inadvertent sending of multiple FTP commands.
1704
1705 2005-05-07  Hrvoje Niksic  <hniksic@xemacs.org>
1706
1707         * url.c (decide_copy_method): Never cause reencode_escapes to
1708         decode % escapes; it is too intrusive and breaks some servers.
1709
1710 2005-05-07  Hrvoje Niksic  <hniksic@xemacs.org>
1711
1712         * http.c (gethttp): When tunnelling SSL traffic over proxy with
1713         CONNECT, we're really talking to the remote server directly.
1714         Because of this, the request-line argument must be the URL path
1715         rather than the whole URL, as it would be when using regular
1716         proxies.
1717         Reported by Charles Lane.
1718
1719 2005-05-06  Hrvoje Niksic  <hniksic@xemacs.org>
1720
1721         * init.c (cmd_spec_useragent): Allow empty User-Agent.
1722
1723         * http.c (gethttp): Don't print "unknown authentication scheme"
1724         for failed Basic authentication.
1725         (SET_USER_AGENT): Don't set user-agent if opt.useragent is empty.
1726         (gethttp): Use alloca for allocation of www_authenticate.
1727
1728 2005-05-06  Hrvoje Niksic  <hniksic@xemacs.org>
1729
1730         * main.c (print_help): Fix wording of --secure-protocol help text.
1731
1732 2005-05-06  Hrvoje Niksic  <hniksic@xemacs.org>
1733
1734         * cmpt.c (strstr): Updated from glibc 2.3.5.
1735
1736 2005-05-05  Hrvoje Niksic  <hniksic@xemacs.org>
1737
1738         * http.c (http_atotm): Zero out the whole struct tm being passed
1739         to strptime.
1740
1741 2005-05-05  Hrvoje Niksic  <hniksic@xemacs.org>
1742
1743         * main.c (main): Propagate option name to setoptval.
1744
1745         * init.c (setoptval): Accept another argument, OPTNAME.  Propagate
1746         that argument as the option name independently of the actual
1747         command, determined by command_by_name(com).
1748
1749 2005-05-05  Hrvoje Niksic  <hniksic@xemacs.org>
1750
1751         * init.c (parse_line): Make the return value indicate whether
1752         there was a syntax error or a setter failed.
1753         (run_wgetrc): Return an indication on whether an error has been
1754         encountered.
1755         (initialize): Abort if there have been errors running either
1756         .wgetrc file.
1757
1758 2005-05-05  Hrvoje Niksic  <hniksic@xemacs.org>
1759
1760         * log.c (copy_and_escape): Slightly reduce code repetition between
1761         the two loops.
1762
1763 2005-05-05  Charles C.Fu  <ccwf@bacchus.com>
1764
1765         * utils.c (proclist): Strip leading slash when calling fnmatch
1766         too, otherwise wildcard comparisons always fail.
1767
1768 2005-05-05  Hrvoje Niksic  <hniksic@xemacs.org>
1769
1770         * utils.c (touch): Set access time to current time.
1771
1772 2005-05-05  Hrvoje Niksic  <hniksic@xemacs.org>
1773
1774         * url.c (url_unescape): Don't unescape %00, it effectively
1775         truncates the string.
1776
1777 2005-05-05  Hrvoje Niksic  <hniksic@xemacs.org>
1778
1779         * log.c (copy_and_escape): Replace the FOR_URI argument with a
1780         slightly more general mechanism for specifying different kinds of
1781         escape.
1782
1783 2005-05-05  Hrvoje Niksic  <hniksic@xemacs.org>
1784
1785         * ftp-basic.c (ftp_response): Fix printing FTP server response.
1786
1787 2005-05-05  Hrvoje Niksic  <hniksic@xemacs.org>
1788
1789         * retr.c (limit_bandwidth_reset): Reset sleep_adjust.
1790         (limit_bandwidth): Don't allow huge "adjustment" values that
1791         result from being suspended for a while.
1792
1793 2005-05-04  Hrvoje Niksic  <hniksic@xemacs.org>
1794
1795         * wget.h: If gettext was found but libtintl.h wasn't, declare
1796         gettext's return type to avoid type mismatches.
1797
1798 2005-05-03  Hrvoje Niksic  <hniksic@xemacs.org>
1799
1800         * url.c (url_parse): Rename label `error' to avoid conflict with
1801         identifier.
1802
1803         * retr.c (fd_read_body): Rename label `out' to avoid conflict with
1804         identifier.
1805         (fd_read_hunk): Use explicit double constant.
1806         (retrieve_from_file): Don't use string concatenation.
1807         (sleep_between_retrievals): Make sure xsleep is called with a
1808         `double' argument.
1809         (no_proxy_match): Define as static, like it is declared.
1810
1811         * progress.c (bar_create): Use 0.0 instead of 0 because K&R
1812         compilers can't automatically promote it.
1813
1814         * http-ntlm.c (ntlm_output): Replace \xHH sequences with \OOO for
1815         the sake of old compilers.
1816
1817         * ftp.c (ftp_loop_internal): Don't use string concatenation.
1818
1819         * http.c (request_send): Use explicit double constants when
1820         calling fd_read and fd_write.
1821         (post_file): Ditto.
1822         (gethttp): Ditto.
1823         (skip_short_body): Ditto.
1824
1825         * ftp-basic.c: When calling fd_write, specify the last argument as
1826         a `double' constant for the sake of K&R compilers which don't see
1827         the prototype and therefore can't promote it to double
1828         automatically.
1829
1830         * cookies.c (cookie_jar_load): Rename abort label to abort_cookie
1831         to avoid name conflict in K&R compilers.
1832
1833 2005-04-29  Hrvoje Niksic  <hniksic@xemacs.org>
1834
1835         * ptimer.c (posix_init): Since we allow _POSIX_MONOTONIC_CLOCK==0,
1836         it is not enough to check for _POSIX_MONOTONIC_CLOCK-0, we must
1837         also check for defined(_POSIX_MONOTONIC_CLOCK).
1838
1839 2005-04-28  Hrvoje Niksic  <hniksic@xemacs.org>
1840
1841         * ftp.c, hash.c, connect.c, host.c, http.c: Remove unreached code,
1842         such as "break" following return or abort.
1843
1844 2005-04-28  Hrvoje Niksic  <hniksic@xemacs.org>
1845
1846         * init.c (commands): Wrap the use of opt.random_file in #ifdef
1847         HAVE_SSL.
1848
1849 2005-04-28  Hrvoje Niksic  <hniksic@xemacs.org>
1850
1851         * http.c (gethttp): Correctly set the user agent.
1852
1853 2005-04-27  Hrvoje Niksic  <hniksic@xemacs.org>
1854
1855         * init.c (cmd_spec_useragent): Free the old value of
1856         opt.useragent before setting the new one.
1857
1858 2005-04-27  Mauro Tortonesi  <mauro@ferrara.linux.it>
1859
1860         * main.c: Map --ftp-password, --http-password and --proxy-password to
1861         the new ftppassword, httppassword and proxypassword commands
1862         respectively.  Document the --user and --password options in the help
1863         string.
1864
1865 2005-04-27  Mauro Tortonesi  <mauro@ferrara.linux.it>
1866
1867         * ftp.c: Add support for --user and --password.
1868
1869         * http.c: Add support for --user and --password.
1870
1871         * init.c: Deprecated ftppasswd, httppasswd, login, passwd and
1872         proxypasswd commands.  Added ftppassword, ftpuser, httppassword,
1873         password, proxypassword and user commands.
1874
1875         * main.c: Renamed --ftp-passwd to --ftp-password.  Added --ftp-user,
1876         --http-password, --password, --proxy-password and --user.  Deprecated
1877         --http-passwd and --proxy-passwd.  Added documentation for new options
1878         and removed documentation for deprecated options in the help string.
1879
1880         * options.h (struct options): Added user and passwd members to handle
1881         --user and --password respectively.  Renamed ftp_acc and ftp_pass
1882         members to ftp_user and ftp_passwd for consistency.
1883
1884 2005-04-27  Hrvoje Niksic  <hniksic@xemacs.org>
1885
1886         * main.c (print_help): Advertise "DER", not "ASN1".
1887
1888 2005-04-27  Hrvoje Niksic  <hniksic@xemacs.org>
1889
1890         * openssl.c (init_prng): Disable the weak random seed by default.
1891
1892         * http.c (gethttp): Simplify SSL initialization; disable SSL when
1893         anything goes wrong with the initialization.
1894
1895         * options.h (struct options): New option opt.random_file.
1896
1897 2005-04-27  Hrvoje Niksic  <hniksic@xemacs.org>
1898
1899         * init.c: Wrap private key commands in IF_SSL.
1900
1901 2005-04-27  Hrvoje Niksic  <hniksic@xemacs.org>
1902
1903         * openssl.c (ssl_init): Ditto.
1904
1905         * options.h (struct options): Allow separate specification of key
1906         type and certificate type.
1907
1908         * init.c (cmd_spec_cert_type): Provide a "der" synonym for "asn1"
1909         certificate encoding.
1910
1911 2005-04-26  Hrvoje Niksic  <hniksic@xemacs.org>
1912
1913         * openssl.c: Renamed "gen_sslfunc.c" to "openssl.c" and
1914         "gen_sslfunc.h" to "openssl.h".  This reflects the intent of
1915         openssl.c encapsulating the OpenSSL-specific code.
1916
1917 2005-04-26  Hrvoje Niksic  <hniksic@xemacs.org>
1918
1919         * init.c: Renamed "closure" (a synonym for context in some
1920         cultures) to "place", which more accurately reflects the usage.
1921
1922 2005-04-26  Hrvoje Niksic  <hniksic@xemacs.org>
1923
1924         * gen_sslfunc.c (ssl_init): Use default locations for loading the
1925         certificate bundles.
1926         (ssl_init_prng): Disable the cryptographically weak PRNG
1927         initialization fallback.
1928
1929         * init.c: Renamed SSL command-line arguments and wgetrc commands.
1930         (defaults): Check the server certificate by default.
1931
1932 2005-04-26  Hrvoje Niksic  <hniksic@xemacs.org>
1933
1934         * cookies.c (cookie_handle_set_cookie): Delete the part of the
1935         path after the trailing slash.
1936
1937         * http.c (gethttp): Call cookie_handle_set_cookie with path that
1938         begins with '/'.
1939
1940 2005-04-26  Hrvoje Niksic  <hniksic@xemacs.org>
1941
1942         * http.c (gethttp): Call skip_short_body only if keep_alive is in
1943         use.
1944         (gethttp): Send the User-Agent header with the CONNECT request as
1945         well.
1946
1947 2005-04-25  Hrvoje Niksic  <hniksic@xemacs.org>
1948
1949         * main.c (option_data): Removed support for the undocumented flag
1950         --use-proxy.
1951
1952 2005-04-25  Hrvoje Niksic  <hniksic@xemacs.org>
1953
1954         * main.c (option_data): Don't treat -Y as a boolean switch; treat
1955         it as a value switch instead, so "-Y off" continues to work.
1956
1957 2005-04-24  Hrvoje Niksic  <hniksic@xemacs.org>
1958
1959         * utils.c (aprintf): Delete unreachable statement.
1960
1961 2005-04-24  Hrvoje Niksic  <hniksic@xemacs.org>
1962
1963         * host.c (cmp_prefer_ipv4): New function.
1964         (cmp_prefer_ipv6): New function.
1965         (lookup_host): Use the appropriate comparator according to
1966         opt.prefer_family.
1967
1968         * init.c: New option prefer_family.
1969
1970         * host.c (is_valid_ipv6_address): Spell NS_* constants in lower
1971         case to avoid clash with system headers.
1972         (lookup_host): Reorder the addresses so that IPv4 ones come first.
1973
1974         * utils.c (stable_sort): New function.
1975
1976 2005-04-24  Hrvoje Niksic  <hniksic@xemacs.org>
1977
1978         * connect.c (retryable_socket_connect_error): Return 0 for
1979         ENETUNREACH and EHOSTUNREACH.
1980
1981 2005-04-23  Hrvoje Niksic  <hniksic@xemacs.org>
1982
1983         * cmpt.c: Reenable the memmove implementation for systems that
1984         lack it.
1985
1986         * http.c (gethttp): Store the "authorized" state of the persistent
1987         connection.
1988         (request_remove_header): New function.
1989         (gethttp): Don't send the "Basic" authentication if the connection
1990         is already authorized.
1991
1992 2005-04-23  Hrvoje Niksic  <hniksic@xemacs.org>
1993
1994         * utils.c (base64_encode): Treat input as unsigned chars.
1995         Required for correct encoding of binary stuff.
1996
1997 2005-04-23  Hrvoje Niksic  <hniksic@xemacs.org>
1998
1999         * http-ntlm.c: Format the function definitions in an
2000         ansi2knr-friendly fashion.
2001
2002 2005-04-22  Hrvoje Niksic  <hniksic@xemacs.org>
2003
2004         * http.c (gethttp): Handle multiple WWW-Authentication headers,
2005         only one of which is recognized.  Those are sent by IIS with NTLM
2006         authorization.
2007         (create_authorization_line): Propagate information whether
2008         authorization is finished.
2009         (gethttp): Only stop authorization when it's really finished, not
2010         after fixed two steps.
2011
2012 2005-04-21  Hrvoje Niksic  <hniksic@xemacs.org>
2013
2014         * gen_sslfunc.c (ssl_init): Fix warning message text; mark the
2015         message as translatable.
2016
2017 2005-04-21  Hrvoje Niksic  <hniksic@xemacs.org>
2018
2019         * main.c (print_help): Print the EGD option outside the cluster of
2020         SSL options.
2021
2022 2005-04-21  Hrvoje Niksic  <hniksic@xemacs.org>
2023
2024         * http-ntlm.c (ntlm_output): Fix setting the domain.
2025         Suggested by Sami Krank.
2026
2027 2005-04-20  Mauro Tortonesi  <mauro@ferrara.linux.it>
2028
2029         * connect.c: Set IPV6_V6ONLY socket option when -6 switch is used.
2030
2031 2005-04-20  FUJISHIMA Satsuki  <sf@FreeBSD.org>
2032
2033         * http.c (request_set_header): Fix the check whether a new header
2034         needs to be allocated.
2035
2036 2005-04-18  Hrvoje Niksic  <hniksic@xemacs.org>
2037
2038         * utils.c (base64_encode): Use the parameter order that makes more
2039         sense.  Return the length of the base64 written.  Updated all
2040         callers.
2041
2042 2005-04-17  Hrvoje Niksic  <hniksic@xemacs.org>
2043
2044         * http.c (request_set_header): Free NAME when VALUE is NULL and
2045         freeing the header name is requested.
2046
2047 2005-04-17  Hrvoje Niksic  <hniksic@xemacs.org>
2048
2049         * snprintf.c (fmtstr): Declare VALUE as const char *.
2050         Based on patch by Russ Allbery.
2051
2052 2005-04-17  Hrvoje Niksic  <hniksic@xemacs.org>
2053
2054         * snprintf.c (fmtfp): More correct handling of significant digit
2055         count with %g -- 0.002 has one significant digit, not three.
2056
2057 2005-04-16  Hrvoje Niksic  <hniksic@xemacs.org>
2058
2059         * retr.c (fd_read_body): Respect read timeout with non-interactive
2060         or no progress gauge -- treat ETIMEDOUT specially only when
2061         progress_interactive.
2062         Reported by FUJISHIMA Satsuki.
2063
2064 2005-04-16  FUJISHIMA Satsuki  <sf@FreeBSD.org>
2065
2066         * http.c (gethttp): Don't use HTTP/1.0 persistent connections over
2067         proxy.
2068
2069 2005-04-16  Hrvoje Niksic  <hniksic@xemacs.org>
2070
2071         * snprintf.c: Use the PARAMS macro to handle prototypes.  Write
2072         function definitions in the ansi2knr-friendly way.
2073         (fmtstr): If string precision is specified, don't read VALUE past
2074         it.
2075         (dopr): Actually print %g and %e formats.
2076         (fmtfp): Fix a bug that caused 0.01 to be printed as 0.1.
2077         (fmtfp): Use LLONG in floating point conversions to be able to
2078         convert more digits.
2079         (fmtfp): Interpret precision as number of significant digits with
2080         %g.
2081         (fmtfp): Omit trailing decimal zeros with %g.
2082
2083         * snprintf.c: Don't include <ctype.h> because none of it is used.
2084         Include strings.h/string.h, as per Autoconf.
2085
2086 2005-04-15  Hrvoje Niksic  <hniksic@xemacs.org>
2087
2088         * ptimer.c: Use _POSIX_TIMERS - 0 > 0, which handles the case when
2089         _POSIX_TIMERS is defined but empty, as well as the case when it is
2090         undefined.  Do the same with the check for _POSIX_MONOTONIC_CLOCK.
2091         Suggested by Larry Jones.
2092
2093 2005-04-15  Hrvoje Niksic  <hniksic@xemacs.org>
2094
2095         * ptimer.c: Check that _POSIX_TIMERS is defined as well as > 0.
2096         Problem reported by Steven M. Schweda.
2097
2098 2005-04-14  Hrvoje Niksic  <hniksic@xemacs.org>
2099
2100         * http.c (skip_short_body): Print the skipped body data in debug
2101         mode.
2102         (skip_short_body): Don't skip more than 4k of body data.
2103         (skip_short_body): Return whether the skipping was successful.
2104         (gethttp): If skip_short_body failed, invalidate the connection.
2105
2106 2005-04-12  Gisle Vanem  <giva@bgnett.no>
2107
2108         * ftp.c (getftp): Ditto.
2109
2110         * http.c (gethttp): Open the output file in binary mode.
2111
2112 2005-04-11  Hrvoje Niksic  <hniksic@xemacs.org>
2113
2114         * hash.c: Conditionalize including config.h on HAVE_CONFIG_H
2115         instead of on STANDALONE.
2116
2117 2005-04-11  Hrvoje Niksic  <hniksic@xemacs.org>
2118
2119         * gen_sslfunc.c (ssl_print_errors): Made static.
2120         (ssl_print_errors): Eliminate potentially dangerous fixed-size
2121         error buffer.  Passing NULL to ERR_error_string causes it to use
2122         its own static buffer, which is fine for our purposes.
2123
2124         * gen_sslfunc.c: Include gen_sslfunc.h.  Make the declarations of
2125         ssl_init and ssl_conect match the actual definitions.
2126         (ssl_connect): Simply return a boolean, the SSL context is no
2127         longer useful as a return value.
2128
2129         * retr.c: Don't include SSL headers; we don't need them.
2130
2131 2005-04-11  Hrvoje Niksic  <hniksic@xemacs.org>
2132
2133         * config-post.h: Don't define _VA_LIST under Solaris; it breaks
2134         compilation with GCC 3.4 under Solaris 10.  (It was defined to
2135         avoid a warning with previous versions of GCC.)
2136
2137 2005-04-11  Hrvoje Niksic  <hniksic@xemacs.org>
2138
2139         * xmalloc.c (register_ptr): Warn the user to increase SZ prior to
2140         aborting.
2141
2142 2005-04-11  Hrvoje Niksic  <hniksic@xemacs.org>
2143
2144         * convert.c (convert_cleanup): Free converted_files.
2145
2146 2005-04-10  Hrvoje Niksic  <hniksic@xemacs.org>
2147
2148         * wget.h (DEBUGP): Use __builtin_expect to give a hint to GCC that
2149         opt.debug is false in the vast majority of cases.
2150
2151 2005-04-10  Hrvoje Niksic  <hniksic@xemacs.org>
2152
2153         * config-post.h: Declare alloca as void *, not char *.
2154
2155 2005-04-09  Hrvoje Niksic  <hniksic@xemacs.org>
2156
2157         * recur.c (download_child_p): When -p is used, (temporarily)
2158         ignore accept/reject rules for HTMLs, even when they are at the
2159         maximum recursion depth.  That is because with -p we are, if
2160         necessary, overstepping the max. depth to get the requisites.
2161
2162 2004-06-12  Larry Jones <lawrence.jones@ugsplm.com>
2163
2164         * recur.c (download_child_p): Correct the logic in check number 6:
2165         test opt.reclevel (not DEPTH) against INFINITE_RECURSION.
2166
2167 2005-04-09  Hrvoje Niksic  <hniksic@xemacs.org>
2168
2169         * url.c: Use "static const" in preference to "const static".
2170         Sun's cc warns that "storage class after type is obsolescent".
2171
2172         * url.c (urlchr_table): Don't mark ~ as unsafe, too many broken
2173         web sites are confused when ~ is changed to %7E.  Their servers
2174         redirect /%7Efoo/ to /~foo/, which Wget again accesses using %7E,
2175         causing further redirections, therefore looping infinitely.  See
2176         Debian bug #301624 for an example.
2177
2178 2005-04-09  Hrvoje Niksic  <hniksic@xemacs.org>
2179
2180         * alloca.c: Include wget.h to be able to use xmalloc.  In addition
2181         to defining malloc to xmalloc, also define free to xfree.
2182
2183 2005-04-09  Hrvoje Niksic  <hniksic@xemacs.org>
2184
2185         * http-ntlm.c (ntlm_output): Use "char", not "unsigned char" for
2186         ntlmbuf.  Our base64 functions accept char anyway.
2187         (ntlm_output): Join up the format string, since we nominally
2188         support K&R compilers.
2189         (ntlm_output): Ditto.
2190
2191 2005-04-08  Hrvoje Niksic  <hniksic@xemacs.org>
2192
2193         * ptimer.c: Use Windows timers under Cygwin, whose POSIX timer
2194         implementation is incomplete.
2195
2196 2005-04-08  Hrvoje Niksic  <hniksic@xemacs.org>
2197
2198         * ptimer.c (struct ptimer): Remove the unused initialized field.
2199
2200         * ptimer.c: Renamed function parameters from WT (which used to
2201         stand for wget_timer or wtimer) to PT.
2202
2203 2005-04-08  Hrvoje Niksic  <hniksic@xemacs.org>
2204
2205         * ptimer.c (posix_init): Be smarter about choosing clocks.  In
2206         decreasing order of preference, use CLOCK_MONOTONIC,
2207         CLOCK_HIGHRES, and CLOCK_REALTIME.
2208         (ptimer_allocate): Removed.
2209
2210         * ptimer.c: Refactor the code by cleanly separating the
2211         architecture-dependent code from the architecture-independent
2212         code.
2213
2214 2005-04-08  Hrvoje Niksic  <hniksic@xemacs.org>
2215
2216         * ptimer.c (ptimer_init): Explicitly check that
2217         _POSIX_MONOTONIC_CLOCK is *both* defined and >=0.  (Undefined
2218         symbols are >=0.)
2219
2220 2005-04-08  Hrvoje Niksic  <hniksic@xemacs.org>
2221
2222         * ptimer.c (ptimer_diff): Fix typo affecting Windows build.
2223
2224 2005-04-08  Hrvoje Niksic  <hniksic@xemacs.org>
2225
2226         * ptimer.c (ptimer_init): In fact, _POSIX_MONOTONIC_CLOCK needs to
2227         be >= 0.
2228
2229         * ptimer.c (ptimer_init): Check whether _POSIX_MONOTONIC_CLOCK is
2230         defined instead of whether it's greater than 0.  glibc defines it
2231         to 0, but still makes it available via sysconf.
2232
2233 2005-04-08  Hrvoje Niksic  <hniksic@xemacs.org>
2234
2235         * mswindows.c (str_to_int64): Rename OVERFLOW and UNDERFLOW to
2236         INT64_OVERFLOW and INT64_UNDERFLOW, since those names are used.
2237
2238 2005-04-07  Hrvoje Niksic  <hniksic@xemacs.org>
2239
2240         * ptimer.c: New file.  Move the "wtimer" functions from utils.c to
2241         this file and rename them to ptimer_.
2242
2243 2005-04-07  Hrvoje Niksic  <hniksic@xemacs.org>
2244
2245         * host.c (NO_ADDRESS): Define NO_ADDRESS only after the system
2246         headers have been included.
2247
2248 2005-04-06  Hrvoje Niksic  <hniksic@xemacs.org>
2249
2250         * http.c (pconn): Include NTLM data, which is per-connection.
2251         (known_authentication_scheme_p): Recognize NTLM authorization.
2252         (create_authorization_line): Call ntlm_input and ntlm_output.
2253
2254         * http-ntlm.c: New file, donated by Daniel Stenberg and originally
2255         written for curl, heavily modified for Wget.
2256
2257         * utils.c (base64_encode): Relocated from http.c, since it is now
2258         used by http-ntlm.c, and will possibly be used elsewhere.
2259         (base64_decode): New function, originally based on code from GNU
2260         recode.
2261
2262 2005-04-02  Hrvoje Niksic  <hniksic@xemacs.org>
2263
2264         * ftp.c (ftp_loop): Ditto.
2265
2266         * ftp-basic.c (ftp_pasv): Use the xzero shorthand for memset(0).
2267         (ftp_lpsv): Ditto.
2268
2269 2005-04-05  Mauro Tortonesi  <mauro@ferrara.linux.it>
2270
2271         * Makefile.in: removed string_t.c from list of source files.
2272
2273 2005-04-04  Mauro Tortonesi  <mauro@ferrara.linux.it>
2274
2275         * string_t.c: Removed.
2276
2277         * string_t.h: Removed.
2278
2279 2005-04-02  Hrvoje Niksic  <hniksic@xemacs.org>
2280
2281         * url.c (rewrite_shorthand_url): Only accept recognized schemes.
2282         That way "foo:80" will correctly be rewritten to "http://foo:80"
2283         instead of left unchanged and ultimately rejected because of
2284         "unsupported scheme foo".
2285
2286 2005-03-31  Hrvoje Niksic  <hniksic@xemacs.org>
2287
2288         * utils.c (number_to_string): Avoid explicit 64-bit constants;
2289         construct them by multiplication at compile-time.
2290
2291         * utils.c, elsewhere: Don't append "L" to 32-bit integer
2292         constants; we aren't really compilable on 16-bit systems anyway.
2293
2294         * hash.c (prime_size): Remove primes larger than 2^31, but include
2295         2^31-1, which is prime.
2296
2297 2005-03-30  Hrvoje Niksic  <hniksic@xemacs.org>
2298
2299         * utils.c (string_set_to_array): New function.
2300
2301         * convert.c: Replace the use of "slists" with sets/hash-tables,
2302         which in fact suit the intended purpose much better.
2303         downloaded_html_list is removed altogether.
2304
2305 2005-03-29  Hrvoje Niksic  <hniksic@xemacs.org>
2306
2307         * ftp.h (enum): Rename GLOBALL, GETALL, and GETONE to
2308         GLOB_GLOBALL, GLOB_GETALL, and GLOB_GETONE to avoid conflict with
2309         Linux headers.
2310
2311 2005-03-29  Hrvoje Niksic  <hniksic@xemacs.org>
2312
2313         * utils.c (numdigit): More correct handling of negative numbers.
2314
2315 2005-03-21  Hrvoje Niksic  <hniksic@xemacs.org>
2316
2317         * http.c (gethttp): Print the human-readable size.
2318
2319         * ftp.c (getftp): Print the human-readable size of the file to be
2320         downloaded.
2321
2322         * utils.c (human_readable): New function.
2323
2324         * utils.c: Renamed "legible" to "with_thousand_seps",
2325         "legible_large_int" to "with_thousand_seps_large", and "legible_1"
2326         to "add_thousand_seps".
2327
2328 2005-03-21  Hrvoje Niksic  <hniksic@xemacs.org>
2329
2330         * http.c (gethttp): Inhibit persistent connections when talking to
2331         proxies, as mandated by RFC 2068.
2332
2333 2005-03-20  Hrvoje Niksic  <hniksic@xemacs.org>
2334
2335         * url.c (unescape_single_char): New function.
2336         (url_escape_dir): Use it to unescape slashes in directory
2337         components.
2338         (url_string): Escape unsafe chars in host name, except for the ':'
2339         charaters, which can appear in IPv6 addresses.
2340
2341         * main.c (main): Don't access the cookie jar directly.
2342
2343         * log.c (escnonprint_internal): Correctly calculate the needed
2344         string size.  Don't forget the buffer's new size after having
2345         reallocated it.
2346         (log_cleanup): New function.  Free the escnonprint ring data.
2347
2348         * init.c (cleanup): Don't free the cookie jar explicitly, it is
2349         now done by http_cleanup.
2350         (cleanup): opt.user_headers is now a vector, free it with
2351         free_vec.
2352
2353         * http.c (gethttp): Make sure to free the request data, the status
2354         message, and the response data before returning from the function.
2355         (save_cookies): New function.
2356         (http_cleanup): Free the cookie jar here.
2357
2358         * hash.c: Renamed string_hash to hash_string and ptrhash to
2359         hash_pointer.  Exported hash_pointer.
2360
2361         * xmalloc.c: Organized malloc_table (previously malloc_debug) as a
2362         simple EQ hash table.  register_ptr and unregister_ptr are now of
2363         O(1) complexity.
2364
2365         * xmalloc.c: Renamed "*_debug" to debugging_* and "*_real" to
2366         checking_*.
2367
2368 2005-03-12  Hrvoje Niksic  <hniksic@xemacs.org>
2369
2370         * utils.c (debug_test_md5): Moved to gen-md5.c.
2371
2372         * mswindows.h: Don't declare inet_ntop, since we don't use it.
2373
2374         * mswindows.h: For consistency, also wrap closesocket, it being
2375         a Winsock call.
2376
2377         * mswindows.h: Don't declare sleep and usleep; we're defining
2378         xsleep now.
2379
2380         * mswindows.h (mkdir): Don't special-case Borland C, _mkdir
2381         works there as well.
2382
2383         * host.c: Don't include winsock header files; the correct ones
2384         are already included by mswindows.h.
2385
2386         * mswindows.c (xsleep): Round toward the nearest millisecond
2387         in an attempt to avoid average short sleeps.
2388
2389         * utils.c (wtimer_granularity): Report correct values for
2390         Windows timers and for high-resolution timers.
2391
2392         * utils.c (wtimer_initialize_once): New function, called to
2393         initialize the timer frequency.
2394
2395         * utils.c: Replace the use of GetSystemTime with high-resolution
2396         counters under Windows.  When high-resolution counters are
2397         unavailable, use GetTickCount().
2398
2399 2005-03-15  Hrvoje Niksic  <hniksic@xemacs.org>
2400
2401         * retr.c (fd_read_body): Undo the 2004-11-18 change.  Instead,
2402         always be "exact".
2403
2404 2005-03-17  Hrvoje Niksic  <hniksic@xemacs.org>
2405
2406         * ftp-basic.c (ftp_login): Don't free the string if ftp_response
2407         returned an error status because the line didn't get allocated in
2408         the first place.
2409
2410 2005-03-15  Hrvoje Niksic  <hniksic@xemacs.org>
2411
2412         * http.c (read_http_response_head): Limit the response size to 64k
2413         bytes.
2414
2415         * retr.c (fd_read_hunk): Accept a MAXSIZE argument that limits the
2416         number of bytes the function is allowed to allocate.
2417         (fd_read_line): Limit the line to 4096 bytes.
2418
2419 2005-03-12  Hrvoje Niksic  <hniksic@xemacs.org>
2420
2421         * wget.h: Include options.h after wgint has been defined.
2422
2423         * options.h (struct options): Declare options processed with
2424         cmd_bytes as wgint, not long.
2425
2426 2005-03-18  Hrvoje Niksic  <hniksic@xemacs.org>
2427
2428         * init.c (cmd_file): Use concat_strings.
2429
2430         * http.c (basic_authentication_encode): Use concat_strings.
2431
2432         * ftp-ls.c (ftp_index): Use concat_strings.
2433
2434         * ftp-basic.c (ftp_request): Use concat_strings.
2435
2436         * utils.c (concat_strings): New function.
2437
2438 2005-03-12  Hrvoje Niksic  <hniksic@xemacs.org>
2439
2440         * init.c (simple_atof): Handle negative numbers; skip whitespace
2441         before the number.
2442         (simple_atoi): Ditto.  Also, check for overflow and underflow.
2443         (cmd_number): Bail out on negative numbers.
2444         (parse_bytes_helper): Ditto.
2445
2446 2005-03-06  Hrvoje Niksic  <hniksic@xemacs.org>
2447
2448         * http.c (gethttp): Handle multiple Set-Cookie headers sent by
2449         remote server.
2450
2451 2005-03-06  Hrvoje Niksic  <hniksic@xemacs.org>
2452
2453         * init.c (defaults): Use passive FTP by default.
2454
2455 2005-03-06  Hrvoje Niksic  <hniksic@xemacs.org>
2456
2457         * mswindows.c: Provide wrappers to Winsock functions that set
2458         errno to WSAGetLastError() in case of failure.  Also provide a
2459         Windows-specific version of strerror.
2460
2461         * mswindows.h: Wrap calls to socket, bind, connect, recv, send,
2462         select, getsockname, getpeername, and setsockopt.
2463
2464 2005-03-06  Hrvoje Niksic  <hniksic@xemacs.org>
2465
2466         * url.c (url_parse): Reject port numbers larger than 65535.  We
2467         also check for overflow while parsing port numbers.
2468
2469 2005-03-06  Hrvoje Niksic  <hniksic@xemacs.org>
2470
2471         * utils.c (read_file): Don't use wgint for file size; LFS won't
2472         work since the file is mmap'ed as a whole.
2473
2474         * options.h: Don't include stdio.h.
2475
2476         * log.c: Ditto.
2477
2478         * init.c: Disambiguate assignment from non-zero test to avoid
2479         Borland C warning.
2480
2481         * http.c (response_new): Don't needlessly post-increment count.
2482
2483         * hash.c: Include stdio.h.
2484
2485         * gnu-md5.h: Don't include stdio.h.
2486
2487         * getopt.h (struct option): Always use const.
2488
2489         * ftp.c (getftp): Avoid unnecessary assignment to RES to avoid
2490         Borland C warning.
2491
2492         * ftp-ls.c: Disambiguate assignment from non-zero test to avoid
2493         Borland C warning.
2494
2495         * cmpt.c (strptime_internal): Don't initialize rp_backup when
2496         !_NL_CURRENT to avoid Borland C warning.
2497
2498 2005-03-06  Hrvoje Niksic  <hniksic@xemacs.org>
2499
2500         * utils.c (fopen_excl): Fix parse error when O_BINARY is
2501         available.
2502
2503 2005-03-05  Hrvoje Niksic  <hniksic@xemacs.org>
2504
2505         * url.c (url_file_name): Don't allow hosts named ".." to be
2506         appended as path elements.
2507
2508 2005-03-03  Hrvoje Niksic  <hniksic@xemacs.org>
2509
2510         * retr.c (retrieve_url): Escape location header.
2511
2512         * http.c (print_server_response_1): Escape server response when
2513         printing it.
2514         (gethttp): Escape host name, status message, location header, and
2515         content type.
2516         (http_loop): Escape error message from server.
2517
2518         * host.c (lookup_host): Escape host name when printing it.
2519
2520         * ftp.c (getftp): Escape user name when printing it.
2521         (getftp): Escape remote file and directory for printing.
2522         (getftp): Escape server listing when printing it.
2523         (ftp_retrieve_list): Escape link name and file name.
2524         (ftp_retrieve_glob): Escape file name.
2525
2526         * ftp-basic.c (ftp_response): Escape server response when printing
2527         it.
2528
2529         * cookies.c (parse_set_cookies): Escape the cookie field when
2530         printing it.
2531         (parse_set_cookies): Escape contents of remote header.
2532         (cookie_handle_set_cookie): Escape host name and cookie domain.
2533
2534         * connect.c (connect_to_ip): Escape the host name.
2535
2536         * log.c (escnonprint): New function, used for printing strings
2537         coming from the server that possibly contain non-ASCII characters.
2538         (escnonprint_uri): Ditto.
2539
2540 2005-02-24  Hrvoje Niksic  <hniksic@xemacs.org>
2541
2542         * ftp.c (getftp): Ditto.
2543
2544         * http.c (gethttp): When we're not supposed to overwrite files,
2545         use fopen_excl to open the file and recompute the file name.
2546
2547         * log.c (redirect_output): Use unique_create to avoid a race
2548         condition.
2549
2550         * mswindows.c (fake_fork_child): Use unique_create.
2551
2552         * utils.c (fopen_excl): New function that opens a stdio stream
2553         with the O_EXCL flag (where available).
2554         (unique_create): New function, like unique_name, but also creating
2555         the file and returning a file pointer.
2556         (fork_to_background): Use unique_create to create the file
2557         immediately to avoid race condition with multiple instances of
2558         wget -b.
2559
2560 2005-02-24  Hrvoje Niksic  <hniksic@xemacs.org>
2561
2562         * host.c (lookup_host): Test for AI_ADDRCONFIG directly, instead
2563         of checking for HAVE_GETADDRINFO_AI_ADDRCONFIG.
2564
2565 2005-02-23  Hrvoje Niksic  <hniksic@xemacs.org>
2566
2567         * host.c (is_valid_ipv6_address): Move here from url.c.
2568         (lookup_host): If the address is numeric, don't print the
2569         "resolving..." line, don't set up DNS timeouts, and set the
2570         AI_NUMERICHOST hint, where available.
2571
2572 2005-02-26  Gisle Vanem  <giva@bgnett.no>
2573
2574         * utils.c: Use the nnnLL syntax under GCC.  Define struct_stat to
2575         struct _stati64 under __MINGW32__ as well as under MS VC.
2576
2577 2005-02-26  Hrvoje Niksic  <hniksic@xemacs.org>
2578
2579         * utils.c: Use the nnnI64 syntax for __int64 constants under all
2580         Windows compilers.
2581         (SPRINTF_WGINT): Use "%I64" under all Windows compilers.
2582
2583         * mswindows.h (WGINT_MAX): Use the nnnI64 syntax for
2584         __int64 constants under all Windows compilers.
2585         (struct_stat): Use `struct stati64' under Borland C.
2586         (fstat): Don't redefine to _fstati64 under Borland.
2587
2588         * mswindows.c: Define str_to_int64 under Borland C as well as
2589         under (older) Visual C.
2590
2591 2005-02-25  Hrvoje Niksic  <hniksic@xemacs.org>
2592
2593         * ftp.c (getftp): Initialize err to suppress compiler warning.
2594
2595 2005-02-24  Hrvoje Niksic  <hniksic@xemacs.org>
2596
2597         * ftp.c (ftp_expected_bytes): Fix bug that caused infloop because
2598         of not correctly skipping the '(' character.
2599
2600 2005-02-24  Hrvoje Niksic  <hniksic@xemacs.org>
2601
2602         * mswindows.c (wget_ftello): Removed.
2603
2604         * mswindows.h: Remove bogus definition of stat.
2605         (wget_ftello): Remove the leftover ftello replacement.
2606
2607 2005-02-20  Hrvoje Niksic  <hniksic@xemacs.org>
2608
2609         * mswindows.c (wget_ftello): Wget's replacement for ftello.
2610
2611         * utils.c (file_size): Use ftello where available.
2612
2613         * ftp-ls.c (ftp_parse_unix_ls): Use str_to_wgint to parse the file
2614         size.
2615         (ftp_parse_winnt_ls): Ditto.
2616
2617         * ftp-basic.c (ftp_size): Use str_to_wgint to convert number to
2618         wgint; pass 10 instead of 0 as the BASE argument.
2619
2620         * ftp.c (ftp_expected_bytes): Use str_to_wgint to parse the file
2621         size.
2622
2623         * sysdep.h (LARGE_INT_FMT): Use __int64 as LARGE_INT on
2624         MSVC/Windows; print it with "%I64".
2625
2626         * wget.h: Define a `wgint' type, normally aliased to (the possibly
2627         64-bit variant of) off_t.
2628
2629         * all: Use `wgint' instead of `long' for numeric variables that
2630         can hold file sizes.
2631
2632         * utils.c (number_to_string): Support printing of `wgint'
2633         argument.
2634         (number_to_static_string): New function.
2635
2636         * all: Replace printf("%ld", long_value) with printf("%s",
2637         number_to_static_string(wgint_value)).
2638
2639 2005-02-18  Mauro Tortonesi <mauro@ferrara.linux.it>
2640
2641         * main.c: Added the --ftp-passwd command line option.
2642
2643         * init.c: Renamed command passwd to ftppasswd.
2644
2645 2005-02-11  Mauro Tortonesi <mauro@ferrara.linux.it>
2646
2647         * string_t.c: Fixed a bug in do_escape and triggered escape of
2648         backslashes in string_escape to avoid ambiguities in the result
2649         string.
2650
2651 2005-02-10  Mauro Tortonesi <mauro@ferrara.linux.it>
2652
2653         * string.h: Renamed to string_t.h to fix a compilation conflict
2654         with the string.h header in the standard C library.
2655
2656         * string.c: Renamed to string_t.c for consistency with string.h.
2657
2658         * string_t.c: Ditto.
2659
2660         * string_t.h: Ditto.
2661
2662 2004-12-31  Mauro Tortonesi <mauro@ferrara.linux.it>
2663
2664         * string.c: New file.
2665
2666         * string.h: New file.
2667
2668         * Makefile.in: Added string.c to the list of modules to compile.
2669
2670         * main.c: Updated copyright.
2671
2672 2004-11-18  Ulf Harnhammar <ulf.harnhammar.9485@student.uu.se>
2673
2674         * ftp-ls.c: Fixed a problem in ftp_parse_winnt_ls that could allow a
2675         malicious remote FTP server to crash wget.
2676
2677 2004-11-18  Hans-Andreas Engel <engel@node.ch>
2678
2679         * http.c: Enable --convert-links (-k) when a single page is downloaded
2680         via --output-document (-O).
2681
2682 2004-11-18  Mauro Tortonesi <mauro@deepspace6.net>
2683
2684         * connect.c: Minor correction to the comment in front of fd_peek.
2685
2686 2004-11-18  Leonid Petrov <nouser@lpetrov.net>
2687
2688         * retr.c: Fix a timeout problem in fd_read_body when using http_proxy.
2689
2690 2004-11-15  YAMAZAKI Makoto <Yamazaki.Makoto@fujixerox.co.jp>
2691
2692         * netrc.c: Fix termination by assertion bug in netrc parsing.
2693
2694 2004-05-09  David Fritz  <zeroxdf@att.net>
2695
2696         * mswindows.c (fake_fork): Pass entire command line to the child
2697         process.
2698
2699 2004-03-31  Hrvoje Niksic  <hniksic@xemacs.org>
2700
2701         * http.c (gethttp): Fix typo: SCHEME_SSL -> SCHEME_HTTPS.
2702
2703 2004-03-30  Hrvoje Niksic  <hniksic@xemacs.org>
2704
2705         * http.c (gethttp): Send the Proxy-Authorization header over
2706         non-SSL connections too.
2707
2708 2004-03-25  David Fritz  <zeroxdf@att.net>
2709
2710         * mswindows.c (fake_fork_child): Ignore error code when
2711         OpenFileMapping() fails; assume it failed because the object does
2712         not exist.
2713
2714 2004-03-24  David Fritz  <zeroxdf@att.net>
2715
2716         * mswindows.c (fake_fork): New function.
2717
2718         * mswindows.c (fork_to_background): Use it.
2719
2720 2004-03-19  David Fritz  <zeroxdf@att.net>
2721
2722         * mswindows.c (ws_hangup): Incorporate old fork_to_background()
2723         code.  Add event name argument.
2724         (fork_to_backgorund): Now a simple wrapper around ws_hangup().
2725         (ws_handler): Correctly handle the case when neither CTRLC_BACKGND
2726         nor CTRLBREAK_BACKGND are defined.  Don't bother handling close,
2727         logoff, or shutdown events.  Call ws_hangup() with the correct
2728         event name; don't assume it was CTRL+Break.
2729
2730 2004-03-19  Hrvoje Niksic  <hniksic@xemacs.org>
2731
2732         * url.c (url_parse): Decode %HH sequences in host name.
2733
2734 2004-03-04  Hrvoje Niksic  <hniksic@xemacs.org>
2735
2736         * convert.c (local_quote_string): Quote "#" as "%23" and "%" as
2737         "%25" when creating links to local files.
2738
2739 2004-03-02  David Fritz  <zeroxdf@att.net>
2740
2741         * mswindows.c (ws_percenttitle): Guard against future changes by
2742         doing nothing if the proper variables have not been initialized.
2743         Clamp percentage value.
2744
2745 2004-03-04  Gisle Vanem  <giva@bgnett.no>
2746
2747         * retr.c (fd_read_body): Don't change console title if quiet.
2748
2749 2004-02-25  David Fritz  <zeroxdf@att.net>
2750
2751         * mswindows.c (set_sleep_mode): Remove argument and return value.
2752         Call GetModuleHandle() instead of LoadLibrary()/FreeLibrary() for
2753         kernel32.dll.  Use typedef for function-pointer.  Don't cast
2754         l-value.  Don't use dereference operator when calling through
2755         function-pointer.
2756         (ws_startup): Update call to set_sleep_mode().
2757         (ws_cleanup): Remove call to set_sleep_mode().
2758
2759 2004-02-23  David Fritz  <zeroxdf@att.net>
2760
2761         * http.c (http_loop): Ditto.
2762
2763         * ftp.c (ftp_loop_internal): Update call to ws_changetitle().
2764
2765         * main.c (main): Don't bother calling ws_changetitle().
2766
2767         * mswindows.h (ws_changetitle): Update prototype.
2768
2769         * mswindows.c (ws_changetitle): Remove second argument.  Use
2770         xfree_null().
2771         (ws_percenttitle): Only update title when percentage has changed.
2772
2773 2004-02-23  David Fritz  <zeroxdf@att.net>
2774
2775         * mswindows.h: Ditto.
2776
2777         * mswindows.c: Misc. formatting/comment tweaks throughout.
2778
2779 2004-02-20  David Fritz  <zeroxdf@att.net>
2780
2781         * main.c (print_help): Remove call to ws_help().
2782
2783         * mswindows.c (ws_help): Remove.
2784
2785         * mswindows.h (ws_help): Remove.
2786
2787 2004-02-16  David Fritz  <zeroxdf@att.net>
2788
2789         * init.c (home_dir): Use aprintf() instead of xmalloc()/sprintf().
2790         Under Windows, if $HOME is not defined, use the directory that
2791         contains the Wget binary instead of hard-coded `C:\'.
2792         (wgetrc_file_name): Under Windows, look for $HOME/.wgetrc then, if
2793         not found, look for wget.ini in the directory of the Wget binary.
2794
2795         * mswindows.c (ws_mypath): Employ slightly more robust methodology.
2796         Strip trailing path separator.
2797
2798 2004-02-06  Hrvoje Niksic  <hniksic@xemacs.org>
2799
2800         * http.c (gethttp): Respect --ignore-length.
2801         (gethttp): Inhibit keep-alive if --ignore-length is specified.
2802
2803 2004-02-06  Hrvoje Niksic  <hniksic@xemacs.org>
2804
2805         * connect.c (sockaddr_set_data): Zero out
2806         sockaddr_in/sockaddr_in6.  Apparently BSD-derived stacks need this
2807         when binding a socket to local address.
2808
2809 2004-02-04  Hrvoje Niksic  <hniksic@xemacs.org>
2810
2811         * hash.c: Make the file compilable outside Wget source tree when
2812         -DSTANDALONE is used.
2813
2814 2004-01-29  Hrvoje Niksic  <hniksic@xemacs.org>
2815
2816         * utils.c (determine_screen_width): Return 0 if not running on
2817         Windows or on a TIOCGWINSZ-capable system.
2818
2819 2004-01-28  David Fritz  <zeroxdf@att.net>
2820
2821         * utils.c (determine_screen_width): Correctly determine console
2822         width under Windows.
2823
2824 2004-01-28  Christian Biere  <christianbiere@gmx.de>
2825
2826         * progress.c (bar_set_params): Fixed syntax error when HAVE_ISATTY
2827         was undefined.
2828
2829         * ftp.c (ftp_loop_internal): Allocate a larger buffer in case
2830         "try" gets translated to something large.  Ditto in http_loop in
2831         http.c.
2832
2833         * http.c (response_header_copy): Don't write to buf[BUFSIZE].
2834
2835         * ftp-opie.c (skey_response): Eliminate unnecessary string
2836         concatenation; just call gen_md5_update twice.
2837
2838 2004-01-25  Hrvoje Niksic  <hniksic@xemacs.org>
2839
2840         * utils.c (xsleep): Don't call usleep with values larger than
2841         1,000,000.
2842
2843 2003-12-16  Hrvoje Niksic  <hniksic@xemacs.org>
2844
2845         * http.c (gethttp): Fix generation of `Content-Length'.
2846
2847 2003-12-15  Gisle Vanem  <giva@bgnett.no>
2848
2849         * url.c (url_skip_credentials): Fixed return value; 'url' if no
2850         credentials.
2851
2852 2003-12-14  Hrvoje Niksic  <hniksic@xemacs.org>
2853
2854         * url.c (url_skip_credentials): Return a pointer directly.
2855
2856 2003-12-14  Hrvoje Niksic  <hniksic@xemacs.org>
2857
2858         * url.c (url_file_name): Ditto.
2859         (parse_errors): Ditto.
2860
2861         * retr.c (retr_rate): Ditto.
2862
2863         * progress.c (create_image): Ditto.
2864
2865         * netrc.c (parse_netrc): Ditto.
2866
2867         * main.c (struct cmdline_option): Ditto.
2868         (redirect_output_signal): Ditto.
2869
2870         * init.c (commands): Ditto.
2871
2872         * ftp-ls.c (ftp_index): Ditto.
2873
2874         * cookies.c (check_domain_match): Declare the pointer to a literal
2875         string as `const'.
2876
2877 2003-12-12  Hrvoje Niksic  <hniksic@xemacs.org>
2878
2879         * retr.c (fd_read_body): Pass total size to progress_create, not
2880         the remaining amount.
2881
2882 2003-12-12  Hrvoje Niksic  <hniksic@xemacs.org>
2883
2884         * retr.c (fd_read_body): Don't fiddle with "interactive timeout"
2885         if read timeout is unset.
2886
2887 2003-12-12  Hrvoje Niksic  <hniksic@xemacs.org>
2888
2889         * connect.c (bind_local): Don't set the IPV6_V6ONLY option on the
2890         socket.
2891
2892 2003-12-06  Hrvoje Niksic  <hniksic@xemacs.org>
2893
2894         * url.c (url_file_name): Respect the setting of
2895         opt.protocol_directories.
2896
2897         * main.c (main): Only check for ret=='?' when longindex is unset.
2898         (option_data): New option --protocol-directories.
2899
2900 2003-12-06  Hrvoje Niksic  <hniksic@xemacs.org>
2901
2902         * ftp.c (getftp): Ditto.
2903
2904         * http.c (gethttp): Correctly calculate bandwidth as total data
2905         read divided with download time.
2906
2907         * retr.c (fd_read_body): Separate the return values for data
2908         written and read.
2909
2910 2003-12-05  Hrvoje Niksic  <hniksic@xemacs.org>
2911
2912         * http.c (H_REDIRECTED): Respect the HTTP/1.1 "303 See Other"
2913         response code.
2914         Suggested by Dan Razzell.
2915
2916 2003-11-30  Hrvoje Niksic  <hniksic@xemacs.org>
2917
2918         * retr.c (fd_read_body): Report the amount of data *written* as
2919         amount_read.  This is not entirely logical, but that's what the
2920         callers expect, and it's not easy to change.
2921
2922         * ftp.c (ftp_loop_internal): Ditto.
2923
2924         * http.c (http_loop): Be smarter about assigning restval; if we're
2925         in the nth pass of a download, simply use the information we have
2926         about how much data has been retrieved as restval.
2927
2928         * ftp.c (getftp): Ditto for FTP "REST" command.
2929
2930         * http.c (gethttp): When the server doesn't respect range, skip
2931         the first RESTVAL bytes of the read body.  Never truncate the
2932         output file.
2933
2934         * retr.c (fd_read_body): Support skipping initial STARTPOS octets.
2935
2936 2003-11-30  Hrvoje Niksic  <hniksic@xemacs.org>
2937
2938         * http.c (skip_short_body): Renamed skip_body to skip_short_body;
2939         don't bother calling fd_read_body.
2940
2941 2003-11-30  Hrvoje Niksic  <hniksic@xemacs.org>
2942
2943         * retr.c (fd_read_body): Sanitize arguments and document them
2944         better.  Make sure the timer is created and updated only if
2945         necessary.  Updated callers.
2946
2947 2003-11-30  Hrvoje Niksic  <hniksic@xemacs.org>
2948
2949         * http.c (skip_body): New function.
2950         (gethttp): Use it to skip the body of the responses we don't care
2951         to download.  That allows us to reuse the connection.
2952         (gethttp): Trust that the HEAD requests will not generate body
2953         data.
2954
2955         * retr.c (fd_read_body): Don't write to OUT if it's NULL.
2956
2957 2003-11-29  Hrvoje Niksic  <hniksic@xemacs.org>
2958
2959         * http.c (gethttp): Initialize SSL only the first time when SSL
2960         URL is downloaded.
2961
2962 2003-11-29  Hrvoje Niksic  <hniksic@xemacs.org>
2963
2964         * cookies.c (cookie_header): Only generate the contents of the
2965         header, not the leading "Cookie: " or the trailing "\r\n".
2966
2967         * http.c (gethttp): When adding headers specified with `--header',
2968         allow them to override the headers generated by Wget.
2969
2970         * init.c (cmd_spec_header): Made opt.user_headers a vector.
2971
2972         * http.c (request_new): New function.  Returns a request structure
2973         which can be modified in various ways, most notably by adding HTTP
2974         headers to the request.
2975         (request_set_header): New function for adding the header to the
2976         request.  If the header is already available, it gets replaced.
2977         (request_send): Construct and send the request.
2978         (gethttp): Use the request_* functions to generate the request.
2979
2980 2003-11-28  Hrvoje Niksic  <hniksic@xemacs.org>
2981
2982         * http.c (gethttp): Don't include the Proxy-Authorization header
2983         in the request tunneled through proxy.
2984
2985 2003-11-28  Hrvoje Niksic  <hniksic@xemacs.org>
2986
2987         * http.c (gethttp): Use the CONNECT handle to establish SSL
2988         passthrough through non-SSL proxies.
2989
2990 2003-11-28  Hrvoje Niksic  <hniksic@xemacs.org>
2991
2992         * init.c: Don't #include netinet/Winsock stuff.
2993
2994 2003-11-28  Hrvoje Niksic  <hniksic@xemacs.org>
2995
2996         * http.c: Deleted the old functions header_process,
2997         header_extract_number, header_exists, header_strdup,
2998         http_process_range, http_process_none, http_process_type, and
2999         http_process_connection.
3000
3001         * http.c (response_new): New function.
3002         (response_header_bounds): Ditto.
3003         (response_header_copy): Ditto.
3004         (response_header_strdup): Ditto.
3005         (response_status): Ditto.
3006         (gethttp): Use the new response_* functions to parse the response.
3007         Support HTTP/0.9 responses.
3008
3009 2003-11-27  Hrvoje Niksic  <hniksic@xemacs.org>
3010
3011         * progress.c (create_image): Don't calculate ETA if nothing has
3012         been downloaded yet, because it causes division by zero.
3013
3014 2003-11-27  Hrvoje Niksic  <hniksic@xemacs.org>
3015
3016         * connect.c (bind_local): Rename sa_len to addrlen because IRIX
3017         headers define sa_len as a macro.
3018
3019 2003-11-26  Hrvoje Niksic  <hniksic@xemacs.org>
3020
3021         * html-parse.c (convert_and_copy): Remove embedded newlines when
3022         AP_TRIM_BLANKS is specified.
3023
3024 2003-11-26  Hrvoje Niksic  <hniksic@xemacs.org>
3025
3026         * ftp.c: Set con->csock to -1 where rbuf_uninitialize was
3027         previously used.
3028
3029 2003-11-26  Hrvoje Niksic  <hniksic@xemacs.org>
3030
3031         * Makefile.in (http$o): Added the trailing backslash that was
3032         missing.
3033
3034 2003-11-21  Hrvoje Niksic  <hniksic@xemacs.org>
3035
3036         * headers.c: Removed.  The file is no longer relevant, now that no
3037         special handling of headers is done by the rbuf code.  Moved
3038         portions to http.c.
3039
3040 2003-11-21  Hrvoje Niksic  <hniksic@xemacs.org>
3041
3042         * rbuf.c: Removed.
3043
3044         * ftp-basic.c (ftp_response): Use fd_read_line.  No longer use
3045         struct rbuf.  Updated all callers.
3046
3047         * http.c (gethttp): Use fd_read_head to read all the headers in
3048         one go.
3049         (next_header): New function.
3050
3051         * retr.c (fd_read_line): New function: reads a line from FD,
3052         leaving the rest of the data unread.
3053         (fd_read_head): New function.
3054
3055         * connect.c (fd_peek): New function, implements peeking.
3056         (poll_internal): New function.
3057         (fd_read): Use it.
3058         (fd_write): Ditto.
3059         (fd_peek): Ditto.
3060         (fd_register_transport): Allow registering a "peeker" callback.
3061
3062 2003-11-20  Hrvoje Niksic  <hniksic@xemacs.org>
3063
3064         * connect.c: Renamed xread/xwrite/xclose to
3065         fd_read/fd_write/fd_close.  The "x" prefix is not appropriate
3066         because the semantics have diverged from read/write/close too
3067         significantly.  Updated all callers.
3068
3069 2003-11-20  Hrvoje Niksic  <hniksic@xemacs.org>
3070
3071         * connect.c (sock_write): It's not necessary to initialize RES.
3072
3073 2003-11-19  Hrvoje Niksic  <hniksic@xemacs.org>
3074
3075         * main.c (main): Don't reference opt.ipv4_only and opt.ipv6_only
3076         if IPv6 is disabled.
3077
3078 2003-11-19  Hrvoje Niksic  <hniksic@xemacs.org>
3079
3080         * connect.c (socket_has_inet6): Only compile it if IPv6 is enabled
3081         and AI_ADDRCONFIG is missing.
3082
3083 2003-11-18  Hrvoje Niksic  <hniksic@xemacs.org>
3084
3085         * gen_sslfunc.c (ssl_init_prng): Warn the user when using a weak
3086         random seed.
3087
3088 2003-11-18  Hrvoje Niksic  <hniksic@xemacs.org>
3089
3090         * host.c (address_list_contains): Renamed address_list_find to
3091         address_list_contains because its result is boolean.
3092
3093 2003-11-18  Hrvoje Niksic  <hniksic@xemacs.org>
3094
3095         * connect.c (select_fd): Return 1 if select is not available.
3096
3097 2003-11-17  Hrvoje Niksic  <hniksic@xemacs.org>
3098
3099         * connect.c (connect_to_host): Don't reference address list after
3100         releasing it.
3101
3102 2003-11-17  Hrvoje Niksic  <hniksic@xemacs.org>
3103
3104         * main.c (print_help): Fix alignment of FTP options output.
3105
3106 2003-11-17  Hrvoje Niksic  <hniksic@xemacs.org>
3107
3108         * host.c (lookup_host): Check for the ability to create IPv6
3109         sockets here.
3110
3111         * init.c (defaults): Don't auto-set --inet4-only on IPv6-less
3112         systems.
3113
3114 2003-11-16  Hrvoje Niksic  <hniksic@xemacs.org>
3115
3116         * main.c (print_help): Fix typo in `-O' help message.  Fix docs of
3117         -Y/--proxy.  Fix docs of `--cookies' and `--glob'.  Improve docs
3118         of --convert-links.  Fix docs of SSL options.
3119
3120 2003-11-16  Hrvoje Niksic  <hniksic@xemacs.org>
3121
3122         * ftp-basic.c: Don't include <arpa/inet.h> and others because
3123         they're no longer needed.
3124
3125 2003-11-16  Hrvoje Niksic  <hniksic@xemacs.org>
3126
3127         * main.c (main): Don't allow setting of both opt.ipv4_only and
3128         opt.ipv6_only.
3129
3130         * init.c (defaults): Mark opt.ipv4_only specially when set
3131         automatically.
3132
3133 2003-11-15  Hrvoje Niksic  <hniksic@xemacs.org>
3134
3135         * host.c (lookup_host): Use AI_ADDRCONFIG only if the family is
3136         unspecified.  This ensures that specifying `--no-inet4' on systems
3137         where IPv6 resolves, but doesn't work behaves the same regardless
3138         of the availability of AI_ADDRCONFIG.
3139
3140 2003-11-15  Hrvoje Niksic  <hniksic@xemacs.org>
3141
3142         * host.c: Don't refer to the now-removed function
3143         forget_host_lookup in the documentation of lookup_host.
3144
3145 2003-11-15  Hrvoje Niksic  <hniksic@xemacs.org>
3146
3147         * http.c (persistent_available_p): Correctly specify the endpoint
3148         argument to socket_ip_address.
3149         (gethttp): When printing the "reusing connection to..." message,
3150         specify the host name of the reused connection, not the current
3151         host name.  That makes more sense because it provides a useful
3152         piece of information -- we know to which host we're supposed to
3153         connect anyway!
3154
3155 2003-11-15  Hrvoje Niksic  <hniksic@xemacs.org>
3156
3157         * init.c: Make sure the options are in alphabetic order!
3158
3159         * host.c (lookup_host): Merge lookup_host_passive and lookup_host
3160         after all -- having both would result in some code duplication.
3161         (lookup_host): Set hints.ai_family to AF_INET if ipv4_only is
3162         requested.  Likewise, set it to AF_INET6 for ipv6_only.  Specify
3163         AI_ADDRCONFIG where available.
3164         (lookup_host): New flag LH_REFRESH that specifies that a cached
3165         entry for HOST should be refreshed.
3166         (cache_query): New function.
3167         (cache_store): Ditto.
3168         (cache_remove): Ditto.
3169         (forget_host_lookup): No longer necessary, replaced with static
3170         function cache_remove.
3171
3172 2003-11-14  Hrvoje Niksic  <hniksic@xemacs.org>
3173
3174         * main.c: Enable -4 and -6 only if IPv6 is enabled.
3175
3176 2003-11-14  Hrvoje Niksic  <hniksic@xemacs.org>
3177
3178         * connect.c (register_transport): Renamed from register_extended.
3179         Explain the intended usage.
3180
3181 2003-11-14  Hrvoje Niksic  <hniksic@xemacs.org>
3182
3183         * url.c (uri_merge): Merging "foo" and "bar" should result in
3184         "bar", not in "foo/bar".
3185         (path_simplify): Don't remove empty path elements; don't
3186         special-case leading slash.
3187         (path_simplify): Don't swallow ".."'s at the beginning of string.
3188         E.g. simplify "foo/../../bar" as "../bar", not as "bar".
3189         (append_uri_pathel): Defang ".." path element upon encountering
3190         it.
3191
3192 2003-11-13  Hrvoje Niksic  <hniksic@xemacs.org>
3193
3194         * http.c (persistent_available_p): Don't attempt to talk to two
3195         different SSL sites over the same secure connection.
3196
3197 2003-11-13  Hrvoje Niksic  <hniksic@xemacs.org>
3198
3199         * http.c (gethttp): Ditto.
3200
3201         * ftp.c (getftp): Use retryable_socket_connect_error instead of
3202         CONNECT_ERROR.
3203
3204         * wget.h (CONNECT_ERROR): Removed.
3205
3206         * connect.c (retryable_socket_connect_error): New function instead
3207         of unsupported_socket_family_error.
3208
3209 2003-11-13  Hrvoje Niksic  <hniksic@xemacs.org>
3210
3211         * wget.h (CONNECT_ERROR): Use it.
3212
3213         * connect.c (unsupported_socket_family_error): New function.
3214
3215 2003-11-13  Hrvoje Niksic  <hniksic@xemacs.org>
3216
3217         * connect.c (bind_local): Renamed bindport to bind_local; return
3218         the socket directly.  Updated callers.
3219         (accept_connection): Renamed acceptport to accept_connection;
3220         return the created socket directly.  Updated callers.
3221
3222 2003-11-13  Hrvoje Niksic  <hniksic@xemacs.org>
3223
3224         * init.c (defaults): Turn on opt.ipv4_only if we're compiling with
3225         IPv6, and AI_ADDRINFO is not available, and AF_INET6 sockets can't
3226         be created.
3227
3228 2003-11-13  Hrvoje Niksic  <hniksic@xemacs.org>
3229
3230         * host.c (lookup_host): Document the fact that the addresses are
3231         returned in order.
3232
3233 2003-11-12  Hrvoje Niksic  <hniksic@xemacs.org>
3234
3235         * utils.c: Use limits.h only where available.
3236
3237         * hash.c: Use INVALID_PTR and INVALID_PTR_BYTE.  Include limits.h.
3238
3239 2003-11-11  Hrvoje Niksic  <hniksic@xemacs.org>
3240
3241         * main.c: Added options --inet4-only and --inet6-only.
3242
3243 2003-11-11  Hrvoje Niksic  <hniksic@xemacs.org>
3244
3245         * host.c (host_errstr): Use the more standard message "Unknown
3246         host".
3247
3248 2003-11-10  Hrvoje Niksic  <hniksic@xemacs.org>
3249
3250         * connect.c (connect_to_host): Use that flag to decide whether to
3251         re-resolve the host name.
3252
3253         * host.c (struct address_list): Added a flag that maintains
3254         whether the connection worked at some point.
3255
3256 2003-11-10  Hrvoje Niksic  <hniksic@xemacs.org>
3257
3258         * host.c (lookup_host): Special-case the numeric addresses only in
3259         the non-IPv6 case.
3260
3261 2003-11-10  Hrvoje Niksic  <hniksic@xemacs.org>
3262
3263         * connect.c (resolve_bind_address): Call lookup_host_passive.
3264         Make sure that opt.bind_address is resolved only once.
3265
3266         * host.c (lookup_host_passive): New function, handles "passive"
3267         lookups.
3268         (lookup_host): Remove the passive flags.  Remove the
3269         family-related flags -- use ip_default_family instead.
3270
3271 2003-11-09  Hrvoje Niksic  <hniksic@xemacs.org>
3272
3273         * html-url.c: Get URLs from <object data="...">.
3274
3275 2003-11-09  Hrvoje Niksic  <hniksic@xemacs.org>
3276
3277         * main.c (option_data): Specify the command to use for --mirror.
3278
3279 2003-11-08  Hrvoje Niksic  <hniksic@xemacs.org>
3280
3281         * cookies.c (cookie_handle_set_cookie): Specify exact match for
3282         unspecified domains.
3283
3284 2003-11-08  Hrvoje Niksic  <hniksic@xemacs.org>
3285
3286         * main.c (main): Removed one-letter options `-C', `-g', `-G', and
3287         `-s'.
3288
3289 2003-11-08  Hrvoje Niksic  <hniksic@xemacs.org>
3290
3291         * main.c (main): Add --dont-remove-listing for backward
3292         compatibility with previous versions.
3293         (print_help): Fix typo, spotted by Dennis Smit.
3294
3295 2003-11-08  Gisle Vanem  <giva@bgnett.no>
3296
3297         * ftp-basic.c: Support Windows-2000 ftp servers. Win-2000 *is*
3298         Win-NT 5.0 so calling it ST_WINNT is okay I guess.
3299
3300 2003-11-08  Hrvoje Niksic  <hniksic@xemacs.org>
3301
3302         * progress.c (update_speed_ring): Clear the speed ring when the
3303         download stalls.
3304
3305         * retr.c (get_contents): Specify 0.95s read timeout, so that the
3306         progress gauge can be updated even when data arrives very slowly
3307         or stalls.
3308
3309 2003-11-08  Hrvoje Niksic  <hniksic@xemacs.org>
3310
3311         * utils.c (wtimer_allocate): Bless the use of wtimer_read on a
3312         timer that has merely been allocated because get_contents() does
3313         that.
3314         (wtimer_update): Abort if the timer is not initialized.
3315
3316 2003-11-08  Hrvoje Niksic  <hniksic@xemacs.org>
3317
3318         * retr.c (get_contents): Pass the timer to limit_bandwidth().
3319
3320         * utils.c (wtimer_update): New function instead of wget_elapsed;
3321         just update the timer, but don't return anything.
3322         (wtimer_read): Read and return the last known value of the timer.
3323
3324 2003-11-08  Hrvoje Niksic  <hniksic@xemacs.org>
3325
3326         * http.c (persistent_available_p): Instead of matching all the
3327         addresses of HOST and last host, determine the peer's IP address
3328         with socket_ip_address and see if that address is one of those
3329         HOST resolves to.
3330
3331         * host.c (address_list_match_all): Removed.
3332         (address_list_find): New function, finds an IP address in the
3333         address list.
3334
3335         * ftp.c (ftp_do_pasv): Get the peer's address here, and pass it to
3336         ftp_epsv so it doesn't need to call getpeername.
3337
3338         * ftp-basic.c (ftp_port): Use socket_ip_address instead of
3339         getpeername.
3340         (ftp_lprt): Ditto.
3341
3342         * connect.c (socket_ip_address): Replaces conaddr, generalized to
3343         either get peer's or local address.
3344         (sockaddr_get_data): Made local to this file.
3345
3346 2003-11-08  Hrvoje Niksic  <hniksic@xemacs.org>
3347
3348         * hash.c (HASH_POSITION): Explicitly accept the hash function.
3349         (grow_hash_table): Extract ht->hash_function outside the loop.
3350         (hash_table_remove): Ditto.
3351         (hash_table_clear): Fill entries with 0xff to clear them.
3352         (hash_table_remove): Mark entries as deleted with the correct
3353         marker.
3354
3355 2003-11-08  Hrvoje Niksic  <hniksic@xemacs.org>
3356
3357         * http.c (persistent_available_p): No reason for the host lookup
3358         to be silent -- it's a lookup like any other.
3359
3360 2003-11-08  Hrvoje Niksic  <hniksic@xemacs.org>
3361
3362         * connect.c (register_extended): Check that fd >= 0.
3363
3364 2003-11-07  Hrvoje Niksic  <hniksic@xemacs.org>
3365
3366         * connect.c (LAZY_RETRIEVE_INFO): Set LAST_INFO.
3367
3368 2003-11-07  Hrvoje Niksic  <hniksic@xemacs.org>
3369
3370         * hash.c (NON_EMPTY): Use the all-bit-set value as the marker that
3371         the field is empty.  This allows NULL pointer and 0 value to be
3372         used as keys, which is necessary for the connect.c code to work
3373         when fd==0.
3374         (hash_table_new): Fill mappings with 0xff.
3375         (grow_hash_table): Ditto.
3376
3377 2003-11-07  Hrvoje Niksic  <hniksic@xemacs.org>
3378
3379         * url.c (url_parse): Allow empty ports.
3380
3381 2003-11-07  Hrvoje Niksic  <hniksic@xemacs.org>
3382
3383         * main.c (print_help): Break the help string into multiple chunks.
3384         (cmdline_option): New option handler OPT_FUNCALL.  Generalized
3385         HANDLE_CMD to generic DATA.
3386         (option_data): Use the new OPT_FUNCALL feature.
3387
3388 2003-11-06  Hrvoje Niksic  <hniksic@xemacs.org>
3389
3390         * log.h: Declare log_init, log_close, and
3391         log_request_redirect_output here.
3392
3393 2003-11-05  Dennis Smit  <ds@nerds-incorporated.org>
3394
3395         * main.c: (main): added --preserve-permissions option.
3396
3397         * ftp.c (ftp_retrieve_list): added support for
3398         --preserve-permissions option.
3399
3400         * init.c: added support for --preserve-permission option.
3401
3402         * option.h: added support for --preserve-permission option.
3403
3404 2003-11-06  Hrvoje Niksic  <hniksic@xemacs.org>
3405
3406         * main.c (init_switches): New function.  Convert option_data to
3407         long_options and short_options, which can be fed to getopt_long.
3408         (main): Execute command-line options by consulting option_data.
3409
3410 2003-11-06  Hrvoje Niksic  <hniksic@xemacs.org>
3411
3412         * gen_sslfunc.c (ssl_read): Implement a more correct check for
3413         EINTR.
3414         (ssl_write): Ditto.
3415         (init_ssl): Use a global SSL context.
3416
3417 2003-11-06  Hrvoje Niksic  <hniksic@xemacs.org>
3418
3419         * connect.c (xclose): Free INFO even if it doesn't provide a
3420         closer.
3421
3422 2003-11-06  Hrvoje Niksic  <hniksic@xemacs.org>
3423
3424         * connect.c: Updated all callers of
3425         iread/ssl_iread/iwrite/ssl_iwrite to use xread and xwrite instead.
3426
3427         * rbuf.h (struct rbuf): Removed the SSL member because SSL is
3428         handled automatically by xread.
3429
3430         * hash.c (ptrhash): Made private.
3431         (ptrcmp): Ditto.
3432         (inthash): Removed.
3433
3434         * connect.c (select_fd): Don't set errno, leave it to the caller.
3435
3436         * gen_sslfunc.c (connect_ssl): Use register_extended to register
3437         SSL callbacks for communication with SSL-enabled endpoints.
3438         (ssl_read): New function.
3439         (ssl_write): Ditto.
3440         (ssl_poll): Ditto.
3441         (ssl_close): Ditto.
3442
3443         * connect.c (register_extended): New function -- register
3444         callbacks for basic socket operations.
3445         (xread): Ditto.
3446         (xwrite): Ditto.
3447         (xclose): Ditto.
3448         (sock_read): New function, default implementation for reading.
3449         (sock_write): Ditto for writing.
3450         (sock_poll): Ditto for polling.
3451         (sock_close): Ditto for closing.
3452
3453 2003-11-05  Hrvoje Niksic  <hniksic@xemacs.org>
3454
3455         * connect.c (bindport): Fix compilation under pre-C99 compilers.
3456
3457 2003-11-05  Hrvoje Niksic  <hniksic@xemacs.org>
3458
3459         * connect.c (connect_to_ip): More compact error checking.
3460         (bindport): Don't treat failed setsockopt as a fatal error.
3461
3462 2003-11-05  Hrvoje Niksic  <hniksic@xemacs.org>
3463
3464         * connect.c (resolve_bind_address): Use a more accurate error
3465         message -- we're not binding to ANY, we're disabling bind
3466         altogether.
3467
3468 2003-11-05  Hrvoje Niksic  <hniksic@xemacs.org>
3469
3470         * cookies.c (save_cookies_mapper): Respect the setting of
3471         keep-session-cookies.
3472         (cookie_jar_load): Import session cookies.
3473         Based on code submitted by Nicolas Schodet.
3474
3475         * utils.c (datetime_str): Use information in TM when it's
3476         non-NULL.
3477
3478         * main.c (main): New option `--keep-session-cookies'.
3479
3480 2003-11-04  Hrvoje Niksic  <hniksic@xemacs.org>
3481
3482         * Makefile.in (realclean): Delete config.h.in.
3483
3484 2003-11-04  Hrvoje Niksic  <hniksic@xemacs.org>
3485
3486         * config-post.h: New file, included from now autogenerated
3487         config.h.in.
3488
3489 2003-11-04  Hrvoje Niksic  <hniksic@xemacs.org>
3490
3491         * progress.c (progress_handle_sigwinch): Don't call
3492         determine_screen_width() from the signal handler.  Instead, just
3493         set a volatile variable.
3494         (bar_create): Check whether SIGWINCH was received.
3495         (bar_update): Ditto.
3496
3497         * sysdep.h: Define SYSTEM_FNMATCH only if HAVE_FNMATCH_H is true.
3498
3499 2003-11-03  Hrvoje Niksic  <hniksic@xemacs.org>
3500
3501         * utils.c (xsleep): New function.  Uses nanosleep where available,
3502         resuming sleeps interrupted by signals.  Updated callers of sleep
3503         and usleep to use xsleep.
3504
3505 2003-11-03  Hrvoje Niksic  <hniksic@xemacs.org>
3506
3507         * ftp-basic.c (ftp_login): Remove shadowing (and bogus)
3508         declaration of SEED.
3509
3510 2003-11-03  Hrvoje Niksic  <hniksic@xemacs.org>
3511
3512         * log.c (logvprintf): Documented better.  Renamed to
3513         log_vprintf_internal to avoid confusion with the public API
3514         functions logprintf and logputs.
3515
3516 2003-11-03  Hrvoje Niksic  <hniksic@xemacs.org>
3517
3518         * wget.h (N_): Don't parenthesize argument.
3519
3520 2003-11-03  Hrvoje Niksic  <hniksic@xemacs.org>
3521
3522         * host.h (ADDRESS_IPV4_DATA): Don't take the address of in.s_addr
3523         because that doesn't work on machines that define it as bitfield.
3524
3525 2003-11-03  Hrvoje Niksic  <hniksic@xemacs.org>
3526
3527         * connect.c (select_fd): Generalize the third argument into WAIT,
3528         so that the caller can request waiting for both read and write.
3529         Updated callers.
3530
3531 2003-11-02  Hrvoje Niksic  <hniksic@xemacs.org>
3532
3533         * html-url.c (cleanup_html_url): Destroy the hash tables, don't
3534         just call free on them.
3535         (init_interesting): Use hash_table_put instead of string_set_add
3536         because we don't need the strdup that the latter function
3537         performs.
3538
3539         * init.c (cleanup): Don't pass NULL to cookie_jar_delete.
3540
3541         * xmalloc.c (xfree_real): Abort when passed a NULL pointer.
3542         (xfree_debug): Print at the file and line of the offending call to
3543         free.
3544
3545 2003-11-02  Hrvoje Niksic  <hniksic@xemacs.org>
3546
3547         * wget.h: Retired the `boolean' type.  Moved the DEFAULT_LOGFILE
3548         define to log.h.  Moved the INFINITE_RECURSION define to recur.h.
3549
3550         * xmalloc.h: Renamed FREE_MAYBE to xfree_null and moved the
3551         definition from wget.h to xmalloc.h.
3552
3553 2003-11-02  Hrvoje Niksic  <hniksic@xemacs.org>
3554
3555         * html-parse.c (decode_entity): New function; split the decoding
3556         of entities here.
3557         (convert_and_copy): Use it to decode entities.
3558         (decode_entity): Handle the &apos entity.
3559         (decode_entity): Don't decode Latin 1 numeric entities.  Don't
3560         decode &#0.
3561
3562 2003-11-01  Hrvoje Niksic  <hniksic@xemacs.org>
3563
3564         * ftp-opie.c (calculate_skey_response): Use uint32_t instead of
3565         `unsigned long' for the cheksum array.  Document the function.
3566
3567 2003-11-01  Hrvoje Niksic  <hniksic@xemacs.org>
3568
3569         * connect.c (acceptport): Don't call select_fd when timeout is not
3570         requested.
3571
3572 2003-11-01  Hrvoje Niksic  <hniksic@xemacs.org>
3573
3574         * host.c: Removed the ip_default_family global variable.
3575
3576         * host.c (lookup_host): Document the function.  Fixed declaration
3577         of VEC.
3578
3579 2003-10-31  Hrvoje Niksic  <hniksic@xemacs.org>
3580
3581         * various: Use new macros xnew, xnew0, xnew_array, and xnew0_array
3582         in various places.
3583
3584 2003-10-31  Hrvoje Niksic  <hniksic@xemacs.org>
3585
3586         * wget.h: Move declarations of malloc and logging code to
3587         xmalloc.h and log.h respectively to unclutter this file.
3588         (STRDUP_ALLOCA): Made it side-effect free.
3589
3590         * xmalloc.h: New files.  Define macros xnew, xnew0, xnew_array,
3591         and xnew0_array.
3592
3593         * xmalloc.c: New file.  Move the xmalloc routines here.
3594
3595 2003-10-31  Hrvoje Niksic  <hniksic@xemacs.org>
3596
3597         * connect.c (sockaddr_set_data): Remove the broken code that
3598         checked for NULL address.
3599
3600 2003-10-31  Hrvoje Niksic  <hniksic@xemacs.org>
3601
3602         * host.c (address_list_from_single): Removed.
3603         (address_list_from_ipv4_addresses): Renamed from
3604         address_list_from_vector.
3605
3606 2003-10-31  Hrvoje Niksic  <hniksic@xemacs.org>
3607
3608         * sysdep.h (CLOSE): Don't call close on file descriptors less than
3609         0, i.e. on uncreated sockets.
3610
3611         * connect.c (resolve_bind_address): Work on struct sockaddr
3612         directly.
3613         (connect_to_host): Replacement for connect_to_many.  Resolve HOST
3614         and connect to any of its addresses.  If we can't connect and the
3615         host name lookup was cached, try to resolve it again.  This should
3616         fix problems with hosts behind dynamic DNS.  Updated all callers.
3617         (connect_to_ip): Replacement for connect_to_one.  Removed SILENT;
3618         added the argument PRINT instead.  Updated all callers.
3619         (set_connection_host_name): Removed.
3620
3621         * host.c (address_list_address_at): New function instead of
3622         address_list_copy_one. It returns a pointer to ip_address *, so
3623         it's not necessary to copy the data.
3624         (address_list_cached_p): New function.
3625         (forget_host_lookup): Ditto.
3626
3627         * connect.c: Got rid of the MSOCK global variable.  Made bindport
3628         return the local socket it creates.  Added a new argument to
3629         acceptport, the socket to call accept on.  Updated callers.
3630         (closeport): Removed.
3631
3632         * connect.c: Moved the sockaddr code from host.c to this file,
3633         because most of that stuff is used for connecting, and has nothing
3634         to do with host names anyway.
3635         (sockaddr_set_data, sockaddr_get_data): New functions, replace the
3636         old sockaddr_set_address, sockaddr_set_port, sockaddr_get_address,
3637         and sockaddr_get_port.
3638
3639 2003-10-30  Hrvoje Niksic  <hniksic@xemacs.org>
3640
3641         * sysdep.h: Use `S >= 8' rather than `S == 8' when looking for
3642         large integers.
3643
3644 2003-10-30  Hrvoje Niksic  <hniksic@xemacs.org>
3645
3646         * url.c (append_uri_pathel): New argument ESCAPED_P that says
3647         whether [B, E) is to be treated as URL-escaped or not.  If
3648         ESCAPED_P is false, don't unescape the region.
3649         (url_file_name): u->file is not URL-escaped.
3650
3651 2003-10-30  Hrvoje Niksic  <hniksic@xemacs.org>
3652
3653         * retr.c (retrieve_from_file): Use retrieve_tree for
3654         page-requisites.
3655
3656         * main.c (main): Don't define opt.recursive when -p is used.
3657         Instead, make sure that recursion is used for HTTP in that case.
3658
3659 2003-10-29  Hrvoje Niksic  <hniksic@xemacs.org>
3660
3661         * host.h: Defined accessors for elements of ip_address.  Updated
3662         all callers.
3663         (address_list_match_all): Use memcmp in the non-IPv6 case.
3664
3665         * wget.h (CONNECT_ERROR): Don't retry connecting if connect()
3666         returned EAFNOSUPPORT.
3667
3668 2003-10-27  Mauro Tortonesi <mauro@deepspace6.net>
3669
3670         * connect.h: changed bindport prototype and added the related
3671         BIND_ON_IPV4_ONLY and BIND_ON_IPV6_ONLY flags.
3672
3673         * connect.c: changed bindport and resolve_bind_address to allow
3674         protocol-version specific DNS resolution. modified conaddr,
3675         acceptport and connect_to_one to make use of struct
3676         sockaddr_storage and of the new ip_address structure.
3677
3678         * ftp-basic.c: added LPRT/LPSV (RFC1639) support, refactored
3679         PORT/PASV (RFC959) and EPRT/EPSV (RFC2428) support code.
3680
3681         * ftp.c: added the ftp_do_port and ftp_do_pasv functions to
3682         handle FTP over IPv6.
3683
3684         * ftp.h: changed prototype of ftp_epsv and added prototypes for
3685         ftp_lpsv, ftp_lprt and ftp_eprt.
3686
3687         * host.c: renamed the
3688         wget_sockaddr_set_address and wget_sockaddr_get_addr, and
3689         wget_sockaddr_{s,g}et_port couples to sockaddr_{s,g}et_address and
3690         sockaddr_{g,s}et_port respectively.  changed
3691         address_list_match_all, address_list_from_addrinfo sockaddr_len,
3692         pretty_print_address, lookup_host, sockaddr_{s,g}et_address and
3693         sockaddr_{g,s}et_port to make use of struct sockaddr_storage and
3694         of the new ip_address structure.  removed map_ipv4_to_ip and
3695         map_ip_to_ipv4.
3696
3697         * host.h: redefined structure ip_address and removed structure
3698         wget_sockaddr.
3699
3700 2003-10-26  Hrvoje Niksic  <hniksic@xemacs.org>
3701
3702         * sysdep.h: Include inttypes.h where available.
3703
3704         * host.c: Switch from u_int32_t to uint32_t.
3705
3706 2003-10-26  Hrvoje Niksic  <hniksic@xemacs.org>
3707
3708         * netrc.c (parse_netrc): Reset the QUOTE flag after the closing
3709         quote.
3710
3711 2003-10-25  Hrvoje Niksic  <hniksic@xemacs.org>
3712
3713         * url.c (is_valid_ipv6_address): Reformat to GNU coding style.
3714         Use enums for NS_IN* constants.  Use ISXDIGIT.
3715
3716         * convert.c (construct_relative): Document better how the function
3717         works.
3718
3719 2003-10-23  Hrvoje Niksic  <hniksic@xemacs.org>
3720
3721         * config.h.in: Deploy preprocessor magic to avoid Ultrix's
3722         <netdb.h> include <bitypes.h> which defines its own u_int32_t.
3723         Reported by Bernhard Simon.
3724
3725 2003-10-23  Hrvoje Niksic  <hniksic@xemacs.org>
3726
3727         * version.c: Bump version.
3728
3729 2003-10-23  Hrvoje Niksic  <hniksic@xemacs.org>
3730
3731         * url.c: Ditto.
3732
3733         * html-parse.c (advance_declaration): Don't use trailing comma in
3734         enum because older compilers don't support it.
3735
3736         * utils.c: Don't redefine HAVE_SIGSETJMP.
3737
3738 2003-10-16  Hrvoje Niksic  <hniksic@xemacs.org>
3739
3740         * convert.c (construct_relative): Don't handle absolute files
3741         specially -- for example, -P/tmp/foo shouldn't imply that
3742         converted files must refer to "/tmp/foo/..."!
3743
3744 2003-10-15  Hrvoje Niksic  <hniksic@xemacs.org>
3745
3746         * http.c: Consider status 307 a valid redirect.
3747
3748 2003-10-15  Philip Stadermann  <philip.stadermann@credativ.de>
3749
3750         * ftp.c (ftp_retrieve_glob): Correctly loop through the list whose
3751         elements might have been deleted.
3752
3753 2003-10-13  Hrvoje Niksic  <hniksic@xemacs.org>
3754
3755         * html-url.c (tag_handle_meta): Set the Refresh link to expect
3756         HTML.
3757         (append_one_url): Renamed to append_url.
3758
3759 2003-10-13  Hrvoje Niksic  <hniksic@xemacs.org>
3760
3761         * sysdep.h: Only define u_int32_t.
3762
3763 2003-10-11  Hrvoje Niksic  <hniksic@xemacs.org>
3764
3765         * utils.c (large_int_to_string): Use snprintf() to print the
3766         number.  This will work even on systems where libc doesn't
3767         understand %lld, but the compiler does, because it will use our
3768         snprintf replacement.
3769
3770         * init.c (parse_bytes_helper): New function.
3771         (cmd_bytes): Use it to parse bytes, but cast the result to long.
3772         (cmd_bytes_large): Ditto, but store the result to LARGE_INT.  Used
3773         for --quota so that --quota=10G works even on machines without
3774         long long.
3775
3776         * options.h (struct options): Declare quota as LARGE_INT.
3777
3778         * retr.c (downloaded_exceeds_quota): Removed.
3779         (downloaded_increase): Ditto.
3780         (total_downloaded_bytes): New variable, replaces opt.downloaded,
3781         which was the wrong place for it anyway.  Updated callers of
3782         downloaded_exceeds_quota and downloaded_increase to check this
3783         variable directly.
3784
3785         * sysdep.h: Get rid of VERY_LONG_TYPE.  Use LARGE_INT for the same
3786         purpose, defined as `long', `long long' or `double', depending on
3787         size of long and whether long long is available.
3788
3789 2003-10-11  Hrvoje Niksic  <hniksic@xemacs.org>
3790
3791         * sysdep.h: Also check size of short for int32_t.
3792
3793 2003-10-11  Hrvoje Niksic  <hniksic@xemacs.org>
3794
3795         * host.c (lookup_host): Use u_int32_t to store the result of
3796         inet_addr().  That removes the need for offset fiddling, caring
3797         about endian-ness, etc.
3798
3799         * sysdep.h: Define int32_t and u_int32_t if not available.
3800
3801 2003-10-11  Hrvoje Niksic  <hniksic@xemacs.org>
3802
3803         * ftp-basic.c (ftp_epsv): Use socklen_t * as the third argument to
3804         getpeername.
3805
3806         * config.h.in: Define socklen_t stub.
3807
3808         * host.c (sockaddr_len): Return socklen_t.
3809
3810         * connect.c (conaddr): Use socklen_t as the third argument to
3811         accept, getsockname, and connect.
3812
3813 2003-10-10  Hrvoje Niksic  <hniksic@xemacs.org>
3814
3815         * recur.c (retrieve_tree): Don't descend into documents that are
3816         not expected to contain HTML, regardless of their content-type.
3817
3818         * html-url.c (tag_url_attributes): Record which attributes are
3819         supposed to yield HTML links that can be followed.
3820         (tag_find_urls): Propagate that information to the caller through
3821         struct urlpos.
3822
3823 2003-10-10  Hrvoje Niksic  <hniksic@xemacs.org>
3824
3825         * hash.c (find_mapping): Return the next available mapping when
3826         the key is not found, not NULL.
3827         (hash_table_put): Use find_mapping to find the storage for the new
3828         data.
3829         (hash_table_put): Grow the table before exceeding maximum
3830         fullness, not afterwards.
3831
3832 2003-10-10  Hrvoje Niksic  <hniksic@xemacs.org>
3833
3834         * hash.c (hash_table_new): Slightly change the meaning of the
3835         first parameter.  Instead of being the minimum initial size, it is
3836         now the minimum number of items that the hash table can take
3837         without needing to resize.
3838
3839 2003-10-09  Hrvoje Niksic  <hniksic@xemacs.org>
3840
3841         * html-url.c (init_interesting): Initialize interesting_tags and
3842         interesting_attributes as hash tables.  This simplifies the code
3843         immensely because hash tables handle allocation and remove
3844         duplicates automatically.
3845         (find_tag): Removed.
3846         (collect_tags_mapper): Instead of calling find_tag, simply get the
3847         entry from interesting_tags hash table, which is both simpler and
3848         faster.
3849
3850 2003-10-09  Hrvoje Niksic  <hniksic@xemacs.org>
3851
3852         * hash.c (hash_table_get): Declare hash-table argument as const.
3853         (find_mapping): Ditto.
3854         (hash_table_get_pair): Ditto.
3855         (hash_table_contains): Ditto.
3856         (hash_table_count): Ditto.
3857
3858 2003-10-08  Hrvoje Niksic  <hniksic@xemacs.org>
3859
3860         * html-url.c (get_urls_html): Parse the appropriate flags to
3861         html-parse.c.
3862
3863         * html-parse.c (map_html_tags): Accept FLAGS from the caller
3864         instead of examining OPT.
3865
3866 2003-10-08  Hrvoje Niksic  <hniksic@xemacs.org>
3867
3868         * html-url.c (find_tag): Switch to binary search.
3869
3870 2003-10-08  Hrvoje Niksic  <hniksic@xemacs.org>
3871
3872         * main.c (print_help): Fix typo; stured -> stored.
3873
3874 2003-10-08  Hrvoje Niksic  <hniksic@xemacs.org>
3875
3876         * getopt.c: Add definitions of getopt_long and getopt_long_only.
3877
3878 2003-10-08  Hrvoje Niksic  <hniksic@xemacs.org>
3879
3880         * config.h.in: Renamed DEBUG to ENABLE_DEBUG.  ENABLE_DEBUG is, I
3881         think, a better name, because it implies that debugging output is
3882         merely possible, not "on by default", as might be construed from
3883         just DEBUG.
3884
3885 2003-10-08  Hrvoje Niksic  <hniksic@xemacs.org>
3886
3887         * ftp.c (has_insecure_name_p): Define it here.
3888
3889         * utils.c (has_wildcards_p): Define it here.
3890
3891         * sysdep.h: Declare fnmatch-related macros here, if not using
3892         system fnmatch().  Update .c files to not declare fnmatch.h
3893         directly.
3894
3895         * cmpt.c (fnmatch): Moved here.  Use it only under non-GNU libc.
3896
3897 2003-10-08  Hrvoje Niksic  <hniksic@xemacs.org>
3898
3899         * getopt.c: Newer version, imported from Free libit.
3900
3901 2003-10-07  Hrvoje Niksic  <hniksic@xemacs.org>
3902
3903         * cookies.c (struct cookie): Remove unused backpointer to cookie
3904         jar.
3905
3906 2003-10-07  Hrvoje Niksic  <hniksic@xemacs.org>
3907
3908         * cmpt.c (memmove): Comment out, since it's no longer used.
3909
3910         * cookies.c (cookie_jar_generate_cookie_header): Allocate room for
3911         chains in one pass.
3912         (find_chains_of_host): Assume that the caller has allocated DEST
3913         to be sufficiently large to take all the data.
3914         (eliminate_dups): Run through the array and eliminate dups on the
3915         fly instead of using memmove.
3916         (cookie_jar_process_set_cookie): Free cookie->domain before
3917         re-setting it.
3918
3919 2003-10-05  Gisle Vanem  <giva@bgnett.no>
3920
3921         * mswindows.c (set_sleep_mode): Fix type of
3922         _SetThreadExecutionState.
3923
3924 2003-10-05  Hrvoje Niksic  <hniksic@xemacs.org>
3925
3926         * utils.c (file_size): Return -1 if fopen() returns NULL.  Prior
3927         to this patch, wget --post-file=nosuchfile dumped core.
3928
3929 2003-10-04  Gisle Vanem  <giva@bgnett.no>
3930
3931         * mswindows.c (run_with_timeout): Use WaitForSingleObject to wait
3932         for thread termination.
3933
3934 2003-10-04  Hrvoje Niksic  <hniksic@xemacs.org>
3935
3936         * log.c: Use `...' in function definitions; ansi2knr will convert
3937         them to va_dcl.  This allowed removal of the ugly VA_START_1 and
3938         VA_START_2 macros.
3939
3940 2003-10-03  Gisle Vanem  <giva@bgnett.no>
3941
3942         * connect.c: And don't include them here.
3943
3944         * mswindows.h: Include winsock headers here.
3945
3946 2003-10-03  Hrvoje Niksic  <hniksic@xemacs.org>
3947
3948         * html-parse.c (convert_and_copy): Move variable declarations
3949         before statements.
3950
3951 2003-10-02  Gisle Vanem  <giva@bgnett.no>
3952
3953         * mswindows.c (run_with_timeout): For Windows: Run the 'fun' in a
3954         thread via a helper function. Continually query the thread's
3955         exit-code until finished or timed out.
3956
3957 2003-10-02  Hrvoje Niksic  <hniksic@xemacs.org>
3958
3959         * wget.h (XMALLOC_ARRAY): Removed.
3960         (ALLOCA_ARRAY): Ditto.
3961
3962         * html-parse.c: Renamed alloca_p to resized.
3963         (GROW_ARRAY): Renamed DO_REALLOC_FROM_ALLOCA to GROW_ARRAY and
3964         returned it to html-parse.c, since nothing else was using it.
3965
3966 2003-10-02  Hrvoje Niksic  <hniksic@xemacs.org>
3967
3968         * retr.c (retrieve_url): Initialize DUMMY storage for DT.  Caught
3969         by valgrind.
3970
3971 2003-10-02  Hrvoje Niksic  <hniksic@xemacs.org>
3972
3973         * html-parse.c (convert_and_copy): Handle numeric entities in
3974         hexadecimal, &#xHH.
3975         (convert_and_copy): Copy the contents directly to the pool without
3976         a stack-allocated intermediary.
3977
3978 2003-10-02  Hrvoje Niksic  <hniksic@xemacs.org>
3979
3980         * utils.c (alarm_set): New function; use either setitimer or alarm
3981         to set up the alarm.
3982         (alarm_cancel): New function; cancel the alarm set up by
3983         alarm_set.
3984         (run_with_timeout): Use them.
3985
3986 2003-10-01  Hrvoje Niksic  <hniksic@xemacs.org>
3987
3988         * url.c (url_parse): Don't leak memory when a reencoded URL turns
3989         out to be invalid.
3990
3991         * url.c (parse_errors): Mark error messages for translation.
3992         (url_error): Translate error messages returned to the caller.
3993
3994 2003-10-01  Hrvoje Niksic  <hniksic@xemacs.org>
3995
3996         * ftp.c (ftp_loop_internal): Initialize TMRATE to NULL to shut up
3997         the compiler.
3998
3999 2003-09-26  Gisle Vanem  <giva@bgnett.no>
4000
4001         * src/mswindows.c: Added ws_percenttitle() showing progress in the
4002         window titlebar. Called from retr.c. Secured ws_mypath().
4003
4004         * windows/config.h.ms: alloca() prototype not needed.  Removed
4005         "#undef ENABLE_NLS"; should be in Makefile IMHO. Moved
4006         WGET_USE_STDARG from mswindows.h to config.ms.h because of #ifdef
4007         in log.c. (MSVC's vararg.h and stdarg.h are incompatible).
4008
4009 2003-09-29  Aaron Hawley <Aaron.Hawley@uvm.edu>
4010
4011         * ftp.c (getftp): --spider option should now work with FTP
4012         downloads.
4013         (ftp_loop_internal): quiet reports and calculations of downloads
4014         when --spider option set, nor try deleting when --delete-after
4015         also set.
4016         (ftp_loop): --spider will skip HTML-ification of .listing file.
4017
4018 2003-09-26  Gisle Vanem  <giva@bgnett.no>
4019
4020         * mswindows.c (read_registry): Removed.
4021         (set_sleep_mode): New function.
4022         (windows_main_junk): Call it.
4023
4024 2003-09-26  Gisle Vanem  <giva@bgnett.no>
4025
4026         * mswindows.c (read_registry): Fix invocation of registry
4027         functions.
4028
4029         * mswindows.c (read_registry): Condition definitions of sleep and
4030         usleep with not HAVE_SLEEP and HAVE_USLEEP respectively.  Define
4031         HAVE_SLEEP and HAVE_USLEEP under __DMC__.
4032
4033 2003-09-24  Hrvoje Niksic  <hniksic@xemacs.org>
4034
4035         * url.c (url_escape_1): Revert unintentional change to lowercase
4036         xdigit escapes.
4037         (url_escape_dir): Document that this function depends on the
4038         output of url_escape_1.
4039
4040 2003-09-23  Hrvoje Niksic  <hniksic@xemacs.org>
4041
4042         * progress.c (create_image): Print the current ETA if we're done
4043         with the download.
4044         (create_image): Change '-' display char to '+' in the progress bar.
4045
4046         * Makefile.in (clean): Remove .libs.
4047
4048 2003-09-23  Hrvoje Niksic  <hniksic@xemacs.org>
4049
4050         * cookies.c (struct cookie): New flag domain_exact.
4051         (update_cookie_field): Skip leading dot in domain.
4052         (find_matching_chains): Match numeric addresses exactly; don't
4053         needlessly copy HOST to the stack.
4054         (matching_cookie): Added argument HOST.  If cookie->domain_exact
4055         is set, check that HOST is equal to cookie->domain.
4056         (cookie_jar_load): Only use TAB as delimiter.  Document the
4057         meaning of DOMAIN-FLAG.  Skip leading dot in domain.
4058         (cookie_jar_load): Don't ignore DOMAIN-FLAG -- instead, set
4059         domain_exact to true if DOMAIN-FLAG is false.
4060         (save_cookies_mapper): If domain_exact is false, prepend the
4061         domain with dot, like Mozilla does.
4062
4063 2003-09-22  Hrvoje Niksic  <hniksic@xemacs.org>
4064
4065         * progress.c (create_image): Print the initial part of the
4066         download with '-' characters, analogous to how dot progress prints
4067         the initial part with ','.
4068
4069         * hash.c (ptrhash): New function.
4070         (ptrcmp): Ditto.
4071         (hash_table_new): Default to identity hash table.
4072
4073 2003-09-22  Hrvoje Niksic  <hniksic@xemacs.org>
4074
4075         * safe-ctype.h (_sch_test): The cast of BIT to unsigned char was
4076         broken -- _sch_istable bitmasks are 16-bit, not 8-bit!  Cast BIT
4077         to unsigned short instead.
4078
4079 2003-09-22  Hrvoje Niksic  <hniksic@xemacs.org>
4080
4081         * url.c (path_simplify): Instead of calls to memmove, handle "./"
4082         and "../" by advancing pointers.
4083
4084 2003-09-22  Hrvoje Niksic  <hniksic@xemacs.org>
4085
4086         * retr.c (getproxy): Moved from url.c.
4087
4088         * convert.c: Split off link conversion from url.c into separate
4089         file.  Also included the book-keeping stuff from recur.c.
4090
4091 2003-09-21  Hrvoje Niksic  <hniksic@xemacs.org>
4092
4093         * init.c: Improved documentation of functions.
4094         (cmd_boolean): Attempt to make code that tries to avoid calling
4095         strcmp for "speed" a bit more readable.
4096
4097         * init.c (simple_atof): Report error on encountering non-digit,
4098         non-"." character.
4099         (simple_atoi): Replacement for myatoi(), calling interface
4100         compatible with simple_atof.  Updated myatoi's callers.
4101
4102 2003-09-21  Bertrand Demiddelaer  <bert@b3rt.org>
4103
4104         * url.c (path_simplify): Would read two bytes past the end of the
4105         string in the "./" case.
4106
4107 2003-09-21  Matthew J. Mellon  <mellon@tymenet.com>
4108
4109         * http.c (gethttp): Recognize content-type "application/xhtml+xml"
4110         as what Wget considers "text/html".
4111
4112 2003-09-21  Hrvoje Niksic  <hniksic@xemacs.org>
4113
4114         * connect.c (connect_with_timeout): Made timeout type double.
4115
4116         * options.h (struct options): New members read_timeout,
4117         dns_timeout, and connect_timeout.
4118         Use them.
4119
4120 2003-09-21  Hrvoje Niksic  <hniksic@xemacs.org>
4121
4122         * init.c (simple_atof): New function.
4123         (cmd_time): Use it.
4124         (cmd_bytes): Accept things like "1.5k" and such.  Use simple_atof
4125         to parse decimals.
4126
4127         * retr.c (limit_bandwidth): Adjust each sleep by the error of the
4128         previous one.
4129
4130 2003-09-21  Hrvoje Niksic  <hniksic@xemacs.org>
4131
4132         * main.c (main): Use setoptval() for setting the options.  Use
4133         run_command for `-e'.
4134
4135         * init.c (parse_line): Rewritten to return COMIND right away.
4136         Changed linkage to static.
4137         (run_wgetrc): Use the available comind when calling setval, so it
4138         doesn't have to be computed twice.
4139         (setval_internal): New function, runs the command's action without
4140         any error checking.
4141         (setoptval): New function, does what setval used to do, but exits
4142         in case of error.
4143         (run_command): New function.
4144
4145 2003-09-21  Hrvoje Niksic  <hniksic@xemacs.org>
4146
4147         * connect.c (select_fd): Change MAXTIME's type to double.  Handle
4148         its decimal part.
4149
4150         * retr.c (sleep_between_retrievals): In the random-wait case, use
4151         random_float() to wait between 0 and 2*opt.wait seconds.
4152
4153         * utils.c (run_with_timeout): Accept `double' timeouts.  Correctly
4154         handle timeout values in (0, 1) range.
4155         (random_float): New function.
4156
4157         * options.h (struct options): Change the types of wait, waitretry,
4158         and timeout to double.
4159
4160         * init.c (cmd_time): Accept floating point time.
4161
4162 2003-09-20  Hrvoje Niksic  <hniksic@xemacs.org>
4163
4164         * retr.c (get_contents): Cosmetic fixes.
4165
4166 2003-09-20  Hrvoje Niksic  <hniksic@xemacs.org>
4167
4168         * url.c (uri_merge): Get rid of uri_merge_1.
4169         (uri_merge): Merge "foo//", "bar" as "foo//bar", not "foo///bar",
4170         i.e. don't add an extra slash merely because BASE ends with two
4171         slashes.
4172         (parse_credentials): Renamed from parse_uname.  Rewrittern in
4173         standard [beg, end) calling style.
4174         (url_skip_credentials): Renamed from url_skip_uname.  Made static.
4175         (url_skip_credentials): Include # and ; as terminators.  Old code
4176         would mistakenly consider "http://foo.com#hniksic@iskon.hr" to
4177         contain a username.
4178         (url_skip_scheme): Removed because it was unused.
4179         (url_has_scheme): Require "scheme" to be at least one char long.
4180
4181 2003-09-19  Hrvoje Niksic  <hniksic@xemacs.org>
4182
4183         * url.c (url_file_name): Expect NULL dir_prefix.
4184
4185         * init.c (cmd_file): Use a macro to prevent multiple #ifdef
4186         WINDOWS.
4187         (defaults): Set dir_prefix to NULL by default.
4188
4189 2003-09-19  Hrvoje Niksic  <hniksic@xemacs.org>
4190
4191         * safe-ctype.h (_sch_test): Cast BIT to unsigned char, like latest
4192         gcc does.
4193
4194 2003-09-19  Hrvoje Niksic  <hniksic@xemacs.org>
4195
4196         * wget.h (BOUNDED_TO_ALLOCA): Evaluate PLACE only once.
4197         (ARRAY_SIZE): Renamed to countof.  All callers updated.
4198
4199 2003-09-19  Hrvoje Niksic  <hniksic@xemacs.org>
4200
4201         * main.c (main): New option --strict-comments.
4202
4203         * html-parse.c (find_comment_end): New function: simple BM search
4204         for "-->".
4205         (map_html_tags): Use it if looking at a comment and not in strict
4206         comments mode.
4207
4208 2003-09-17  Aurelien Marchand  <artaxerxes@users.sf.net>
4209
4210         * ftp.h: Added OS400 system in enum
4211         * ftp-basic.c: recognize OS400 systems
4212         * ftp.c: don't prepend the CWD if talking to OS400, since it
4213         breaks the change in library
4214
4215 2003-09-18  Hrvoje Niksic  <hniksic@xemacs.org>
4216
4217         * retr.c (get_contents): Pass the correct argument to ssl_iread.
4218
4219 2003-09-18  Hrvoje Niksic  <hniksic@xemacs.org>
4220
4221         * safe-ctype.h: Don't #define ctype.h macros to errors because
4222         that loses when someone #include's ctype.h after safe-ctype.h.
4223
4224 2003-09-17  Hrvoje Niksic  <hniksic@xemacs.org>
4225
4226         * url.c: Undef U, W, C after use.
4227
4228 2003-09-17  Hrvoje Niksic  <hniksic@xemacs.org>
4229
4230         * init.c (cmd_spec_restrict_file_names): Allow the OS setting to
4231         be augmented by ",nocontrol" which means don't escape the control
4232         characters, but otherwise keep OS settings.
4233
4234         * url.c (file_unsafe_char): Deleted.
4235         (append_uri_pathel): Query filechr_table directly.
4236         (filechr_table): Separated Unix, Windows, and control-unsafe
4237         characters.
4238
4239 2003-09-17  Hrvoje Niksic  <hniksic@xemacs.org>
4240
4241         * url.c (url_escape_1): New function.
4242         (url_escape): Use it.
4243         (sync_path): Handle pathological cases where u->file and u->dir
4244         contain really strange characters.
4245         (ENCODE): Deleted.
4246         (REENCODE): Deleted.
4247
4248 2003-09-16  Hrvoje Niksic  <hniksic@xemacs.org>
4249
4250         * url.c (url_file_name): Don't reallocate FNAME if the file
4251         doesn't exist, as is usually the case.
4252
4253         * utils.c (unique_name): New flag allow_passthrough.
4254
4255 2003-09-16  Hrvoje Niksic  <hniksic@xemacs.org>
4256
4257         * utils.c (wtimer_sys_diff): Convert the time difference to signed
4258         __int64, then to double.  This works around MS VC++ 6 which can't
4259         convert unsigned __int64 to double directly.
4260
4261 2003-09-16  Hrvoje Niksic  <hniksic@xemacs.org>
4262
4263         * Makefile.in (clean): Also remove the core.<number> files
4264         produced by recent Linux systems.
4265
4266 2003-09-16  Hrvoje Niksic  <hniksic@xemacs.org>
4267
4268         * http.c (post_file): Don't pad the file if it's not large
4269         enough.  Bail out instead.
4270
4271 2003-09-15  Hrvoje Niksic  <hniksic@xemacs.org>
4272
4273         * retr.c (get_contents): Reduce the buffer size to the amount of
4274         data that may pass through for one second.  This prevents long
4275         sleeps when limiting bandwidth.
4276
4277         * connect.c (connect_to_one): Reduce the socket's RCVBUF when
4278         bandwidth limitation to small values is requested.
4279
4280 2003-09-15  Hrvoje Niksic  <hniksic@xemacs.org>
4281
4282         * progress.c (update_speed_ring): Moved the speed ring update to a
4283         separate function and documented it better.
4284
4285         * progress.c: Use `double' for most timers to support granularity
4286         smaller than 1ms.
4287
4288 2003-09-15  Hrvoje Niksic  <hniksic@xemacs.org>
4289
4290         * wget.h (XDIGIT_TO_XCHAR): Implement as index into a literal
4291         string.
4292         (XDIGIT_TO_xchar): Ditto.
4293
4294 2003-09-15  Hrvoje Niksic  <hniksic@xemacs.org>
4295
4296         * utils.c: Change the type of timer-related functions from long to
4297         double, for better precision.  On machines supporting gettimeofday
4298         the timers now work with granularity of less than one millisecond.
4299
4300 2003-09-15  Hrvoje Niksic  <hniksic@xemacs.org>
4301
4302         * cookies.c (parse_set_cookies): Fixed the parser to handle more
4303         edge conditions.
4304         (test_cookies): New function, contains a test suite for
4305         parse_set_cookies.
4306
4307 2003-09-15  Hrvoje Niksic  <hniksic@xemacs.org>
4308
4309         * url.c (strpbrk_or_eos): Implement as a macro under Gcc.
4310
4311 2003-09-15  Hrvoje Niksic  <hniksic@xemacs.org>
4312
4313         * cookies.c (parse_set_cookies): Allow trailing space in
4314         set-cookies header.  Also, allow any amount of whitespace, not
4315         only one character.  Allow empty set-cookies header without
4316         spewing an error.
4317
4318 2003-09-14  Hrvoje Niksic  <hniksic@xemacs.org>
4319
4320         * url.c (append_uri_pathel): Use opt.restrict_file_names when
4321         calling file_unsafe_char.
4322
4323         * init.c: New command restrict_file_names.
4324
4325         * main.c (main): New option --restrict-file-names[=windows,unix].
4326
4327         * url.c (url_file_name): Renamed from url_filename.
4328         (url_file_name): Add directory and hostdir prefix here, not in
4329         mkstruct.
4330         (append_dir_structure): New function, does part of the work that
4331         used to be in mkstruct.  Iterates over path elements in u->path,
4332         calling append_uri_pathel on each one to append it to the file
4333         name.
4334         (append_uri_pathel): URL-unescape a path element and reencode it
4335         with a different set of rules, more appropriate for handling of
4336         files.
4337         (file_unsafe_char): New function, uses a lookup table to decide
4338         whether a character should be escaped for use in file name.
4339         (append_string): New utility function.
4340         (append_char): Ditto.
4341         (file_unsafe_char): New argument restrict_for_windows, decide
4342         whether Windows file names should be escaped in run-time.
4343
4344         * connect.c: Include <stdlib.h> to get prototype for abort().
4345
4346 2003-09-14  Hrvoje Niksic  <hniksic@xemacs.org>
4347
4348         * utils.c (wtimer_sys_set): Extracted the code that sets the
4349         current time here.
4350         (wtimer_reset): Call it.
4351         (wtimer_sys_diff): Extracted the code that calculates the
4352         difference between two system times here.
4353         (wtimer_elapsed): Call it.
4354         (wtimer_elapsed): Don't return a value smaller than the previous
4355         one, which could previously happen when system time is set back.
4356         Instead, reset start time to current time and note the elapsed
4357         offset for future calculations.  The returned times are now
4358         guaranteed to be monotonically nondecreasing.
4359
4360 2003-09-10  Hrvoje Niksic  <hniksic@xemacs.org>
4361
4362         * host.c (lookup_host): Print the result of the DNS lookup.
4363
4364 2003-09-10  Hrvoje Niksic  <hniksic@xemacs.org>
4365
4366         * init.c (cmd_boolean): Accept yes/no along with on/off.
4367         (cmd_lockable_boolean): Ditto.
4368
4369 2003-09-10  Hrvoje Niksic  <hniksic@xemacs.org>
4370
4371         * init.c: New command dns_cache.
4372
4373         * main.c (main): New option --dns-cache[=off].
4374
4375 2003-09-09  Hrvoje Niksic  <hniksic@xemacs.org>
4376
4377         * config.h.in: Initialize HAVE_GETADDRINFO and ENABLE_IPV6.
4378
4379         * all: Use #ifdef ENABLE_IPV6 instead of the older INET6.  Use
4380         HAVE_GETADDRINFO for getaddrinfo-related stuff.
4381
4382 2003-09-09  Hrvoje Niksic  <hniksic@xemacs.org>
4383
4384         * url.c (url_parse): Return an error if the URL contains a [...]
4385         IPv6 numeric address and we don't support IPv6.
4386
4387 2003-09-05  Hrvoje Niksic  <hniksic@xemacs.org>
4388
4389         * url.c (is_valid_ipv6_address): Modified to not require
4390         zero-terminated strings.
4391         (is_valid_ipv4_address): Ditto.
4392
4393 2003-09-05  Mauro Tortonesi <mauro@deepspace6.net>
4394
4395         src/url.c: added RFC 2732 compliance for URL parsing. The
4396         functions is_*_address valid are a modified version of
4397         glibc 2.3.2 inet_pton's code.
4398
4399 2003-09-03  Ahmon Dancy  <dancy@dancysoft.com>
4400
4401         * main.c init.c options.h: Added --retry-connrefused option so
4402         that Connection Refused failures are treated as non-fatal (when
4403         trying to retrieve from busy servers).
4404
4405         * wget.h: New CONNECT_ERROR macro for encapsulating this
4406         modification.
4407
4408         * ftp.c http.c : Use CONNECT_ERROR macro in places where
4409         ECONNREFUSED was checked.
4410
4411 2003-01-11  Ian Abbott  <abbotti@mev.co.uk>
4412
4413         * ftp.c (ftp_retrieve_glob): Reject insecure filenames as determined
4414         by calling new function has_insecure_name_p.  This is based on a
4415         patch by Red Hat.
4416
4417         * fnmatch.c (has_insecure_name_p): New function: returns non-zero
4418         if filename starts with `/' or contains `../' and is therefore
4419         considered insecure.
4420
4421         * fnmatch.h: Declare has_insecure_name_p().
4422
4423 2002-08-03  Hrvoje Niksic  <hniksic@xemacs.org>
4424
4425         * init.c (cmd_file): Allocate RESULT correctly.
4426
4427 2002-07-24  Hrvoje Niksic  <hniksic@xemacs.org>
4428
4429         * recur.c (retrieve_tree): Check whether downloaded_html_set is
4430         non-NULL before using it.
4431
4432 2002-05-27  Hrvoje Niksic  <hniksic@arsdigita.com>
4433
4434         * html-parse.c (NAME_CHAR_P): Allow almost any character here.
4435
4436 2002-05-24  Hrvoje Niksic  <hniksic@arsdigita.com>
4437
4438         * progress.c (bar_set_params): Fall back to dot progress if the
4439         terminal type is "emacs".
4440
4441 2002-05-20  Hrvoje Niksic  <hniksic@arsdigita.com>
4442
4443         * log.c: Don't #undef WGET_USE_STDARG.
4444
4445 2002-05-16  Hrvoje Niksic  <hniksic@arsdigita.com>
4446
4447         * hash.c (prime_size): Store the offset of the prime number in the
4448         prime table.  When searching, start with the given offset.
4449         (hash_table_new): Pass the pointer to ht->prime_offset to
4450         prime_size.
4451         (grow_hash_table): Ditto.
4452         (prime_size): Make 13 the first prime to make empty hash tables
4453         slightly smaller.
4454
4455 2002-05-16  Ian Abbott  <abbotti@mev.co.uk>
4456
4457         * recur.c (download_child_p): Minor optimization to avoid an
4458         unnecessary additional call to schemes_are_similar_p function.
4459
4460 2002-05-16  Ian Abbott  <abbotti@mev.co.uk>
4461
4462         * url.c (schemes_are_similar_p): New function to test enumerated
4463         scheme codes for similarity.
4464
4465         * url.h: Declare it.
4466
4467         * recur.c (download_child_p): Use it to compare schemes.  This
4468         also fixes a bug that allows hosts to be spanned (without the
4469         -H option) when the parent scheme is https and the child's is
4470         http or vice versa.
4471
4472 2002-05-14  Bill Richardson  <bill@riverstonenet.com>
4473
4474         * ftp.c (getftp): Don't ftruncate stdout.
4475
4476         * http.c (gethttp): Don't ftruncate stdout.
4477
4478 2002-05-09  Ian Abbott  <abbotti@mev.co.uk>
4479
4480         * cmpt.c (strptime_internal): Synched with glibc-2.1.3.
4481         (get_number): Ditto.
4482         (get_alt_number): Ditto.
4483         (__isleap): New function-like macro used by strptime.
4484         (day_of_the_week): New function used by strptime.
4485         (day_of_the_year): Ditto.
4486         (__mon_yday): Now shared by mktime and strptime implementations.
4487
4488 2002-05-08  Hrvoje Niksic  <hniksic@arsdigita.com>
4489
4490         * cookies.c (check_domain_match): Use match_tail in case
4491         insensitive mode.
4492
4493         * utils.c (match_tail): Allow the caller to specify case
4494         insensitive mode.
4495
4496         * cookies.c (store_cookie): When expiry_time is 0, print it as
4497         undefined, not indefinite.
4498
4499 2002-05-07  Ian Abbott  <abbotti@mev.co.uk>
4500
4501         * cookies.c (cookie_jar_process_set_cookie): Do not store
4502         discarded cookie.
4503
4504 2002-04-21  Hrvoje Niksic  <hniksic@arsdigita.com>
4505
4506         * cookies.c (check_domain_match): Allow cookies to be set for
4507         subdomains of unknown top-level domains under some circumstances.
4508
4509 2002-04-21  Thomas Lussnig  <thomas.lussnig@bewegungsmelder.de>
4510
4511         * gen_ssl.c:
4512         - allow checking of server cert
4513         - allow defining client cert type
4514         - allow limit of ssl protocol
4515         - check more return values
4516         - added debug message on break
4517
4518 2002-04-21  Hrvoje Niksic  <hniksic@arsdigita.com>
4519
4520         * recur.c (download_child_p): Revert order of items in check
4521         number 6 for clarity.
4522
4523 2002-04-20  Hrvoje Niksic  <hniksic@arsdigita.com>
4524
4525         * init.c: Ditto.
4526
4527         * main.c: Ditto.
4528
4529         * http.c: Use the new interface.
4530
4531         * cookies.c: Provide an OO-style "cookie jar" interface to enable
4532         separate cookie jars.
4533
4534         * http.c (http_atotm): Declare argument as const.
4535
4536 2002-04-20  Hrvoje Niksic  <hniksic@arsdigita.com>
4537
4538         * cookies.c (cookie_new): Default to PORT_ANY.
4539         (find_cookie_chain_exact): Only search by DOMAIN.
4540         (find_matching_cookie): Also check that PORT matches.
4541         (store_cookie): Only match the domain.
4542         (set_cookie_header_cb): When a cookie "fakes" a domain, assume it
4543         is valid for that host rather than discarding it completely.
4544         (find_matching_chains): Don't search by PORT.
4545         (matching_cookie): Also match PORT.
4546         (load_cookies): Set the port if specified, otherwise leave it as
4547         ANY.
4548         (save_cookies_mapper): Save the port if specified, otherwise leave
4549         it empty.
4550
4551 2002-04-19  Thomas Lussnig  <thomas.lussnig@bewegungsmelder.de>
4552
4553         * init.c: The option `egdfile' was not in sort order.
4554
4555 2002-04-16  Hrvoje Niksic  <hniksic@arsdigita.com>
4556
4557         * ftp.c (getftp): Treat directories that begin with <letter>: as
4558         absolute.
4559         (getftp): Strip trailing slashes from con->id before merging it
4560         with TARGET.
4561
4562 2002-04-16  Hrvoje Niksic  <hniksic@arsdigita.com>
4563
4564         * http.c (gethttp): If Content-Type is not given, assume
4565         text/html.
4566
4567 2002-04-15  Hrvoje Niksic  <hniksic@arsdigita.com>
4568
4569         * recur.c (download_child_p): Don't ignore rejection of HTML
4570         documents that are themselves leaves of recursion.
4571
4572 2002-04-15  Ian Abbott  <abbotti@mev.co.uk>
4573
4574         Makefile.in: Updated several dependencies for object files to take
4575         account of nested include files.
4576
4577 2002-04-15  Ian Abbott  <abbotti@mev.co.uk>
4578
4579         Makefile.in: The target `connect$o' (connect.o) now depends on
4580         `utils.h'
4581
4582 2002-04-15  Ian Abbott  <abbotti@mev.co.uk>
4583
4584         * host.c (SET_H_ERRNO): New function-like macro to set `h_errno'.
4585         (gethostbyname_with_timeout): Use it.
4586
4587         * utils.c: Don't define `SETJMP()', `run_with_timeout_env' or
4588         `abort_run_with_timeout()' when `USE_SIGNAL_TIMEOUT' is undefined.
4589
4590 2002-04-15  Hrvoje Niksic  <hniksic@arsdigita.com>
4591
4592         * host.c (getaddrinfo_with_timeout): New function.
4593         (gethostbyname_with_timeout): Ditto.
4594         (lookup_host): Use them.
4595
4596 2002-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
4597
4598         * utils.c (number_to_string): Handle the case when n < -INT_MAX.
4599
4600 2002-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
4601
4602         * init.c (comind): Use a marginally faster implementation of
4603         binary search.  To quote Martin Buchholz, "a nanosecond saved is a
4604         nanosecond earned."
4605
4606 2002-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
4607
4608         * main.c (print_help): Document `--post-data' and `--post-file'.
4609
4610 2002-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
4611
4612         * http.c (gethttp): Ditto.
4613
4614         * retr.c (retrieve_url): Initialize variables to appease the
4615         compiler.
4616
4617         * gen_sslfunc.c (ssl_iread): Don't handle EINTR when calling
4618         select_fd.
4619         (ssl_iwrite): Ditto.
4620
4621         * connect.c (select_fd): Rewrite to handle EINTR.  Set errno to
4622         ETIMEDOUT in case of timeout.
4623         (iread): No need to handle EINTR when calling select_fd.
4624         (iwrite): Ditto.
4625
4626 2002-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
4627
4628         * retr.c (retrieve_url): Make sure that POST is not honored for
4629         redirections.
4630
4631         * http.c (gethttp): Send the POST data when requested.
4632         (post_file): New function.
4633         (gethttp): Use it.
4634
4635         * main.c (main): Ditto.
4636
4637         * init.c: Add new options.
4638
4639         * options.h (struct options): New options post_data and
4640         post_file_name.
4641
4642 2002-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
4643
4644         * connect.c (connect_with_timeout): Firing SIGALRM can result in
4645         connect() exiting with EINTR.  Treat EINTR the same as ETIMEDOUT.
4646
4647 2002-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
4648
4649         * connect.c (connect_with_timeout): Use it.
4650
4651         * utils.c (run_with_timeout): New function.
4652
4653 2002-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
4654
4655         * url.c (getproxy): Accept a struct url argument.  This obviates
4656         the need for USE_PROXY_P.
4657
4658         * retr.c (retrieve_url): Allow proxy to be a non-FTP URL.
4659
4660         * ftp.c (getftp): Recognize FWTK-style proxy.
4661
4662 2002-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
4663
4664         * config.h.in: Only define _VA_LIST when compiled with gcc.
4665
4666 2002-04012  Ian Abbott  <abbotti@mev.co.uk>
4667
4668         * http.c (http_loop): Compensate for MS Windows two-second
4669         granularity of file modification time when comparing timestamps.
4670
4671         * ftp.c (ftp_retrieve_list): Ditto.
4672
4673 2002-04-12  Ian Abbott  <abbotti@mev.co.uk>
4674
4675         * utils.c (has_html_suffix_p): New function to test filename for
4676         common html extensions.
4677
4678         * utils.h: Declare it.
4679
4680         * http.c (http_loop): Use it instead of previous test.
4681
4682         * retr.c (retrieve_url): Ditto.
4683
4684         * recur.c (download_child_p): Ditto.
4685
4686 2002-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
4687
4688         * config.h.in: Define _VA_LIST on Solaris to prevent stdio.h from
4689         declaring va_list.
4690         From Kevin Rodgers <kevinr@ihs.com>.
4691
4692 2002-04-12  Ian Abbott  <abbotti@mev.co.uk>
4693
4694         * Makefile.in: Specify libtool mode explicitly when linking.
4695
4696 2002-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
4697
4698         * connect.c (connect_with_timeout): New function.
4699         (connect_to_one): Use it.
4700
4701         * config.h.in: Add stubs for HAVE_SIGSETJMP, HAVE_SIGBLOCK, and
4702         HAVE_SETJMP_H.
4703
4704 2002-04-11  Hrvoje Niksic  <hniksic@arsdigita.com>
4705
4706         * log.c: Set WGET_USE_STDARG if __STDC__ is defined and stdarg.h
4707         is present.
4708
4709 2002-04-11  Hrvoje Niksic  <hniksic@arsdigita.com>
4710
4711         * progress.c (bar_create): If INITIAL is larger than TOTAL, fix
4712         TOTAL.
4713         (bar_finish): Likewise.
4714
4715 2002-04-11  Hrvoje Niksic  <hniksic@arsdigita.com>
4716
4717         * html-url.c (tag_handle_form): New function.  Pick up form
4718         actions and mark them for conversion only.
4719
4720 2002-04-11  Hrvoje Niksic  <hniksic@arsdigita.com>
4721
4722         * progress.c (struct progress_implementation): Use PARAMS when
4723         declaring the parameters of *create, *update, *finish, and
4724         *set_params.
4725
4726         * netrc.c: Ditto.
4727
4728         * http.c: Reformat some function definitions so that ansi2knr can
4729         read them.
4730
4731         * hash.c (struct hash_table): Use the PARAMS macro around
4732         parameters in the declaration of hash_function and test_function.
4733         (prime_size): Spell 2580823717UL and 3355070839UL as (unsigned
4734         long)0x99d43ea5 and (unsigned long)0xc7fa5177 respectively, so
4735         that pre-ANSI compilers can read them.
4736         (find_mapping): Use PARAMS when declaring EQUALS.
4737         (hash_table_put): Ditto.
4738
4739         * ftp.h: Wrap the parameters of ftp_index declaration in PARAMS.
4740
4741         * cookies.c (cookie_new): Use (unsigned long)0 instead of 0UL,
4742         which was unsupported by pre-ANSI compilers.
4743
4744         From Nelson H. F. Beebe <beebe@math.utah.edu>, for the most part.
4745
4746 2002-04-11  Hrvoje Niksic  <hniksic@arsdigita.com>
4747
4748         * url.c (url_filename): Use compose_file_name regardless of
4749         whether opt.dirstruct is set.
4750         (mkstruct): Don't handle the query and the reencoding of DIR; that
4751         is done in compose_file_name.
4752
4753 2002-04-10  Hrvoje Niksic  <hniksic@arsdigita.com>
4754
4755         * wget.h: Ditto for extern char *exec_name.
4756
4757         * options.h: Don't guard against OPTIONS_DEFINED_HERE -- it is
4758         perfectly legal to follow an `extern' with a non-`extern' ones,
4759         provided the types match.
4760
4761         * main.c: Don't define OPTIONS_DEFINED_HERE.
4762
4763 2002-04-10  Hrvoje Niksic  <hniksic@arsdigita.com>
4764
4765         * progress.c (create_image): Revert to calculating ETA based on
4766         average download speed.
4767         (create_image): Don't print ETA until the download has been active
4768         for at least 3 seconds.
4769         (create_image): When ETA is not available, don't print anything.
4770         The previous version would print --:--.
4771
4772 2002-04-10  Hrvoje Niksic  <hniksic@arsdigita.com>
4773
4774         * progress.c (bar_update): Keep updating a subinterval until it
4775         reaches or exceeds a watermark.  That way the measurement will be
4776         guaranteed to span a configurable minimum of time.  The current
4777         default is 3s in 30 100ms intervals.
4778
4779 2002-04-09  Hrvoje Niksic  <hniksic@arsdigita.com>
4780
4781         * progress.c (bar_update): Maintain an array of the time it took
4782         to perform previous 30 network reads.
4783         (create_image): Calculate the download speed and ETA based on the
4784         last 30 reads, not the entire download.
4785         (create_image): Make sure that the ETA is not changed more than
4786         once per second.
4787
4788 2002-04-09  Ian Abbott  <abbotti@mev.co.uk>
4789
4790         * mswindows.c (borland_utime): New function conditionally defined
4791         when `HACK_BCC_UTIME_BUG' is defined.  A reimplementation of
4792         `utime()' as Borland's `utime()' function is broken on Windows 9x
4793         systems.  (Original patch by Chin-yuan Kuo <sr1111111@yahoo.com.tw>.)
4794
4795 2002-04-08  Hrvoje Niksic  <hniksic@arsdigita.com>
4796
4797         * ftp.c (ftp_loop): Propagate the result of ftp_retrieve_glob.
4798
4799 2002-03-26  Ian Abbott  <abbotti@mev.co.uk>
4800
4801         * Makefile.in: Updated several dependencies for object files.
4802
4803 2002-03-20  Ian Abbott  <abbotti@mev.co.uk>
4804
4805         * mswindows.c: Include "utils.h".
4806
4807 2002-03-18  Ian Abbott  <abbotti@mev.co.uk>
4808
4809         * host.h: Don't include netdb.h on windows.
4810
4811 2002-02-19  Hrvoje Niksic  <hniksic@arsdigita.com>
4812
4813         * recur.c (retrieve_tree): Handle the case when start_url doesn't
4814         parse.
4815
4816 2002-02-19  Andreas Damm  <andreas-sourceforge@radab.org>
4817
4818         * wget.h (DO_REALLOC_FROM_ALLOCA): Multiply with sizeof(type) when
4819         calling xmalloc and memcpy.
4820
4821 2002-02-19  Hrvoje Niksic  <hniksic@arsdigita.com>
4822
4823         * host.h: Include Unix-specific includes #ifndef WINDOWS.
4824         Patch originally provided by Christian Lackas.
4825
4826 2002-02-11  Christian Lackas  <delta@lackas.net>
4827
4828         * recur.c: recurive downloading for https fixed.
4829
4830 2002-02-19  Alan Eldridge  <alane@geeksrus.net>
4831
4832         * host.h: Also include <netinet/in.h> and <sys/socket.h>.
4833
4834         * ftp-basic.c: Also include <netinet/in.h>.
4835
4836 2002-02-05  Ian Abbott  <abbotti@mev.co.uk>
4837
4838         * http.c (gethttp): when -c used, mark already fully retrieved
4839         file as successfully retrieved.
4840
4841 2002-02-19  Hrvoje Niksic  <hniksic@arsdigita.com>
4842
4843         * url.c (url_parse): Don't treat '?' as query string separator
4844         when parsing FTP URLs.
4845
4846 2002-02-01  Hrvoje Niksic  <hniksic@arsdigita.com>
4847
4848         * html-url.c (tag_handle_meta): Don't crash on <meta
4849         http-equiv=refresh> where content is missing.
4850
4851 2002-01-31  Herold Heiko  <Heiko.Herold@previnet.it>
4852
4853         * ftp-basic.c, host.c: don't include sys/socket.h, arpa/inet.h,
4854         netdb.h on windows.
4855
4856 2002-01-30  Hrvoje Niksic  <hniksic@arsdigita.com>
4857
4858         * retr.c (retrieve_url): Remove redirection cycle detection.  This
4859         is because some sites legitimately redirect the user back to the
4860         same location, e.g. after an authorization check performed by
4861         another page.  MAX_REDIRECTIONS is still used to prevent infinite
4862         redirection loops.
4863
4864 2002-01-26  Hrvoje Niksic  <hniksic@arsdigita.com>
4865
4866         * http.c (gethttp): Wrap host name in square brackets if it
4867         contains a colon.
4868
4869 2002-01-26  Hrvoje Niksic  <hniksic@arsdigita.com>
4870
4871         * url.c (url_parse): Allow all hex digits, not only decimal ones,
4872         to form an IP address.
4873
4874 2002-01-26  Hrvoje Niksic  <hniksic@arsdigita.com>
4875
4876         * url.c (urlchr_table): Make square braces reserved, so we can
4877         parse http://[::1]/.
4878         (url_parse): Handle host in braces.
4879         (url_string): If url->host contains colons, wrap it in braces.
4880
4881 2002-01-24  Hrvoje Niksic  <hniksic@arsdigita.com>
4882
4883         * connect.c (resolve_bind_address): New function.
4884         (connect_to_one): Use it.
4885         (bindport): Ditto.
4886
4887         * init.c: Don't resolve bind-address here.
4888
4889         * host.c (wget_sockaddr_set_address): Would bug out with ADDR == NULL.
4890
4891 2002-01-24  Hrvoje Niksic  <hniksic@arsdigita.com>
4892
4893         * host.c (lookup_host): Use sizeof(ip4_address) to calculate the
4894         offset.
4895         (address_list_new): Use map_ipv4_to_ip.
4896         (wget_sockaddr_set_address): Convert ADDR to IPv4 before using it
4897         in IPv4 context.
4898
4899 2002-01-24  Hrvoje Niksic  <hniksic@arsdigita.com>
4900
4901         * source: Integrated IPv6 support.
4902         Written by Thomas Lussnig <thomas.lussnig@bewegungsmelder.de>.
4903
4904 2002-01-15  Ian Abbott  <abbotti@mev.co.uk>
4905
4906         * init.c (cmd_file): Change `\' to `/' for Windows (yes, really!)
4907         (cmd_directory): New function. Like cmd_file(), but strips
4908         trailing directory separators.
4909         (commands): Change action for "dirprefix" from `cmd_file' to
4910         `cmd_directory'.
4911
4912         * utils.c (make_directory): Allow intermediate `mkdir' calls to
4913         fail, as not all path components that do not exist should be
4914         directory components, especially under Windows.
4915
4916 2002-01-17  Hrvoje Niksic  <hniksic@arsdigita.com>
4917
4918         * netrc.c (parse_netrc): Skip leading whitespace before testing
4919         whether the line is empty.  Empty lines still contain the line
4920         terminator.
4921
4922 2002-01-15  Hrvoje Niksic  <hniksic@arsdigita.com>
4923
4924         * gen_sslfunc.c (ssl_iread): Call select on the file descriptor
4925         only if no data is pending in SSL buffers.
4926         From tony@bluetail.com.
4927
4928 2002-01-14  Hrvoje Niksic  <hniksic@arsdigita.com>
4929
4930         * headers.c (header_get): Strip trailing whitespace from the
4931         header.
4932
4933 2002-01-14  Hrvoje Niksic  <hniksic@arsdigita.com>
4934
4935         * url.c (parse_uname): URL-decode *USER and *PASSWD.
4936
4937 2002-01-07  Ian Abbott <abbotti@mev.co.uk>
4938
4939         * url.c (uri_merge_1): Deal with "net path" relative URL (one that
4940         starts with "//").
4941
4942 2002-01-14  Hrvoje Niksic  <hniksic@arsdigita.com>
4943
4944         * http.c (gethttp): Invalidate SOCK if get_contents encountered an
4945         error.
4946
4947 2001-12-24  Hrvoje Niksic  <hniksic@arsdigita.com>
4948
4949         * version.c: Wget 1.8.1 is released.
4950
4951 2001-12-19  Hrvoje Niksic  <hniksic@arsdigita.com>
4952
4953         * version.c: Wget 1.8.1-pre3 is released.
4954
4955 2001-12-19  Hrvoje Niksic  <hniksic@arsdigita.com>
4956
4957         * recur.c (retrieve_tree): Enqueue the canonical representation of
4958         start_url, so that the test against dl_url_file_map works.
4959
4960 2001-12-19  Hrvoje Niksic  <hniksic@arsdigita.com>
4961
4962         * log.c (logputs): Check for requested verbosity before printing
4963         anything.
4964
4965 2001-12-19  Hrvoje Niksic  <hniksic@arsdigita.com>
4966
4967         * html-url.c (tag_handle_link): Treat the "shortcut icon" link as
4968         inline.
4969
4970 2001-12-18  Hrvoje Niksic  <hniksic@arsdigita.com>
4971
4972         * recur.c (retrieve_tree): Make a copy of file obtained from
4973         dl_url_file_map because the code calls xfree(file) later.
4974
4975 2001-12-18  Hrvoje Niksic  <hniksic@arsdigita.com>
4976
4977         * recur.c (register_html): Maintain a hash table of HTML files
4978         along with the list.  Disallow duplicates.
4979         (retrieve_tree): Use downloaded_html_set to check whether the file
4980         found in dl_url_file_map is an HTML file, and descend into it if
4981         so.
4982         (convert_all_links): Don't guard against duplicates in
4983         downloaded_html_list, since they are no longer possible.
4984
4985 2001-12-18  Ian Abbott  <abbotti@mev.co.uk>
4986
4987         * recur.c (retrieve_tree): Pass on referring URL when retrieving
4988         recursed URL.
4989
4990 2001-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
4991
4992         * version.c: Wget 1.8.1-pre2 is released.
4993
4994 2001-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
4995
4996         * retr.c (sleep_between_retrievals): Simplify indentation.
4997
4998 2001-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
4999
5000         * gen_sslfunc.c (ssl_init_prng): Use random_number to get a byte
5001         of "randomness" at a time.
5002         (ssl_init_prng): Don't seed the PRNG; random_number will do that.
5003
5004         * retr.c (sleep_between_retrievals): Use it.  Make sure that the
5005         random amount averages in opt.wait.
5006         (sleep_between_retrievals): Don't seed the PRNG; random_number
5007         will do that.
5008
5009         * utils.c (random_number): New function.
5010
5011 2001-12-14  Hrvoje Niksic  <hniksic@arsdigita.com>
5012
5013         * url.c (path_simplify): Move here from utils.c, and make static.
5014
5015 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
5016
5017         * init.c (wgetrc_file_name): Print correct message when loading
5018         getenv("WGETRC") fails.
5019
5020 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
5021
5022         * recur.c (register_download): Don't abort when one URL references
5023         two different files.
5024
5025 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
5026
5027         * http.c (gethttp): Check for conn->scheme, not u->scheme, before
5028         calling ssl_iwrite.
5029
5030 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
5031
5032         * version.c: Wget 1.8.1-pre1 is released.
5033
5034 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
5035
5036         * res.c (matches): Fix broken URL in the docstring.
5037
5038 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
5039
5040         * html-url.c (tag_url_attributes): Mark <embed href=...> as
5041         external.
5042
5043 2001-12-12  Hrvoje Niksic  <hniksic@arsdigita.com>
5044
5045         * url.c (get_urls_file): Cosmetic changes.
5046
5047 2001-12-12  Hrvoje Niksic  <hniksic@arsdigita.com>
5048
5049         * html-url.c (append_one_url): Resurrect warning when unable to
5050         resolve a relative link.
5051
5052 2001-12-12  Hrvoje Niksic  <hniksic@arsdigita.com>
5053
5054         * html-url.c (collect_tags_mapper): Break into several functions.
5055         (tag_url_attributes): Collect <embed href=...>.
5056
5057 2001-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
5058
5059         * host.c: New type ipv4_address.  Use it consistently instead of
5060         `unsigned char[4]' and `unsigned char *'.
5061         (pretty_print_address): Accept a `const void *', to require even
5062         less casting.
5063
5064 2001-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
5065
5066         * ftp-ls.c (ftp_parse_vms_ls): Fix obvious memory leaks.
5067
5068 2001-12-10  Hrvoje Niksic  <hniksic@arsdigita.com>
5069
5070         * main.c (main): Initialize progress after fork_to_background, so
5071         that it knows when to use dots.
5072
5073         * mswindows.c (ws_hangup): Call log_request_redirect_output.
5074
5075         * utils.c (fork_to_background): Print the PID of the child
5076         process.
5077
5078         * log.c (log_request_redirect_output): Set a flag that output
5079         redirection has been requested.  Doing anything else in a signal
5080         handler is unsafe.
5081         (check_redirect_output): New function: check whether redirection
5082         has been requested and, if so, call redirect_output().
5083         (logputs): Call check_redirect_output.
5084         (logprintf): Ditto.
5085         (debug_logprintf): Ditto.
5086         (redirect_output): Print clearer messages.
5087
5088         * main.c (redirect_output_signal): Don't call
5089         redirect_output_signal directly.  Instead, call
5090         log_request_redirect_output.
5091
5092         * utils.c (memfatal): Ditto.
5093
5094         * progress.c (display_image): Use it.
5095
5096         * log.c (log_set_save_context): New function: allow the caller to
5097         turn off saving log context lines.
5098
5099 2001-12-10  Hrvoje Niksic  <hniksic@arsdigita.com>
5100
5101         * host.c (address_list_set_faulty): Uncomment a sanity check.
5102
5103 2001-12-10  Hrvoje Niksic  <hniksic@arsdigita.com>
5104
5105         * utils.c (long_to_string): Return a pointer after where the
5106         number ends.
5107         (long_to_string): Rename to number_to_string.
5108
5109 2001-12-10  Hrvoje Niksic  <hniksic@arsdigita.com>
5110
5111         * utils.c (path_simplify): Correctly handle the unlikely case that
5112         b starts out as path + 1.
5113
5114 2001-12-10  Hrvoje Niksic  <hniksic@arsdigita.com>
5115
5116         * utils.c (path_simplify): Rewrite, with better comments, and
5117         without the use of strcpy to move overlapping blocks.
5118
5119 2001-12-09  Hrvoje Niksic  <hniksic@arsdigita.com>
5120
5121         * init.c (cmd_spec_progress): Resurrect.  Check whether VAL is a
5122         valid progress type before setting it.
5123
5124 2001-12-09  Hrvoje Niksic  <hniksic@arsdigita.com>
5125
5126         * main.c (main): Remove stray debugging message.
5127
5128 2001-12-09  Hrvoje Niksic  <hniksic@arsdigita.com>
5129
5130         * progress.c (create_image): Fix ETA padding when hours are prined.
5131
5132 2001-12-09  Hrvoje Niksic  <hniksic@arsdigita.com>
5133
5134         * version.c: Wget 1.8 is released.
5135
5136 2001-12-09  Hrvoje Niksic  <hniksic@arsdigita.com>
5137
5138         * url.c (reencode_string): Declare static.
5139
5140         * res.c (registered_specs): Declare static.
5141
5142         * progress.c (current_impl_locked): Declare static.
5143
5144         * log.c (flush_log_p): Declare static.
5145         (needs_flushing): Ditto.
5146
5147         * http.c (digest_authentication_encode): Declare static.
5148
5149         * html-url.c (init_interesting): Declare static.
5150
5151         * host.c (host_name_addresses_map): Declare static.
5152
5153         * cookies.c (find_matching_chains): Declare static.
5154
5155         * ftp-ls.c (ftp_parse_vms_ls): Warn about the memory leak
5156         indicated by lint.
5157
5158         * utils.c (path_simplify): Remove unused variable STUB_CHAR.
5159
5160         * host.c (address_list_set_faulty): Document that INDEX is
5161         currently unused.
5162
5163         * url.c (rewrite_shorthand_url): Remove unused variable PATH.
5164
5165 2001-12-08  Hrvoje Niksic  <hniksic@arsdigita.com>
5166
5167         * version.c: Wget 1.8-pre2 is released.
5168
5169 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
5170
5171         * progress.c (progress_handle_sigwinch): Set up the signal again.
5172
5173         * utils.c: Include <sys/termios.h>, where Solaris defines
5174         TIOCGWINSZ.
5175
5176         * progress.c (bar_create): Don't use the last column on the screen.
5177         (create_image): Pad ETA to constant size.  Pad SIZE to nine digits
5178         only until it exceeded them.
5179
5180 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
5181
5182         * version.c: Wget 1.8-pre1 is released.
5183
5184 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
5185
5186         * progress.c (progress_create): Make sure that, when the output is
5187         redirected, the progress implementation gets changed to the
5188         fallback one.
5189         (bar_set_params): Set current_impl_locked to 1 when "force" is
5190         specified.
5191         (progress_create): Don't change the progress implementation if
5192         current_impl_locked is non-zero.
5193
5194         * main.c (redirect_output_signal): Call
5195         progress_schedule_redirect.
5196
5197         * progress.c (progress_schedule_redirect): New function.
5198
5199 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
5200
5201         * log.c (logvprintf): Restructure to allow being called multiple
5202         times.
5203         (logprintf): Call logvprintf in a loop.
5204         (debug_logprintf): Ditto.
5205
5206 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
5207
5208         * gen_sslfunc.c (ssl_init_prng): Allow the user to disable EGD by
5209         setting egd_file it to empty string.
5210
5211         * main.c (main): Change the option name from --sslegdsock to
5212         --egd-file.
5213
5214 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
5215
5216         * gen_sslfunc.c (ssl_init_prng): Make the printed message
5217         translatable.
5218
5219 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
5220
5221         * url.c (scheme_disable): New function.
5222
5223         * main.c (main): Call ssl_init_prng from here rather than from
5224         init_ssl, so that it has a chance to disable support for https
5225         before a URL has been resolved.
5226
5227         * gen_sslfunc.c (ssl_init_prng): Seed with rand() if all else
5228         failed.
5229         (ssl_init_prng): Disable support for https if seeding the PRNG
5230         fails.
5231
5232 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
5233
5234         * utils.c (read_whole_line): Handle lines beginning with \0.
5235
5236 2001-12-05  Hrvoje Niksic  <hniksic@arsdigita.com>
5237
5238         * recur.c (convert_all_links): Guard against duplicates in
5239         downloaded_html_files.
5240         (register_download): Don't invalidate similar-looking URLs.
5241         (match_except_index): New function.
5242
5243 2001-12-05  Hrvoje Niksic  <hniksic@arsdigita.com>
5244
5245         * utils.c (path_simplify): Document with test cases.
5246
5247 2001-12-04  Hrvoje Niksic  <hniksic@arsdigita.com>
5248
5249         * gen_sslfunc.c: Ditto.
5250
5251         * rbuf.c: Include <string.h>.
5252
5253 2001-12-04  Hrvoje Niksic  <hniksic@arsdigita.com>
5254
5255         * recur.c (retrieve_tree): Check whether the URL was already
5256         downloaded before downloading it again.
5257         (descend_child_p): Renamed to download_child_p.
5258         (register_download): When one URL is downloaded to a file already
5259         "owned" by another URL, delete all references that map any URL to
5260         that file.
5261         (register_delete_file): New function.
5262         (retrieve_tree): Use it after deleting a file.
5263
5264         * url.c (url_parse): Re-canonicalize the URL also if the path is
5265         empty, so that e.g. "http://www.server.com" ->
5266         "http://www.server.com/".
5267         (lowercase_str): Use ISUPPER instead of !ISLOWER.
5268
5269         * retr.c (retrieve_url): Use the canonical URL form when calling
5270         register_download().
5271
5272 2001-12-04  Ian Abbott <abbotti@mev.co.uk>
5273
5274         * snprintf.c (dopr): Use `unsigned int' as the second argument to
5275         va_arg when casting to `unsigned short' is intended.
5276
5277 2001-12-04  Herold Heiko  <Heiko.Herold@previnet.it>
5278
5279         * gen_sslfunc.c: on windows provide ssl crypto random
5280           initialization through RAND_screen(); could possibly
5281           be not enough for strong ssl communication (see the
5282           relevant manual page from the openssl package).
5283
5284 2001-12-04  Hrvoje Niksic  <hniksic@arsdigita.com>
5285
5286         * url.c (local_quote_string): Reenable quoting of question marks,
5287         but only when `--html-extension' is used.
5288
5289 2001-12-03  Hrvoje Niksic  <hniksic@arsdigita.com>
5290
5291         * version.c: Wget 1.8-beta3 is released.
5292
5293 2001-12-03  Hrvoje Niksic  <hniksic@arsdigita.com>
5294
5295         * snprintf.c (dopr): Cast the result of va_arg to short int and
5296         short unsigned int where these types are expected to be used.
5297
5298 2001-12-03  Hrvoje Niksic  <hniksic@arsdigita.com>
5299
5300         * snprintf.c (dopr): Replace `short int' and `unsigned short int'
5301         with `int' when using it as the second argument to `va_arg'.
5302
5303 2001-12-03  Hrvoje Niksic  <hniksic@arsdigita.com>
5304
5305         * host.c (address_list_new_one): New function.
5306         (lookup_host): Use it.
5307
5308 2001-12-03  Andre Majorel  <amajorel@teaser.fr>
5309
5310         * host.c (lookup_host): Don't initialize TMPSTORE directly because
5311         it's not legal C.
5312
5313 2001-12-03  Hrvoje Niksic  <hniksic@arsdigita.com>
5314
5315         * ftp-basic.c (ftp_port): Don't return HOSTERR if we fail getting
5316         the socket data.
5317
5318         * ftp.c: Ditto.
5319
5320         * http.c: No need to declare h_errno.
5321
5322         * host.c: Declare h_errno.
5323
5324 2001-12-02  Hrvoje Niksic  <hniksic@arsdigita.com>
5325
5326         * utils.c (file_merge): If BASE doesn't contain a slash, just
5327         return a copy of FILE.
5328
5329 2001-12-02  Hrvoje Niksic  <hniksic@arsdigita.com>
5330
5331         * version.c: Wget 1.8-beta2 is released.
5332
5333 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
5334
5335         * ftp.c (getftp): When PWD fails, assume "/".
5336
5337         * ftp-basic.c (ftp_syst): Fix indentation.
5338
5339 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
5340
5341         * url.c (get_urls_file): If opt.base_href is specified, merge each
5342         URL with the base.
5343
5344 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
5345
5346         * main.c (print_help): Don't document the removed `-nh'.
5347
5348 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
5349
5350         * url.c (url_full_path): Document better.
5351
5352         * http.c (gethttp): Use the full path when creating digest
5353         authorization.
5354
5355 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
5356
5357         * cookies.c (path_matches): Return 0 if PREFIX doesn't begin with
5358         '/'.
5359
5360 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
5361
5362         * cookies.c (path_matches): FULL_PATH doesn't begin with '/', but
5363         PREFIX does.
5364
5365 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
5366
5367         * cookies.c (check_domain_match): Reimplement to match Netscape's
5368         "preliminary specification" for cookies.
5369
5370 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
5371
5372         * url.c (replace_attr_refresh_hack): New function.
5373         (convert_links): Call replace_attr_refresh_hack for Refresh
5374         links.  It will add the "TMOUT; URL=" junk before the link.
5375
5376         * html-url.c (collect_tags_mapper): Set ID to the ID of the
5377         "content" attribute, not "http-equiv".
5378         (collect_tags_mapper): Don't use OFFSET to hack the raw_* values;
5379         instead, store the information that this entry belongs to a
5380         "refresh" link.
5381
5382 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
5383
5384         * version.c: Wget 1.8-beta1 is released.
5385
5386 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
5387
5388         * recur.c (retrieve_tree): Allow -p retrievals to exceed maximum
5389         depth by more than one.
5390
5391 2001-11-30  Hrvoje Niksic  <hniksic@arsdigita.com>
5392
5393         * retr.c (retrieve_url): Don't allow more than 20 redirections.
5394
5395 2001-11-30  Hrvoje Niksic  <hniksic@arsdigita.com>
5396
5397         * recur.c (retrieve_tree): Skip the non-inline entries when
5398         enqueuing the children of a leaf HTML node in -p mode.
5399         (descend_url_p): Ignore opt.no_parent when in -p mode and UPOS is
5400         "inline".
5401
5402         * html-url.c (get_urls_html): Don't accept dash_p_leaf_HTML.
5403         (collect_tags_mapper): When an entry is "inline", mark it as such.
5404
5405         * recur.c (descend_url_p): Fix test when checking for
5406         acceptance/rejection rules.
5407
5408 2001-10-31 Daniel BODEA <dali@dali-designs.com>
5409
5410         * netrc.c (search_netrc): When slack_default is 0, still look for
5411         an account with matching password, just not the "default account".
5412         HTTP Authorization using .netrc should now work as expected.
5413
5414 2001-11-30  T. Bharath  <TBharath@responsenetworks.com>
5415
5416         * http.c (persistent_available_p): Call SHUTDOWN_SSL if
5417         test_socket_open fails.
5418
5419 2001-11-30  Hrvoje Niksic  <hniksic@arsdigita.com>
5420
5421         * progress.c (display_image): Just print one CR to reset the
5422         cursor position.
5423
5424 2001-11-30  Christian Fraenkel  <c.fraenkel@gmx.net>
5425
5426         * init.c: New command `ssl_egd_sock'.
5427
5428         * main.c (main): New option `--sslegdsock'.
5429
5430         * gen_sslfunc.c (ssl_init_prng): Seed the RNG using EGD.
5431
5432 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
5433
5434         * cmpt.c (memmove): Include a simple memmove implementation.
5435
5436 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
5437
5438         * headers: Guard against header files being included twice.
5439
5440 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
5441
5442         * gen-md5.c: Use unsigned char * as the buffer argument to
5443         gen_md5_update.
5444
5445 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
5446
5447         * connect.h: Declare select_fd.
5448
5449 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
5450
5451         * recur.c (descend_url_p): When resolving no_parent, compare with
5452         start_url, not parent url.  Otherwise link from /a/b/ to /a/c/
5453         wouldn't be followed, although the download started from /a/.
5454
5455 2001-01-23  Herold Heiko  <Heiko.Herold@previnet.it>
5456
5457         * config.h.ms, mswindows.h: defined HAVE_ISATTY, use _isatty for
5458         MS VC; somebody with Borland compiler please check and provide
5459         patch if possible;
5460
5461         * cmpt.c: provided a usleep emulation.
5462
5463 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
5464
5465         * host.c (address_list_new): Initialize al->faulty.
5466
5467 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
5468
5469         * http.c (http_process_range): Accept the broken output of
5470         "JavaWebServer/1.1.1".
5471
5472 2001-11-28  Hrvoje Niksic  <hniksic@arsdigita.com>
5473
5474         * progress.c (dot_set_params): If PARAMS is unspecified, use
5475         dot_style, if available.
5476
5477         * init.c: Ditto.
5478
5479         * main.c (main): Resurect --dot-style.
5480
5481         * progress.c (dot_finish): Print the quantity if we're left at the
5482         beginning of a row.
5483
5484 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
5485
5486         * cmpt.c (random): Removed.
5487
5488         * retr.c (sleep_between_retrievals): Use the more portable rand()
5489         instead of random().
5490
5491 2001-11-27  Ian Abbott <abbotti@mev.co.uk>
5492
5493         * retr.c (retrieve_from_file): Initialize `new_file' to NULL to
5494         prevent seg fault.
5495
5496 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
5497
5498         * connect.c (connect_to_many): Use address_list_set_faulty to
5499         prevent the faulty address from being reused.
5500
5501         * host.c (address_list_set_faulty): New function.
5502         (address_list_get_bounds): New function, instead of
5503         address_list_count.
5504
5505 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
5506
5507         * url.c (convert_links): Don't translate %d-%d.
5508
5509         * main.c (print_help): Remove stray HAVE_RANDOM code.
5510
5511 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
5512
5513         * ftp.c (getftp): Improve output after sending PASV.  Don't
5514         attempt to "look up" the IP address we already know; call
5515         connect_to_one directly.
5516
5517 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
5518
5519         * progress.c: Change the default progress implementation to "bar".
5520
5521 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
5522
5523         * progress.c (bar_create): Print two newlines.
5524
5525 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
5526
5527         * cmpt.c (random): New function, a simple-minded replacement for
5528         random() on systems that don't have it.
5529
5530 2001-11-26  Hrvoje Niksic  <hniksic@arsdigita.com>
5531
5532         * config.h.in: Put a HAVE_USLEEP stub.
5533
5534         * cmpt.c (usleep): Replacement implementation of usleep using
5535         select.
5536
5537         * init.c: New option init_rate.
5538
5539         * main.c (main): New option --limit-rate.
5540
5541         * retr.c (limit_bandwidth): New function.
5542         (get_contents): Call it to limit the bandwidth used when
5543         downloading.
5544
5545         * progress.c (dot_update): Would print the wrong download speed on
5546         rows other than the first one when the download was continued.
5547         (dot_finish): Ditto.
5548
5549 2001-11-26  Ian Abbott <abbotti@mev.co.uk>
5550
5551         * http.c (gethttp): fix undeclared variable 'err' when compiled
5552         with HAVE_SSL.
5553
5554 2001-11-26  Hrvoje Niksic  <hniksic@arsdigita.com>
5555
5556         * progress.c: Don't allocate new timers; use the timing data
5557         propagated from the caller.
5558
5559         * retr.c (get_contents): Allocate and use a timer.
5560
5561 2001-11-26  Hrvoje Niksic  <hniksic@arsdigita.com>
5562
5563         * http.c (last_host_ip): Made into an address_list.
5564         (invalidate_persistent): Release pc_last_host_ip.
5565         (register_persistent): Use lookup_host.
5566         (persistent_available_p): Check for equality of hosts using
5567         address_list_match_all.  Call address_list_release.
5568         (http_cleanup): New function.
5569
5570         * ftp.c (getftp): Use lookup_host and connect_to_many.
5571
5572         * http.c (gethttp): Use lookup_host and connect_to_many.
5573
5574         * connect.c (make_connection): Removed.
5575         (connect_to_one): New function.
5576         (connect_to_many): Ditto.
5577         (set_connection_host_name): Ditto.
5578
5579         * host.c (lookup_host): New function; new return type.
5580         (address_list_new): New function.
5581         (address_list_count): Ditto.
5582         (address_list_copy_one): Ditto.
5583         (address_list_delete): Ditto.
5584         (address_list_release): Ditto.
5585         (pretty_print_address): Ditto.
5586
5587 2001-11-26  Hrvoje Niksic  <hniksic@arsdigita.com>
5588
5589         * recur.c (retrieve_tree): In case of followed redirection,
5590         blacklist the pre-redirection URL.
5591
5592 2001-11-26  Hrvoje Niksic  <hniksic@arsdigita.com>
5593
5594         * recur.c (descend_redirect_p): New function.
5595         (retrieve_tree): Make sure redirections are not blindly followed.
5596
5597 2001-11-04  Alan Eldridge  <alane@geeksrus.net>
5598
5599         * config.h.in: added HAVE_RANDOM.
5600
5601         * options.h: added random_wait to struct options.
5602
5603         * main.c (print_help [HAVE_RANDOM], main): added arg parsing, help
5604         for --random-wait.
5605
5606         * retr.c (sleep_between_retrievals) [HAVE_RANDOM]: added
5607         implementation of random wait times.
5608
5609         * init.c (commands): added "randomwait" keyword.
5610
5611 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
5612
5613         * recur.c (descend_url_p): Be more conservative with blacklisting
5614         URLs.
5615         (convert_all_links): Print how many files have been converted, and
5616         how long it took.
5617
5618         * progress.c (create_image): Place the number of downloaded bytes
5619         right after the progress bar.
5620
5621         * utils.c (suffix): Return a pointer into the string.
5622
5623 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
5624
5625         * url.c (convert_links): Handle CO_NULLIFY_BASE.
5626
5627         * recur.c (retrieve_tree): Ignore download-ignorable children.
5628         (convert_all_links): Specify CO_NULLIFY_BASE when link_base_p.
5629
5630         * html-url.c (handle_link): Return the newly created urlpos.
5631         (collect_tags_mapper): When dealing with BASE, store the base
5632         reference and mark it as download-ignorable.
5633
5634 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
5635
5636         * url.c (convert_links): Attempt to quote '?' as "%3F" when
5637         linking to local files.  Given up on the attempt, as it breaks
5638         local browsing.
5639
5640 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
5641
5642         * main.c (private_initialize): Removed.
5643         (main): Don't call private_initialize.
5644
5645         * http.c: Call lookup_host.
5646
5647         * host.c (host_init): Removed.
5648         (add_host_to_cache): Initialize host_name_address_map here, on
5649         demand.
5650         (ngethostbyname): Commented out.
5651
5652         * connect.c (make_connection): Remove dead code; use lookup_host.
5653
5654         * host.c (store_hostaddress): Renamed to lookup_host and reversed
5655         the args.
5656         Removed host_address_name_map and host_slave_master_map.
5657
5658 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
5659
5660         * progress.c (dot_create): Align the "[ skipping ... ]" string
5661         with the dots.
5662
5663         * retr.c (rate): Split into two functions: calc_rate and
5664         retr_rate.
5665
5666         * progress.c (create_image): Draw a dummy progress bar even when
5667         total size is unknown.
5668         (display_image): Place the text cursor at the end of the "image".
5669
5670 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
5671
5672         * url.c (reencode_string): Use unsigned char, not char --
5673         otherwise the hex digits come out wrong for 8-bit chars such as
5674         nbsp.
5675         (lowercase_str): New function.
5676         (url_parse): Canonicalize u->url if needed.
5677         (get_urls_file): Parse each URL, and return only the valid ones.
5678         (free_urlpos): Call url_free.
5679         (mkstruct): Add :port if the port is non-standard.
5680         (mkstruct): Append the query string to the file name, if any.
5681         (urlpath_length): Use strpbrk_or_eos.
5682         (uri_merge_1): Handle the cases where LINK is an empty string,
5683         where LINK consists only of query, and where LINK consists only of
5684         fragment.
5685         (convert_links): Count and report both kinds of conversion.
5686         (downloaded_file): Use a hash table, not a list.
5687         (downloaded_files_free): Free the hash table.
5688
5689         * retr.c (retrieve_from_file): Ditto.
5690
5691         * main.c (main): Call either retrieve_url or retrieve_tree
5692         for each URL, not both.
5693
5694         * retr.c (register_all_redirections): New function.
5695         (register_redirections_mapper): Ditto.
5696         (retrieve_url): Register the redirections.
5697         (retrieve_url): Make the string "Error parsing proxy ..."
5698         translatable.
5699
5700         * res.c (add_path): Strip leading slash from robots.txt paths so
5701         that the path representations are "compatible".
5702         (free_specs): Free each individual path, too.
5703         (res_cleanup): New function.
5704         (cleanup_hash_table_mapper): Ditto.
5705
5706         * recur.c (url_queue_new): New function.
5707         (url_queue_delete): Ditto.
5708         (url_enqueue): Ditto.
5709         (url_dequeue): Ditto.
5710         (retrieve_tree): New function, replacement for recursive_retrieve.
5711         (descend_url_p): New function.
5712         (register_redirection): New function.
5713
5714         * progress.c (create_image): Cosmetic changes.
5715
5716         * init.c (cleanup): Do all those complex cleanups only if
5717         DEBUG_MALLOC is defined.
5718
5719         * main.c: Removed --simple-check and the corresponding
5720         simple_host_check in init.c.
5721
5722         * html-url.c (handle_link): Parse the URL here, and propagate the
5723         parsed URL to the caller, who would otherwise have to parse it
5724         again.
5725
5726         * host.c (xstrdup_lower): Moved to utils.c.
5727         (realhost): Removed.
5728         (same_host): Ditto.
5729
5730 2001-11-24  Hrvoje Niksic  <hniksic@arsdigita.com>
5731
5732         * utils.c (path_simplify): Preserver the (non-)existence of
5733         leading slash.  Return non-zero if changes were made.
5734
5735 2001-11-24  Hrvoje Niksic  <hniksic@arsdigita.com>
5736
5737         * progress.c (bar_update): Don't modify bp->total_length if it is
5738         zero.
5739
5740 2001-11-24  Hrvoje Niksic  <hniksic@arsdigita.com>
5741
5742         * retr.c (retrieve_url): When the redirection URL doesn't parse,
5743         print the correct error message rather than "UNKNOWN".
5744
5745 2001-11-24  Hrvoje Niksic  <hniksic@arsdigita.com>
5746
5747         * progress.c (bar_finish): If the timer didn't record any time
5748         since the download beginning, fake 1ms.
5749
5750 2001-11-24  Hrvoje Niksic  <hniksic@arsdigita.com>
5751
5752         * recur.c (recursive_retrieve): Fix typo.
5753
5754 2001-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
5755
5756         * progress.c (create_image): Don't translate "%ld ".
5757
5758 2001-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
5759
5760         * progress.c (bar_set_params): Allow the user to force the use of
5761         the bar.
5762
5763 2001-11-23  Lemble Gregory  <gregory.lemble@st.com>
5764
5765         * gen_sslfunc.c (ssl_init_prng): New function; seed the SSL RNG.
5766
5767 2001-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
5768
5769         * progress.c: Renamed dp_* functions to dot_* for greater clarity
5770         and consistency with bar_*.
5771         (print_download_speed): Get rid of the unneeded '@' character.
5772         (create_image): Fix download rate geometry.
5773
5774         * progress.c (print_elapsed): Remove spurious space.
5775         (print_elapsed): Renamed to print_download_speed, since that's
5776         what it does.
5777
5778 2001-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
5779
5780         * progress.c (bar_update): If the downloaded amount becomes larger
5781         than the expected amount, adjust the expected amount accordingly.
5782
5783 2001-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
5784
5785         * utils.c (determine_screen_width): New function.
5786
5787         * main.c (main): New option `--progress=TYPE'.
5788         (main): Implement compatibility with the old option `--dot-style'.
5789
5790         * init.c: Removed cmd_spec_dotstyle -- that logic is now in
5791         dp_set_params.
5792         (cmd_spec_progress): New function.
5793
5794         * retr.c (get_contents): Use the progress_* functions instead of
5795         the old show_progress().
5796         (show_progress): Removed.
5797         (rate): Print "xxxx.xx K/s" instead of "KB/s".  Ditto for MB/s,
5798         etc.
5799
5800         * progress.c (set_progress_implementation): New function.
5801         (valid_progress_implementation_p): Ditto.
5802         (progress_create): Ditto.
5803         (progress_update): Ditto.
5804         (progress_finish): Ditto.
5805         (dp_create): Ditto.
5806         (dp_update): Ditto.
5807         (dp_finish): Ditto.
5808         (dp_set_params): Ditto.
5809         (print_elapsed): Ditto.
5810
5811 2001-11-22  Hrvoje Niksic  <hniksic@arsdigita.com>
5812
5813         * retr.c (show_progress): Use it.
5814
5815         * log.c (log_set_flush): New function.
5816
5817 2001-11-22  Hrvoje Niksic  <hniksic@arsdigita.com>
5818
5819         * utils.c (path_simplify): Don't remove trailing slashes.
5820
5821         * ftp.c (ftp_get_listing): Use it.
5822
5823         * utils.c (file_merge): New function.
5824
5825         * url.c (opt_url): Removed.
5826
5827         * recur.c (recursive_retrieve): Inline "opt_url" logic.
5828
5829         * main.c (main): Use xfree(), not free().
5830
5831         * url.c (rewrite_url_maybe): Renamed to rewrite_shorthand_url.
5832
5833         * ftp.c (ccon): Move `ccon' typedef here, since it's only used
5834         internally.
5835
5836         * config.h.in: Include a stub for HAVE_STRPBRK.
5837
5838         * cmpt.c (strpbrk): Include a replacement for systems without
5839         strpbrk().
5840
5841         * ftp.c: Use url_set_dir and url_set_file when modifying the URL.
5842
5843         * url.c (url_set_dir): New function.
5844         (url_set_file): Ditto.
5845
5846         * ftp-basic.c (ftp_process_type): Process FTP type here; the URL
5847         parser makes the URL "params" available, so we can do that in this
5848         function.
5849
5850         * retr.c: Ditto.
5851
5852         * ftp.c: Ditto; pass the local file information in `ccon'.
5853
5854         * http.c: Get rid of the ugly kludge that had URL being replaced
5855         with the proxy URL when proxy retrieval was requested.  Use a
5856         separate parameter to http_loop and gethttp for the proxy URL.
5857
5858         * http.c: Changed to reflect the fact that local file, proxy, and
5859         referer information are no longer stored in struct url.  The local
5860         file information is passed in `struct hstat' now.
5861
5862         * url.c: Reworked URL parsing to be more regular.  Reencode the
5863         URL using reencode_string.
5864         Removed non-URL-related information from struct url.  This
5865         includes fields `proxy', `local', and `referer'.
5866
5867 2001-11-22  Jochen Hein  <jochen@jochen.org>
5868
5869         * main.c (main): Split the copyright notice for easier
5870         translation.
5871
5872 2001-08-21  Dave Turner <dct25@hermes.cam.ac.uk>
5873
5874         * ftp-basic.c (ftp_size): New function to send non-standard SIZE
5875           command to server to request file size.
5876         * ftp.h (ftp_size): Export it.
5877         * ftp.c (getftp): Use new ftp_size function if restoring
5878           transfer of a file with unknown size.
5879
5880 2001-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
5881
5882         * url.c (parseurl): Don't depend on the now-obsolete TYPE.
5883
5884 2001-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
5885
5886         * url.c (getproxy): Handle URL shorthands.
5887
5888 2001-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
5889
5890         * main.c: Remove --wait / --waitretry backwards compatibility
5891         code.
5892
5893 2001-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
5894
5895         * main.c (main): Use it.
5896
5897         * url.c (rewrite_url_maybe): New function.
5898
5899 2001-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
5900
5901         * url.c: Clean up handling of URL schemes.
5902
5903 2001-05-13  Hrvoje Niksic  <hniksic@arsdigita.com>
5904
5905         * url.c: Get rid of `protostrings'.
5906         (skip_proto): Don't use protostrings.
5907         (has_proto): Ditto.
5908
5909 2001-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
5910
5911         * Makefile.in: Conditionally compile getopt.o.
5912
5913 2001-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
5914
5915         * md5.h: Renamed to gnu-md5.h.
5916
5917         * md5.c: Renamed to gnu-md5.c.
5918
5919         * http.c: Ditto.
5920
5921         * ftp-opie.c: Use the new macros.
5922
5923         * sysdep.h: Define md5-related macros.
5924
5925         * config.h.in: Define HAVE_SOLARIS_MD5 or HAVE_BUILTIN_MD5
5926         depending on which md5 implementation is used.
5927
5928 2001-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
5929
5930         * res.c (res_register_specs): Initialize OLD and HP_OLD to appease
5931         the compiler.
5932
5933 2001-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
5934
5935         * http.c (gethttp): Print the whole response line when printing
5936         headers is requested.
5937
5938 2001-05-12  Hrvoje Niksic  <hniksic@arsdigita.com>
5939
5940         * res.c: New file.  Implement all RES-related code here.
5941
5942 2001-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
5943
5944         * version.c: Wget 1.7.1 is released.
5945
5946 2001-11-16  Hrvoje Niksic  <hniksic@arsdigita.com>
5947
5948         * headers.c (header_extract_number): Ignore trailing whitespace.
5949
5950 2001-08-24  Ian Abbott  <abbotti@mev.co.uk>
5951
5952         * html-url.c (collect_tags_mapper): Fix bug converting links
5953         with -k option for tags with multiple link attributes by
5954         handling links in the order they appear.
5955
5956 2001-08-15  Ian Abbott  <abbotti@mev.co.uk>
5957
5958         * ftp.c (ftp_loop_internal): Avoid a potential buffer overflow in
5959           the call to the 'rate' function by moving it past the error
5960           checking for the 'getftp' function return value.
5961
5962 2001-11-16  Hrvoje Niksic  <hniksic@arsdigita.com>
5963
5964         * html-parse.c (advance_declaration): Use 0x22 instead of '"' or
5965         '\"'.  Different compilers' assert macros are broken in different
5966         ways.
5967
5968 2001-09-29  Christian Fraenkel  <c.fraenkel@gmx.net>
5969
5970         * http.c (gethttp): print debug output for errors occuring during
5971         the ssl handshake.
5972
5973 2001-11-16  Chris Seawood  <cls@seawood.org>
5974
5975         * init.c: Ditto.
5976
5977         * host.c: Ditto.
5978
5979         * connect.c: Ditto.
5980
5981         * sysdep.h: Support compilation under BEOS.
5982
5983 2001-06-08  Edward J. Sabol  <sabol@alderaan.gsfc.nasa.gov>
5984
5985         * url.c (url_equal): Fix a memory leak when parseurl returns an
5986         error on the second URL. Also, since url_equal is not used at the
5987         moment, do not compile it.
5988
5989         * url.h: Ditto for the prototype of url_equal.
5990
5991 2001-11-16  Hrvoje Niksic  <hniksic@arsdigita.com>
5992
5993         * html-parse.c (map_html_tags): Support XML-style empty tags.
5994
5995 2001-06-26  Hrvoje Niksic  <hniksic@arsdigita.com>
5996
5997         * wget.h (DO_REALLOC_FROM_ALLOCA): Check for do_realloc_newsize in
5998         loop condition because we're no longer setting SIZEVAR here.
5999
6000 2001-06-26  Hrvoje Niksic  <hniksic@arsdigita.com>
6001
6002         * wget.h (DO_REALLOC_FROM_ALLOCA): Set SIZEVAR after the memcpy()
6003         call because it needs the old value.
6004
6005 2001-06-18  Hrvoje Niksic  <hniksic@arsdigita.com>
6006
6007         * cookies.c (ATTR_NAME_CHAR): Allow almost any character to be in
6008         an attribute name.
6009
6010 2001-06-18  Hrvoje Niksic  <hniksic@arsdigita.com>
6011
6012         * url.c (url_filename): Make sure that slashes that sneak in to
6013         u->file via query string get protected.
6014         (file_name_protect_query_string): New function.
6015
6016 2001-06-14  Hrvoje Niksic  <hniksic@arsdigita.com>
6017
6018         * recur.c (recursive_retrieve): Also check undesirable_urls with
6019         canonicalized URL.
6020
6021 2001-06-14  Hrvoje Niksic  <hniksic@arsdigita.com>
6022
6023         * http.c (gethttp): Search `.netrc' with real host, not the proxy
6024         one.
6025
6026 2001-06-14  Hrvoje Niksic  <hniksic@arsdigita.com>
6027
6028         * sysdep.h (MAP_FAILED): Provide MAP_FAILED for systems that don't
6029         define it.
6030
6031 2001-06-09  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
6032
6033         * ftp.h: Provide correct prototype for ftp_parse_ls().
6034
6035 2001-06-04  Hrvoje Niksic  <hniksic@arsdigita.com>
6036
6037         * version.c: Wget 1.7 is released.
6038
6039 2001-06-03  Karl Eichwalder  <ke@suse.de>
6040
6041         * ftp-ls.c (ftp_parse_ls): Fix typo.
6042
6043 2001-05-27  Hrvoje Niksic  <hniksic@arsdigita.com>
6044
6045         * all: Update copyright information.
6046
6047 2001-05-26  Hrvoje Niksic  <hniksic@arsdigita.com>
6048
6049         * http.c (gethttp): Indicate that the continued download failed
6050         for *this* file.
6051
6052 2001-05-26  Hrvoje Niksic  <hniksic@arsdigita.com>
6053
6054         * version.c: Wget 1.7-pre1 is released.
6055
6056 2001-05-26  Hrvoje Niksic  <hniksic@arsdigita.com>
6057
6058         * version.c: Updated version to 1.7-pre1.
6059
6060 2001-05-14  Hrvoje Niksic  <hniksic@arsdigita.com>
6061
6062         * gen_sslfunc.c: Don't include <sys/time.h> directly.
6063
6064 2001-05-14  Hrvoje Niksic  <hniksic@arsdigita.com>
6065
6066         * http.c (gethttp): Use real URL data for cookies, not the proxy
6067         stuff.
6068
6069 2001-05-12  Hrvoje Niksic  <hniksic@arsdigita.com>
6070
6071         * main.c (print_help): Document `--no-http-keep-alive'.
6072
6073         * utils.c (numdigit): Handle negative numbers *correctly*.
6074
6075         * hash.c (make_nocase_string_hash_table): Use term "nocase" rather
6076         than the confusing "unsigned".
6077
6078         * utils.c (string_set_contains): Renamed from string_set_exists.
6079
6080         * hash.c (hash_table_contains): Renamed from hash_table_exists.
6081
6082         * cookies.c: Move case-insensitive hash tables to hash.c.
6083
6084 2001-05-09  Hrvoje Niksic  <hniksic@arsdigita.com>
6085
6086         * http.c (gethttp): Before concluding that the file is already
6087         fully retrieved, make sure that the file existed and `Range' was
6088         actually requested.
6089
6090 2001-05-09  Hrvoje Niksic  <hniksic@arsdigita.com>
6091
6092         * cookies.c (eliminate_dups): New function.
6093         (build_cookies_request): Use it.
6094         (build_cookies_request): Set chain_store_size after reallocating
6095         all_chains.
6096         (check_domain_match): Annotated for easier future debugging.
6097         (store_cookie): In the debug message, print whether the cookie is
6098         permanent.
6099
6100 2001-05-08  Hrvoje Niksic  <hniksic@arsdigita.com>
6101
6102         * http.c (http_loop): Reset no_truncate before deciding whether to
6103         set it.
6104         (gethttp): Further clarify "-c conflicts with existing file" error
6105         message, based on input from Herold Heiko.
6106
6107 2001-05-07  Hrvoje Niksic  <hniksic@arsdigita.com>
6108
6109         * http.c (http_loop): If restval is set, set no_truncate to 1
6110         unconditionally.
6111
6112 2001-05-02  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
6113
6114         * ftp-ls.c (ftp_parse_winnt_ls): Assure months are being correctly
6115         converted. Pointed out by <Stefan.Weil@de.heidelberg.com>.
6116         (ftp_parse_vms_ls): Ditto.
6117
6118 2001-04-30  Hrvoje Niksic  <hniksic@arsdigita.com>
6119
6120         * init.c (cmd_address): Zero SIN before using it; apparently
6121         needed on *BSD.
6122
6123 2001-04-29  Hrvoje Niksic  <hniksic@arsdigita.com>
6124
6125         * ftp.c (ftp_loop_internal): Don't set NO_TRUNCATE if the file is
6126         empty.
6127
6128 2001-04-29  Hrvoje Niksic  <hniksic@arsdigita.com>
6129
6130         * main.c (main): Make `--cookies' respect its argument.
6131
6132 2001-04-28  Hrvoje Niksic  <hniksic@arsdigita.com>
6133
6134         * main.c (main): Removed undocumented option `--email-address'.
6135
6136         * netrc.c: Use the latest read_whole_line.
6137
6138         * init.c (defaults): Set opt.ftp_pass to "-wget@".
6139
6140         * mswindows.c (pwd_cuserid): Ditto.
6141
6142         * utils.c (pwd_cuserid): Removed.
6143
6144         * host.c (ftp_getaddress): Removed.
6145
6146 2001-04-28  Hrvoje Niksic  <hniksic@arsdigita.com>
6147
6148         (http_loop): Allocate space for filename_plus_orig_suffix with
6149         alloca; this is more efficient and removes the need to free it
6150         before each and every return.
6151
6152 2001-04-28  Hrvoje Niksic  <hniksic@arsdigita.com>
6153
6154         * http.c (gethttp): Return RETRUNNEEDED when the retrieval is
6155         unneeded because the file is already there and fully downloaded,
6156         and -c is specified.
6157         (http_loop): Handle RETRUNNEEDED.
6158
6159         * wget.h (uerr_t): New value RETRUNNEEDED.
6160
6161         * http.c (http_loop): Set no_truncate for files that both exist
6162         and are non-empty.
6163         (gethttp): Consider the download finished when restval >= contlen,
6164         not only when restval==contlen.
6165         (gethttp): Handle redirection before giving up due to -c.
6166         (gethttp): Clarify error message which explains that -c will not
6167         truncate the file.
6168         (gethttp): When returning CONTNOTSUPPORTED, don't forget to free
6169         the stuff that needs freeing and release the socket.
6170
6171 2001-04-27  Hrvoje Niksic  <hniksic@arsdigita.com>
6172
6173         * main.c (print_help): Wget booleans accept "off", not "no".
6174
6175 2001-04-27  Hrvoje Niksic  <hniksic@arsdigita.com>
6176
6177         * http.c (http_loop): If allow_cache is zero, always disable
6178         caching, not only when retrieving through proxy.
6179
6180         * init.c: Ditto.
6181
6182         * options.h (struct options): Rename proxy_cache to allow_cache.
6183
6184 2001-04-27  Hrvoje Niksic  <hniksic@arsdigita.com>
6185
6186         * http.c (mktime_from_utc): Improve documentation.
6187         (http_atotm): Put format strings into a separate array.
6188
6189 2001-04-27  Hrvoje Niksic  <hniksic@arsdigita.com>
6190
6191         * safe-ctype.h: Instead of throwing #error when isalpha is
6192         defined, redefine it to something that will throw a compile-time
6193         error if actually *used*.  Do the same for the rest of the
6194         standard C macros.
6195
6196 2001-04-26  Hrvoje Niksic  <hniksic@arsdigita.com>
6197
6198         * url.c (getproxy): Ignore empty proxy vars.
6199
6200 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
6201
6202         * http.c (http_loop): Would load cookies every time.
6203
6204         * cookies.c (load_cookies): Handle cookies whose values contain
6205         embedded spaces.
6206
6207 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
6208
6209         * utils.c: Define each DIGITS_* in one line.
6210
6211 2001-04-25  Roger L. Beeman  <beeman@cisco.com>
6212
6213         * http.c (http_atotm): Initialize t.tm_isdst to 0.
6214         (mktime_from_utc): Prevent mktime() from having discontinuities at
6215         DST transition points.
6216
6217 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
6218
6219         * html-url.c (get_urls_html): Fix documentation.
6220
6221 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
6222
6223         * url.c (UNSAFE_CHAR): Reimplement using a static table.
6224         (url_init): Removed.
6225         (init_unsafe_char_table): Removed.
6226
6227 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
6228
6229         * snprintf.c (dopr): Replace ISDIGIT with '0' <= ch && ch <= '9'.
6230
6231 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
6232
6233         * utils.c: Document timer functions.
6234
6235         * retr.c (rate): Use it.
6236         (rate): Print in GB/s if transfer rate exceeds 1 GB/s.
6237
6238         * utils.c (wtimer_granularity): New function.
6239
6240 2001-04-24  Hrvoje Niksic  <hniksic@arsdigita.com>
6241
6242         * retr.c (show_progress): Ditto.
6243
6244         * ftp.c (getftp): Ditto.
6245
6246         * http.c (gethttp): Use new timer functions.
6247
6248         * utils.c (wtimer_allocate): New function.
6249         (wtimer_new): Ditto.
6250         (wtimer_delete): Ditto.
6251         (wtimer_reset): Ditto.
6252         (wtimer_elapsed): Ditto.
6253
6254 2001-04-24  Hrvoje Niksic  <hniksic@arsdigita.com>
6255
6256         * utils.c (long_to_string): New, faster version.  Favors smaller
6257         numbers; much of the calculation is now done at compile-time.
6258
6259 2001-04-24  Hrvoje Niksic  <hniksic@arsdigita.com>
6260
6261         * utils.c (numdigit): Handle negative numbers.
6262
6263 2001-04-23  Hrvoje Niksic  <hniksic@arsdigita.com>
6264
6265         * retr.c (show_progress): Print the download rate even when the
6266         percentages are not available.
6267
6268 2001-04-21  Hrvoje Niksic  <hniksic@arsdigita.com>
6269
6270         * ftp.c (getftp): Adjust expected_bytes if the length is
6271         authoritative.
6272
6273 2001-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
6274
6275         * url.c: Don't declare `construct'.
6276
6277         * hash.c (grow_hash_table): Speed up rehashing; inline storing of
6278         mappings to new locations.
6279         (hash_table_new): Make resize_threshold a field in the hash table,
6280         so we don't have to recalculate it in each hash_table_put.
6281         (grow_hash_table): Update resize_threshold.
6282         (MAX): Remove unused macro.
6283         (prime_size): Made static.
6284
6285 2001-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
6286
6287         * retr.c (retrieve_url): Call uri_merge, not url_concat.
6288
6289         * html-url.c (collect_tags_mapper): Call uri_merge, not
6290         url_concat.
6291
6292         * url.c (mkstruct): Use encode_string instead of xstrdup followed
6293         by URL_CLEANSE.
6294         (path_simplify_with_kludge): Deleted.
6295         (contains_unsafe): Deleted.
6296         (construct): Renamed to uri_merge_1.
6297         (url_concat): Renamed to uri_merge.
6298
6299 2001-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
6300
6301         * url.c (str_url): Use encode_string instead of the unnecessary
6302         CLEANDUP.
6303         (encode_string_maybe): New function, returns input string if no
6304         encoding is needed.
6305         (encode_string): Call encode_string_maybe to do the dirty work,
6306         xstrdup if no work needed.
6307
6308 2001-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
6309
6310         * wget.h (XDIGIT_TO_xchar): Define here.
6311
6312         * url.c (decode_string): Use new name.
6313         (encode_string): Ditto.
6314
6315         * http.c (XDIGIT_TO_xchar): Rename HEXD2asc to XDIGIT_TO_xchar.
6316         (dump_hash): Use new name.
6317
6318         * wget.h: Rename ASC2HEXD and HEXD2ASC to XCHAR_TO_XDIGIT and
6319         XDIGIT_TO_XCHAR respectively.
6320
6321 2001-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
6322
6323         * init.c: Include cookies.h.
6324
6325         * cookies.h: Declare cookies_cleanup.
6326
6327         * cookies.c (check_domain_match): Remove unused variable.
6328         (save_cookies): Remove extraneous argument from debug statement.
6329
6330         * host.c (same_host): Don't call skip_url.
6331
6332         * url.c (skip_url): Removed.  Removed its calls from various
6333         functions in url.c.
6334
6335 2001-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
6336
6337         * cookies.c (unsigned_string_hash): Use the new code in
6338         string_hash as reference.
6339
6340         * hash.c (hash_table_map): Allow deletion and change of the
6341         element processed by MAPFUN.
6342         (string_hash): Use the function from glib.
6343
6344 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
6345
6346         * config.h.in: Include #undef stub.
6347
6348         * hash.c (hash_table_remove): Rewrite to actually clear deleted
6349         entries instead of just marking them as deleted.
6350
6351 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
6352
6353         * hash.h: Declare hash_table_get_pair and hash_table_count.
6354
6355 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
6356
6357         * cookies.c: Declare http_atotm.
6358
6359 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
6360
6361         * ftp-ls.c (ftp_parse_unix_ls): Use octal constants for
6362         permissions.  A compiler that doesn't accept octal constants is
6363         seriously broken and shouldn't be used -- octal constants were
6364         present in K&R C!
6365
6366 2001-01-20  Karl Eichwalder  <ke@suse.de>
6367
6368         * Makefile.in: Provide and use DESTDIR according to the Coding
6369         Standards.
6370
6371 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
6372
6373         * ftp-ls.c (ftp_parse_vms_ls): Make seconds optional in time
6374         specification.
6375
6376 2001-04-11  Hrvoje Niksic  <hniksic@arsdigita.com>
6377
6378         * url.c (parseurl): Don't strip trailing slash when u->dir is "/"
6379         because that strips the *leading* slash, thus forcing relative
6380         FTP retrieval.
6381
6382 2001-04-10  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
6383
6384         * ftp.c (getftp): Convert initial FTP directory from VMS to UNIX
6385         notation for VMS servers.
6386         (ftp_retrieve_dirs): Do not prepend '/' to f->name when
6387         odir is an empty string.
6388
6389 2001-04-10  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
6390
6391         * ftp-ls.c (ftp_parse_winnt_ls): Made the fix for AM/PM more
6392         effective. Suggested by Edward J. Sabol.
6393
6394 2001-04-10  Hrvoje Niksic  <hniksic@arsdigita.com>
6395
6396         * cookies.c (build_cookies_request): Use and sort cookies from all
6397         matching domains.
6398         (build_cookies_request): Check for duplicates before generating
6399         the `Cookies' header.
6400
6401         * main.c (main): Don't load cookies here.
6402         (main): Make loadcookies and savecookies call the correct command.
6403
6404         * http.c (http_loop): Load cookies on-demand.
6405
6406 2001-04-09  Hrvoje Niksic  <hniksic@arsdigita.com>
6407
6408         * http.c (gethttp): Fix indentation of SSL ifdef.
6409
6410 2001-04-09  Hrvoje Niksic  <hniksic@arsdigita.com>
6411
6412         * ftp.c (ftp_retrieve_dirs): Don't forcibly prepend "/" to u->dir;
6413         that hack is no longer necessary.
6414         (getftp): Prepend initial directory to *non*-absolute u->dir's.
6415
6416 2001-04-09  Hrvoje Niksic  <hniksic@arsdigita.com>
6417
6418         * init.c (cmd_file): New function.
6419         (enable_tilde_expansion): New variable.
6420         (run_wgetrc): Use it.
6421         (cmd_file): Use it.
6422
6423 2001-04-08  Hrvoje Niksic  <hniksic@arsdigita.com>
6424
6425         * init.c: Include cookie-related options.
6426
6427         * main.c (main): Include cookie-specific options.
6428         (main): Load cookies before download is finished.
6429         (main): Save cookies when done.
6430
6431         * http.c (gethttp): Process the `Set-Cookie' header.
6432         (gethttp): Include cookies in the response.
6433
6434         * cookies.c: New file.
6435
6436 2001-04-08  Hrvoje Niksic  <hniksic@arsdigita.com>
6437
6438         * utils.c (datetime_str): New function.
6439
6440 2001-04-08  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
6441
6442         * ftp-ls.c (ftp_parse_winnt_ls): The AM/PM change did assume
6443         12:01PM == 00:01, which was obviously wrong. Taken care of this
6444         anomaly.
6445
6446         * ChangeLog: Removed an excess conflict marker. Reformatted the
6447         entry by Philipp Thomas from 2001-03-09.
6448
6449         * ftp-ls.c (ftp_parse_winnt_ls): Ensure that adjusted PM hours lay
6450         between 0 and 23. Elminate unused variable `sec'.
6451
6452 2001-04-08  Hrvoje Niksic  <hniksic@arsdigita.com>
6453
6454         * hash.c (hash_table_count): New function.
6455
6456 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
6457
6458         * utils.c (read_file): Cast MAP_FAILED to char *.  Enforced by
6459         Digital Unix cc.
6460
6461 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
6462
6463         * config.h.in: Oops, do the namespace tweaks only on systems we
6464         know about.
6465
6466 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
6467
6468         * hash.c: Include <string.h>.
6469
6470 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
6471
6472         * config.h.in: Define "compilation environment" options that work
6473         under Linux and Solaris.  To be reviewed on other OS'es.
6474
6475 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
6476
6477         * http.c (gethttp): Prepend literal newline with `\n\'.
6478
6479 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
6480
6481         * sysdep.h: Don't define VERY_LONG_FORMAT.
6482
6483         * utils.c (very_long_to_string): New function.
6484         (legible_very_long): Use it; don't use VERY_LONG_FORMAT.
6485
6486 2001-04-04  Christian Fraenkel  <christian.fraenkel@gmx.net>
6487
6488         * url.c (parse_uname): Would run past the end of the string if the
6489         username was present, but the URL did not contain a slash, e.g.
6490         http://foo:bar@myhost.
6491
6492 2001-04-03  KOJIMA Hajime  <kjm@rins.ryukoku.ac.jp>
6493
6494         * http.c (http_atotm): Use %A instead of %a to match full
6495         weekday.  (On most systems there is no difference.)
6496
6497 2001-04-03  Paul Bludov  <paul@ozero.net>
6498
6499         * mswindows.c (sleep): Use SleepEx() instead of Sleep().
6500         (ws_changetitle): Use alloca() instead of malloc() to avoid memory
6501         leak.
6502         (ws_mypath): Use GetModuleFileName instead of argv[0].
6503         (ws_startup): Use data.wVersion for comparison.
6504
6505 2001-04-02  Hrvoje Niksic  <hniksic@arsdigita.com>
6506
6507         * http.c (http_loop): Ditto.
6508
6509         * ftp.c (ftp_loop_internal): Made the check whether to continue
6510         retrieval `-O'-friendly.
6511
6512 2001-04-02  Hrvoje Niksic  <hniksic@arsdigita.com>
6513
6514         * netrc.c (parse_netrc): Don't trim the line endings explicitly;
6515         they will be handled as whitespace.
6516         (parse_netrc): Correctly handle lines that end with whitespace.
6517
6518 2001-04-02  Hrvoje Niksic  <hniksic@arsdigita.com>
6519
6520         * retr.c (retrieve_url): New variable global_download_count used
6521         to identify first retrieval.
6522
6523         * ftp.c (getftp): Ditto.
6524
6525         * http.c (gethttp): Rewind opt.dfp only on first retrieval.
6526
6527 2001-04-02  Hrvoje Niksic  <hniksic@arsdigita.com>
6528
6529         * init.c (cmd_address): Heap-allocate the address that gets stored
6530         to CLOSURE.  Old code would simply assign an address on the stack.
6531
6532 2001-04-01  Nicolas Lichtmaier <nick@debian.org>
6533
6534         * ftp.c (ftp_get_listing): Propagate error status.
6535         (ftp_retrieve_glob): Use it.
6536         (ftp_loop): Ditto.
6537
6538 2001-04-01  Nicolas Lichtmaier <nick@debian.org>
6539
6540         * main.c (main): Add -C to the string that is the third arg to
6541         getopt_long().
6542
6543 2001-04-01  Hrvoje Niksic  <hniksic@arsdigita.com>
6544
6545         * ftp.c (getftp): Don't start the download from scratch if `-c'
6546         was specified, but the file is already fully downloaded.
6547
6548         * http.c (gethttp): Don't truncate a pre-existing file if `-c' was
6549         specified and the server doesn't support continued download.
6550         (gethttp): Don't start the download from scratch if `-c' was
6551         specified, but the file is already fully downloaded.
6552
6553 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
6554
6555         (recursive_retrieve): Don't clear the hash tables at this point at
6556         all; it interferes with the normal operation of register_download.
6557
6558 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
6559
6560         * recur.c (recursive_retrieve): Clear the hash tables only when
6561         they are defined.
6562
6563 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
6564
6565         * http.c (gethttp): Make sure the socket is closed with
6566         CLOSE_INVALIDATE before we have drained the body.
6567
6568 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
6569
6570         * retr.c (retrieve_url): Call register_download() for downloaded
6571         files and register_html() for downloaded HTML files.
6572
6573         * recur.c (register_download): New function; register here that a
6574         file has been downloaded, rather than in recursive_retrieve().
6575         (register_html): New function; enqueue the location of HTML files
6576         here rather than in recursive_retrieve().
6577
6578 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
6579
6580         * main.c (print_help): Use multiple fputs instead of a single ugly
6581         printf().
6582         (main): Consistently assign numbers >128 to options without a
6583         corresponding character.
6584
6585 2001-03-09  Philipp Thomas  <pthomas@suse.de>
6586
6587         * safe-ctype.h: New file. Locale independent ctype.h replacement
6588         taken from libiberty.
6589
6590         * safe-ctype.c: New file. Tables for above.
6591
6592         * Makefile.in: Add safe-ctype$o to OBJS.  Add dependencies for
6593         safe-ctype$o.
6594
6595         * cmpt.c: Remove include of ctype.h. Use ISSPACE instead of
6596         isspace.
6597
6598         * ftp-basic.c: Don't include ctype.h.
6599
6600         * ftp-ls.c: Likewise.
6601
6602         * ftp.c: Likewise.
6603
6604         * headers.c: Likewise.
6605
6606         * host.c: Likewise.
6607
6608         * html-parse.c: Likewise.
6609
6610         * html-url.c: Likewise.
6611
6612         * http.c: Likewise.
6613
6614         * init.c: Likewise.
6615
6616         * main.c: Likewise. Set LC_CTYPE along with LC_MESSAGES.
6617
6618         * netrc.c: Likewise.
6619
6620         * recur.c: Likewise.
6621
6622         * retr.c: Likewise.
6623
6624         * snprintf.c: Replace ctype.h with safe-ctype.h. Use ISDIGIT
6625         instead of isdigit.
6626
6627         * sysdep.h: Remove defines of ctype macros as they aren't needed
6628         for safe-ctype-h.
6629
6630         * url.c: Don't include ctype.h.
6631
6632         * utils.c: Likewise.
6633
6634         * wget.h: Include safe-ctype.h.
6635
6636 2001-03-27  Dan Harkless  <wget@harkless.org>
6637
6638         * Makefile.in: Moved top_builddir out of "User configuration
6639         section" of top Makefile and analogous spot in this one.
6640
6641 2001-03-17  Dan Harkless  <wget@harkless.org>
6642
6643         * Makefile.in: Include @SSL_INCLUDES@ substition in INCLUDES.
6644         Define top_builddir.  Link wget with libtool so the user doesn't
6645         have to supply a bunch of custom environment variables to
6646         correctly link with the OpenSSL shared libraries.
6647
6648 2001-03-06  Hack Kampbjorn  <hack@hackdata.com>
6649
6650         * http.c (gethttp): skip :port in host header if it is the
6651         DEFAULT_HTTPS_PORT when using SSL.
6652
6653         * url.c: move the #define of DEFAULT_HTTP_PORT, DEFAULT_FTP_PORT
6654         and DEFAULT_HTTPS_PORT to the header file so it can be use in the
6655         rest of the code.
6656         * url.h: Ditto
6657
6658 2001-03-01  Jonas Jensen  <bones@huleboer.dk>
6659
6660         * retr.c (show_progress): Correctly calculate the number of bytes
6661         in the first line of the download that have been actually
6662         downloaded in this run.
6663
6664 2001-02-23  Dan Harkless  <wget@harkless.org>
6665
6666         * main.c (print_help): --help documentation for -N said it would
6667         re-download files if they had the _same_ timestamp on server.
6668         (print_help): -nr belongs in "FTP options" section of --help
6669         output, not "Recursive retrieval" section.  Alphabetized FTP
6670         options by long option name.
6671
6672 2001-02-16  Dan Harkless  <wget@harkless.org>
6673
6674         * init.c (commands): Hack Kampbjørn <hack@hackdata.com> discovered
6675         that "httpsproxy" had been inserted into commands[] out of
6676         alphabetical order, causing "BUG: unknown command `httpuser'".
6677
6678 2001-02-13  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
6679
6680         * ftp-ls.c (ftp_parse_ls): Added support of ST_MACOS (Unix-like
6681         listing without correct permissons).
6682
6683         * ftp.h (stype): Added ST_MACOS to identify the NetPresenz MacOS
6684         FTP server.
6685
6686         * ftp.c (ftp_retrieve_list): New mirroring logic: A remote file
6687         shall be donwloaded only when it's newer than the local copy or
6688         when it has the same timeestamp but its size is different. ST_VMS
6689         and ST_MACOS as special cases that lie about file size.
6690
6691         * ftp-ls.c (ftp_parse_ls): Support for ST_MACOS.
6692
6693         * Makefile.in: Removed dependency on ftpparse library due to unclear
6694         copyright issues and absence of any feedback to our queries.
6695
6696         * ftp-ls.c: Removed dependency on ftpparse library due to unclear
6697         copyright issues and absence of any feedback to our queries.
6698         (ftp_parse_ls): Added a warning message when remote server system
6699         does not seem to be suported by wget.
6700         (ftp_parse_vms_ls): New function for parsing VMS ftp
6701         server listing output.
6702         (clean_line): New function responsible for removing
6703         end-of-line characters from FTP listing texts.
6704
6705         * ftp.c (getftp): Global variables pwd and host_type are now
6706         member of the ccon structure under names ccon.id and ccon.rs.
6707
6708         * ftp.h (struct ccon): Added formed global variables from ftp.c,
6709         enum stype rs (remote system identification) and char *id (initial
6710         working directory), as suggested by Hrvoje.
6711
6712         * url.c (parse_uname): Added support for passwords containing '@'
6713         characters.
6714         (skip_uname): Ditto.
6715
6716 2001-02-11  Hrvoje Niksic  <hniksic@arsdigita.com>
6717
6718         * ftp.c (ftp_loop): Reset con.
6719
6720 2001-01-06  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
6721
6722         * url.c (parse_uname): Added support for passwords containing '@'
6723         characters.
6724         (skip_uname): Ditto.
6725
6726 2001-02-11  Hack Kampbjørn  <hack@hackdata.com>
6727
6728         * url.c (parseurl): Debug-print u->ftp_type.
6729
6730 2001-02-11  Hrvoje Niksic  <hniksic@arsdigita.com>
6731
6732         * ftp.c (ftp_loop_internal): Disable padding.
6733         (getftp): Ditto.
6734
6735         * http.c (http_loop): Disable padding.
6736
6737         * retr.c (show_progress): Use it to enable padding.
6738
6739         * retr.c (rate): Optional parameter PAD for padding the rate.
6740
6741 2001-02-10  Hrvoje Niksic  <hniksic@arsdigita.com>
6742
6743         * retr.c (show_progress): Make sure that the last output line
6744         includes progress.
6745
6746 2001-02-10  Jonas Jensen  <bones@huleboer.dk>
6747
6748         * retr.c (show_progress): Print the download rate along with the
6749         percentages.
6750         Along with Anders Thorsby <anders@thorsby.dk>.
6751
6752 2001-02-10  Tim Mooney  <mooney@dogbert.cc.ndsu.NoDak.edu>
6753
6754         * ftp.h: Rename enums `command' to `wget_ftp_command' and
6755         `fstatus' to `wget_ftp_status' because old names clash with Tru64
6756         net/if.h.
6757
6758 2001-02-08  Christian Fraenkel <christian.fraenkel@gmx.net>
6759
6760         * gen_sslfunc.c: verify_callback is now static
6761
6762         * gen_sslfunc.c (init_ssl): load certificate if specified
6763
6764         * gen_sslfunc.c (ssl_printerr): new function
6765
6766         * init.c: added new --sslcertfile and --sslcertkey switches
6767
6768         * main.c: ditto
6769
6770         * options.h: ditto
6771
6772         * http.c (gethttp): abort when init_ssl fails
6773
6774 2001-01-23  Herold Heiko  <Heiko.Herold@previnet.it>
6775
6776         * mswindows.h: Include <malloc.h>; it's needed for alloca().
6777
6778 2001-01-10  Dan Harkless  <wget@harkless.org>
6779
6780         * url.c (str_url): Clarified this function's comment header after
6781         Hrvoje answered my question on the list as to when hide != 1.
6782         Also Hrvoje pointed out I need to use xstrdup() on the string literal.
6783
6784 2001-01-06  Hrvoje Niksic  <hniksic@arsdigita.com>
6785
6786         * connect.c (bindport): Declare addrlen as int.  Diagnosed by
6787         Drazen Kacar <dave@arsdigita.com>.
6788         (conaddr): Ditto.
6789
6790 2001-01-09  Dan Harkless  <wget@harkless.org>
6791
6792         * html-url.c: A bunch of fixup of `--page-requisites'-related
6793         comments to reflect Hrvoje's changes to my code when transplanting
6794         it into this new file, to fix spelling mistakes, to clarify, etc.
6795
6796         * url.c (write_backup_file): Clarified a comment.
6797         (str_url): Henrik van Ginhoven pointed out on the list that we
6798         shouldn't give away the number of characters in the password by
6799         replacing each character with a 'x'.  Use "<password>" instead.
6800
6801         * ftp.c (ftp_retrieve_dirs): The bug where recursion into FTP
6802         directories didn't work if logging in put you in a directory other
6803         than "/" is fixed now.  Removed the comment here warning of the bug.
6804
6805         * main.c (print_help): --continue's description was misleading.
6806         We don't "restart", we "resume".  Also, better to say
6807         "partially-downloaded file" rather than just "existing file".
6808
6809 2001-01-06  Dan Harkless  <wget@harkless.org>
6810
6811         * ChangeLog: The '[Not in 1.6 branch.]'s were decided not to be
6812         the best way to go about my aim.  Removed them in favor of:
6813
6814         * ChangeLog-branches/1.6_branch.ChangeLog: New file.
6815
6816 2001-01-04  Hrvoje Niksic  <hniksic@arsdigita.com>
6817
6818         * url.c (replace_attr): New function, to be used by both
6819         TO_COMPLETE and TO_RELATIVE case in convert_links.
6820         (find_fragment): New function for finding URL fragments.
6821         (replace_attr): Better handle the case where the original string
6822         is not quoted.  Use find_fragment.
6823         (convert_links): Use replace_attr().
6824
6825 2000-12-31  Dan Harkless  <wget@harkless.org>
6826
6827         * ChangeLog: Since this flat file doesn't have multiple branches,
6828         looking at the dates would make you think that things went into
6829         1.6 that actually just went into the 1.7-dev branch.  Added "[Not
6830         in 1.6 branch.]" where appropriate to clarify.
6831
6832 2000-12-30  Dan Harkless  <wget@harkless.org>
6833
6834         * ftp.c, http.c:  Applied Hack Kampbjørn <hack@hackdata.com>'s
6835         patch to deal with h_errno not being defined in netdb.h under Cygwin.
6836
6837 2000-12-18  Csaba Raduly  <csaba.raduly@sophos.com>
6838
6839         * sysdep.h: Include <malloc.h> and <io.h> under Watcom.
6840
6841 2000-12-17  Igor Khristophorov  <igor@atdot.org>
6842
6843         * http.c (check_end): Fix test for '+' or '-'.
6844
6845 2000-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
6846
6847         * url.c (parseurl): Rename inner loop var from i to ind to avoid
6848         clash with the function top-level-declared variable i.
6849         (str_url): Likewise, rename inner-loop i to j.
6850
6851         * recur.c (parse_robots): Don't declare LEN at top of function.
6852         (robots_match): Renamed parameter FORBIDDEN to avoid hiding of
6853         global variable.
6854
6855         * main.c (main): Change erroneous use of bitwise and to logical.
6856
6857         * init.c (cmd_address): Don't heap-allocate `sin'; it can be on
6858         the stack because it will be copied to closure.
6859
6860         Thanks to Csaba Raduly's run of PC-LINT over the sources.
6861
6862 2000-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
6863
6864         * http.c (basic_authentication_encode): Use xmalloc(), not
6865         malloc().  Thanks to Csaba Raduly's run of PC-LINT over the
6866         sources.
6867
6868 2000-12-17  Csaba Raduly  <csaba.raduly@sophos.com>
6869
6870         * sysdep.h: Test for __EMX__ rather than for EMXOS2 for OS/2
6871         compilation.
6872
6873 2000-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
6874
6875         * mswindows.c: Include <errno.h>.
6876
6877         * gen_sslfunc.c: Include <errno.h>.
6878
6879         * ftp-basic.c: Don't attempt to declare errno or h_errno because
6880         they're not used.
6881
6882         * main.c: Include <errno.h> because errno is used.
6883
6884         * ftp.c: Ditto.
6885
6886         * http.c: Include <netdb.h> for h_errno.
6887
6888 2000-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
6889
6890         * html-parse.c (advance_declaration): MSVC assert() chokes on
6891         '\"'.  Use '"' instead.
6892
6893 2000-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
6894
6895         * utils.c (xfree_real): Removed.
6896         (xfree_debug): Just call free().
6897
6898         * wget.h (xfree): Make it an alias for free.
6899
6900 2000-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
6901
6902         * http.c (http_loop): Furthermore, touch output_document only if
6903         it is known to be an existing regular file.
6904
6905 2000-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
6906
6907         * ftp.c (ftp_retrieve_list): Ditto.
6908
6909         * http.c (http_loop): Touch output_document if that is used for
6910         output.
6911
6912 2000-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
6913
6914         * http.c: Include gen_sslfunc.h after including Wget's headers.
6915         (persistent_available_p): Needed coma before `int ssl'.
6916
6917 2000-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
6918
6919         * ftp.c (ftp_loop_internal): Ditto.
6920
6921         * http.c (http_loop): Use it.
6922
6923         * retr.c (sleep_between_retrievals): New function that handles the
6924         logic of opt.wait and opt.waitretry.
6925
6926 2000-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
6927
6928         * rbuf.h: Implement only a single version of RBUF_READCHAR, using
6929         rbuf_read_bufferful when the buffer is depleted.
6930
6931         * rbuf.c (rbuf_read_bufferful): New function.
6932
6933 2000-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
6934
6935         * gen_sslfunc.h: Use ansi2knr style function declarations.
6936
6937         * gen_sslfunc.c: Reformat according to the GNU coding standards.
6938         More should be done.
6939
6940         * http.c (persistent_available_p): Place the cheap SSL test nearer
6941         the top of the function.
6942         (CLOSE_FINISH, CLOSE_INVALIDATE): Define only one version of each.
6943
6944 2000-12-05  Hrvoje Niksic  <hniksic@arsdigita.com>
6945
6946         * url.c (init_unsafe_char_table): Reinstate space as an unsafe
6947         char.
6948
6949 2000-12-03  Christian Fraenkel <christian.fraenkel@gmx.net>
6950
6951         * Makefile.in: added gen_sslfunc object
6952         * config.h.in: added HAVE_SSL define
6953         * connect.c: changed select_fd from static int to int
6954         * connect.h: ditto
6955         * gen_sslfunc.h: New file
6956         * gen_sslfunc.c: ditto
6957         * http.c: added HTTPS fuctionality
6958         * retrc.c: ditto
6959         * url.c: ditto
6960         * init.c: added opt.httpsproxy
6961         * options.h: ditto
6962         * rbuf.h: added alternate rbuf struct
6963         * wget.h: added CONSSLERR
6964         * rbuf.c: ditto
6965
6966         * http.c: Added HTTPS fuctionality.
6967
6968         * retrc.c: Ditto.
6969
6970         * url.c: Ditto.
6971
6972         * init.c: Added opt.httpsproxy.
6973
6974         * options.h: Ditto.
6975
6976         * rbuf.h: Added alternate rbuf struct.
6977
6978         * wget.h: Added CONSSLERR.
6979
6980         * rbuf.c: Ditto.
6981
6982 2000-11-30  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
6983
6984         * ftp-ls.c (ftp_parse_unix_ls): Added second parameter
6985         "ignore_perms" to ignore file and directory permissions for
6986         Windows NT FTP server listings.
6987         (ftp_parse_winnt_ls): New function.
6988         (ftp_parse_ls): Parses UNIX and Windows NT listings
6989         separately. Simple heuristics for distinguishing between UNIX and
6990         MS-DOS-like FTP listing provided by Windows NT FTP service.
6991
6992 2000-11-18  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
6993
6994         * ftpparse.c, ftpparse.h: New files.
6995
6996         * ftp-ls.c (ftp_parse_ls): Use ftp_parse_unix_ls for UNIX servers
6997         only. Use ftp_parse_nonunix_ls otherwise.
6998         (ftp_parse_nonunix_ls): Stub to the ftpparse library handling all
6999         exotic FTP servers.
7000
7001         * ftp.h (stype): New enum, distinguishes UNIX, VMS, and "other"
7002         FTP servers.
7003
7004         * ftp.c: New static wariables host_type, pwd, and pwd_len.
7005         (getftp): Support for VMS. Support for FTP servers that do not
7006         place you in the root directory after login.
7007         (ftp_retrieve_list): VMS is silent about the real file size, issue
7008         a more appropriate message.
7009         (ftp_get_listing): Pass host_type to ftp_parse_ls.
7010
7011         * ftp-basic.c (ftp_pwd, ftp_syst): New functions.
7012
7013 2000-11-30  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
7014
7015         * ftp-ls.c (ftp_parse_unix_ls): Added second parameter
7016         "ignore_perms" to ignore file and directory permissions for
7017         Windows NT FTP server listings.
7018         (ftp_parse_winnt_ls): New function.
7019         (ftp_parse_ls): Parses UNIX and Windows NT listings
7020         separately. Simple heuristics for distinguishing between UNIX
7021         and MS-DOS-like FTP listing provided by Windows NT FTP service.
7022
7023 2000-11-29  John Summerfield  <summer@OS2.ami.com.au>
7024
7025         * netrc.c (parse_netrc): Get rid of line ending.
7026
7027 2000-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
7028
7029         * ftp.c (ftp_retrieve_list): Undo typo "fix" until resolution by
7030         Dan.
7031
7032 2000-11-24  Karl Eichwalder  <ke@suse.de>
7033
7034         * main.c (print_help): Untabify.
7035
7036 2000-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
7037
7038         * utils.c (xrealloc_debug): Do the unregister/register thing only
7039         if the pointer has actually changed.
7040         (xmalloc_real): Declare `static' in DEBUG_MALLOC builds.
7041         (xfree_real): Ditto.
7042         (xrealloc_real): Ditto.
7043         (xstrdup_real): Ditto.
7044
7045 2000-11-22  Hrvoje Niksic  <hniksic@arsdigita.com>
7046
7047         * ftp.c (getftp): ftp_getaddress() returns a malloc'ed copy of the
7048         string; no need to strdup() it.
7049         (getftp): Make pwd_len a local variable.
7050         (ftp_loop): Free PWD before returning.
7051
7052         * init.c (cleanup): Free opt.ftp_pass only if it's non-NULL.
7053
7054 2000-11-22  Hrvoje Niksic  <hniksic@arsdigita.com>
7055
7056         * all: Use xfree() instead of free.
7057
7058         * utils.c (xfree): New function.
7059
7060 2000-11-21  Hrvoje Niksic  <hniksic@arsdigita.com>
7061
7062         * url.c (convert_links): HTML-quote the converted string.
7063
7064         * utils.c (html_quote_string): Move here from ftp-ls.c
7065         (html_quote_string): Make non-static; declare in utils.h.
7066         (html_quote_string): Convert SP to &#32;.
7067
7068 2000-11-21  Hrvoje Niksic  <hniksic@arsdigita.com>
7069
7070         * ftp.c (getftp): Reformat Jan's code according to GNU coding
7071         standards; remove (debugging?) printf's; use '\0' for the ASCII
7072         zero character.  Use alloca() instead of malloc() for
7073         inter-function temporary allocations.
7074
7075 2000-11-18  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
7076
7077         * ftpparse.c, ftpparse.h: New files.
7078
7079         * ftp-ls.c (ftp_parse_ls): Use ftp_parse_unix_ls for UNIX servers
7080         only. Use ftp_parse_nonunix_ls otherwise.
7081         (ftp_parse_nonunix_ls): Stub to the ftpparse library handling all
7082         exotic FTP servers.
7083
7084         * ftp.h (stype): New enum, distinguishes UNIX, VMS, and "other"
7085         FTP servers.
7086
7087         * ftp.c: New static wariables host_type, pwd, and pwd_len.
7088         (getftp): Support for VMS. Support for FTP servers that do not
7089         place you in the root directory after login.
7090         (ftp_retrieve_list): VMS is silent about the real file size, issue
7091         a more appropriate message.
7092         (ftp_get_listing): Pass host_type to ftp_parse_ls.
7093
7094         * ftp-basic.c (ftp_pwd, ftp_syst): New functions.
7095
7096 2000-11-21  Hrvoje Niksic  <hniksic@arsdigita.com>
7097
7098         * hash.c (hash_table_put): Don't overwrite deleted mappings.
7099
7100 2000-11-21  Hrvoje Niksic  <hniksic@arsdigita.com>
7101
7102         * hash.c (find_mapping): New function.
7103         (hash_table_get): Use it.
7104         (hash_table_get_pair): Ditto.
7105         (hash_table_exists): Ditto.
7106         (hash_table_remove): Ditto.
7107         (hash_table_remove): Really delete the entry if the mapping
7108         following LOCATION is empty.
7109
7110         * utils.c (string_set_add): Check whether the element has existed
7111         before.
7112
7113         * hash.c (hash_table_get_pair): New function.
7114
7115 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
7116
7117         * http.c (http_process_type): Ignore trailing whitespace; use
7118         strdupdelim().
7119
7120         * recur.c (recursive_retrieve): Use the new `convert' field.
7121         (convert_all_links): Ditto.
7122         (convert_all_links): Don't respect meta_disallow_follow.
7123
7124         * html-url.c (handle_link): Fill out link_relative_p and
7125         link_complete_p.
7126
7127         * url.h (struct _urlpos): Make elements more readable.
7128
7129         * recur.c (recursive_retrieve): Call slist_prepend instead of
7130         slist_append.
7131         (convert_all_links): Call slist_nreverse before iterating through
7132         urls_html.
7133
7134         * utils.c (slist_prepend): New function.
7135         (slist_nreverse): Ditto.
7136
7137 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
7138
7139         * http.c (check_end): Constify.
7140
7141 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
7142
7143         * http.c (http_loop): If username and password are known, try the
7144         `Basic' authentication scheme by default.
7145
7146         * connect.h: Declare test_socket_open.
7147
7148 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
7149
7150         * version.c: Bump version from 1.5.3+dev to 1.7-dev.
7151
7152 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
7153
7154         * http.c (gethttp): Don't use the return value of sprintf().
7155         (gethttp): Inhibit keep-alive if opt.http_keep_alive is 0.
7156
7157 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
7158
7159         * recur.c (recursive_retrieve): Print the "so we don't load"
7160         debugging message only if we really don't load.
7161
7162         * http.c (gethttp): Inhibit keep-alive if proxy is being used.
7163         (gethttp): Don't request keep-alive if keep-alive is inhibited.
7164
7165 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
7166
7167         * http.c (gethttp): Make the HTTP persistent connections more
7168         robust.
7169
7170 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
7171
7172         * retr.c (get_contents): If use_expected, make sure that the
7173         appropriate amount of data is being read.
7174
7175         * http.c (gethttp): Check for both `Keep-Alive: ...' and
7176         `Connection: Keep-Alive'.
7177
7178         * wget.h (DEBUGP): Call debug_logprintf only if opt.debug is
7179         turned on.
7180
7181 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
7182
7183         * http.c (connection_available_p): Use it.
7184
7185         * connect.c (test_socket_open): New function.
7186
7187         * http.c (gethttp): Support persistent connections.  Based on the
7188         ideas, and partly on code, by Sam Horrocks <sam@daemoninc.com>.
7189         (register_persistent): New function.
7190         (connection_available_p): Ditto.
7191         (invalidate_connection): Ditto.
7192
7193 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
7194
7195         * url.c (convert_links): Handle UREL2ABS case.
7196
7197         * recur.c (recursive_retrieve): Instead of the list
7198         urls_downloaded, use hash tables dl_file_url_map and
7199         dl_url_file_map.
7200         (convert_all_links): Use them to retrieve data.
7201
7202         * host.c (clean_hosts): Free the hash tables.
7203
7204         * main.c (private_initialize): Call host_init().
7205
7206         * host.c (store_hostaddress): Use a saner, hash table-based data
7207         model.
7208         (realhost): Ditto.
7209         (host_init): Initialize the hash tables.
7210
7211 2000-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
7212
7213         * utils.c (slist_append): Eviscerate NOSORT.  Hash tables are now
7214         used for what the sorted slists used to be used for.
7215         (slist_contains): Don't rely on the list being sorted.
7216         (slist_append): Simplify the code.
7217
7218         * recur.c (recursive_cleanup): Use free_string_set.
7219
7220         * utils.c (string_set_add, string_set_exists, string_set_free):
7221         New functions for easier freeing of hash tables whose keys are
7222         strdup'ed strings.
7223
7224         * recur.c (recursive_retrieve): Use the hash table functions for
7225         storing undesirable URLs.
7226
7227         * hash.c: New file.
7228
7229 2000-11-17  Hrvoje Niksic  <hniksic@arsdigita.com>
7230
7231         * main.c (private_initialize): Call url_init.
7232         (main): Call private_initialize.
7233
7234         * url.c (unsafe_char_table): New table.
7235         (UNSAFE_CHAR): Use it.
7236         (init_unsafe_char_table): New function.
7237         (url_init): New function; call init_unsafe_char_table.
7238
7239 2000-11-16  Hrvoje Niksic  <hniksic@arsdigita.com>
7240
7241         * mswindows.h: Define snprintf and vsnprintf to _snprintf and
7242         _vsnprintf respectively.
7243
7244 2000-11-15  Hrvoje Niksic  <hniksic@arsdigita.com>
7245
7246         * config.h.in: Do the _XOPEN_SOURCE and _SVID_SOURCE things only
7247         on Linux.
7248
7249 2000-11-15  Hrvoje Niksic  <hniksic@arsdigita.com>
7250
7251         * html-url.c (handle_link): Handle HTML fragment identifiers.
7252
7253         * recur.c (recursive_retrieve): If norobot info is respected and
7254         the file is specified not to be followed by robots, respect that.
7255
7256         * html-url.c (collect_tags_mapper): Handle <meta name=robots
7257         content=X>.  For us the important cases are where X is NONE or
7258         where X contains NOFOLLOW.
7259         (get_urls_html): Propagate that information to the caller.
7260
7261 2000-11-13  Hrvoje Niksic  <hniksic@arsdigita.com>
7262
7263         * url.c (convert_links): Unlink the file we might be reading from
7264         before writing to it.
7265         (convert_links): Use alloca instead of malloc for
7266         filename_plus_orig_suffix.
7267
7268 2000-11-12  Hrvoje Niksic  <hniksic@arsdigita.com>
7269
7270         * host.c (realhost): Add HOST to the list with quality==0 only if
7271         it wasn't already there.
7272         Based on analysis by Lu Guohan <feng@public.bjnet.edu.cn>.
7273
7274 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
7275
7276         * url.c (get_urls_file): Ditto.
7277         (convert_links): Ditto.
7278
7279         * html-url.c (get_urls_html): Use read_file() instead of
7280         load_file().
7281
7282         * utils.c (read_file): New function, instead of the old
7283         load_file().
7284         (read_file_free): Ditto.
7285
7286         * url.c (findurl): Search only for the supported protocols.
7287         (convert_links): Use fwrite() when writing out a region of
7288         characters.
7289
7290 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
7291
7292         * ftp-ls.c: Move html_quote_string and ftp_index here.
7293
7294         * url.c: Remove get_urls_html, since that's now in html-url.c.
7295
7296         * html-url.c: New file.
7297
7298         * html-parse.c: New file.
7299
7300 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
7301
7302         * init.c (run_wgetrc): Don't bother killing off '\r' since
7303         pars_line() skips whitespace at end of line anyway.
7304         (parse_line): Oops, it didn't.  Now it does.
7305
7306         * recur.c (parse_robots): Ditto here.
7307
7308         * ftp-ls.c (ftp_parse_unix_ls): Kill off the newline character
7309         manually because read_whole_line no longer does.
7310
7311         * utils.c (read_whole_line): Rewrite to: a) use less memory
7312         (reallocates to needed size after work), b) work faster -->
7313         fgets() instead of getc, c) be more correct --> doesn't kill the
7314         newline character at the end of line.
7315
7316 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
7317
7318         * init.c (comind): Initialize MAX to array size - 1.
7319
7320 2000-11-08  Hrvoje Niksic  <hniksic@arsdigita.com>
7321
7322         * url.c (construct): Changed last_slash[-1] to *(last_slash - 1).
7323         Suggested by Edward J. Sabol.
7324
7325 2000-11-08  Hrvoje Niksic  <hniksic@arsdigita.com>
7326
7327         * url.c (construct): Handle the case where host name is not
7328         followed by a slash.
7329
7330 2000-11-06  Hrvoje Niksic  <hniksic@arsdigita.com>
7331
7332         * init.c: commands[] need to be sorted!  ("base" wasn't.)
7333
7334 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
7335
7336         * wget.h (DO_REALLOC_FROM_ALLOCA): Use braces to disambiguate
7337         `if'.
7338
7339 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
7340
7341         * url.c (construct): Insert unneeded initialization for the
7342         compiler to shut up.
7343
7344         * config.h.in: Define _XOPEN_SOURCE to 500 to get the prototype
7345         for strptime() (*duh*).  Define _SVID_SOURCE to get S_IFLNK which
7346         otherwise gets lost when you define _XOPEN_SOURCE.
7347
7348         * utils.c (touch): Include the file name in the error message.
7349         From Debian.
7350
7351 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
7352
7353         * log.c (logvprintf): Use vsnprintf() in all cases.  If necessary,
7354         resize the buffer to fit the formated message.  That way, messages
7355         of arbitrary size may be printed.
7356         (logvprintf): Use saved_append() to optionally log the last
7357         several lines of output.
7358         (logputs): Ditto.
7359         (log_close): Adapt to new data structures.
7360         (log_dump): Ditto.
7361         (redirect_output): Print messages to stderr, not to stdout.
7362
7363         * log.c (saved_append_1): New function.  Replaces the old logging
7364         system ("log all output until 10M characters") with a new, much
7365         more reasonable one ("log last screenful of text").
7366         (saved_append): New function; call saved_append_1.
7367         (free_log_line): New function.
7368
7369 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
7370
7371         * url.c (construct): Fix comment.
7372         (find_last_char): Document.
7373
7374 2000-11-04  Hrvoje Niksic  <hniksic@arsdigita.com>
7375
7376         * snprintf.c: New file.
7377
7378 2000-11-03  Hrvoje Niksic  <hniksic@arsdigita.com>
7379
7380         * wget.h: If HAVE_STDARG_H is not defined, don't declare argument
7381         types to logprintf() and debug_logprintf().
7382
7383 2000-11-02  Hrvoje Niksic  <hniksic@arsdigita.com>
7384
7385         * ftp.c (ftp_loop_internal): Hide the password from the URL when
7386         printing non-verbose.  Problem spotted by Dariusz Mlynarczyk
7387         <darekm@bydg.lomac.com.pl>.
7388
7389 2000-11-02  Junio Hamano  <junio@twinsun.com>
7390
7391         * ftp-basic.c (ftp_login): Make comparison case-insensitive.
7392
7393 2000-11-02  Tyler Riddle  <triddle@liquidmarket.com>
7394
7395         * http.c (known_authentication_scheme_p): Recognize NTML
7396         authentication.
7397         (create_authorization_line): Treat NTML the same as `Basic'.
7398
7399 2000-11-02  Hrvoje Niksic  <hniksic@arsdigita.com>
7400
7401         * retr.c (retrieve_url): Free url before returning.
7402         (retrieve_url): Free mynewloc before returning.
7403         Spotted by Mark A. Mankins <Mankins_Mark@prc.com>.
7404
7405 2000-11-02  Hrvoje Niksic  <hniksic@arsdigita.com>
7406
7407         * url.c (parseurl): Remove possible reading past the end of
7408         sup_protos[].  Spotted by Mark A. Mankins <Mankins_Mark@prc.com>.
7409
7410 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
7411
7412         * main.c (main): In case of opt.downloaded overflowing, print
7413         <overflow> instead of a totally bogus random value.
7414
7415         * retr.c (retrieve_from_file): Ditto.
7416
7417         * recur.c (recursive_retrieve): Ditto.
7418
7419         * main.c (main): Ditto.
7420
7421         * http.c (http_loop): Ditto.
7422
7423         * ftp.c (ftp_loop_internal): Use downloaded_increase() instead of
7424         `+=', and downloaded_exceeds_quota() instead of the simple-minded
7425         check.
7426         (ftp_retrieve_list): Ditto.
7427         (ftp_retrieve_dirs): Ditto.
7428         (ftp_retrieve_glob): Ditto.
7429
7430         * retr.c (downloaded_increase): New function.  Notice overflows of
7431         opt.downloaded.
7432         (downloaded_exceeds_quota): Make sure that opt.downloaded is not
7433         used if it overflowed.
7434
7435         * options.h (struct options): New member downloaded_overflow.
7436
7437 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
7438
7439         * wget.h (enum): Remove extra space after last enumeration.
7440
7441 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
7442
7443         * main.c (main): Use legible_very_long() for printing
7444         opt.downloaded.
7445
7446         * utils.c (legible_1): New function that operates on strings and
7447         does the brunt of legible()'s work.
7448         (legible): Use legible_1().
7449         (legible_very_long): New function; dump the argument with
7450         sprintf(), and call legible_1().
7451
7452         * options.h (struct options): Use VERY_LONG_TYPE for
7453         opt.downloaded.
7454
7455         * sysdep.h (VERY_LONG_TYPE): Define it to have a 64-bit or greater
7456         type.
7457
7458         * config.h.in: Make sure that SIZEOF_LONG and SIZEOF_LONG_LONG get
7459         defined.  Define HAVE_LONG_LONG if long long is available.
7460
7461 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
7462
7463         * utils.c (long_to_string): Update with a later, better version.
7464
7465 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
7466
7467         * url.c (path_simplify_with_kludge): New function.
7468         (path_simplify_with_kludge): Disable it.  Instead...
7469         (parse_dir): ...make sure that at this point the right thing is
7470         done, i.e. that "query" part of the URL (?...) is always assigned
7471         to the file, never to the directory portion of the path.
7472
7473 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
7474
7475         * retr.c (retrieve_url): Detect redirection cycles.
7476
7477 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
7478
7479         * url.c (get_urls_html): Decode HTML entities using
7480         html_decode_entities.
7481
7482         * html.c (htmlfindurl): Don't count the `#' in numeric entities
7483         (&#NNN;) as an HTML fragemnt.
7484         (html_decode_entities): New function.
7485
7486 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
7487
7488         * html.c (htmlfindurl): Fix recognition of # HTML fragments.
7489
7490 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
7491
7492         * url.c (construct): Rewritten for clarity.  Avoids the
7493         unnecessary copying and stack-allocation the old version
7494         performed.
7495
7496 2000-10-31  Hrvoje Niksic  <hniksic@arsdigita.com>
7497
7498         * ftp.c (getftp): Ditto.
7499
7500         * http.c (gethttp): Rewind the stream when retrying from scratch.
7501
7502 2000-10-31  Hrvoje Niksic  <hniksic@arsdigita.com>
7503
7504         * retr.c (retrieve_url): Use url_concat() to handle relative
7505         redirections instead of /ad hoc/ code.
7506
7507         * url.c (url_concat): New function encapsulating weird
7508         construct().
7509         (urllen_http_hack): New function.
7510         (construct): When constructing new URLs, recognize that `?' does
7511         not form part of the file name in HTTP.
7512
7513 2000-10-13  Adrian Aichner  <adrian@xemacs.org>
7514
7515         * retr.c: Add msec timing support for WINDOWS.
7516         * retr.c (reset_timer): GetSystemTime() on WINDOWS.
7517         * retr.c (elapsed_time): Calculate delta time to msec on WINDOWS.
7518
7519 2000-10-27  Dan Harkless  <wget@harkless.org>
7520
7521         * retr.c (retrieve_url): Manually applied T. Bharath
7522         <TBharath@responsenetworks.com>'s patch to get wget to grok
7523         illegal relative URL redirects.  Reformatted and re-commented it.
7524
7525 2000-10-23  Dan Harkless  <wget@harkless.org>
7526
7527         * connect.c (make_connection and bindport): Manually applied Rob
7528         Mayoff <mayoff@dqd.com>'s 1.5.3 patch to add --bind-address,
7529         changing coding style to GNU's.
7530
7531         * ftp.c (ftp_loop_internal): --delete-after wasn't implemented for
7532         files downloaded via FTP.  Per a comment, .listing files were not
7533         counted towards number of bytes and files downloaded because they're
7534         deleted anyway.  Well, they aren't under -nr, so count them then.
7535
7536         * init.c: Manually applied Rob Mayoff's 1.5.3 patch to add
7537         --bind-address, alphabetizing, changing coding style to GNU's,
7538         commenting, and renaming cmd_ip_address() to cmd_address() to
7539         imply hostnames also okay.
7540
7541         * main.c (main): --delete-after didn't delete the root of the
7542         tree.  Ignore --convert-links if --delete-after was specified.
7543         Manually applied Rob Mayoff's 1.5.3 patch to add --bind-address,
7544         fixing duplicate use of added-since-1.5.3 case value.
7545         (print_help): Clarified that --delete-after deletes local files.
7546         Rob forgot to add a line for his new --bind-address option.
7547
7548         * options.h (struct options): Manually applied Rob Mayoff's patch
7549         to add --bind-address (bind_address structure member).
7550
7551         * recur.c (recursive_retrieve): Improved comment; added DEBUGP().
7552         Ignore --convert-links if --delete-after was specified.
7553
7554         * retr.c (retrieve_from_file): Just added a DEBUGP().
7555
7556 2000-10-19  Dan Harkless  <wget@harkless.org>
7557
7558         * ftp.c (ftp_loop_internal): downloaded_file() enumerators changed.
7559         (getftp): Applied Piotr Sulecki <Piotr.Sulecki@ios.krakow.pl>'s
7560         patch to work around FTP servers that incorrectly respond to the
7561         "REST" command with the remaining size rather than the total file size.
7562
7563         * http.c (gethttp): Improved a comment and added code to tack on
7564         ".html" to text/html files without that extension when -E specified.
7565         (http_loop): Use new downloaded_file() enumerators and deal with
7566         the case of gethttp() called xrealloc() on u->local.
7567
7568         * init.c (commands): Added new "htmlextension" command.
7569         Also renamed John Daily's cmd_quad() to the more descriptive
7570         cmd_lockable_boolean(), alpha-sorted the CMD_DECLARE()s and
7571         removed duplicate cmd_boolean() declaration.
7572
7573         * main.c (print_help): Added my new -E / --html-extension option.
7574         (main): Undocumented --email-address option previously used -E synonym.
7575         Stole it away for the much more deserving --html-extension's use.
7576
7577         * options.h (struct options): Added html_extension field.
7578
7579         * url.c (convert_links): URL X that we saved as X.html locally due
7580         to -E needs to be backed up as X.orig, not X.html.orig.  Added comments.
7581         (downloaded_file): Now remembers if we added .html extension to a file.
7582
7583         * url.h (downloaded_file_t): Added extra enumerators to support above.
7584         (downloaded_file): Now takes and returns a downloaded_file_t.
7585
7586         * wget.h (unnamed "dt" enum): Added ADDED_HTML_EXTENSION enumerator.
7587
7588 2000-10-09  Dan Harkless  <wget@harkless.org>
7589
7590         * html.c (htmlfindurl): Added unneeded initialization to quiet warning.
7591
7592         * main.c (print_help): Clarified what --retr-symlinks does.
7593
7594 2000-09-15  John Daily  <jdaily@cyberdude.com>
7595
7596         * init.c: Add support for "always" and "never" values to allow
7597         .wgetrc to override commandline (useful e.g. with .pm files
7598         calling `wget --passive-ftp' when your firewall doesn't allow that).
7599
7600         * ftp.c (getftp): passive_ftp is first option to support always/never.
7601
7602 2000-08-30  Dan Harkless  <wget@harkless.org>
7603
7604         * ftp.c (ftp_retrieve_list): Use new INFINITE_RECURSION #define.
7605
7606         * html.c: htmlfindurl() now takes final `dash_p_leaf_HTML' parameter.
7607         Wrapped some > 80-column lines.  When -p is specified and we're at a
7608         leaf node, do not traverse <A>, <AREA>, or <LINK> tags other than
7609         <LINK REL="stylesheet">.
7610
7611         * html.h (htmlfindurl): Now takes final `dash_p_leaf_HTML' parameter.
7612
7613         * init.c: Added new -p / --page-requisites / page_requisites option.
7614
7615         * main.c (print_help): Clarified that -l inf and -l 0 both allow
7616         infinite recursion.  Changed the unhelpful --mirrior description
7617         to simply give the options it's equivalent to.  Added new -p option.
7618         (main): Added some comments; handle new -p / --page-requisites.
7619
7620         * options.h (struct options): Added new page_requisites field.
7621
7622         * recur.c: Changed "URL-s" to "URLs" and "HTML-s" to "HTMLs".
7623         Calculate and pass down new `dash_p_leaf_HTML' parameter to
7624         get_urls_html().  Use new INFINITE_RECURSION #define.
7625
7626         * retr.c: Changed "URL-s" to "URLs".  get_urls_html() now takes
7627         final `dash_p_leaf_HTML' parameter.
7628
7629         * url.c: get_urls_html() and htmlfindurl() now take final
7630         `dash_p_leaf_HTML' parameter.
7631
7632         * url.h (get_urls_html): Now takes final `dash_p_leaf_HTML' parameter.
7633
7634         * wget.h: Added some comments and new INFINITE_RECURSION #define.
7635
7636 2000-08-23  Dan Harkless  <wget@harkless.org>
7637
7638         * main.c (print_help): -B / --base was not mentioned.
7639
7640 2000-08-22  Dan Harkless  <wget@harkless.org>
7641
7642         * main.c (print_help): Modified -nc description to mention that it
7643         also prevents the creation of multiple versions of the same file
7644         with ".<number>" suffixes.
7645
7646 2000-07-14  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
7647
7648         * retr.c (retrieve_url): Consistently strdup opt.referer when
7649         setting u->referer.
7650
7651 2000-06-09  Dan Harkless  <wget@harkless.org>
7652
7653         * main.c (print_help): --help output for --waitretry was over 80 cols.
7654
7655 2000-06-09  Hrvoje Niksic  <hniksic@iskon.hr>
7656
7657         * url.c (encode_string): Fix comment.
7658         Suggested by Herold Heiko <Heiko.Herold@previnet.it>.
7659
7660 2000-06-01  Const Kaplinsky  <const@ce.cctpu.edu.ru>
7661
7662         * ftp.c (ftp_retrieve_list): Change permissions only on plain
7663         files.
7664
7665 2000-06-01  Hrvoje Niksic  <hniksic@iskon.hr>
7666
7667         * url.c (str_url): Print the port number only if it's different
7668         from the default port number for that protocol.
7669
7670 2000-05-22  Dan Harkless  <wget@harkless.org>
7671
7672         * main.c (print_help): Added --help line for Damir Dzeko
7673         <ddzeko@zesoi.fer.hr>'s until-now-undocumented --referer option.
7674         Removed comments that --referer and --waitretry were undocumented.
7675         Changed "`.wgetrc' command" to "`.wgetrc'-style command" on --help
7676         line for --execute.
7677
7678 2000-05-18  Hrvoje Niksic  <hniksic@iskon.hr>
7679
7680         * ftp.c (getftp): Ditto.
7681
7682         * http.c (gethttp): Check for return value of fclose/fflush.
7683
7684 2000-04-12  Hrvoje Niksic  <hniksic@iskon.hr>
7685
7686         * host.c (store_hostaddress): Instead of shifting ADDR, start
7687         copying from the correct address.
7688
7689 2000-04-12  Hrvoje Niksic  <hniksic@iskon.hr>
7690
7691         * http.c (gethttp): Don't free REQUEST -- it was allocated with
7692         alloca().
7693         Pointed out by Gisle Vanem <gvanem@eunet.no>.
7694
7695 2000-04-04  Dan Harkless  <wget@harkless.org>
7696
7697         * host.c (store_hostaddress): R. K. Owen's patch introduces a
7698         "left shift count >= width of type" warning on 32-bit
7699         architectures.  Got rid of it by tricking the compiler w/ a variable.
7700
7701         * url.c (UNSAFE_CHAR): The macro didn't include all the illegal
7702         characters per RFC1738, namely everything above '~'.  It also
7703         generated a warning on OSes where char =~ unsigned char.  Fixed.
7704
7705 1998-10-17  Hrvoje Niksic  <hniksic@srce.hr>
7706
7707         * http.c (http_process_type): Removed needless strdup(), a memory
7708         leak.
7709
7710 1998-09-25  Hrvoje Niksic  <hniksic@srce.hr>
7711
7712         * html.c (htmlfindurl): Set PH to the first occurrence of `#'.
7713
7714 1998-09-25  Simon Munton  <simonm@m4data.co.uk>
7715
7716         * init.c (wgetrc_file_name): Don't free HOME under Windows.
7717
7718 1998-12-01  "R. K. Owen"  <rkowen@Nersc.GOV>
7719
7720         * host.c (store_hostaddress): Fix for big endian 64-bit machines.
7721
7722 1998-12-01  Hrvoje Niksic  <hniksic@srce.hr>
7723
7724         * url.c (UNSAFE_CHAR): New macro.
7725         (contains_unsafe): Use it.
7726         (encode_string): Ditto.
7727
7728 1998-12-01  Hrvoje Niksic  <hniksic@srce.hr>
7729
7730         * main.c (i18n_initialize): Use LC_MESSAGES only if available.
7731
7732 2000-03-31  Hrvoje Niksic  <hniksic@srce.hr>
7733
7734         * Use TOUPPER/TOLOWER.
7735
7736 1998-12-22  Alexander V. Lukyanov  <lav@yars.free.net>
7737
7738         * ftp-opie.c (btoe): Zero-terminate OSTORE.
7739
7740 2000-03-21  Hrvoje Niksic  <hniksic@iskon.hr>
7741
7742         * wget.h (DO_REALLOC_FROM_ALLOCA): Ditto.
7743
7744         * sysdep.h (ISALNUM): New macro.
7745         (TOLOWER): Ditto.
7746         (TOUPPER): Ditto.
7747
7748 2000-03-10  Dan Harkless  <wget@harkless.org>
7749
7750         * html.c (idmatch): Implemented checking of my new --follow-tags
7751         and --ignore-tags options.
7752
7753         * init.c (commands): Added comment reminding people adding new
7754         entries doing allocation to add corresponding freeing in cleanup().
7755         (commands): Added new followtags and ignoretags commands.
7756         (cleanup): Free storage for new followtags and ignoretags.
7757
7758         * main.c: Use of "comma-separated list" was random -- normalized
7759         it.  Did some alphabetization.  Added comments pointing out
7760         "Options without arguments" and "Options accepting an argument"
7761         sections of long_options[].  Added new options --follow-tags and
7762         -G / --ignore-tags.  Added comment that Damir's --referer is
7763         currently undocumented.  Added comment that Heiko's --waitretry is
7764         partially undocumented (mentioned in --help but not in
7765         wget.texi).  Moved improperly sorted 24, 129, and 'G' cases.
7766
7767         * options.h (struct options): Added new fields follow_tags and
7768         ignore_tags.
7769
7770         * wget.h: Added "#define EQ 0" so we can say "strcmp(a, b) == EQ".
7771
7772 2000-03-02  Dan Harkless  <wget@harkless.org>
7773
7774         * ftp.c (ftp_loop_internal): Heiko introduced "suggest explicit
7775         braces to avoid ambiguous `else'" warnings.  Eliminated them.
7776
7777         * http.c (gethttp): Dan Berger's query string patch is totally
7778         bogus.  If you have two different URLs, gen_page.cgi?page1 and
7779         get_page.cgi?page2, they'll both be saved as get_page.cgi and the
7780         second will overwrite the first.  Also, parameters to implicit
7781         CGIs, like "http://www.host.com/db/?2000-03-02" cause the URLs to
7782         be printed with trailing garbage characters, and could seg fault.
7783         Backing out the patch, which Dan B. informed me by email was just
7784         a kludge to download StarOffice from Sun made necessary due to
7785         wget's unconditional escaping of certain characters (room for an
7786         option there?).
7787         (http_loop): Heiko introduced "suggest explicit braces to avoid
7788         ambiguous `else'" warnings.  Eliminated them.
7789
7790         * main.c: Heiko's --wait / --waitretry backwards compatibility
7791         code looks to have been totally untested -- automatic variable
7792         'wr' was used without being initialized, and a long int was passed
7793         into setval()'s char* val parameter.
7794
7795         * recur.c (parse_robots): Applied Edward J. Sabol
7796         <sabol@alderaan.gsfc.nasa.gov>'s patch for Guan Yang's reported
7797         problem with "User-agent:<space>*<space>" lines in robots.txt.
7798
7799         * url.c (parseurl, str_url): Removing Dan Berger's code (see
7800         http.c above for explanation).
7801
7802 1999-08-25  Heiko Herold  <Heiko.Herold@previnet.it>
7803
7804         * ftp.c: Respect new option waitretry.
7805
7806 2000-01-30  Damir Dzeko  <ddzeko@zesoi.fer.hr>
7807
7808         * http.c (gethttp): Send custom Referer, if required.
7809
7810 1999-09-24  Charles G Waldman  <cgw@fnal.gov>
7811
7812         * netrc.c (parse_netrc): Allow passwords to contain spaces.
7813
7814         * netrc.c (parse_netrc): New function.
7815
7816 1999-09-17  Dan Berger  <dberger@ix.netcom.com>
7817
7818         * http.c (gethttp): Send it.
7819
7820         * url.c (parseurl): Detect query string in HTTP URL-s.
7821         (str_url): Print it.
7822
7823 2000-03-02  HIROSE Masaaki  <hirose31@t3.rim.or.jp>
7824
7825         * html.c (html_allow): Add <link href=...> and <script src=...>.
7826
7827 1999-05-02  andrew deryabin  <djsf@softhome.net>
7828
7829         * http.c (gethttp): Specify port in `Host' header only if it's
7830         different from 80.
7831
7832 1998-11-03  Edward J. Sabol  <sabol@alderaan.gsfc.nasa.gov>
7833
7834         * recur.c (recursive_retrieve): If a finite maximum depth is
7835         specified, and we're are already at that depth, don't download the
7836         HTML file for parsing.
7837
7838 2000-03-01  Dan Harkless  <wget@harkless.org>
7839
7840         * ftp.c (ftp_loop_internal): Call new downloaded_file() function,
7841         even though we don't do conversion on HTML files retrieved via
7842         FTP, so _current_ usage of downloaded_file() makes this call unneeded.
7843         (ftp_retrieve_list): Added a comment saying where we need to
7844         stat() a .orig file if FTP'd HTML file conversion is ever implemented.
7845         (ftp_retrieve_list): "Local file '%s' is more recent," is sometimes
7846         a lie -- reworded as "Server file no newer than local file '%s' --".
7847
7848         * http.c (http_loop): Fixed a typo and clarified a comment.
7849         (http_loop): When -K and -N are specified together, compare size
7850         and timestamp of server file X against local file X.orig (if
7851         extant) rather than converted local file X.
7852         (http_loop): "Local file '%s' is more recent," is sometimes a lie
7853         -- reworded as "Server file no newer than local file '%s' --".
7854         (http_loop): Call new downloaded_file() function to prevent
7855         wrongful overwriting of .orig file when -N is specified.
7856
7857         * url.c (convert_links): When -K specified, only rename X to
7858         X.orig if downloaded_file() returns TRUE.  Otherwise when we skip
7859         file X due to -N, we clobber an X.orig from a previous invocation.
7860         (convert_links): Call the failsafe xstrdup(), not the real strdup().
7861         (convert_links): Added a note asking anyone who understands how
7862         multiple URLs can correspond to a single file to comment it.
7863         (downloaded_file): Added this new function.
7864
7865         * url.h (downloaded_file): Added prototype for this new function
7866         as well as its downloaded_file_t enum type.
7867
7868         * wget.h (boolean): Added this new typedef and TRUE and FALSE #defines.
7869
7870 2000-02-29  Dan Harkless  <wget@harkless.org>
7871
7872         * version.c: Upped version to developer-only "1.5.3+dev".
7873
7874 2000-02-18  Dan Harkless  <wget@harkless.org>
7875
7876         * init.c (backup_converted): Added this new option.
7877
7878         * main.c (-K / --backup-converted): Added this new option.
7879
7880         * options.h (backup_converted): Added this new option.
7881
7882         * url.c (convert_links): When backup_converted is specified, save
7883         file X as X.orig before converting.
7884
7885         * url.h (urlpos): Fixed typo -- said "Rekative" instead of "Relative".
7886
7887 1998-09-21  Hrvoje Niksic  <hniksic@srce.hr>
7888
7889         * version.c: Wget 1.5.3 is released.
7890
7891 1998-09-21  Hrvoje Niksic  <hniksic@srce.hr>
7892
7893         * host.c (ftp_getaddress): Don't warn when reverse-lookup of local
7894         address doesn't yield FQDN.
7895
7896 1998-09-21  Andreas Schwab  <schwab@issan.informatik.uni-dortmund.de>
7897
7898         * cmpt.c (strerror): Fix declaration of sys_errlist.
7899
7900 1998-09-11  Hrvoje Niksic  <hniksic@srce.hr>
7901
7902         * main.c (main): Don't use an array subscript as the first
7903         argument to STRDUP_ALLOCA.
7904         From Kaveh R. Ghazi.
7905
7906 1998-09-11  Szakacsits Szabolcs  <szaka@sienet.hu>
7907
7908         * html.c (htmlfindurl): Download table background.
7909
7910 1998-09-11  Hans Grobler  <grobh@conde.ee.sun.ac.za>
7911
7912         * init.c (parse_line): Would free *com before allocating it.
7913         (parse_line): Would free com instead of *com.
7914
7915 1998-09-10  Howard Gayle  <howard@fjst.com>
7916
7917         * url.c (get_urls_html): Would drop the last character of the
7918         link.
7919
7920 1998-09-10  Hrvoje Niksic  <hniksic@srce.hr>
7921
7922         * http.c (http_loop): Don't print status code if quiet.
7923
7924 1998-09-10  Kaveh R. Ghazi  <ghazi@caip.rutgers.edu>
7925
7926         * log.c: Use <stdarg.h> only when __STDC__.
7927
7928 1998-09-10  Adam D. Moss  <adam@foxbox.org>
7929
7930         * html.c (htmlfindurl): Download <layer src=...>.
7931
7932 1998-09-10  Howard Gayle  <howard@fjst.com>
7933
7934         * ftp.c (ftp_retrieve_list): Don't update the time stamp of a file
7935         not retrieved.
7936
7937 1998-06-27  Hrvoje Niksic  <hniksic@srce.hr>
7938
7939         * utils.c: Include <libc.h> on NeXT.
7940
7941 1998-06-26  Heinz Salzmann  <heinz.salzmann@intermetall.de>
7942
7943         * url.c (get_urls_html): Fix calculation of URL position.
7944
7945 1998-06-23  Hrvoje Niksic  <hniksic@srce.hr>
7946
7947         * version.c: Wget 1.5.2 is released.
7948
7949 1998-06-23  Dave Love  <d.love@dl.ac.uk>
7950
7951         * ftp.c, init.c, netrc.c: Include errno.h.
7952
7953         * http.c: Include errno.h and time header.
7954
7955         * Makefile.in (exext): Define.
7956         (install.bin, uninstall.bin): Use it.
7957
7958 1998-06-21  Hrvoje Niksic  <hniksic@srce.hr>
7959
7960         * http.c (http_loop): Don't attempt to compare local and remote
7961         sizes if the remote size is unknown.
7962
7963 1998-06-16  Hrvoje Niksic  <hniksic@srce.hr>
7964
7965         * url.c (get_urls_html): Use malloc() instead of alloca in the
7966         loop.
7967
7968 1998-06-13  Hrvoje Niksic  <hniksic@srce.hr>
7969
7970         * version.c: Wget 1.5.2-b4 is released.
7971
7972 1998-06-13  Hrvoje Niksic  <hniksic@srce.hr>
7973
7974         * url.c (get_urls_html): Ignore spaces before and after the URI.
7975
7976 1998-06-08  Wanderlei Antonio Cavassin  <cavassin@conectiva.com.br>
7977
7978         * ftp.c (getftp): Translate `done'.
7979
7980 1998-06-06  Hrvoje Niksic  <hniksic@srce.hr>
7981
7982         * version.c: Wget 1.5.2-b3 is released.
7983
7984 1998-06-06  Alexander Kourakos  <awk@bnt.com>
7985
7986         * init.c (cleanup): Close dfp, don't free it.
7987
7988 1998-06-06  Hrvoje Niksic  <hniksic@srce.hr>
7989
7990         * utils.c (make_directory): Twiddle.
7991
7992         * config.h.in: Added template for access().
7993
7994 1998-06-05  Mathieu Guillaume  <mat@cythere.com>
7995
7996         * html.c (htmlfindurl): Download <input src=...>
7997
7998 1998-06-03  Hrvoje Niksic  <hniksic@srce.hr>
7999
8000         * utils.c (file_exists_p): Use access() with two arguments.
8001
8002 1998-05-27  Martin Kraemer  <Martin.Kraemer@mch.sni.de>
8003
8004         * netrc.c (parse_netrc): Correct logic.
8005
8006 1998-05-27  Hrvoje Niksic  <hniksic@srce.hr>
8007
8008         * ftp.c (getftp): Added `break'; suggested by Lin Zhe Min
8009         <ljm@ljm.wownet.net>.
8010
8011 1998-05-24  Hrvoje Niksic  <hniksic@srce.hr>
8012
8013         * version.c: Wget 1.5.2-b2 is released.
8014
8015 1998-05-18  Juan Jose Rodriguez  <jcnsoft@jal1.telmex.net.mx>
8016
8017         * mswindows.h: Don't translate mkdir to _mkdir under Borland.
8018
8019 1998-05-17  Hrvoje Niksic  <hniksic@srce.hr>
8020
8021         * retr.c (elapsed_time): Return correct value when
8022         HAVE_GETTIMEOFDAY is undefined.
8023
8024 1998-05-13  Hrvoje Niksic  <hniksic@srce.hr>
8025
8026         * version.c: Wget 1.5.2-b1 is released.
8027
8028 1998-05-08  Hrvoje Niksic  <hniksic@srce.hr>
8029
8030         * getopt.c (_getopt_internal): Use exec_name instead of argv[0].
8031         (_getopt_internal): Don't translate `#if 0'-ed strings.
8032
8033 1998-05-06  Douglas E. Wegscheid  <wegscd@whirlpool.com>
8034
8035         * mswindows.c (ws_handler): Use fork_to_background().
8036
8037 1998-05-05  Hrvoje Niksic  <hniksic@srce.hr>
8038
8039         * version.c: Wget 1.5.1 is released.
8040
8041 1998-05-05  Hrvoje Niksic  <hniksic@srce.hr>
8042
8043         * http.c (parse_http_status_line): Avoid `minor' and `major'
8044         names.
8045
8046 1998-05-02  Hrvoje Niksic  <hniksic@srce.hr>
8047
8048         * utils.c (mkdirhier): Renamed to make_directory.
8049
8050 1998-05-01  Hrvoje Niksic  <hniksic@srce.hr>
8051
8052         * mswindows.c (fork_to_background): Define under Windows.
8053
8054         * utils.c (fork_to_background): New function.
8055
8056         * html.c (htmlfindurl): Removed rerdundant casts.
8057
8058 1998-05-01  Douglas E. Wegscheid  <wegscd@whirlpool.com>
8059
8060         * mswindows.c (ws_mypath): Cache the path.
8061
8062 1998-04-30  Douglas E. Wegscheid  <wegscd@whirlpool.com>
8063
8064         * ftp.h: Prefix enum ftype members with FT_.
8065
8066         * ftp-ls.c, ftp.c, html.h: Adjust accordingly.
8067
8068         * mswindows.h: Use stat under Borland, _stat under MSVC.
8069
8070 1998-04-28  Hrvoje Niksic  <hniksic@srce.hr>
8071
8072         * http.c (known_authentication_scheme_p): New function.
8073         (gethttp): Handle authorization more correctly.
8074
8075         * ftp-basic.h: Removed.
8076
8077         * cmpt.h: Removed.
8078
8079         * utils.c: Include <unistd.h> before <pwd.h>; needed under SunOS
8080         with gcc 2.8.
8081         (numdigit): Use `while' loop.
8082
8083         * http.c (create_authorization_line): Detect authentication
8084         schemes case-insensitively.
8085
8086         * http.c (extract_header_attr): Use strdupdelim().
8087         (digest_authentication_encode): Move declaration of local
8088         variables to smaller scope.
8089         (digest_authentication_encode): Reset REALM, OPAQUE and NONCE.
8090         (create_authorization_line): Detect authentication schemes
8091         case-insensitively.
8092
8093         * utils.c (touch): Constify.
8094
8095         * http.c (gethttp): Report a nicer error when no data is received.
8096
8097         * rbuf.h (RBUF_READCHAR): Ditto.
8098
8099         * ftp-basic.c (ftp_response): Use sizeof.
8100
8101 1998-04-27  Hrvoje Niksic  <hniksic@srce.hr>
8102
8103         * retr.c (print_percentage): EXPECTED is long, not int.
8104         (print_percentage): Use floating-point arithmetic to avoid
8105         overflow with large files' sizes multiplied with 100.
8106
8107 1998-04-27  Gregor Hoffleit  <flight@mathi.uni-heidelberg.de>
8108
8109         * config.h.in: Added pid_t stub.
8110
8111         * sysdep.h (S_ISREG): Moved here from mswindows.h (NeXT doesn't
8112         define it).
8113
8114 1998-04-20  Hrvoje Niksic  <hniksic@srce.hr>
8115
8116         * version.c: Wget 1.5.0 is released.
8117
8118 1998-04-18  Hrvoje Niksic  <hniksic@srce.hr>
8119
8120         * url.c (str_url): Ditto.
8121
8122         * ftp-basic.c (ftp_rest): Use new name.
8123
8124         * utils.c (long_to_string): Renamed from prnum().
8125
8126 1998-04-16  Hrvoje Niksic  <hniksic@srce.hr>
8127
8128         * version.c: Wget 1.5-b17 is released.
8129
8130 1998-04-08  Hrvoje Niksic  <hniksic@srce.hr>
8131
8132         * headers.c (header_get): New argument FLAGS.
8133
8134         * http.c (gethttp): If request is malformed, bail out of the
8135         header loop.
8136         (gethttp): Check for empty header *after* the status line checks.
8137         (gethttp): Disallow continuations for status line.
8138
8139 1998-04-08  Hrvoje Niksic  <hniksic@srce.hr>
8140
8141         * version.c: Wget 1.5-b16 is released.
8142
8143 1998-04-08  Hrvoje Niksic  <hniksic@srce.hr>
8144
8145         * init.c (commands): Renamed `always_rest' to `continue'.
8146
8147 1998-04-05  Hrvoje Niksic  <hniksic@srce.hr>
8148
8149         * all: Use it.
8150
8151         * log.c (logputs): New argument.
8152         (logvprintf): Ditto.
8153         (logprintf): Ditto.
8154
8155 1998-04-04  Hrvoje Niksic  <hniksic@srce.hr>
8156
8157         * http.c (http_atotm): Update comment.
8158
8159         * main.c (i18n_initialize): Set LC_MESSAGES, not LC_ALL.
8160
8161         * wget.h: Renamed ENABLED_NLS to HAVE_NLS.
8162
8163         * main.c (i18n_initialize): New function.
8164         (main): Use it.
8165
8166         * log.c: Include <unistd.h>.
8167
8168         * retr.c (show_progress): Cast alloca to char *.
8169
8170 1998-04-04  Hrvoje Niksic  <hniksic@srce.hr>
8171
8172         * version.c: Wget 1.5-b15 is released.
8173
8174 1998-04-04  Hrvoje Niksic  <hniksic@srce.hr>
8175
8176         * utils.h: Declare file_non_directory_p().
8177
8178 1998-04-03  Hrvoje Niksic  <hniksic@srce.hr>
8179
8180         * main.c (main): It's `tries', not `numtries' now.
8181
8182 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
8183
8184         * init.c (getperms): Removed.
8185
8186 1998-04-01  Tim Charron  <tcharron@interlog.com>
8187
8188         * log.c (logvprintf): Don't use ARGS twice.
8189
8190 1998-04-01  John  <john@futuresguide.com>
8191
8192         * mswindows.c: Cleaned up.
8193
8194 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
8195
8196         * version.c: Wget 1.5-b14 is released.
8197
8198 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
8199
8200         * ftp-opie.c (STRLEN4): New macro.
8201         (btoe): Use it.
8202
8203 1998-04-01  Junio Hamano  <junio@twinsun.com>
8204
8205         * http.c: Document all the Digest functions.
8206
8207 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
8208
8209         * utils.c (file_non_directory_p): Renamed from isfile().
8210
8211         * mswindows.h (S_ISREG): New macro, suggested by Tim Adam.
8212
8213 1998-03-31  Hrvoje Niksic  <hniksic@srce.hr>
8214
8215         * utils.c (mkdirhier): Use 0777 instead of opt.dirmode.
8216
8217         * init.c (cmd_spec_dotstyle): Use 48 dots per line for binary
8218         style.
8219         (cmd_permissions): Removed.
8220
8221         * config.h.in: Add template for WORDS_BIGENDIAN.
8222
8223 1998-03-31  Junio Hamano  <junio@twinsun.com>
8224
8225         * http.c (HEXD2asc): New macro.
8226         (dump_hash): Use it.
8227
8228 1998-03-31  Hrvoje Niksic  <hniksic@srce.hr>
8229
8230         * version.c: Wget 1.5-b13 is released.
8231
8232 1998-03-31  Hrvoje Niksic  <hniksic@srce.hr>
8233
8234         * main.c (main): Don't try to use `com'.
8235
8236 1998-03-30  Hrvoje Niksic  <hniksic@srce.hr>
8237
8238         * init.c (cmd_permissions): New function.
8239
8240 1998-03-30  Hrvoje Niksic  <hniksic@srce.hr>
8241
8242         * version.c: Wget 1.5-b12 is released.
8243
8244 1998-03-30  Hrvoje Niksic  <hniksic@srce.hr>
8245
8246         * init.c (commands): Renamed `numtries' to `tries'.
8247         (cmd_spec_debug): Removed.
8248         (home_dir): Under Windows, return `C:\' if HOME is undefined.
8249
8250 1998-03-29  Hrvoje Niksic  <hniksic@srce.hr>
8251
8252         * config.h.in: Define _XOPEN_SOURCE.
8253
8254         * init.c (check_user_specified_header): New function.
8255         (cmd_spec_header): Use it.
8256         (cmd_spec_useragent): New function.
8257
8258 1998-03-29  Hrvoje Niksic  <hniksic@srce.hr>
8259
8260         * version.c: Wget 1.5-b11 is released.
8261
8262 1998-03-28  Hrvoje Niksic  <hniksic@srce.hr>
8263
8264         * wget.h: Include <libintl.h> only if NLS is enabled.
8265
8266 1998-03-26  Hrvoje Niksic  <hniksic@srce.hr>
8267
8268         * options.h (struct options): Made `wait' a long.
8269         (struct options): Ditto for `timeout'.
8270
8271 1998-03-19  Hrvoje Niksic  <hniksic@srce.hr>
8272
8273         * utils.c (exists): Renamed to file_exists_p.
8274         (file_exists_p): Use access() if available.
8275
8276 1998-03-17  Hrvoje Niksic  <hniksic@srce.hr>
8277
8278         * utils.c (memfatal): Set save_log_p to 0 to avoid potential
8279         infloop.
8280
8281         * log.c: do_logging -> save_log_p.
8282
8283         * config.h.in: Added template for HAVE_VSNPRINTF.
8284
8285 1998-03-16  Hrvoje Niksic  <hniksic@srce.hr>
8286
8287         * init.c: Ditto.
8288
8289         * http.c: Protect declaration against non-ANSI compiler.
8290
8291         * log.c (logvprintf): Use vsnprintf() if available.
8292
8293         * getopt.c (main): Don't translate test stuff.
8294
8295 1998-03-16  Hrvoje Niksic  <hniksic@srce.hr>
8296
8297         * version.c: Wget 1.5-b10 is released.
8298
8299 1998-03-11  Hrvoje Niksic  <hniksic@srce.hr>
8300
8301         * ftp.c (getftp): Don't translate "CWD %s".
8302
8303         * wget.h (GCC_FORMAT_ATTR): Renamed from FORMAT_ATTR.
8304
8305 1998-03-07  Hrvoje Niksic  <hniksic@srce.hr>
8306
8307         * ftp-opie.c (btoe): Use memcpy() instead of strncat().
8308
8309         * log.c (logputs): New function.
8310         (logvprintf): Renamed from vlogmsg; use logputs().
8311
8312         * retr.c (show_progress): Print `[100%]' when the retrieval is
8313         finished.
8314
8315         * init.c (run_wgetrc): Use FILE, not PATH.
8316         (wgetrc_file_name): Ditto.
8317
8318 1998-03-07  Tim Adam  <tma@osa.com.au>
8319
8320         * recur.c (parse_robots): Correctly reset `entries' on empty
8321         disallow.
8322
8323 1998-03-07  Hrvoje Niksic  <hniksic@srce.hr>
8324
8325         * init.c (cmd_spec_debug): Use cmd_boolean().
8326
8327 1998-02-23  Hrvoje Niksic  <hniksic@srce.hr>
8328
8329         * http.c (gethttp): Create proxy-authorization correctly.
8330
8331 1998-02-22  Hrvoje Niksic  <hniksic@srce.hr>
8332
8333         * md5.c: Ditto.
8334
8335         * getopt.c: Use ANSI function definitions.
8336
8337         * ftp-opie.c: New file.
8338
8339         * options.h: Don't redefine EXTERN.
8340
8341         * init.c: Sort it correctly.
8342
8343 1998-02-22  Hrvoje Niksic  <hniksic@srce.hr>
8344
8345         * version.c: Wget 1.5-b9 is released.
8346
8347 1998-02-22  Hrvoje Niksic  <hniksic@srce.hr>
8348
8349         * recur.c (recursive_retrieve): Reset `first_time'.
8350
8351         * ftp.c (getftp): Added `default' clause to switches of uerr_t.
8352
8353         * rbuf.c (rbuf_peek): Simplified.
8354         (rbuf_flush): Use MINVAL.
8355
8356         * wget.h (MINVAL): Moved from url.h.
8357
8358         * rbuf.h (RBUF_FD): New macro.
8359
8360         * url.c (add_url): Add to the head of the list.
8361
8362         * ftp.c (ftp_retrieve_list): Set the permissions to downloaded
8363         file.
8364         (getftp): Set the default permissions to 0600.
8365
8366 1998-02-21  Hrvoje Niksic  <hniksic@srce.hr>
8367
8368         * url.c (get_urls_html): Ditto.
8369         (convert_links): Ditto.
8370
8371         * recur.c (parse_robots): Ditto.
8372
8373         * html.c (ftp_index): Ditto.
8374
8375         * ftp-ls.c (ftp_parse_unix_ls): Open file as binary.
8376
8377         * init.c (defaults): Initialize `opt' to zero via memset.
8378
8379         * http.c (digest_authentication_encode): goto considered harmful.
8380
8381 1998-02-19  Hrvoje Niksic  <hniksic@srce.hr>
8382
8383         * ftp.c (delelement): Simplify and fix leak.
8384
8385 1998-02-18  Hrvoje Niksic  <hniksic@srce.hr>
8386
8387         * http.c (dump_hash): Use HEXD2ASC instead of home-grown stuff.
8388
8389         * url.h (HEXD2ASC): Removed warning.
8390
8391         * init.c (comind): Use binary search.
8392         (commands): Reorganized.
8393         (setval): Ditto.
8394         (cmd_boolean): New function.
8395         (cmd_number): Ditto.
8396         (cmd_number_inf): Ditto.
8397         (cmd_string): Ditto.
8398         (cmd_vector): Ditto.
8399         (cmd_directory_vector): Ditto.
8400         (cmd_bytes): Ditto.
8401         (cmd_time): Ditto.
8402         (cmd_spec_debug): Ditto.
8403         (cmd_spec_dirmode): Ditto.
8404         (cmd_spec_dirstruct): Ditto.
8405         (cmd_spec_dotstyle): Ditto.
8406         (cmd_spec_header): Ditto.
8407         (cmd_spec_htmlify): Ditto.
8408         (cmd_spec_mirror): Ditto.
8409         (cmd_spec_outputdocument): Ditto.
8410         (cmd_spec_recursive): Ditto.
8411         (settime): Merged with cmd_time().
8412         (setbytes): Merged with cmd_bytes().
8413         (setonoff): Merged with cmd_boolean().
8414         (onoff): Ditto.
8415
8416 1998-02-17  Hrvoje Niksic  <hniksic@srce.hr>
8417
8418         * Makefile.in (distclean): Remove `config.h'.
8419
8420 1998-02-17  Hrvoje Niksic  <hniksic@srce.hr>
8421
8422         * version.c: Wget 1.5-b8 is released.
8423
8424 1998-02-17  Hrvoje Niksic  <hniksic@srce.hr>
8425
8426         * http.c (digest_authentication_encode): New function.
8427         (create_authorization_line): Use it.
8428         (dump_hash): New function.
8429         (digest_authentication_encode): Use it.
8430
8431         * fnmatch.c: Renamed from `mtch.c'.
8432
8433 1998-02-15  Karl Eichwalder  <ke@suse.de>
8434
8435         * main.c (main): Tag "Written by..." string as translatable.
8436
8437 1998-02-15  Hrvoje Niksic  <hniksic@srce.hr>
8438
8439         * wget.h (FREE_MAYBE): New macro.
8440
8441         * http.c (create_authorization_line): Don't use ANSI C string
8442         concatenation feature.
8443         (basic_authentication_encode): Use alloca() for temporary
8444         variables.
8445
8446         * recur.h: Ditto.
8447
8448         * http.c: Ditto.
8449
8450         * headers.h: Ditto.
8451
8452         * ftp-basic.c: Protect declaration against non-ANSI compiler.
8453
8454         * http.c (create_authorization_line): Cast `unsigned char *' to
8455         `char *' for sprintf, to shut up the noisy Digital Unix cc.
8456
8457 1998-02-15  Hrvoje Niksic  <hniksic@srce.hr>
8458
8459         * version.c: Wget 1.5-b7 is released.
8460
8461 1998-02-15  Hrvoje Niksic  <hniksic@srce.hr>
8462
8463         * cmpt.c (strstr): Synched with glibc-2.0.6.
8464
8465         * ftp-basic.c (calculate_skey_response): Ditto.
8466         (calculate_skey_response): Use alloca().
8467
8468         * http.c (create_authorization_line): Work with FSF's version of
8469         md5.c.
8470
8471         * md5.c: New file, from GNU libc.
8472
8473 1998-02-14  Hrvoje Niksic  <hniksic@srce.hr>
8474
8475         * url.h (URL_CLEANSE): Name the temporary variable more carefully.
8476
8477 1998-02-13  Hrvoje Niksic  <hniksic@srce.hr>
8478
8479         * http.c (basic_authentication_encode): New function, instead of
8480         the macro.
8481
8482 1998-02-13  Junio Hamano  <junio@twinsun.com>
8483
8484         * http.c: Add HTTP-DA support.
8485         * ftp-basic.c: Add Opie/S-key support.
8486         * config.h.in, Makefile.in: Add HTTP-DA and Opie/S-key support.
8487         * md5.c, md5.h: New files.
8488
8489 1998-02-13  Hrvoje Niksic  <hniksic@srce.hr>
8490
8491         * http.c (http_process_range): Renamed from hprocrange().
8492         (http_process_range): Parse the whole header.
8493
8494         * headers.c: New file.
8495         (header_process): New function.
8496         (header_get): Renamed from fetch_next_header.
8497
8498         * all: Include utils.h only where necessary.
8499
8500         * wget.h: Declare xmalloc(), xrealloc() and xstrdup() here.
8501
8502         * wget.h: Add provisions for dmalloc.
8503
8504 1998-02-12  Hrvoje Niksic  <hniksic@srce.hr>
8505
8506         * version.c: Wget 1.5-b6 is released.
8507
8508 1998-02-12  Hrvoje Niksic  <hniksic@srce.hr>
8509
8510         * ftp.c (ftp_loop): Determine `filename' more precisely.
8511
8512         * init.c (setval): Don't set `opt.quiet' if output-document is
8513         `-'.
8514
8515         * log.c (log_init): Print to STDERR instead of STDOUT.
8516         (vlogmsg): Use STDERR by default.
8517         (logflush): Ditto.
8518
8519 1998-02-11  Simon Josefsson  <jas@pdc.kth.se>
8520
8521         * host.c: Use addr_in again.
8522
8523 1998-02-08  Karl Eichwalder  <karl@suse.de>
8524
8525         * http.c (gethttp): Fixed typo.
8526
8527 1998-02-08  Hrvoje Niksic  <hniksic@srce.hr>
8528
8529         * version.c: Wget 1.5-b5 is released.
8530
8531 1998-02-08  Hrvoje Niksic  <hniksic@srce.hr>
8532
8533         * retr.c (show_progress): Use it.
8534
8535         * log.c (logflush): New function.
8536
8537         * wget.h: Utilize __attribute__ if on gcc.
8538
8539 1998-02-07  Hrvoje Niksic  <hniksic@srce.hr>
8540
8541         * http.c (base64_encode_line): New argument LENGTH.
8542         (BASIC_AUTHENTICATION_ENCODE): Use it.
8543         (BASIC_AUTHENTICATION_ENCODE): Take length of HEADER into account.
8544
8545         * main.c (main): Fixed fprintf() format mismatch.
8546
8547 1998-02-06  Hrvoje Niksic  <hniksic@srce.hr>
8548
8549         * version.c: Wget 1.5-b4 is released.
8550
8551 1998-02-03  Simon Josefsson  <jas@pdc.kth.se>
8552
8553         * host.c: use sockaddr_in instead of addr_in.
8554
8555 1998-02-04  Hrvoje Niksic  <hniksic@srce.hr>
8556
8557         * init.c (cleanup): Use it.
8558
8559         * recur.c (recursive_cleanup): New function.
8560
8561         * retr.c (retrieve_from_file): Ditto.
8562
8563         * main.c (main): Use it.
8564
8565         * recur.c (recursive_reset): New function.
8566
8567         * retr.c (retrieve_from_file): Ditto.
8568
8569         * main.c (main): Simplify call to recursive_retrieve().
8570
8571         * recur.c (recursive_retrieve): Removed FLAGS argument.
8572
8573         * http.c (gethttp): Changed call to iwrite().
8574
8575 1998-02-03  Hrvoje Niksic  <hniksic@srce.hr>
8576
8577         * url.c (get_urls_html): Ditto.
8578         (free_urlpos): Ditto.
8579         (mkstruct): Ditto.
8580         (construct): Ditto.
8581
8582         * retr.c (retrieve_url): Move declaration of local variables to
8583         smaller scope.
8584
8585         * url.c (urlproto): Use it.
8586         (parseurl): Ditto.
8587         (str_url): Ditto.
8588         (get_urls_html): Ditto.
8589
8590         * utils.h (ARRAY_SIZE): New macro.
8591
8592         * url.c (proto): Moved from url.h.
8593
8594         * url.h (URL_CLEANSE): Reformatted.
8595         (USE_PROXY_P): Renamed from USE_PROXY.
8596
8597         * ftp-basic.c: Adjust to the new interface of iwrite().
8598
8599         * ftp-basic.c (ftp_port): Use alloca().
8600
8601 1998-02-03  Hrvoje Niksic  <hniksic@srce.hr>
8602
8603         * version.c: Wget 1.5-b3 is released.
8604
8605         * host.c (ftp_getaddress): Don't print to stderr directly.
8606
8607         * init.c (setbytes): Support `g' for gigabytes.
8608         (cmdtype): New specification CTIME.
8609         (setval): Use it with settime().
8610         (commands): Use it for WAIT and TIMEOUT.
8611
8612 1998-02-02  Hrvoje Niksic  <hniksic@srce.hr>
8613
8614         * http.c (BASIC_AUTHENTICATION_ENCODE): New macro.
8615         (gethttp): Use it.
8616
8617         * utils.c (unique_name_1): Moved from url.c.
8618         (unique_name): Ditto.
8619
8620         * url.c (url_filename): Ditto.
8621
8622         * log.c (redirect_output): Changed call to unique_name().
8623
8624         * url.c (unique_name_1): Renamed from unique_name().
8625         (unique_name): Changed interface.
8626
8627         * init.c (enum cmdid): Moved from init.h.
8628         (cmdtype): Ditto.
8629         (struct cmd): Ditto.
8630
8631         * main.c (main): Use it.
8632         (main): Moved `--backups' to not have a short option.
8633
8634         * options.h (struct options): New member BACKGROUND.
8635
8636         * main.c (print_help): Rearranged.
8637         (main): New long options for -n* short options: --no-directories,
8638         --no-host-directories, --non-verbose, --no-host-lookup and
8639         --dont-remove-listing.
8640
8641 1998-02-01  Hrvoje Niksic  <hniksic@srce.hr>
8642
8643         * main.c (main): Use log_close().
8644
8645         * log.c: New variable LOGFP.
8646         (vlogmsg): Use it.
8647         (redirect_output): Don't open /dev/null; set LOGFP to stdin
8648         instead.
8649         (log_close): New function.
8650
8651         * options.h (struct options): Removed LFILE.
8652
8653         * log.c (log_enable): Removed.
8654
8655         * main.c (main): Use it.
8656
8657         * log.c (log_init): New function.
8658
8659         * url.c (get_urls_html): Removed needless assignment to BASE.
8660
8661         * host.c (add_hlist): Don't set CMP needlessly.
8662
8663         * utils.c (match_backwards): Ditto.
8664         (in_acclist): Ditto.
8665
8666         * url.c (findurl): Ditto.
8667
8668         * netrc.c (parse_netrc): Ditto.
8669
8670         * log.c (log_dump): Ditto.
8671
8672         * html.c (html_quote_string): Ditto.
8673
8674         * ftp-basic.c (ftp_request): Made static.
8675
8676         * connect.c: Made global variables static.
8677
8678         * url.c (construct): Ditto.
8679
8680         * init.c (init_path): Avoid assignment inside `if'-condition.
8681
8682         * ftp.c: Don't include in.h or winsock.h.
8683
8684         * ftp.c (ftp_loop): Use SZ.
8685
8686         * connect.c (bindport): Cast &addrlen to int *.
8687         (conaddr): Ditto.
8688
8689         * init.c (initialize): Don't use SYSTEM_WGETRC unconditionally.
8690
8691 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
8692
8693         * ftp.c (getftp): Initialize opt.ftp_pass here.
8694         (ftp_retrieve_dirs): Use alloca().
8695
8696         * init.c (defaults): Don't initialize opt.ftp_pass.
8697
8698         * sysdep.h (S_ISLNK): Declare for OS/2; ditto for lstat.
8699         From Ivan F. Martinez <ivanfm@ecodigit.com.br>.
8700
8701 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
8702
8703         * recur.c (parse_robots): Check for comments more correctly.
8704
8705         * host.c (ftp_getaddress): Use STRDUP_ALLOCA.
8706         (ftp_getaddress): Add diagnostics when reverse-lookup yields only
8707         hostname.
8708
8709 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
8710
8711         * version.c: Wget 1.5-b2 is released.
8712
8713         * netrc.c (NETRC_FILE_NAME): Moved from netrc.h.
8714
8715         * utils.c (proclist): Pass FNM_PATHNAME to fnmatch().
8716
8717         * ftp-basic.c (ftp_pasv): Avoid unnecessary casting to unsigned
8718         char.
8719
8720         * log.c: Don't attempt to hide arguments from ansi2knr.
8721
8722         * cmpt.c: Synched strptime() and mktime() with glibc-2.0.6.
8723
8724         * ansi2knr.c: Use a later version, from fileutils-3.16l alpha.
8725
8726         * ftp.c (getftp): Ditto.
8727
8728         * http.c (gethttp): Use it.
8729
8730         * retr.c (get_contents): New argument EXPECTED; pass it to
8731         show_progress().
8732         (show_progress): New argument EXPECTED; use it to display
8733         percentages.
8734
8735         * init.c (setval): Ditto.
8736
8737         * http.c (gethttp): Ditto.
8738         (http_loop): Ditto.
8739
8740         * ftp.c (getftp): Ditto.
8741         (ftp_loop_internal): Ditto.
8742
8743         * ftp-ls.c (ftp_parse_unix_ls): Use abort() instead of assert(0).
8744
8745         * sysdep.h (CLOSE): Simplify; use DEBUGP.
8746
8747         * netrc.c (search_netrc): Use alloca().
8748
8749         * init.c (defaults): Initialize no_flush.
8750
8751         * log.c (vlogmsg): Don't flush if no_flush.
8752
8753         * options.h (struct options): New variable no_flush.
8754
8755         * main.c (main): Don't play games with buffering.
8756
8757         * log.c (vlogmsg): Flush the output after every message.
8758
8759 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
8760
8761         * init.c (parse_line): Ditto.
8762
8763         * url.c (get_urls_html): Ditto.
8764
8765         * main.c (main): Don't cast to unsigned char.
8766
8767         * init.c (run_wgetrc): Don't cast to unsigned char.
8768         (parse_line): Accept char instead of unsigned char.
8769
8770         * html.c (htmlfindurl): Use char instead of unsigned char.
8771
8772         * all: Use them.
8773
8774         * sysdep.h: Add wrappers to ctype macros to make them
8775         eight-bit-clean:
8776
8777 1998-01-30  Hrvoje Niksic  <hniksic@srce.hr>
8778
8779         * html.c (htmlfindurl): Download <img lowsrc=...>
8780
8781         * main.c (main): Ignore SIGPIPE.
8782
8783         * connect.c (select_fd): New argument WRITEP.
8784         (iwrite): Call select_fd().
8785
8786 1997-02-27  Fila Kolodny <fila@ibi.com>
8787
8788         * ftp.c (ftp_retrieve_list): If retrieving symlink and the proper
8789         one already exists, just skip it.
8790
8791 1998-01-30  Hrvoje Niksic  <hniksic@srce.hr>
8792
8793         * http.c (gethttp): Cosmetic changes.
8794
8795         * http.c (check_end): Allow `+D...' instead of `GMT'.
8796         From Fabrizio Pollastri <pollastri@cstv.to.cnr.it>.
8797
8798         * url.c (process_ftp_type): New function.
8799         (parseurl): Use it.
8800
8801         * connect.c (iwrite): Allow writing in a few chunks.
8802         (bindport): Made SRV static, so addr can point to it.
8803         (select_fd): Removed HPUX kludge.
8804
8805         * host.c (free_hlist): Incorporated into clean_hosts().
8806
8807 1998-01-29  Hrvoje Niksic  <hniksic@srce.hr>
8808
8809         * host.c (hlist): Made static.
8810         (search_address): Cosmetic change.
8811
8812 1998-01-29  Hrvoje Niksic  <hniksic@srce.hr>
8813
8814         * version.c: Wget v1.5-b1 is released.
8815
8816         * http.c (hgetlen): Use sizeof() to get the header length.
8817         (hgetrange): Ditto.
8818         (hgettype): Ditto.
8819         (hgetlocation): Ditto.
8820         (hgetmodified): Ditto.
8821         (haccepts_none): Ditto.
8822
8823         * main.c (main): Updated `--version' and `--help' output, as per
8824         Francois Pinard's suggestions.
8825
8826         * main.c: Include locale.h; call setlocale(), bindtextdomain() and
8827         textdomain().
8828
8829         * config.h.in: Define stubs for I18N3.
8830
8831         * wget.h: Include libintl.h.
8832
8833 1998-01-28  Hrvoje Niksic  <hniksic@srce.hr>
8834
8835         * url.c (mkstruct): Check for opt.cut_dirs.
8836         (mkstruct): alloca()-te more, xmalloc() less.
8837
8838         * utils.c (load_file): Check for ferror().
8839
8840         * url.c (get_urls_file): Close only the files we opened.
8841         (get_urls_html): Ditto.
8842         (count_slashes): New function.
8843
8844         * http.h: Removed.
8845
8846         * http.c (gethttp): Respect username and password provided by
8847         proxy URL.
8848         (base64_encode_line): Write into an existing buffer instead of
8849         malloc-ing a new one.
8850         (struct http_stat): Moved from http.h
8851
8852         * retr.c (retrieve_url): Free SUF.
8853
8854         * all: Removed lots of unnecessary .h dependencies.
8855
8856         * html.c (global_state): Made static.
8857
8858         * utils.h (ALLOCA_ARRAY): New macro.
8859
8860         * main.c (main): New option `--cut-dirs'.
8861
8862         * url.c (construct): Use alloca() for T.
8863
8864         * utils.c (mkdirhier): Use STRDUP_ALLOCA.
8865
8866         * host.c (_host_t): Moved from host.h.
8867         (struct host): Renamed from _host_t.
8868         (store_hostaddress): Use STRDUP_ALLOCA for INET_S.
8869         (realhost): Ditto.
8870
8871         * host.h: Don't include url.h.
8872
8873         * ftp.c (LIST_FILENAME): Moved from ftp.h.
8874
8875         * init.c (DEFAULT_FTP_ACCT): Moved from ftp.h.
8876
8877         * main.c (main): Enable log if the output goes to a TTY.
8878
8879         * connect.h: Removed unused constant `BACKLOG'.
8880
8881         * config.h.in: Check for isatty().
8882
8883         * Makefile.in (LINK): Use CFLAGS when linking.
8884
8885 1998-01-27  Hrvoje Niksic  <hniksic@srce.hr>
8886
8887         * mswindows.c (ws_hangup): Use redirect_output().
8888
8889         * main.c (redirect_output_signal): New function; use
8890         redirect_output().
8891
8892         * log.c (redirect_output): New function, based on hangup(), which
8893         is deleted.
8894
8895         * log.c (vlogmsg): New function.
8896
8897         * wget.h (DEBUGP): Use debug_logmsg().
8898
8899         * main.c (hangup): Use it.
8900
8901         * log.c (log_dump): New function.
8902
8903         * utils.h (DO_REALLOC): Use `long' for various sizes.
8904
8905         * http.c (hskip_lws): Use `while', for clarity.
8906         (HTTP_DYNAMIC_LINE_BUFFER): New constant.
8907         (fetch_next_header): Use it instead of DYNAMIC_LINE_BUFFER.
8908
8909         * ftp-basic.c (FTP_DYNAMIC_LINE_BUFFER): New constant.
8910         (ftp_response): Use it instead of DYNAMIC_LINE_BUFFER.
8911
8912         * utils.c (DYNAMIC_LINE_BUFFER): Moved from utils.c.
8913         (LEGIBLE_SEPARATOR): Ditto.
8914         (FILE_BUFFER_SIZE): Ditto.
8915
8916         * retr.c (BUFFER_SIZE): Moved from retr.h.
8917
8918         * log.c: New file.
8919         (logmsg): Moved from utils.c.
8920         (debug_logmsg): New function.
8921
8922         * mswindows.h: Include it here.
8923
8924         * init.c: Ditto.
8925
8926         * utils.c: Don't include <windows.h>.
8927
8928 1998-01-25  Hrvoje Niksic  <hniksic@srce.hr>
8929
8930         * host.c (ftp_getaddress): Ditto.
8931
8932         * main.c (main): Use it.
8933
8934         * utils.h (STRDUP_ALLOCA): New macro.
8935
8936         * init.c: Prepend `wget: ' to error messages printed on stderr.
8937
8938         * utils.c (mkdirhier): Renamed from mymkdir.
8939         (touch): Renamed from my_touch.
8940         (pwd_cuserid): Renamed from my_cuserid().
8941
8942 1998-01-24  Andy Eskilsson  <andy.eskilsson@telelogic.se>
8943
8944         * utils.c (accdir): Process wildcards.
8945         (proclist): New function.
8946         (accdir): Use it to avoid code repetition.
8947
8948 1998-01-24  Hrvoje Niksic  <hniksic@srce.hr>
8949
8950         * recur.c (parse_robots): Respect opt.useragent; use alloca().
8951
8952         * http.c (gethttp): Construct useragent accordingly.
8953
8954         * version.c: Changed version string to numbers-only.
8955
8956         * main.c (print_help): List all the options.
8957
8958         * mswindows.c (windows_main_junk): Initialize argv0 here.
8959
8960 1998-01-24  Karl Heuer  <kwzh@gnu.org>
8961
8962         * netrc.c (search_netrc): Initialize `l' only after processing
8963         netrc.
8964
8965         * main.c (main): Don't trap SIGHUP if it's being ignored.
8966
8967 1998-01-24  Hrvoje Niksic  <hniksic@srce.hr>
8968
8969         * all: Use logmsg().
8970
8971         * utils.c (time_str): Moved from retr.c.
8972         (logmsg): New function.
8973         (logmsg_noflush): Ditto.
8974
8975         * rbuf.c: New file, moved buf_* functions here.
8976
8977         * ftp.c (ftp_expected_bytes): Moved from ftp-basic.c.
8978
8979         * ftp-basic.c (ftp_rest): Use prnum().
8980
8981         * ftp-basic.c: Ditto.
8982
8983         * ftp.c: Use the new reading functions and macros.
8984
8985         * retr.c (buf_initialize): New function.
8986         (buf_initialized_p): Ditto.
8987         (buf_uninitialize): Ditto.
8988         (buf_fd): Ditto.
8989
8990         * http.c (fetch_next_header): Use the BUF_READCHAR macro for
8991         efficiency.
8992         (gethttp): Use alloca() where appropriate.
8993
8994         * retr.c (buf_readchar): Use it.
8995         (buf_peek): Use rstreams.
8996
8997         * retr.h (BUF_READCHAR): New macro.
8998
8999         * init.c (home_dir): Rewritten for clarity.
9000         (init_path): Ditto.
9001
9002         * mswindows.c (ws_backgnd): Made static.
9003         (read_registry): Ditto.
9004         (ws_cleanup): Ditto.
9005         (ws_handler): Ditto.
9006
9007 1998-01-23  Hrvoje Niksic  <hniksic@srce.hr>
9008
9009         * alloca.c: New file.
9010
9011         * Makefile.in (ALLOCA): Define.
9012
9013         * mswindows.c (ws_help): Constify.
9014         (ws_help): Use alloca.
9015
9016         * mswindows.c: Reformat.
9017
9018         * all: Added _(...) annotations for I18N snarfing and translation.
9019
9020         * host.c (ftp_getaddress): Nuke SYSINFO.
9021         (ftp_getaddress): Don't use getdomainname().
9022         (ftp_getaddress): Use uname(), where available.
9023
9024         * http.c (gethttp): Protect a stray fprintf().
9025
9026         * init.c (settime): New function.
9027         (setval): Treat WAIT specially, allowing suffixes like `m' for
9028         minutes, etc.
9029
9030 1998-01-21  Hrvoje Niksic  <hniksic@srce.hr>
9031
9032         * url.c (get_urls_html): Use alloca() for TEMP.
9033
9034 1998-01-21  Jordan Mendelson  <jordy@wserv.com>
9035
9036         * url.c (rotate_backups): New function.
9037
9038         * http.c (gethttp): Ditto.
9039
9040         * ftp.c (getftp): Rotate backups.
9041
9042 1997-12-18  Hrvoje Niksic  <hniksic@srce.hr>
9043
9044         * all: Renamed nmalloc(), nrealloc() and nstrdup() to xmalloc(),
9045         xrealloc() and xstrdup().  Use the new functions.
9046
9047         * url.c (decode_string): Made static.
9048         (has_proto): Ditto.
9049         (parse_dir): Ditto.
9050         (parse_uname): Ditto.
9051         (mkstruct): Ditto.
9052         (construct): Ditto.
9053         (construct_relative): Ditto.
9054
9055         * retr.c (show_progress): Made static.
9056
9057         * recur.c (robots_url): Made static.
9058         (retrieve_robots): Ditto.
9059         (parse_robots): Ditto.
9060         (robots_match): Ditto.
9061
9062         * main.h: Removed.
9063
9064         * main.c (printhelp): Made static.
9065         (hangup): Ditto.
9066
9067         * init.c (comind): Made static.
9068         (defaults): Ditto.
9069         (init_path): Ditto.
9070         (run_wgetrc): Ditto.
9071         (onoff): Ditto.
9072         (setonoff): Ditto.
9073         (setnum): Ditto.
9074         (myatoi): Ditto.
9075         (getperms): Ditto.
9076         (setbytes): Ditto.
9077
9078         * http.c (fetch_next_header): Made static.
9079         (hparsestatline): Ditto.
9080         (hskip_lws): Ditto.
9081         (hgetlen): Ditto.
9082         (hgetrange): Ditto.
9083         (hgettype): Ditto.
9084         (hgetlocation): Ditto.
9085         (hgetmodified): Ditto.
9086         (haccepts_none): Ditto.
9087         (gethttp): Ditto.
9088         (base64_encode_line): Ditto.
9089         (mktime_from_utc): Ditto.
9090         (http_atotm): Ditto.
9091
9092         * html.c (idmatch): Made static.
9093
9094         * host.c (search_host): Made static.
9095         (search_address): Ditto.
9096         (free_hlist): Ditto.
9097
9098         * ftp.c (getftp): Made static.
9099         (ftp_loop_internal): Ditto.
9100         (ftp_get_listing): Ditto.
9101         (ftp_retrieve_list): Ditto.
9102         (ftp_retrieve_dirs): Ditto.
9103         (ftp_retrieve_glob): Ditto.
9104         (freefileinfo): Ditto.
9105         (delelement): Ditto.
9106
9107         * ftp-ls.c (symperms): Made static.
9108         (ftp_parse_unix_ls): Ditto.
9109
9110         * connect.c (select_fd): Made static.
9111
9112         * utils.c (xmalloc): Renamed from nmalloc.
9113         (xrealloc): Renamed from nrealloc.
9114         (xstrdup): Renamed from nstrdup.
9115
9116         * getopt.c (exchange): Use alloca.
9117
9118         * mswindows.c (mycuserid): Use strncpy.
9119
9120         * New files mswindows.c, mswindows.h, sysdep.h.  winjunk.c,
9121         systhings.h, windecl.h and winjunk.h removed.
9122
9123         * mswindows.c (sleep): New function.
9124
9125         * utils.c: Include <windows.h> under Windows.
9126
9127 1997-06-12  Darko Budor  <dbudor@zesoi.fer.hr>
9128
9129         * url.h (URL_UNSAFE): Change default under Windows.
9130
9131         * retr.c (retrieve_from_file): Respect opt.delete_after.
9132
9133         * main.c (main): Call ws_help on Windows.
9134
9135         * winjunk.c (windows_main_junk): New function.
9136
9137         * main.c (main): Junk-process argv[0].
9138
9139         * http.c (mktime_from_utc): Return -1 if mktime failed.
9140
9141         * http.c (http_loop): Ditto.
9142
9143         * ftp.c (ftp_loop_internal): Change title on Windows when using a
9144         new URL.
9145
9146         * winjunk.c (getdomainname): Lots of functions.
9147
9148 1997-06-12  Hrvoje Niksic  <hniksic@srce.hr>
9149
9150         * cmpt.c (strptime_internal): Handle years more correctly for
9151         `%y'.
9152
9153 1997-06-09  Mike Thomas <mthomas@reality.ctron.com>
9154
9155         * http.c (gethttp): Allocate enough space for
9156         `Proxy-Authorization' header.
9157
9158 1997-05-10  Hrvoje Niksic  <hniksic@srce.hr>
9159
9160         * version.c: Wget/1.4.5 is released.
9161
9162 1997-05-10  Hrvoje Niksic  <hniksic@srce.hr>
9163
9164         * retr.c (get_contents): Check return value of fwrite more
9165         carefully.
9166
9167 1997-03-30  Andreas Schwab  <schwab@issan.informatik.uni-dortmund.de>
9168
9169         * cmpt.c (strptime_internal) [case 'Y']: Always subtract 1900 from
9170         year, regardless of century.
9171
9172 1997-03-30  Hrvoje Niksic  <hniksic@srce.hr>
9173
9174         * utils.c (isfile): Use `lstat' instead of `stat'.
9175
9176 1997-03-29  Hrvoje Niksic  <hniksic@srce.hr>
9177
9178         * utils.c (numdigit): Use explicit test.
9179
9180 1997-03-21  Hrvoje Niksic  <hniksic@srce.hr>
9181
9182         * http.c (http_loop): Always use `url_filename' to get u->local.
9183
9184 1997-03-20  Hrvoje Niksic  <hniksic@srce.hr>
9185
9186         * url.c: Recognize https.
9187
9188 1997-03-13  Hrvoje Niksic  <hniksic@srce.hr>
9189
9190         * recur.c (recursive_retrieve): Lowercase just the host name.
9191
9192 1997-03-09  Hrvoje Niksic  <hniksic@srce.hr>
9193
9194         * url.c (get_urls_file): Use the correct test.
9195         (get_urls_html): Ditto.
9196
9197 1997-03-07  Hrvoje Niksic  <hniksic@srce.hr>
9198
9199         * connect.c: Reverted addrlen to int.
9200
9201         * init.c (parse_line): Check for -1 instead of NONE.
9202
9203         * version.c: Changed version to 1.4.5.
9204
9205 1997-02-17  Hrvoje Niksic  <hniksic@srce.hr>
9206
9207         * init.c: New option netrc.
9208         (initialize): Don't parse .netrc.
9209
9210         * cmpt.c (recursive): Return rp.
9211         (strptime_internal): Match the long strings first, the abbreviated
9212         second.
9213
9214 1997-02-16  Hrvoje Niksic  <hniksic@srce.hr>
9215
9216         * http.c (check_end): New function.
9217         (http_atotm): Use it.
9218
9219 1997-02-13  gilles Cedoc  <gilles@cedocar.fr>
9220
9221         * http.c (gethttp): Use them.
9222
9223         * init.c: New options proxy_user and proxy_passwd.
9224
9225 1997-02-14  Hrvoje Niksic  <hniksic@srce.hr>
9226
9227         * ftp.c (ftp_retrieve_list): Create links even if not relative.
9228
9229 1997-02-10  Hrvoje Niksic  <hniksic@srce.hr>
9230
9231         * recur.c (recursive_retrieve): Lowercase the host name, if the
9232         URL is not "optimized".
9233
9234         * host.c (realhost): Return l->hostname, even if it matches with
9235         host.
9236
9237 1997-02-10  Marin Purgar  <pmc@asgard.hr>
9238
9239         * connect.c: Make addrlen size_t instead of int.
9240         (conaddr): Ditto.
9241
9242 1997-02-09  Gregor Hoffleit  <flight@mathi.uni-heidelberg.DE>
9243
9244         * systhings.h: Define S_ISLNK on NeXT too.
9245
9246 1997-02-09  Hrvoje Niksic  <hniksic@srce.hr>
9247
9248         * version.c: Released 1.4.3.
9249
9250         * url.c: Futher update to list of protostrings.
9251         (skip_proto): Skip `//' correctly for FTP and HTTP.
9252
9253         * url.c (get_urls_html): Handle bogus `http:' things a little
9254         different.
9255
9256         * main.c (main): Removed `follow-ftp' from `f'.
9257         (main): Dumped the `prefix-files' and `file-prefix' options and
9258         features; old and bogus.
9259         (main): Exit on failed setval() in `-e'.
9260
9261         * http.c (fetch_next_header): Use it to detect header continuation
9262         correctly.
9263
9264         * retr.c (buf_peek): New function.
9265
9266 1997-02-08  Hrvoje Niksic  <hniksic@srce.hr>
9267
9268         * wget.h: Include time.h and stuff.
9269
9270 1997-02-08  Roger Beeman  <beeman@cisco.com>
9271
9272         * ftp.c: Include <time.h>
9273
9274 1997-02-07  Hrvoje Niksic  <hniksic@srce.hr>
9275
9276         * url.c (findurl): Would read over buffer limits.
9277
9278 1997-02-06  Hrvoje Niksic  <hniksic@srce.hr>
9279
9280         * ftp-ls.c (ftp_parse_unix_ls): Allow spaces in file names.
9281
9282 1997-02-05  Hrvoje Niksic  <hniksic@srce.hr>
9283
9284         * http.c (http_atotm): Initialize tm.is_dst.
9285
9286 1997-02-02  Hrvoje Niksic  <hniksic@srce.hr>
9287
9288         * http.c (gethttp): Don't print the number of retrieved headers.
9289
9290         * main.c (main): New option `--no-clobber', alias for `-nc'.
9291
9292         * url.c: Recognize `https://'.
9293
9294 1997-02-01  Hrvoje Niksic  <hniksic@srce.hr>
9295
9296         * host.c (herrmsg): Don't use h_errno.
9297
9298 1997-01-30  Hrvoje Niksic  <hniksic@srce.hr>
9299
9300         * host.c (accept_domain): Use it.
9301
9302         * main.c (main): New option `--exclude-domains'.
9303
9304         * retr.c (retrieve_url): Use it.
9305         (retrieve_url): Bail out when an URL is redirecting to itself.
9306
9307         * url.c (url_equal): New function.
9308
9309 1997-01-29  Hrvoje Niksic  <hniksic@srce.hr>
9310
9311         * connect.c: Include arpa/inet.h instead of arpa/nameser.h.
9312
9313         * http.c (mk_utc_time): New function.
9314         (http_atotm): Use it; handle time zones correctly.
9315
9316 1997-01-28  Hrvoje Niksic  <hniksic@srce.hr>
9317
9318         * http.c: Ditto.
9319
9320         * ftp-basic.c: Use it instead of WRITE.
9321
9322         * connect.c (iwrite): New function.
9323
9324 1997-01-27  Hrvoje Niksic  <hniksic@srce.hr>
9325
9326         * cmpt.c (mktime): New function.
9327
9328         * netrc.c: Include <sys/types.h>.
9329
9330         * main.c (main): Wouldn't recognize --spider.
9331
9332         * retr.c (rate): Use `B', `KB' and `MB'.
9333         (reset_timer,elapsed_time): Moved from utils.c.
9334
9335         * ftp.c (ftp_retrieve_list): Ditto.
9336
9337         * http.c (http_loop): Don't touch the file if opt.dfp.
9338
9339 1997-01-24  Hrvoje Niksic  <hniksic@srce.hr>
9340
9341         * cmpt.c: New file.
9342
9343         * ftp.c (ftp_retrieve_glob): New argument semantics.
9344         (ftp_retrieve_dirs): Use it.
9345         (ftp_loop): Ditto.
9346
9347         * html.c (htmlfindurl): Recognize `'' as the quote char.
9348
9349 1997-01-23  Hrvoje Niksic  <hniksic@srce.hr>
9350
9351         * ftp.c (ftp_loop_internal): Use it.
9352
9353         * utils.c (remove_link): New function.
9354
9355 1997-01-22  Hrvoje Niksic  <hniksic@srce.hr>
9356
9357         * retr.c (retrieve_url): Require STRICT redirection URL.
9358
9359         * url.c (parseurl): New argument STRICT.
9360
9361         * http.c (hparsestatline): Be a little-bit less strict about
9362         status line format.
9363
9364 1997-01-21  Hrvoje Niksic  <hniksic@srce.hr>
9365
9366         * http.c (gethttp): Use it.
9367
9368         * main.c (main): Don't use '<digit>' as options.
9369
9370         * init.c: New option ignore_length.
9371
9372         * http.c (gethttp): Ditto.
9373         (http_loop): Check for redirection without Location:.
9374         (gethttp): Don't print Length unless RETROKF.
9375
9376         * ftp.c (getftp): Use it.
9377
9378         * url.c (mkalldirs): New function.
9379
9380         * utils.c (mymkdir): Don't check for existing non-directory.
9381
9382         * url.c (mkstruct): Don't create the directory.
9383
9384 1997-01-20  Hrvoje Niksic  <hniksic@srce.hr>
9385
9386         * init.c (setval): Removed NO_RECURSION checks.
9387
9388 1997-01-19  Hrvoje Niksic  <hniksic@srce.hr>
9389
9390         * version.c: "Released" 1.4.3-pre2.
9391
9392         * recur.c (recursive_retrieve): Bypass host checking only if URL
9393         is ftp AND parent URL is not ftp.
9394
9395         * ftp-basic.c (ftp_request): Print out Turtle Power.
9396
9397         * ftp.c (ftp_loop): Call ftp_retrieve_glob with 0 if there's no
9398         wildcard.
9399         (ftp_retrieve_glob): Call ftp_loop_internal even on empty list, if
9400         not glob.
9401
9402         * http.c (gethttp): Be a little bit smarter about status codes.
9403
9404         * recur.c (recursive_retrieve): Always reset opt.recursive when
9405         dealing with FTP.
9406
9407 1997-01-18  Hrvoje Niksic  <hniksic@srce.hr>
9408
9409         * retr.c (retrieve_url): New variable location_changed; use it for
9410         tests instead of mynewloc.
9411         (retrieve_url): Allow heuristic adding of html.
9412
9413         * url.c (url_filename): Don't use the `%' in Windows file names.
9414
9415         * http.c (http_loop): Always time-stamp the local file.
9416
9417         * http.c (http_loop): Ditto.
9418
9419         * ftp.c (ftp_retrieve_list): Use it.
9420
9421         * utils.c (my_touch): New function.
9422
9423         * ftp.c (ftp_retrieve_list): Use #ifdef HAVE_STRUCT_UTIMBUF
9424         instead of #ifndef NeXT.
9425
9426         * utils.c (strptime): New version, by Ulrich Drepper.
9427
9428 1997-01-17  Hrvoje Niksic  <hniksic@srce.hr>
9429
9430         * http.c (haccepts_none): Renamed from `haccepts_bytes'.
9431         (gethttp): If haccepts_none(), disable ACCEPTRANGES.
9432         (http_loop): Would remove ACCEPTRANGES.
9433
9434         * ftp.c (getftp): Call ftp_list with NULL.
9435
9436 1997-01-15  Hrvoje Niksic  <hniksic@srce.hr>
9437
9438         * html.c (ftp_index): Don't print minutes and seconds if we don't
9439         know them; beautify the output.
9440
9441         * ftp.c (getftp): Don't close the socket on FTPNSFOD.
9442
9443 1997-01-14  Hrvoje Niksic  <hniksic@srce.hr>
9444
9445         * utils.c (strptime): New function.
9446         (strptime): Don't use get_alt_number.
9447         (strptime): Don't use locale.
9448         (match_string): Made it a function.
9449
9450 1997-01-12  Hrvoje Niksic  <hniksic@srce.hr>
9451
9452         * http.c (http_atotm): New function.
9453         (http_loop): Use it.
9454
9455         * atotm.c: Removed from the distribution.
9456
9457         * http.c (base64_encode_line): Rewrite.
9458
9459 1997-01-09  Hrvoje Niksic  <hniksic@srce.hr>
9460
9461         * ftp.c (getftp): Use ftp_expected_bytes; print size.
9462
9463         * ftp-basic.c (ftp_response): Use ftp_last_respline.
9464         (ftp_expected_bytes): New function.
9465
9466         * ftp.c (getftp): Print the unauthoritative file length.
9467
9468         * ftp-ls.c: Renamed from ftp-unix.c.
9469         (ftp_parse_ls): Moved from ftp.c.
9470         (ftp_parse_unix_ls): Recognize seconds in time spec.
9471         (ftp_parse_unix_ls): Recognize year-less dates of the previous
9472         year.
9473
9474 1997-01-08  Hrvoje Niksic  <hniksic@srce.hr>
9475
9476         * ftp-basic.c: Don't declare errno if #defined.
9477
9478         * host.c (ftp_getaddress): Check for sysinfo legally.
9479
9480 1997-01-08  Darko Budor  <dbudor@diana.zems.fer.hr>
9481
9482         * connect.c (iread): Use READ.
9483
9484 1996-12-23  Hrvoje Niksic  <hniksic@srce.hr>
9485
9486         * url.c: Recognize finger, rlogin, tn3270, mid and cid as valid
9487         schemes.
9488
9489 1996-12-22  Hrvoje Niksic  <hniksic@srce.hr>
9490
9491         * host.c (ftp_getaddress): Allow `.' in hostname.
9492
9493 1996-12-26  Darko Budor <dbudor@zems.fer.hr>
9494
9495         * wget.h: READ and WRITE macros for use instead of read and write
9496         on sockets, grep READ *.c, grep WRITE *.c
9497
9498         * wsstartup.c: new file - startup for winsock
9499
9500         * wsstartup.h: new file
9501
9502         * win32decl.h: new file - fixup for <errno.h> and winsock trouble
9503
9504         * configure.bat: Configure utility for MSVC
9505
9506         * src/Makefile.ms,config.h.ms: new files for use with MSVC 4.x
9507
9508 1996-12-22  Hrvoje Niksic  <hniksic@srce.hr>
9509
9510         * version.c: Released 1.4.3-pre.
9511
9512         * utils.c (prnum): Accept long.
9513         (legible): Use prnum().
9514
9515         * connect.c (make_connection): Accept port as short.
9516         (bindport): Ditto.
9517
9518         * http.c (gethttp): Use search_netrc.
9519
9520 1996-12-21  Hrvoje Niksic  <hniksic@srce.hr>
9521
9522         * ftp.c (getftp): Use search_netrc.
9523
9524         * netrc.c (free_netrc): New function.
9525
9526         * init.c (home_dir): New function.
9527
9528         * url.c (convert_links): Allow REL2ABS changes.
9529
9530 1996-12-21  Gordon Matzigkeit  <gord@gnu.ai.mit.edu>
9531
9532         * netrc.c: New file.
9533         (parse_netrc, maybe_add_to_list): New functions.
9534
9535 1996-12-17  Hrvoje Niksic  <hniksic@srce.hr>
9536
9537         * retr.c (retrieve_url): Reset opt.recursion before calling
9538         ftp_loop if it is reached through newloc.
9539
9540         * init.c (run_wgetrc): Print the wgetrc path too, when reporting
9541         error; don't use "Syntax error", since we don't know if it is
9542         really a syntax error.
9543
9544 1996-12-16  Hrvoje Niksic  <hniksic@srce.hr>
9545
9546         * utils.c (acceptable): Extract the filename part of the path.
9547
9548         * recur.c (recursive_retrieve): Call acceptable() with the right
9549         argument; would bug out on wildcards.
9550
9551         * init.c (parse_line): Likewise.
9552
9553         * html.c (htmlfindurl): Cast to char * when calling stuff.
9554
9555 1996-12-15  Hrvoje Niksic  <hniksic@srce.hr>
9556
9557         * ftp.c (getftp): Use ftp_pasv.
9558
9559         * ftp-basic.c (ftp_request): Accept NULL value.
9560         (ftp_pasv): New function.
9561
9562         * options.h (struct options): Add passive FTP option.
9563
9564 1996-12-15  Hrvoje Niksic  <hniksic@srce.hr>
9565
9566         * url.c (parseurl): Debug output.
9567
9568         * utils.c (path_simplify): New one, adapted from bash's
9569         canonicalize_pathname().
9570
9571 1996-12-14  Hrvoje Niksic  <hniksic@srce.hr>
9572
9573         * ftp.c (getftp): Don't discard the buffer.
9574
9575         * retr.c (get_contents): New parameter nobuf.
9576
9577 1996-12-13  Shawn McHorse  <riffraff@txdirect.net>
9578
9579         * html.c (htmlfindurl): Recognize <meta contents="d; URL=...".
9580
9581         * init.c (setval): Strip the trailing slashes on CVECDIR.
9582
9583 1996-12-13  Hrvoje Niksic  <hniksic@srce.hr>
9584
9585         * init.c: Make excludes and includes under CVECDIR instead of
9586         CVEC.
9587
9588 1996-12-13  Shawn McHorse  <riffraff@txdirect.net>
9589
9590         * url.c (get_urls_html): Skip "http:".
9591
9592 1996-12-13  Hrvoje Niksic  <hniksic@srce.hr>
9593
9594         * utils.c (strcasecmp): From glibc.
9595         (strncasecmp): Also.
9596         (strstr): Also.
9597
9598         * url.c: Added javascript: to the list of URLs prefixes.
9599
9600 1996-12-12  Shawn McHorse  <riffraff@txdirect.net>
9601
9602         * recur.c (retrieve_robots): Print the warning message only if
9603         verbose.
9604
9605 1996-12-12  Gregor Hoffleit  <flight@mathi.uni-heidelberg.DE>
9606
9607         * ftp.c (ftp_retrieve_list): Use NeXT old utime interface.
9608
9609 1996-12-12  Hrvoje Niksic  <hniksic@srce.hr>
9610
9611         * systhings.h: New file.
9612
9613         * ../configure.in: Check for utime.h
9614
9615         * ftp.c: Check whether we have unistd.h.
9616
9617 1996-11-27  Hrvoje Niksic  <hniksic@srce.hr>
9618
9619         * recur.c (recursive_retrieve): Send the canonical URL as referer.
9620         (recursive_retrieve): Call get_urls_html with the canonical URL.
9621
9622 1996-12-13  Kaveh R. Ghazi  <ghazi@caip.rutgers.edu>
9623
9624         * (configure.in, config.h.in, src/Makefile.in, src/*.[ch]): Add
9625         ansi2knr support for compilers which don't support ANSI style
9626         function prototypes and signatures.
9627
9628         * (aclocal.m4, src/ansi2knr.c, src/ansi2knr.1): New files.
9629
9630 1996-11-26  Hrvoje Niksic  <hniksic@srce.hr>
9631
9632         * url.c: Use it; Recognize paths ending with "." and ".." as
9633         directories.
9634         (url_filename): Append .n whenever file exists and could be a
9635         directory.
9636
9637         * url.h (ISDDOT): New macro.
9638
9639         * init.c (parse_line): Use unsigned char.
9640
9641         * url.c (get_urls_html): Cast to unsigned char * when calling
9642         htmlfindurl.
9643
9644         * html.c (htmlfindurl): Use unsigned char.
9645
9646         * version.c: Changed version to 1.4.3.
9647
9648 1996-11-25  Hrvoje Niksic  <hniksic@srce.hr>
9649
9650         * version.c: Released 1.4.2.
9651
9652         * ftp.c (getftp): Simplified assertion.
9653         (ftp_loop_internal): Remove symlink before downloading.
9654         (ftp_retrieve_list): Unlink the symlink name before attempting to
9655         create a symlink!
9656
9657         * options.h (struct options): Renamed print_server_response to
9658         server_response.
9659
9660         * ftp.c (rel_constr): Removed.
9661         (ftp_retrieve_list): Don't use it.
9662         (ftp_retrieve_list): Use opt.retr_symlinks.
9663
9664 1996-11-24  Hrvoje Niksic  <hniksic@srce.hr>
9665
9666         * main.c (main): New option retr_symlinks.
9667
9668         * url.c (convert_links): Print verbose message.
9669
9670 1996-11-24  Hrvoje Niksic  <hniksic@srce.hr>
9671
9672         * http.c (http_loop): Reset newloc in the beginning of function;
9673         would cause FMR in retrieve_url.
9674
9675 1996-11-23  Hrvoje Niksic  <hniksic@srce.hr>
9676
9677         * recur.c (convert_all_links): Find the URL of each HTML document,
9678         and feed it to get_urls_html; would bug out.
9679         (convert_all_links): Check for l2 instead of dl; removed dl.
9680
9681         * url.c (convert_links): Don't refer to freed newname.
9682
9683         * recur.c (recursive_retrieve): Add this_url to urls_downloaded.
9684
9685         * main.c (main): Print the OS_TYPE in the debug output, too.
9686
9687         * recur.c (recursive_retrieve): Check for opt.delete_after.
9688
9689         * main.c (main): New option delete-after.
9690
9691         * init.c (setval): Cleaned up.
9692
9693 1996-11-21  Hrvoje Niksic  <hniksic@srce.hr>
9694
9695         * Makefile.in (wget): Make `wget' the default target.
9696
9697         * ftp.c (ftp_loop_internal): Move noclobber checking out of the
9698         loop.
9699         (ftp_retrieve_list): Warn about non-matching sizes.
9700
9701         * http.c (http_loop): Made -nc non-dependent on opt.recursive.
9702
9703         * init.c (setnum): Renamed from setnuminf; New argument flags.
9704         (setval): Use it.
9705
9706         * main.c (main): Sorted the options.
9707         (main): New option --wait.
9708
9709 1996-11-21  Shawn McHorse  <riffraff@txdirect.net>
9710
9711         * html.c (htmlfindurl): Reset s->in_quote after getting out of
9712         quotes.
9713
9714 1996-11-20  Hrvoje Niksic  <hniksic@srce.hr>
9715
9716         * version.c: Changed version to 1.4.2.
9717
9718 1996-11-20  Hrvoje Niksic  <hniksic@srce.hr>
9719
9720         * version.c: Released 1.4.1.
9721
9722         * html.c (html_quote_string): New function.
9723         (ftp_index): Use it.
9724         (htmlfindurl): A more gentle ending debug message.
9725
9726         * ftp.c (ftp_loop): Check for opt.htmlify.
9727
9728         * init.c: New command htmlify.
9729
9730         * ftp.c (getftp): Nicer error messages, with `'-encapsulated
9731         strings.
9732         (ftp_loop): Print size of index.html.
9733
9734         * init.c (setval): Implement "styles".
9735
9736         * main.c (main): New option dotstyle.
9737
9738 1996-11-19  Hrvoje Niksic  <hniksic@srce.hr>
9739
9740         * ftp.c (getftp): Close the master socket in case of errors, after
9741         bindport().
9742
9743         * connect.c (bindport): Initialize msock to -1.
9744
9745         * ftp.c (getftp): Initialize dtsock to -1.
9746
9747         * connect.c (closeport): Don't close sock if sock == -1.
9748
9749 1996-11-18  Hrvoje Niksic  <hniksic@srce.hr>
9750
9751         * init.c (setnuminf): Nuked default value -- just leave unchanged.
9752         (setval): Don't send default values.
9753         (defaults): Use DEFAULT_TIMEOUT -- aaargh.
9754
9755         * options.h (struct options): Use long for dot_bytes.
9756
9757         * init.c (setquota): Renamed to setbytes.
9758         (setval): Use setbytes on DOTBYTES.
9759
9760 1996-11-17  Hrvoje Niksic  <hniksic@srce.hr>
9761
9762         * ftp.c (getftp): Initialize con->dltime.
9763
9764         * recur.c (recursive_retrieve): Use same_host instead of
9765         try_robots; simply load robots_txt whenever the host is changed.
9766         (recursive_retrieve): Free forbidden before calling parse_robots.
9767
9768 1996-11-16  Hrvoje Niksic  <hniksic@srce.hr>
9769
9770         * retr.c (show_progress): Use them.
9771
9772         * options.h (struct options): New options dot_bytes, dots_on_line
9773         and dot_spacing.
9774
9775 1996-11-16  Mark Boyns  <boyns@sdsu.edu>
9776
9777         * recur.c (recursive_retrieve): Retrieve directories regardless of
9778         acc/rej rules; check for empty u->file.
9779
9780 1996-11-14  Hrvoje Niksic  <hniksic@srce.hr>
9781
9782         * init.c (setval): Use it.
9783
9784         * utils.c (merge_vecs): New function.
9785
9786         * init.c (setval): Reset the list-type functions when encountering
9787         "".
9788
9789 1996-11-14  Shawn McHorse  <riffraff@txdirect.net>
9790
9791         * recur.c (recursive_retrieve): Use base_url instead of this_url
9792         for no_parent.
9793
9794 1996-11-14  Shawn McHorse  <riffraff@txdirect.net>
9795
9796         * html.c (htmlfindurl): Reset s->in_quote after exiting the quote.
9797
9798 1996-11-13  Hrvoje Niksic  <hniksic@srce.hr>
9799
9800         * utils.c (sepstring): Rewrote; don't use strtok.
9801
9802         * recur.c (recursive_retrieve): Enter assorted this_url to slist
9803         when running the first time.
9804         (retrieve_robots): Warn to ignore errors when robots are loaded.
9805
9806         * utils.c (load_file): Moved from url.c.
9807
9808         * http.c: Made static variables const too in h* functions.
9809
9810         * main.c (main): Renamed --continue-ftp to --continue.
9811
9812         * recur.c (recursive_retrieve): Use it.
9813
9814         * utils.c (frontcmp): New function.
9815
9816         * url.c (accdir): New function.
9817
9818         * html.c (htmlfindurl): Recognize <area href=...>.
9819
9820         * ftp.c (ftp_retrieve_dirs): Implemented opt.includes.
9821
9822         * init.c (setval): Free the existing opt.excludes and
9823         opt.includes, if available.
9824
9825         * main.c (main): New option -I.
9826
9827 1996-11-12  Hrvoje Niksic  <hniksic@srce.hr>
9828
9829         * ftp.c (ftp_retrieve_glob): Do not weed out directories.
9830
9831         * version.c: Changed version to 1.4.1.
9832
9833 1996-11-11  Hrvoje Niksic  <hniksic@srce.hr>
9834
9835         * version.c: Released 1.4.0.
9836
9837 1996-11-10  Hrvoje Niksic  <hniksic@srce.hr>
9838
9839         * main.c (main): Free com and val after parse_line.
9840         (printhelp): Reorder the listing.
9841
9842         * http.c: More robust header parsing.
9843
9844         * http.c: Allow any number of spaces, or no spaces, precede ':'.
9845         (hskip_lws): New function.
9846         (haccepts_bytes): New function.
9847         (gethttp): Use it.
9848
9849         * init.c (setval): Check header sanity.
9850         (setval): Allow resetting of headers.
9851
9852 1996-11-10  Hrvoje Niksic  <hniksic@srce.hr>
9853
9854         * http.c (http_loop): Don't use has_wildcards.
9855
9856         * http.c (gethttp): Free all_headers -- would leak.
9857
9858         * recur.c (recursive_retrieve): Initialize depth to 1 instead of
9859         0 -- this fixes a long-standing bug in -rl.
9860
9861 1996-11-09  Hrvoje Niksic  <hniksic@srce.hr>
9862
9863         * ftp.c: Use -1 as "impossible" value for con->fd.
9864
9865         * url.h (URL_SEPARATOR): Don't treat `*' and `+' as separators.
9866
9867         * init.c (parse_line): Use isalpha.
9868
9869         * ftp-unix.c: Use HAVE_UNISTD_H.
9870
9871         * mtch.c (has_wildcards): Don't match \.
9872
9873         * http.c (http_loop): Warn on HTTP wildcard usage.
9874
9875 1996-11-08  Hrvoje Niksic  <hniksic@srce.hr>
9876
9877         * url.c (url_filename): Do not create numbered suffixes if
9878         opt.noclobber -- would bug out on -nc.
9879
9880 1996-11-07  Hrvoje Niksic  <hniksic@srce.hr>
9881
9882         * recur.c (parse_robots): Don't chuck out the commands without
9883         arguments (`Disallow:<empty>' didn't work).
9884         (parse_robots): Compare versions lowercase.
9885         (parse_robots): Match on base_version, not version_string!
9886         (parse_robots): Handle comments properly.
9887         (parse_robots): Match versions in a sane way.
9888
9889         * init.c: Print nicer error messages.
9890
9891         * version.c: Changed version to 1.4.0.
9892
9893 1996-11-06  Hrvoje Niksic  <hniksic@srce.hr>
9894
9895         * version.c: Released 1.4.0-test2.
9896
9897         * init.c (run_wgetrc): Close fp.
9898
9899         * ftp.c (ftp_retrieve_dirs): Allocate the correct length for
9900         u->dir.
9901
9902 1996-11-06  Hrvoje Niksic  <hniksic@srce.hr>
9903
9904         * init.c (setquota): Allow inf as quota specification.
9905
9906 1996-11-05  Hrvoje Niksic  <hniksic@srce.hr>
9907
9908         * ftp.c (ftp_retrieve_dirs): Return QUOTEXC if quota exceeded.
9909         (ftp_retrieve_glob): Return QUOTEXC on quota exceeded.
9910
9911         * main.c (main): Check for quota by comparison with downloaded
9912         stuff, not from status.
9913
9914         * connect.c (select_fd): Should compile on HPUX without warnings now.
9915
9916         * ftp.c (ftp_get_listing): Check whether ftp_loop_internal
9917         returned RETROK.
9918
9919 1996-11-04  Hrvoje Niksic  <hniksic@srce.hr>
9920
9921         * ftp.c (ftp_retrieve_glob): Print the pattern nicely.
9922         (getftp): Return FTPRETRINT on control connection error.
9923
9924         * html.c (htmlfindurl): Recognize <embed src=...> and
9925         <bgsound src=...>.
9926         (ftp_index): Handle username and password correctly.
9927
9928         * main.c (main): Made `-np' a synonim for --no-parent.
9929
9930 1996-11-02  Hrvoje Niksic  <hniksic@srce.hr>
9931
9932         * ftp.c (ftp_loop): Check for opt.ftp_glob too before calling
9933         ftp_retrieve_glob.
9934
9935         * version.c: Changed version to 1.4.0-test2.
9936
9937 1996-11-02  Hrvoje Niksic  <hniksic@srce.hr>
9938
9939         * version.c: Released 1.4.0-test1.
9940
9941         * url.c (str_url): Don't use sprintf when creating %2F-prefixed
9942         directory.
9943         (convert_links): Removed definition of make_backup.
9944
9945         * http.h: Removed definition of MAX_ERROR_LENGTH.
9946
9947         * host.c (ftp_getaddress): Check for "(none)" domains.
9948
9949         * ftp.c (ftp_retrieve_dirs): Docfix.
9950
9951         * http.c (gethttp): Use ou->referer instead of u->referer.
9952
9953         * retr.c (retrieve_url): Reset u to avoid freeing pointers twice;
9954         this was known to cause coredumps on Linux.
9955
9956         * html.c (ftp_index): Cast the argument to local_time to time_t *.
9957
9958 1996-11-01  Hrvoje Niksic  <hniksic@srce.hr>
9959
9960         * connect.c (select_fd): Use exceptfds -- once and for all.
9961
9962         * retr.c (retrieve_from_file): Free filename after
9963         recursive_retrieve.
9964         (retrieve_from_file): Send RFIRST_TIME to recursive_retrieve on
9965         first-time retrieval.
9966         (retrieve_from_file): Return uerr_t; new argument, count.
9967         (retrieve_from_file): Break on QUOTEXC.
9968
9969         * init.c (setquota): Fixed a bug that caused rejection of
9970         non-postfixed values..
9971
9972 1996-10-30  Hrvoje Niksic  <hniksic@srce.hr>
9973
9974         * version.c: Changed name to wget.
9975
9976         * connect.c (iread): Smarter use of select.
9977         (select_fd): Set errno on timeout.  If not timeout, return 1
9978         instead of 0.
9979
9980 1996-10-29  Hrvoje Niksic  <hniksic@srce.hr>
9981
9982         * ftp.c (ftp_loop_internal): Don't use con->cmd before
9983         establishing it.
9984
9985 1996-10-26  Hrvoje Niksic  <hniksic@srce.hr>
9986
9987         * http.c (gethttp): Send correct referer when using proxy.
9988         (gethttp): Use struct urlinfo ou to access the relevant data; send
9989         correct authorization in all cases.
9990
9991         * host.c (same_host): Use skip_uname to skip username and
9992         password.
9993
9994         * url.c (skip_uname): New function.
9995         (parseurl): Use it.
9996
9997         * host.c (same_host): Do not assume HTTP -- same_host should now
9998         be totally foolproof.
9999
10000         * url.c (skip_proto): New function.
10001         (parse_uname): Use it.
10002
10003         * http.c (gethttp): Create local user and passwd from what is
10004         given.
10005
10006         * url.c (parseurl): Check for HTTP username and password too.
10007
10008 1996-10-25  Hrvoje Niksic  <hniksic@srce.hr>
10009
10010         * config.h.in: Removed #define gethostbyname R...
10011
10012 1996-10-22  Hrvoje Niksic  <hniksic@srce.hr>
10013
10014         * version.c: Changed version to 1.4.0-test1.
10015
10016 1996-10-21  Hrvoje Niksic  <hniksic@srce.hr>
10017
10018         * version.c: "Released" 1.4b29.
10019
10020         * recur.c (recursive_retrieve): Check for no_parent.
10021
10022         * init.c (setval): Option update.
10023
10024         * main.c (main): New option no-parent.
10025
10026         * options.h (struct options): New variable no_parent.
10027
10028         * recur.c (recursive_retrieve): Only files are checked for
10029         opt.accepts and opt.rejects.
10030         (recursive_retrieve): Check directories for opt.excludes.
10031         (recursive_retrieve): Make the dir absolute when checking
10032         opt.excludes.
10033
10034         * html.c (htmlfindurl): Recognize <applet code=...> and <script
10035         src=...>
10036
10037 1996-10-18  Hrvoje Niksic  <hniksic@srce.hr>
10038
10039         * ftp.c (getftp): Do not line-break assert entries at all.
10040         (ftp_retrieve_dirs): docfix.
10041
10042         * connect.c (select_fd): Use fd + 1 as nfds.
10043
10044         * version.c: Changed version to 1.4b29.
10045
10046 1996-10-18  Hrvoje Niksic  <hniksic@srce.hr>
10047
10048         * version.c: "Released" 1.4b28.
10049
10050         * ftp.c (ftp_loop_internal): Check whether f->size == len and
10051         don't continue the loop if it is.
10052         (ftp_get_listing): Remove list_filename on unsuccesful loop.
10053
10054 1996-10-17  Hrvoje Niksic  <hniksic@srce.hr>
10055
10056         * ftp.c (ftp_loop_internal): Use strcpy to initialize tmp.
10057         (getftp): Do not use multiline assert.
10058
10059         * http.c (hparsestatline): Use mjr and mnr instead of major and
10060         minor, which don't compile on Ultrix.
10061         (http_loop): Use strcpy() to initialize tmp.
10062
10063         * all: Geturl -> Fetch
10064
10065 1996-10-17  Hrvoje Niksic  <hniksic@srce.hr>
10066
10067         * recur.c (parse_robots): Fixed an off-by-one bug when looking for
10068         ':'.
10069
10070         * html.c (htmlfindurl): Fixed several possible off-by-one bugs by
10071         moving `bufsize &&' to the beginning of each check in for-loops.
10072
10073         * recur.c (parse_robots): Close fp on exit.
10074
10075         * url.c (mymkdir): Check for each directory before creating.
10076
10077 1996-10-16  Hrvoje Niksic  <hniksic@srce.hr>
10078
10079         * version.c: Changed version to 1.4b28.
10080
10081 1996-10-16  Hrvoje Niksic  <hniksic@srce.hr>
10082
10083         * version.c: "Released" 1.4b27.
10084
10085         * init.c (parse_line): Use isspace.
10086         (parse_line): Free *com on all errors.
10087
10088         * ftp.c (ftp_loop): Change FTPOK to RETROK before exiting.
10089         (delelement): Use next instead of f->next and prev instead of
10090         f->prev.
10091         (delelement): Free the members of the deleted element.
10092
10093         * http.c (http_loop): Do not return RETROK on code != 20x.
10094
10095         * init.c (cleanup): Free opt.user_header.
10096         (cleanup): Free opt.domains.
10097
10098         * url.c (freelists): Moved to cleanup().
10099
10100         * http.c (hparsestatline): Docfix.
10101
10102         * main.c (main): Return with error status on unsuccesful
10103         retrieval.
10104
10105         * init.c (setval): Do not remove listing when mirroring.
10106
10107         * url.c (url_filename): Use opt.fileprefix.
10108
10109         * ftp.c (ftp_get_listing): Use url_filename to get filename for
10110         .listing.
10111
10112         * main.c (main): New option: -rn.
10113
10114 1996-10-15  Hrvoje Niksic  <hniksic@srce.hr>
10115
10116         * Makefile.in (RM): Added RM = rm -f.
10117
10118         * host.c (clean_hosts): New function.
10119         (free_hlist): Just free the list, no reset.
10120
10121         * version.c: Changed version to 1.4b27.
10122
10123 1996-10-13  Hrvoje Niksic  <hniksic@srce.hr>
10124
10125         * version.c: "Released" 1.4b26.
10126
10127         * retr.c (retrieve_from_file): If call get_urls_html with
10128         opt.spider to make it silent in spider mode.
10129
10130         * url.c (str_url): Use CLEANDUP instead of URL_CLEANSE.
10131
10132         * url.h (CLEANDUP): New macro.
10133
10134         * http.c (gethttp): Fixed a bug that freed location only when it
10135         was NULL.
10136
10137         * retr.c (retrieve_url): Free url if it will not be stored,
10138         i.e. newloc is NULL.
10139
10140         * html.c (htmlfindurl): Handle exiting from quotes correctly; the
10141         old version would bug out on <a href="x#a"href="y">.
10142
10143         * html.h (state_t): New member in_quote.
10144
10145         * html.c (htmlfindurl): Free s->attr at the beginning of
10146         attr-loop.
10147
10148         * recur.c (recursive_retrieve): Recognize RCLEANUP.
10149         (tried_robots): Make hosts a global variable.
10150         (recursive_retrieve): Free constr after URL host optimization.
10151         (tried_robots): Free urlinfo before exiting.
10152
10153         * utils.c (free_slist): New function.
10154
10155         * recur.c (recursive_retrieve): Use flags to add cleanup
10156         possibility.
10157
10158         * main.c (main): Free filename after recursive_retrieve.
10159
10160         * http.c (gethttp): Store successful responses too.
10161
10162 1996-10-12  Hrvoje Niksic  <hniksic@srce.hr>
10163
10164         * all: Constified the whole source.  This required some minor
10165         changes in many functions in url.c, possibly introducing bugs -- I
10166         hope not.
10167
10168         * ftp-basic.c: Removed last_respline.
10169
10170         * http.c (gethttp): Free type.
10171
10172         * host.c (same_host): Free real1 and real2.
10173
10174         * main.c (main): New option --spider.
10175
10176         * retr.c (get_contents): Don't reset errno.
10177
10178         * main.c (main): Sorted the options.
10179
10180         * connect.c (iread): Set errno to ETIMEDOUT only if it was left
10181         uninitialized by select().
10182
10183         * http.c (http_loop): Print the time when the connection is
10184         closed.
10185         (gethttp): Debug-print the HTTP request.
10186
10187 1996-10-11  Hrvoje Niksic  <hniksic@srce.hr>
10188
10189         * connect.c (iread): Do not try reading after timeout.
10190
10191         * main.c (main): Would bug out on -T.
10192
10193         * connect.c (select_fd): Do not use exceptfds.
10194         (iread): Set ETIMEDOUT on select_fd <= 0.
10195
10196         * version.c: Changed version to 1.4b26.
10197
10198 1996-10-10  Hrvoje Niksic  <hniksic@srce.hr>
10199
10200         * version.c: "Released" 1.4b25.
10201
10202         * ftp-unix.c (ftp_parse_unix_ls): Ignore lines without file name
10203         or link name.
10204
10205         * http.c (gethttp): Add errcode to struct hstat.
10206         (http_loop): Use it.
10207
10208         * url.c (no_proxy_match): Simplify using char** for no_proxy.
10209
10210         * options.h (struct options): Make opt.no_proxy a vector.
10211
10212         * utils.c (sepstring): Use !*s instead of !strlen(s).
10213
10214         * init.c (setval): Set opt.maxreclevel to 0 on --mirror.
10215         (getperms): Use ISODIGIT instead of isdigit.
10216
10217         * ftp.c (getftp): Print time.
10218
10219         * main.c (main): Use legible output of downloaded quantity.
10220
10221         * ftp.c (getftp): Use elapsed_time().
10222         (ftp_loop_internal): Use rate().
10223
10224         * http.c (http_loop): Add download ratio output; Use rate().
10225
10226         * utils.c (rate): New function.
10227
10228 1996-10-09  Hrvoje Niksic  <hniksic@srce.hr>
10229
10230         * http.c (http_loop): Use timer.
10231
10232         * ftp.c: Split to ftp-basic.c and ftp.c
10233
10234         * utils.c (reset_timer): New function.
10235         (elapsed_time): New function.
10236
10237         * retr.c (show_progress): Make bytes_in_line and offs long; should
10238         work on 16-bit machines.
10239
10240 1996-10-08  Hrvoje Niksic  <hniksic@srce.hr>
10241
10242         * url.c (in_acclist): New argument backward.
10243
10244         * ftp.c (ftp_retrieve_glob): Use acceptable() to determine whether
10245         a file should be retrieved according to suffix.
10246         (ftp_get_listing): Check the return value of unlink; Do not call
10247         ftp_retrieve_dirs if depth reached maxreclevel.
10248         (ftp_retrieve_dirs): Check whether the directory is in
10249         exclude-list.
10250
10251         * main.c (main): Print the version number at the beginning of
10252         DEBUG output.
10253         (main): Use strrchr when creating exec_name.
10254
10255         * ftp.c (ftp_retrieve_glob): Do not close control connection.
10256
10257         * version.c: Changed version to 1.4b25.
10258
10259 1996-10-07  Hrvoje Niksic  <hniksic@srce.hr>
10260
10261         * version.c: "Released" 1.4b24.
10262
10263         * Makefile.in: Rewrite.
10264
10265         * ftp.c (ftp_loop_internal): Likewise.
10266
10267         * retr.c (time_str): Check for failed time().
10268
10269         * html.c (htmlfindurl): Recognize <fig src> and <overlay src> from
10270         HTML3.0.
10271
10272         * retr.c (time_str): Return time_t *.
10273
10274         * connect.c (bindport): Close msock on unsuccesful bind.
10275         (bindport): The same for getsockname and listen.
10276
10277         * retr.c (retrieve_url): Allow any number of retries on
10278         proxy.
10279
10280         * http.c (gethttp): Do not treat errno == 0 as timeout.
10281         (http_loop): Likewise.
10282         (http_loop): Cosmetic changes.
10283
10284         * connect.c (iread): Set errno to ETIMEDOUT in case of timeout.
10285
10286         * retr.c (get_contents): Reset errno.
10287
10288         * ftp.c (getftp): Minor fixes.
10289
10290 1996-10-06  Hrvoje Niksic  <hniksic@srce.hr>
10291
10292         * http.c: Do not use backups.
10293
10294         * geturl.1 (WARNING): Warn that man-page could be obsolete.
10295
10296         * getopt.c (getopt_long): Moved to getopt.c
10297
10298         * geturl.texi: Enhanced.
10299
10300         * main.c (main): Use it.
10301
10302         * recur.c (convert_all_links): New function.
10303
10304         * utils.c (add_slist): New argument flags.
10305
10306         * recur.c (recursive_retrieve): Update a list of downloaded URLs.
10307         (parse_robots): Do not chuck out empty value fields.
10308         (parse_robots): Make yourself welcome on empty Disallow.
10309
10310         * version.c: Changed version to 1.4b24.
10311
10312 1996-10-06  Hrvoje Niksic  <hniksic@srce.hr>
10313
10314         * version.c: "Released" 1.4b23.
10315
10316         * ftp.c (ftp_loop_internal): Get the time after getftp.
10317
10318         * Makefile.in (install.info): New target.
10319         (install): Use it.
10320
10321         * http.c (http_loop): Fix output when doing -O.
10322
10323 1996-10-05  Hrvoje Niksic  <hniksic@srce.hr>
10324
10325         * geturl.texi: New file.
10326
10327         * main.c (main): Do not print the warnings and download summary if
10328         opt.quiet is set.
10329
10330         * version.c: Changed version to 1.4b23.
10331
10332 1996-10-05  Hrvoje Niksic  <hniksic@srce.hr>
10333
10334         * "Released" 1.4b22.
10335
10336         * atotm.c (atotm): Use True and False instead of TRUE and FALSE,
10337         to avoid redefinition warnings.
10338
10339         * host.c (store_hostaddress): Use memcpy() to copy the address
10340         returned by inet_addr.
10341
10342         * version.c: Changed version to 1.4b22.
10343
10344 1996-10-04  Hrvoje Niksic  <hniksic@srce.hr>
10345
10346         * version.c: "Released" 1.4b21.
10347
10348         * ftp-unix.c (ftp_parse_ls): Renamed to ftp_parse_unix_ls.
10349
10350         * ftp.c (ftp_port): Use conaddr.
10351         (getftp): Print the file length.
10352         (ftp_retrieve_list): Check the stamps of plain files only.
10353
10354         * connect.c (closeport): Do not call shutdown().
10355         (conaddr): New function.
10356
10357         * html.c (ftp_index): Made it dfp-aware.
10358
10359         * init.c (cleanup): New name of freemem. Close opt.dfp.
10360
10361         * ftp.c (getftp): Use opt.dfp if it is set.
10362
10363         * ftp-unix.c (ftp_parse_ls): Recognize time in h:mm format.
10364
10365         * ftp.c (ftp_retrieve_dirs): Fixed a bug that caused incorrect
10366         CWDs to be sent with recursive FTP retrievals.
10367
10368 1996-10-03  Hrvoje Niksic  <hniksic@srce.hr>
10369
10370         * recur.c (parse_robots): Made it more compliant with "official"
10371         specifications.
10372
10373         * http.c: New function.
10374
10375         * ftp-unix.c (ftp_parse_ls): Added better debug output.
10376
10377         * ftp.c (getftp): Print out the LIST in case of
10378         opt.print_server_response.
10379
10380         * version.c: Changed version to 1.4b21.
10381
10382 1996-10-01  Hrvoje Niksic  <hniksic@srce.hr>
10383
10384         * version.c: "Released" 1.4b20.
10385
10386         * README: Update.
10387
10388         * http.c (gethttp): Preset lengths of various headers instead of
10389         calculating them dynamically.
10390         (gethttp): Check for 206 partial contents.
10391
10392 1996-09-30  Hrvoje Niksic  <hniksic@srce.hr>
10393
10394         * configure.in: Set SYSTEM_GETURLRC to $libdir/geturlrc
10395
10396         * http.c (gethttp): Send the port number in the Host: header.
10397
10398 1996-09-29  Hrvoje Niksic  <hniksic@srce.hr>
10399
10400         * http.c (gethttp): Send host: header.
10401         (gethttp): Add the possibility of user-defined headers.
10402         (gethttp): Move decision about pragma: no-cache to http_loop,
10403         where it belongs.
10404         (gethttp): Pass a struct instead of enormous argument list.
10405         (http_loop): Use a new, fancier display format.
10406         (ftp_loop): Likewise.
10407
10408         * main.c: (hangup): Turn off buffering of the new log file.
10409
10410         * install-sh: Likewise.
10411
10412         * config.sub: Replace with the one in autoconf-2.10
10413
10414         * geturl.1: Update.
10415
10416         * init.c: New options httpuser and httppasswd.
10417
10418         * http.c: (base64_encode_line): New function.
10419         (gethttp): Send authentication.
10420
10421         * connect.c (make_connection): Use store_hostaddress.
10422
10423 1996-09-28  Hrvoje Niksic  <hniksic@srce.hr>
10424
10425         * host.c (store_hostaddress): New function.
10426
10427         * NEWS: Update.
10428
10429         * http.c (hgetrange): New function.
10430         (gethttp): Use ranges.
10431
10432         * utils.c (numdigit): Accept long instead of int.
10433
10434         * http.c (http_loop): Add restart capabilities.
10435
10436         * ftp.c (ftp_retrieve_glob): Fixed a bug that could cause matchres
10437         being used uninitialized.
10438         (ftp_retrieve_list): Similar fix.
10439
10440         * host.c (add_hlist): Fixed a bug that could cause cmp being used
10441         uninitialized.
10442
10443         * url.c (construct_relative): New function.
10444
10445         * recur.c (recursive_retrieve): Use it.
10446
10447         * retr.c (convert_links): New function.
10448
10449 1996-09-27  Hrvoje Niksic  <hniksic@srce.hr>
10450
10451         * url.c (free_urlpos): New function.
10452
10453         * recur.c (recursive_retrieve): Adapt.
10454
10455         * url.c (get_urls_html): Return a linked list instead of a vector.
10456
10457         * url.c (get_urls_file): Return a linked list instead of a vector.
10458
10459         * geturl.1: Update.
10460
10461         * http.c (gethttp): Implement it.
10462
10463         * init.c (setval): New option: SAVEHEADERS
10464
10465         * ftp.c (ftp_loop_internal): Do not set restval if listing is to
10466         be retrieved. Lack of this test caused bugs when the connection
10467         was lost during listing.
10468
10469         * retr.c (retrieve_url): Fixed a bug that caused
10470         coredumps. *newloc is now reset by default.
10471         (retrieve_url): Lift the twenty-tries limit on proxies.
10472
10473         * version.c: Changed version to 1.4b20.
10474
10475 1996-09-20  Hrvoje Niksic  <hniksic@srce.hr>
10476
10477         * version.c: "Released" 1.4b19.
10478
10479 1996-09-19  Hrvoje Niksic  <hniksic@srce.hr>
10480
10481         * ftp.c (ftp_loop_internal): Renamed from ftp_1fl_loop.
10482         (getftp): Changed prototype to accept ccon *.
10483
10484 1996-09-17  Hrvoje Niksic  <hniksic@srce.hr>
10485
10486         * ftp.c (ftp_retrieve_list): Fixed a bug that caused setting
10487         incorrect values to files pointed to by symbolic links.
10488         (ftp_1fl_loop): Do not count listings among the downloaded URL-s.
10489
10490 1996-09-16  Hrvoje Niksic  <hniksic@srce.hr>
10491
10492         * url.c (mkstruct): Do not prepend "./" in front of a pathname.
10493
10494         * main.c (main): New option: --user-agent.
10495
10496         * geturl.1: Ditto.
10497
10498         * init.h: Ditto.
10499
10500         * init.c (setval): Ditto.
10501
10502         * main.c (main): Rename "server-headers" to "server-response".
10503
10504         * ftp-unix.c (ftp_parse_ls): Check for asterisks at the end of
10505         executables in 'ls -F' listings.
10506
10507 1996-09-15  Hrvoje Niksic  <hniksic@srce.hr>
10508
10509         * url.c (parseurl): Remove realloc() and sprintf().
10510         (str_url): Get rid of sprintf().
10511
10512         * recur.c (recursive_retrieve): Enable FTP recursion through proxy
10513         servers.
10514
10515         * url.h (URL_CLEANSE): Made it else-resistant.
10516         (USE_PROXY): New macro.
10517
10518 1996-09-14  Hrvoje Niksic  <hniksic@srce.hr>
10519
10520         * NEWS: Update.
10521
10522         * version.c: Changed version to 1.4b19.
10523
10524 1996-09-14  Hrvoje Niksic  <hniksic@srce.hr>
10525
10526         * version.c: "Released" 1.4b18.
10527
10528         * url.c: Made it reallocate space exponentially.
10529
10530 1996-09-14  Drazen Kacar  <dave@fly.cc.fer.hr>
10531
10532         * html.c (htmlfindurl): Added <frame src> and <iframe src> among
10533         the list of stuff to fetch.
10534
10535 1996-09-13  Hrvoje Niksic  <hniksic@srce.hr>
10536
10537         * url.c (get_urls_html): Fixed a bug that caused SIGSEGV's with
10538         -Fi.
10539
10540         * html.c (htmlfindurl): Rewrite.
10541
10542         * http.c (gethttp): Use opt.proxy_cache.
10543
10544         * main.c (main): Added --cache option.
10545
10546         * ftp.c (ftp_response): Print server response if opt.print_server
10547         response is set.
10548         (getftp): Print newlines after each request if the server response
10549         is to be printed.
10550         (ftp_response): Copy the last response line to last_respline.
10551
10552         * http.c (gethttp): Add Pragma: nocache for retried
10553         proxy-retrievals.
10554
10555         * ftp.c (getftp): Use it.
10556
10557         * retr.c (buf_discard): New function.
10558
10559         * ftp.c (ftp_response): Use buf_readchar().
10560         (getftp): Flush the control connection buffer before calling
10561         get_contents().
10562
10563         * retr.c (buf_readchar): New function.
10564         (buf_flush): New function.
10565         (get_contents): Use buf_readchar() instead of read(x, x, 1).
10566         (get_contents): Use buf_flush.
10567
10568 1996-09-12  Hrvoje Niksic  <hniksic@srce.hr>
10569
10570         * ftp.c: Incorporate changes to ftp_response.
10571
10572         * ftp.c (ftp_response): Allocate the server response dynamically,
10573         as in read_whole_line and fetch_next_header.
10574
10575         * utils.c (read_whole_line): Fixed a bug that prevented reading
10576         the last line if it is not \n-terminated. Also fixed a possible
10577         memory overflow.
10578
10579         * http.c (fetch_next_header): Return malloc-ed string as large as
10580         needed.
10581         (gethttp): Use new fetch_next_header.
10582
10583 1996-09-12  Hrvoje Niksic  <hniksic@srce.hr>
10584
10585         * http.c (hgetlen): Compute the header length the first time only.
10586         (hgettype): Ditto.
10587         (hgetlocation): Ditto.
10588         (hgetmodified): Ditto.
10589
10590 1996-09-11  Hrvoje Niksic  <hniksic@srce.hr>
10591
10592         * sample.geturlrc: Update.
10593
10594 1996-09-10  Hrvoje Niksic  <hniksic@srce.hr>
10595
10596         * http.c (http_loop): Ditto.
10597
10598         * ftp.c (getftp): Open the output file as binary.
10599
10600         * version.c: Changed version to 1.4b18.
10601
10602 1996-09-10  Hrvoje Niksic  <hniksic@srce.hr>
10603
10604         * version.c: "Released" 1.4b17.
10605
10606         * ftp-unix.c (ftp_parse_ls): If unable to open file, return NULL
10607         instead of failed assertion.
10608
10609 1996-09-09  Hrvoje Niksic  <hniksic@srce.hr>
10610
10611         * ftp.c (ftp_get_listing): Add a numbered suffix to LIST_FILENAME
10612         if a file of that name already exists.
10613
10614 1996-09-05  Hrvoje Niksic  <hniksic@srce.hr>
10615
10616         * ftp.c (ftp_1fl_loop): Handler FTPPORTERR and FOPENERR correctly.
10617
10618         * config.h.in: Define gethostbyname as Rgethostbyname when using
10619         Socks.
10620
10621         * configure.in: Check for -lresolv if using Socks.
10622
10623         * version.c: Changed version to 1.4b17.
10624
10625 1996-07-15  Hrvoje Niksic  <hniksic@srce.hr>
10626
10627         * version.c: "Released" 1.4b16.
10628
10629         * http.c (gethttp): More intelligent check for first line of HTTP
10630         response.
10631         (gethttp): Would bug out on time-stamping.
10632
10633         * version.c: Changed version to 1.4b16.
10634
10635 1996-07-11  Hrvoje Niksic  <hniksic@srce.hr>
10636
10637         * version.c: Released 1.4b15.
10638
10639         * http.c (http_loop): Print \n after the loop entry, not before.
10640
10641         * url.c (url_filename): Use ISDOT.
10642
10643         * url.h (ISDOT): New macro.
10644
10645         * recur.c (recursive_retrieve): Change only opt.recursive for
10646         following FTP.
10647
10648 1996-07-11  Antonio Rosella <antonio.rosella@agip.it>
10649
10650         * socks/geturl.cgi: Fixed version No.
10651
10652         * socks/download-netscape.html: Ditto.
10653
10654         * socks/download.html: Changed socks.html to download.html.
10655
10656 1996-07-11  Hrvoje Niksic  <hniksic@srce.hr>
10657
10658         * url.c (url_filename): Check for opt.dirstruct instead for
10659         opt.recursive && opt.dirstruct.
10660
10661         * init.c (defaults): Ditto.
10662         (defaults): Reset dirstruct by default.
10663         (setval): Set opt.dirstruct whenever setting recursive.
10664
10665         * init.h: Removed FORCEDIRHIER.
10666
10667         * INSTALL: Added -L to socks-description.
10668
10669         * version.c: Changed version to 1.4b15.
10670
10671 1996-07-10  Hrvoje Niksic  <hniksic@srce.hr>
10672
10673         * version.c: "Released" 1.4b14.
10674
10675         * geturl.1: Update AUTHOR to include Rosella as contributor.
10676
10677         * NEWS: Update.
10678
10679         * socks/geturl.cgi: Simplified command creation, nuked <blink>.
10680
10681         * socks/geturl.cgi: Wrap nutscape extensions within if $netscape.
10682         (cal_time): Fix == to eq.
10683
10684         * socks/geturl.cgi: GPL-ized with permission of A. Rosella.
10685
10686         * geturl.1 (hostname): Moved URL CONVENTIONS to the beginning.
10687
10688         * Makefile.in: Use @VERSION@.
10689
10690         * configure.in: Check version from version.c.
10691
10692         * socks/geturl.cgi: Changed /pub/bin/perl to /usr/bin/perl.
10693
10694         * socks/download.html: Created from download-netscape.html, made
10695         HTML-2.0 compliant.
10696
10697         * recur.c (recursive_retrieve): Set opt.force_dir_hier when
10698         following FTP links from recursions.
10699
10700 1996-07-09  Hrvoje Niksic  <hniksic@srce.hr>
10701
10702         * url.c (mymkdir): Fixed a bug that prevented mymkdir() to create
10703         absolute directories correctly.
10704
10705         * version.c: Changed version to 1.4b14.
10706
10707 1996-07-09  Hrvoje Niksic  <hniksic@srce.hr>
10708
10709         * version.c: "Released" 1.4b13.
10710
10711         * url.c (make_backup): New function.
10712
10713         * http.c (http_loop): Make a backup copy of the local file (using
10714         rename(2)) before opening it.
10715
10716         * main.c (main): Added --backups.
10717
10718         * host.c (ftp_getaddress): Bail out on failed mycuserid().
10719         (ftp_getaddress): Check for leading dot on MY_DOMAIN.
10720         (ftp_getaddress): Check for empty, null or (null) domain.
10721
10722         * url.c (get_urls_html): If this_url is NULL, the base must have a
10723         protocol.
10724         (parseurl): Use has_proto.
10725
10726         * retr.c (retrieve_url): Warn when proxy is used with more than 20
10727         retries.
10728
10729         * url.c (mkstruct): Create the directory (calling mymkdir()) only
10730         if it is not already there.
10731         (has_proto): New function.
10732         (get_urls_html): Eliminate the remaining call to findurl -- use
10733         has_proto.
10734
10735         * geturl.1: Ditto.
10736
10737         * main.c: Change -X to -x.
10738
10739         * url.c (url_filename): Simplify creation of filename if
10740         prefix_files is set.
10741         (url_filename): Simplify everything. And I do mean *everything*.
10742         (mkstruct): Add dir_prefix before hostname.
10743         (path_simplify): Fixed a bug that caused writing outside the path
10744         string in case of "." and ".." path strings.
10745
10746 1996-07-06  Hrvoje Niksic  <hniksic@srce.hr>
10747
10748         * init.c: Added --mirror.
10749
10750         * main.c (main): Added -X to force saving of directory hierarchy.
10751
10752         * ftp.c (ftp_retrieve_list): Added recursion depth counter.
10753         (ftp_retrieve_list): Check whether quota is exceeded.
10754
10755         * url.c (get_urls_html): Skip leading blanks for absolute URIs.
10756
10757         * http.c (gethttp): Use referer if present.
10758
10759         * recur.c (recursive_retrieve): Set u->referer before calling
10760         retrieve_url.
10761
10762         * url.c (newurl): Use memset to nullify the struct members.
10763         (freeurl): Free the referer field too.
10764
10765         * url.h: Added referer to urlinfo.
10766
10767         * geturl.1: Updated the manual to document some of the new features.
10768
10769         * utils.c (numdigit): Moved from url.c.
10770
10771         * README: Rewritten.
10772
10773         * config.h.in: Add the support for socks.
10774
10775         * configure.in: Add the support for socks.
10776
10777         * url.c (url_filename): If the dir_prefix is ".", work with just
10778         the file name.
10779         (url_filename): Do not look for .n extensions if timestamping if
10780         turned on.
10781
10782         * retr.c (show_progress): Skip the over-abundant restval data, and
10783         print the rest of it with ',' instead of '.'.
10784
10785 1996-07-05  Hrvoje Niksic  <hniksic@srce.hr>
10786
10787         * retr.c (show_progress): Changed second arg. to long (as it
10788         should be).
10789         (show_progress): Moved to retr.c.
10790         (get_contents): Moved to retr.c.
10791
10792         * version.c: Change version to 1.4b13.
10793
10794 1996-07-05  Hrvoje Lacko <hlacko@fly.cc.fer.hr>
10795
10796         * url.c (in_acclist): Would return after the first suffix.
10797
10798 1996-07-04  Hrvoje Niksic  <hniksic@srce.hr>
10799
10800         * version.c: "Released" 1.4b12.
10801
10802         * url.c (path_simplify): More kludgifications.
10803         (get_urls_html): Use new parameters for htmlfindurl.
10804
10805         * html.c: Removed memorizing "parser states", since the new
10806         organization does not require them.
10807
10808         * init.c (run_geturlrc): Use read_whole_line.
10809
10810         * ftp-unix.c (ftp_parse_ls): Use read_whole_line.
10811
10812         * recur.c (parse_robots): Use read_whole_line.
10813
10814         * utils.c (read_whole_line): New function.
10815
10816         * recur.c (tried_robots): Use add_slist/in_slist, *much* cleaner.
10817
10818         * host.c (ngethostbyname): Call inet_addr just once. Yet to be
10819         tested on OSF and Ultrix.
10820         (add_hlist): New function.
10821         (free_hlist): New function.
10822         (search_host): New function.
10823         (search_address): New function.
10824         (realhost): Use search_host, search_address and add_hlist.
10825         (same_host): Replaced realloc() with strdupdelim(), made
10826         case-insensitive, fixed a memory leak.
10827
10828         * html.c (ftp_index): Fixed tm_min and tm_sec to be tm_hour and
10829         tm_min, like intended.
10830
10831         * version.c: Change user agent information to
10832         Geturl/version.
10833
10834 1996-07-03  Hrvoje Niksic  <hniksic@srce.hr>
10835
10836         * utils.c: Renamed nmalloc.c to utils.c, .h likewise.
10837
10838         * url.c (acceptable): Always accept directories.
10839
10840         * ftp-unix.c (ftp_parse_ls): Support brain-damaged "ls -F"-loving
10841         servers by stripping trailing @ from symlinks and trailing / from
10842         directories.
10843
10844         * ftp.c (ftp_loop): Debugged the "enhanced" heuristics. :-)
10845
10846         * url.c (skip_url): Use toupper instead of UCASE.
10847
10848         * host.c (sufmatch): Made it case-insensitive.
10849
10850         * url.c (match_backwards_or_pattern): Fixed i == -1 to j == -1.
10851         (match_backwards): New function, instead of
10852         match_backwards_or_pattern.
10853
10854         * recur.c (recursive_retrieve): Increased performance by
10855         introducing inl, which reduces number of calls to in_slist to only
10856         one.
10857
10858         * ftp.c (ftp_loop): Enhanced the heuristics that decides which
10859         routine to use.
10860
10861         * main.c (printhelp): Removed the warranty stuff.
10862
10863 1996-07-02  Hrvoje Niksic  <hniksic@srce.hr>
10864
10865         * url.c (add_slist): Simplify.
10866         (match_backwards_or_pattern): New function.
10867         (in_acclist): Use match_backwards_or_pattern.
10868         (matches): Remove.
10869
10870 1996-06-30  Hrvoje Niksic  <hniksic@srce.hr>
10871
10872         * ftp.c (ftp_loop): Call ftp_index on empty file names, if not
10873         recursive.
10874
10875         * html.c (ftp_index): Fixed to work. Beautified the output.
10876
10877         * ftp.c (ftp_retrieve_glob): Another argument to control whether
10878         globbing is to be used.
10879         (ftp_retrieve_list): Compare the time-stamps of local and remote
10880         files to determine whether to download.
10881
10882 1996-06-29  Hrvoje Niksic  <hniksic@srce.hr>
10883
10884         * ftp.c (rel_constr): New function.
10885
10886         * retr.c (retrieve_from_file): Check for text/html before
10887         retrieving recursively.
10888
10889         * main.c (main): Check whether the file is HTML before going into
10890         recursive HTML retrieving.
10891
10892         * ftp.c (ftp_retrieve_list): Manage directories.
10893         (ftp_retrieve_glob): Pass all the file-types to ftp_retrieve_list.
10894         (ftp_1fl_loop): Fixed a bug that caused con->com to be incorrectly
10895         initialized, causing bugchecks in getftp to fail.
10896
10897         * configure.in: Check for symlink.
10898
10899         * ftp.c (ftp_retrieve_list): Added support for symlinks.
10900
10901         * version.c: "Released" 1.4b10.
10902
10903         * atotm.c (atotm): Redeclared as time_t.
10904
10905         * init.c: New variable "timestamping".
10906
10907         * main.c (main): New option 'N'.
10908
10909         * http.c (hgetlocation): Case-insensitive match.
10910         (hgetmodified): New function.
10911         (http_loop): Implement time-stamping.
10912
10913 1996-06-28  Hrvoje Niksic  <hniksic@srce.hr>
10914
10915         * version.c: Changed version to 1.4b10
10916
10917         * atotm.c: New file, from phttpd.
10918
10919         * options.h (struct options): New parameter timestamping.
10920
10921         * version.c: 1.4b9 "released".
10922
10923         * recur.c (recursive_retrieve): Used linked list (ulist) for
10924         faster storing of URLs.
10925
10926         * url.c (get_urls_html): Removed the old kludge with comparing the
10927         outputs of htmlfindurl and findurl.
10928         (get_urls_html): Added better protocol support here.
10929         (create_hash): Removed, as well as add_hash and in_hash.
10930         (addslist): New function.
10931         (in_slist): ditto
10932
10933         * version.c: Released 1.4b8, changed version to b9.
10934
10935 1996-06-27  Hrvoje Niksic  <hniksic@srce.hr>
10936
10937         * ftp.c (freefileinfo): New function.
10938         (delelement): New function.
10939
10940         * everywhere: GPL!
10941
10942         * ftp.c (ftp_loop): Use ccon.
10943         (ftp_retrieve_glob): Likewise.
10944
10945         * ftp.h: Define ccon, to define status of control connection.
10946
10947         * ftp.c (ftp_get_listing): New function.
10948         (ftp_retrieve_more): New function.
10949         (ftp_retrieve_glob): New function.
10950
10951 1996-06-25  Hrvoje Niksic  <hniksic@srce.hr>
10952
10953         * configure.in: Removed the search for cuserid().
10954
10955         * init.c (getmode): Renamed to getperms.
10956
10957 1996-06-24  Hrvoje Niksic  <hniksic@srce.hr>
10958
10959         * version.c: New version.
10960
10961         * main.c (hangup): New function, that handles hangup. Hangup
10962         signal now causes geturl to stop writing on stdout, and to write
10963         to a log file.
10964
10965         * ftp.c (getftp): "Released" 1.4b7.
10966
10967         * html.c (htmlfindurl): Ignore everything inside <head>...</head>.
10968         (ftp_index): Use fileinfo/urlinfo.
10969
10970         * ftp-unix.c (ftp_parse_ls): New function.
10971         (symperms): New function.
10972
10973         * ftp.c (ftp_1fl_loop): New function, to handle 1-file loops.
10974
10975         * retr.c (retrieve_url): Added FTP support.
10976
10977 1996-06-23  Hrvoje Niksic  <hniksic@srce.hr>
10978
10979         * geturl.h: Removed NOTFTP2HTML enum.
10980         Added DO_LOGIN, DO_CWD and DO_LIST. LIST_ONLY is obsolete.
10981
10982         * ftp.c (getftp): Resynched with urlinfo.
10983         (getftp): Removed HMTL-ization of index.html from getftp.
10984
10985         * version.c: 1.4b6 "released".
10986
10987         * options.h (options): New struct, to keep options in.
10988
10989         * http.c (http_loop,gethttp): Synched with proxy.
10990
10991         * retr.c (retrieve_url): Implemented proxy retrieval.
10992
10993         * main.c (main): Use retrieve_from_file.
10994
10995 1996-06-22  Hrvoje Niksic  <hniksic@srce.hr>
10996
10997         * retr.c (retrieve_from_file): New function.
10998
10999         * url.c (parseurl): Modified to return URLOK if all OK. Protocol
11000         can be found in u->proto.
11001
11002         * ftp.c (ftp_response): Fixed to accept multi-line responses as
11003         per RFC 959.
11004
11005         * recr.c (recursive_retrieve): Take newloc from retrieve_url.
11006
11007         * url.c (mymkdir): Removed the file of the same name, if one
11008         exists.
11009         (isfile): New function.
11010         (mkstruct): Fixed the '/' glitches.
11011         (path_simplify): Hacked to treat something/.. correctly.
11012
11013 1996-06-21  Hrvoje Niksic  <hniksic@srce.hr>
11014
11015         * http.c (gethttp): Close the socket after error in headers.
11016         (http_loop): HEOF no longer a fatal header.
11017
11018         * loop.c (retrieve_url): When dt is NULL, do not modify it. This
11019         simplifies the syntax of calling retrieve_url.
11020
11021         * recr.c (recursive_retrieve): Modified to use get_urls_html.
11022
11023         * url.c (get_urls_file): New function.
11024         (get_urls_html): New function.
11025
11026         * recr.c (recursive_retrieve): Patched up to conform to the
11027         standards.
11028
11029         * http.c (gethttp): Synched with the rest...
11030         (gethttp): Treat only CONREFUSED specially, with connection
11031         errors.
11032
11033         * init.c,geturl.1,http.c (http_loop): Removed kill_error.
11034
11035 1996-06-20  Hrvoje Niksic  <hniksic@srce.hr>
11036
11037         * http.c (http_loop): New function.
11038
11039         * loop.c: Removed *lots* of stuff from retrieve_url.
11040
11041         * url.c (parseurl): Changed to work with urlinfo. Integrated
11042         username finding and path parsing.
11043         (newurl): New function.
11044         (freeurl): New function.
11045         (mkstruct): Removed the old bogosities, made it urlinfo-compliant.
11046         (url_filename): Likewise.
11047         (path_simplify): Accept relative paths too.
11048         (opt_url): Made urlinfo-compliant, removed bogosities.
11049         (path_simplify): Expanded to accept relative paths.
11050         (str_url): A replacement for hide_url
11051         (decode_string): Fixed a bug that caused malfunctioning when
11052         encountering an illegal %.. combination.
11053         (opt_url): Removed the argument. Dot-optimizations are now default.
11054
11055         * nmalloc.c (strdupdelim): New function.
11056
11057         * url.h: Added the urlinfo structure
11058
11059 1996-06-19  Hrvoje Niksic  <hniksic@srce.hr>
11060
11061         * url.c (hide_url): Thrown out the protocol assertion. Do not
11062         change the URL if the protocol if not recognized.
11063         (findurl): Put continue instead of break.
11064
11065 1996-06-18  Hrvoje Niksic  <hniksic@srce.hr>
11066
11067         * sample.geturlrc: Changed the defaults to be commented out and
11068         harmless (previous defaults caused pains if copied to
11069         ~/.geturlrc).
11070
11071         * http.c (gethttp): Print the HTTP request in debug mode.
11072
11073         * connect.c (iread): Added EINTR check loop to select-ing
11074         too. EINTR is now correctly handled with select().
11075
11076         * TODO: new file
11077
11078 1996-05-07  Hrvoje Niksic  <hniksic@srce.hr>
11079
11080         * host.c (same_host): Made the function a little bit more
11081         intelligent regarding diversified URL syntaxes.
11082
11083         * url.c (skip_url): Spaces are now skipped after URL:
11084
11085         * Released 1.3.1 with the patch to prevent crashing when sending
11086         NULL to robot* functions and the patch to compile "out of the box"
11087         on AIX.
11088
11089         * recr.c (recursive_retrieve): Added checking whether this_url is
11090         NULL when calling the robot functions.
11091
11092         * ChangeLog: New file.