sjero.net Git - wget/blob - src/ChangeLog

   1 2003-09-15  Hrvoje Niksic  <hniksic@xemacs.org>
   2
   3         * url.c (strpbrk_or_eos): Implement as a macro under Gcc.
   4
   5 2003-09-15  Hrvoje Niksic  <hniksic@xemacs.org>
   6
   7         * cookies.c (parse_set_cookies): Allow trailing space in
   8         set-cookies header.  Also, allow any amount of whitespace, not
   9         only one character.  Allow empty set-cookies header without
  10         spewing an error.
  11
  12 2003-09-14  Hrvoje Niksic  <hniksic@xemacs.org>
  13
  14         * url.c (append_uri_pathel): Use opt.restrict_file_names when
  15         calling file_unsafe_char.
  16
  17         * init.c: New command restrict_file_names.
  18
  19         * main.c (main): New option --restrict-file-names[=windows,unix].
  20
  21         * url.c (url_file_name): Renamed from url_filename.
  22         (url_file_name): Add directory and hostdir prefix here, not in
  23         mkstruct.
  24         (append_dir_structure): New function, does part of the work that
  25         used to be in mkstruct.  Iterates over path elements in u->path,
  26         calling append_uri_pathel on each one to append it to the file
  27         name.
  28         (append_uri_pathel): URL-unescape a path element and reencode it
  29         with a different set of rules, more appropriate for handling of
  30         files.
  31         (file_unsafe_char): New function, uses a lookup table to decide
  32         whether a character should be escaped for use in file name.
  33         (append_string): New utility function.
  34         (append_char): Ditto.
  35         (file_unsafe_char): New argument restrict_for_windows, decide
  36         whether Windows file names should be escaped in run-time.
  37
  38         * connect.c: Include <stdlib.h> to get prototype for abort().
  39
  40 2003-09-14  Hrvoje Niksic  <hniksic@xemacs.org>
  41
  42         * utils.c (wtimer_sys_set): Extracted the code that sets the
  43         current time here.
  44         (wtimer_reset): Call it.
  45         (wtimer_sys_diff): Extracted the code that calculates the
  46         difference between two system times here.
  47         (wtimer_elapsed): Call it.
  48         (wtimer_elapsed): Don't return a value smaller than the previous
  49         one, which could previously happen when system time is set back.
  50         Instead, reset start time to current time and note the elapsed
  51         offset for future calculations.  The returned times are now
  52         guaranteed to be monotonically nondecreasing.
  53
  54 2003-09-10  Hrvoje Niksic  <hniksic@xemacs.org>
  55
  56         * host.c (lookup_host): Print the result of the DNS lookup.
  57
  58 2003-09-10  Hrvoje Niksic  <hniksic@xemacs.org>
  59
  60         * init.c (cmd_boolean): Accept yes/no along with on/off.
  61         (cmd_lockable_boolean): Ditto.
  62
  63 2003-09-10  Hrvoje Niksic  <hniksic@xemacs.org>
  64
  65         * init.c: New command dns_cache.
  66
  67         * main.c (main): New option --dns-cache[=off].
  68
  69 2003-09-09  Hrvoje Niksic  <hniksic@xemacs.org>
  70
  71         * config.h.in: Initialize HAVE_GETADDRINFO and ENABLE_IPV6.
  72
  73         * all: Use #ifdef ENABLE_IPV6 instead of the older INET6.  Use
  74         HAVE_GETADDRINFO for getaddrinfo-related stuff.
  75
  76 2003-09-09  Hrvoje Niksic  <hniksic@xemacs.org>
  77
  78         * url.c (url_parse): Return an error if the URL contains a [...]
  79         IPv6 numeric address and we don't support IPv6.
  80
  81 2003-09-05  Hrvoje Niksic  <hniksic@xemacs.org>
  82
  83         * url.c (is_valid_ipv6_address): Modified to not require
  84         zero-terminated strings.
  85         (is_valid_ipv4_address): Ditto.
  86
  87 2003-09-05  Mauro Tortonesi <mauro@deepspace6.net>
  88
  89         src/url.c: added RFC 2732 compliance for URL parsing. The
  90         functions is_*_address valid are a modified version of
  91         glibc 2.3.2 inet_pton's code.
  92
  93 2003-09-03  Ahmon Dancy  <dancy@dancysoft.com>
  94
  95         * main.c init.c options.h: Added --retry-connrefused option so
  96         that Connection Refused failures are treated as non-fatal (when
  97         trying to retrieve from busy servers).
  98
  99         * wget.h: New CONNECT_ERROR macro for encapsulating this
 100         modification.
 101
 102         * ftp.c http.c : Use CONNECT_ERROR macro in places where
 103         ECONNREFUSED was checked.
 104
 105 2003-01-11  Ian Abbott  <abbotti@mev.co.uk>
 106
 107         * ftp.c (ftp_retrieve_glob): Reject insecure filenames as determined
 108         by calling new function has_insecure_name_p.  This is based on a
 109         patch by Red Hat.
 110
 111         * fnmatch.c (has_insecure_name_p): New function: returns non-zero
 112         if filename starts with `/' or contains `../' and is therefore
 113         considered insecure.
 114
 115         * fnmatch.h: Declare has_insecure_name_p().
 116
 117 2002-08-03  Hrvoje Niksic  <hniksic@xemacs.org>
 118
 119         * init.c (cmd_file): Allocate RESULT correctly.
 120
 121 2002-07-24  Hrvoje Niksic  <hniksic@xemacs.org>
 122
 123         * recur.c (retrieve_tree): Check whether downloaded_html_set is
 124         non-NULL before using it.
 125
 126 2002-05-27  Hrvoje Niksic  <hniksic@arsdigita.com>
 127
 128         * html-parse.c (NAME_CHAR_P): Allow almost any character here.
 129
 130 2002-05-24  Hrvoje Niksic  <hniksic@arsdigita.com>
 131
 132         * progress.c (bar_set_params): Fall back to dot progress if the
 133         terminal type is "emacs".
 134
 135 2002-05-20  Hrvoje Niksic  <hniksic@arsdigita.com>
 136
 137         * log.c: Don't #undef WGET_USE_STDARG.
 138
 139 2002-05-16  Hrvoje Niksic  <hniksic@arsdigita.com>
 140
 141         * hash.c (prime_size): Store the offset of the prime number in the
 142         prime table.  When searching, start with the given offset.
 143         (hash_table_new): Pass the pointer to ht->prime_offset to
 144         prime_size.
 145         (grow_hash_table): Ditto.
 146         (prime_size): Make 13 the first prime to make empty hash tables
 147         slightly smaller.
 148
 149 2002-05-16  Ian Abbott  <abbotti@mev.co.uk>
 150
 151         * recur.c (download_child_p): Minor optimization to avoid an
 152         unnecessary additional call to schemes_are_similar_p function.
 153
 154 2002-05-16  Ian Abbott  <abbotti@mev.co.uk>
 155
 156         * url.c (schemes_are_similar_p): New function to test enumerated
 157         scheme codes for similarity.
 158
 159         * url.h: Declare it.
 160
 161         * recur.c (download_child_p): Use it to compare schemes.  This
 162         also fixes a bug that allows hosts to be spanned (without the
 163         -H option) when the parent scheme is https and the child's is
 164         http or vice versa.
 165
 166 2002-05-14  Bill Richardson  <bill@riverstonenet.com>
 167
 168         * ftp.c (getftp): Don't ftruncate stdout.
 169
 170         * http.c (gethttp): Don't ftruncate stdout.
 171
 172 2002-05-09  Ian Abbott  <abbotti@mev.co.uk>
 173
 174         * cmpt.c (strptime_internal): Synched with glibc-2.1.3.
 175         (get_number): Ditto.
 176         (get_alt_number): Ditto.
 177         (__isleap): New function-like macro used by strptime.
 178         (day_of_the_week): New function used by strptime.
 179         (day_of_the_year): Ditto.
 180         (__mon_yday): Now shared by mktime and strptime implementations.
 181
 182 2002-05-08  Hrvoje Niksic  <hniksic@arsdigita.com>
 183
 184         * cookies.c (check_domain_match): Use match_tail in case
 185         insensitive mode.
 186
 187         * utils.c (match_tail): Allow the caller to specify case
 188         insensitive mode.
 189
 190         * cookies.c (store_cookie): When expiry_time is 0, print it as
 191         undefined, not indefinite.
 192
 193 2002-05-07  Ian Abbott  <abbotti@mev.co.uk>
 194
 195         * cookies.c (cookie_jar_process_set_cookie): Do not store
 196         discarded cookie.
 197
 198 2002-04-21  Hrvoje Niksic  <hniksic@arsdigita.com>
 199
 200         * cookies.c (check_domain_match): Allow cookies to be set for
 201         subdomains of unknown top-level domains under some circumstances.
 202
 203 2002-04-21  Thomas Lussnig  <thomas.lussnig@bewegungsmelder.de>
 204
 205         * gen_ssl.c:
 206         - allow checking of server cert
 207         - allow defining client cert type
 208         - allow limit of ssl protocol
 209         - check more return values
 210         - added debug message on break
 211
 212 2002-04-21  Hrvoje Niksic  <hniksic@arsdigita.com>
 213
 214         * recur.c (download_child_p): Revert order of items in check
 215         number 6 for clarity.
 216
 217 2002-04-20  Hrvoje Niksic  <hniksic@arsdigita.com>
 218
 219         * init.c: Ditto.
 220
 221         * main.c: Ditto.
 222
 223         * http.c: Use the new interface.
 224
 225         * cookies.c: Provide an OO-style "cookie jar" interface to enable
 226         separate cookie jars.
 227
 228         * http.c (http_atotm): Declare argument as const.
 229
 230 2002-04-20  Hrvoje Niksic  <hniksic@arsdigita.com>
 231
 232         * cookies.c (cookie_new): Default to PORT_ANY.
 233         (find_cookie_chain_exact): Only search by DOMAIN.
 234         (find_matching_cookie): Also check that PORT matches.
 235         (store_cookie): Only match the domain.
 236         (set_cookie_header_cb): When a cookie "fakes" a domain, assume it
 237         is valid for that host rather than discarding it completely.
 238         (find_matching_chains): Don't search by PORT.
 239         (matching_cookie): Also match PORT.
 240         (load_cookies): Set the port if specified, otherwise leave it as
 241         ANY.
 242         (save_cookies_mapper): Save the port if specified, otherwise leave
 243         it empty.
 244
 245 2002-04-19  Thomas Lussnig  <thomas.lussnig@bewegungsmelder.de>
 246
 247         * init.c: The option `egdfile' was not in sort order.
 248
 249 2002-04-16  Hrvoje Niksic  <hniksic@arsdigita.com>
 250
 251         * ftp.c (getftp): Treat directories that begin with <letter>: as
 252         absolute.
 253         (getftp): Strip trailing slashes from con->id before merging it
 254         with TARGET.
 255
 256 2002-04-16  Hrvoje Niksic  <hniksic@arsdigita.com>
 257
 258         * http.c (gethttp): If Content-Type is not given, assume
 259         text/html.
 260
 261 2002-04-15  Hrvoje Niksic  <hniksic@arsdigita.com>
 262
 263         * recur.c (download_child_p): Don't ignore rejection of HTML
 264         documents that are themselves leaves of recursion.
 265
 266 2002-04-15  Ian Abbott  <abbotti@mev.co.uk>
 267
 268         Makefile.in: Updated several dependencies for object files to take
 269         account of nested include files.
 270
 271 2002-04-15  Ian Abbott  <abbotti@mev.co.uk>
 272
 273         Makefile.in: The target `connect$o' (connect.o) now depends on
 274         `utils.h'
 275
 276 2002-04-15  Ian Abbott  <abbotti@mev.co.uk>
 277
 278         * host.c (SET_H_ERRNO): New function-like macro to set `h_errno'.
 279         (gethostbyname_with_timeout): Use it.
 280
 281         * utils.c: Don't define `SETJMP()', `run_with_timeout_env' or
 282         `abort_run_with_timeout()' when `USE_SIGNAL_TIMEOUT' is undefined.
 283
 284 2002-04-15  Hrvoje Niksic  <hniksic@arsdigita.com>
 285
 286         * host.c (getaddrinfo_with_timeout): New function.
 287         (gethostbyname_with_timeout): Ditto.
 288         (lookup_host): Use them.
 289
 290 2002-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
 291
 292         * utils.c (number_to_string): Handle the case when n < -INT_MAX.
 293
 294 2002-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
 295
 296         * init.c (comind): Use a marginally faster implementation of
 297         binary search.  To quote Martin Buchholz, "a nanosecond saved is a
 298         nanosecond earned."
 299
 300 2002-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
 301
 302         * main.c (print_help): Document `--post-data' and `--post-file'.
 303
 304 2002-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
 305
 306         * http.c (gethttp): Ditto.
 307
 308         * retr.c (retrieve_url): Initialize variables to appease the
 309         compiler.
 310
 311         * gen_sslfunc.c (ssl_iread): Don't handle EINTR when calling
 312         select_fd.
 313         (ssl_iwrite): Ditto.
 314
 315         * connect.c (select_fd): Rewrite to handle EINTR.  Set errno to
 316         ETIMEDOUT in case of timeout.
 317         (iread): No need to handle EINTR when calling select_fd.
 318         (iwrite): Ditto.
 319
 320 2002-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
 321
 322         * retr.c (retrieve_url): Make sure that POST is not honored for
 323         redirections.
 324
 325         * http.c (gethttp): Send the POST data when requested.
 326         (post_file): New function.
 327         (gethttp): Use it.
 328
 329         * main.c (main): Ditto.
 330
 331         * init.c: Add new options.
 332
 333         * options.h (struct options): New options post_data and
 334         post_file_name.
 335
 336 2002-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
 337
 338         * connect.c (connect_with_timeout): Firing SIGALRM can result in
 339         connect() exiting with EINTR.  Treat EINTR the same as ETIMEDOUT.
 340
 341 2002-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
 342
 343         * connect.c (connect_with_timeout): Use it.
 344
 345         * utils.c (run_with_timeout): New function.
 346
 347 2002-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
 348
 349         * url.c (getproxy): Accept a struct url argument.  This obviates
 350         the need for USE_PROXY_P.
 351
 352         * retr.c (retrieve_url): Allow proxy to be a non-FTP URL.
 353
 354         * ftp.c (getftp): Recognize FWTK-style proxy.
 355
 356 2002-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
 357
 358         * config.h.in: Only define _VA_LIST when compiled with gcc.
 359
 360 2002-04012  Ian Abbott  <abbotti@mev.co.uk>
 361
 362         * http.c (http_loop): Compensate for MS Windows two-second
 363         granularity of file modification time when comparing timestamps.
 364
 365         * ftp.c (ftp_retrieve_list): Ditto.
 366
 367 2002-04-12  Ian Abbott  <abbotti@mev.co.uk>
 368
 369         * utils.c (has_html_suffix_p): New function to test filename for
 370         common html extensions.
 371
 372         * utils.h: Declare it.
 373
 374         * http.c (http_loop): Use it instead of previous test.
 375
 376         * retr.c (retrieve_url): Ditto.
 377
 378         * recur.c (download_child_p): Ditto.
 379
 380 2002-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
 381
 382         * config.h.in: Define _VA_LIST on Solaris to prevent stdio.h from
 383         declaring va_list.
 384         From Kevin Rodgers <kevinr@ihs.com>.
 385
 386 2002-04-12  Ian Abbott  <abbotti@mev.co.uk>
 387
 388         * Makefile.in: Specify libtool mode explicitly when linking.
 389
 390 2002-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
 391
 392         * connect.c (connect_with_timeout): New function.
 393         (connect_to_one): Use it.
 394
 395         * config.h.in: Add stubs for HAVE_SIGSETJMP, HAVE_SIGBLOCK, and
 396         HAVE_SETJMP_H.
 397
 398 2002-04-11  Hrvoje Niksic  <hniksic@arsdigita.com>
 399
 400         * log.c: Set WGET_USE_STDARG if __STDC__ is defined and stdarg.h
 401         is present.
 402
 403 2002-04-11  Hrvoje Niksic  <hniksic@arsdigita.com>
 404
 405         * progress.c (bar_create): If INITIAL is larger than TOTAL, fix
 406         TOTAL.
 407         (bar_finish): Likewise.
 408
 409 2002-04-11  Hrvoje Niksic  <hniksic@arsdigita.com>
 410
 411         * html-url.c (tag_handle_form): New function.  Pick up form
 412         actions and mark them for conversion only.
 413
 414 2002-04-11  Hrvoje Niksic  <hniksic@arsdigita.com>
 415
 416         * progress.c (struct progress_implementation): Use PARAMS when
 417         declaring the parameters of *create, *update, *finish, and
 418         *set_params.
 419
 420         * netrc.c: Ditto.
 421
 422         * http.c: Reformat some function definitions so that ansi2knr can
 423         read them.
 424
 425         * hash.c (struct hash_table): Use the PARAMS macro around
 426         parameters in the declaration of hash_function and test_function.
 427         (prime_size): Spell 2580823717UL and 3355070839UL as (unsigned
 428         long)0x99d43ea5 and (unsigned long)0xc7fa5177 respectively, so
 429         that pre-ANSI compilers can read them.
 430         (find_mapping): Use PARAMS when declaring EQUALS.
 431         (hash_table_put): Ditto.
 432
 433         * ftp.h: Wrap the parameters of ftp_index declaration in PARAMS.
 434
 435         * cookies.c (cookie_new): Use (unsigned long)0 instead of 0UL,
 436         which was unsupported by pre-ANSI compilers.
 437
 438         From Nelson H. F. Beebe <beebe@math.utah.edu>, for the most part.
 439
 440 2002-04-11  Hrvoje Niksic  <hniksic@arsdigita.com>
 441
 442         * url.c (url_filename): Use compose_file_name regardless of
 443         whether opt.dirstruct is set.
 444         (mkstruct): Don't handle the query and the reencoding of DIR; that
 445         is done in compose_file_name.
 446
 447 2002-04-10  Hrvoje Niksic  <hniksic@arsdigita.com>
 448
 449         * wget.h: Ditto for extern char *exec_name.
 450
 451         * options.h: Don't guard against OPTIONS_DEFINED_HERE -- it is
 452         perfectly legal to follow an `extern' with a non-`extern' ones,
 453         provided the types match.
 454
 455         * main.c: Don't define OPTIONS_DEFINED_HERE.
 456
 457 2002-04-10  Hrvoje Niksic  <hniksic@arsdigita.com>
 458
 459         * progress.c (create_image): Revert to calculating ETA based on
 460         average download speed.
 461         (create_image): Don't print ETA until the download has been active
 462         for at least 3 seconds.
 463         (create_image): When ETA is not available, don't print anything.
 464         The previous version would print --:--.
 465
 466 2002-04-10  Hrvoje Niksic  <hniksic@arsdigita.com>
 467
 468         * progress.c (bar_update): Keep updating a subinterval until it
 469         reaches or exceeds a watermark.  That way the measurement will be
 470         guaranteed to span a configurable minimum of time.  The current
 471         default is 3s in 30 100ms intervals.
 472
 473 2002-04-09  Hrvoje Niksic  <hniksic@arsdigita.com>
 474
 475         * progress.c (bar_update): Maintain an array of the time it took
 476         to perform previous 30 network reads.
 477         (create_image): Calculate the download speed and ETA based on the
 478         last 30 reads, not the entire download.
 479         (create_image): Make sure that the ETA is not changed more than
 480         once per second.
 481
 482 2002-04-09  Ian Abbott  <abbotti@mev.co.uk>
 483
 484         * mswindows.c (borland_utime): New function conditionally defined
 485         when `HACK_BCC_UTIME_BUG' is defined.  A reimplementation of
 486         `utime()' as Borland's `utime()' function is broken on Windows 9x
 487         systems.  (Original patch by Chin-yuan Kuo <sr1111111@yahoo.com.tw>.)
 488
 489 2002-04-08  Hrvoje Niksic  <hniksic@arsdigita.com>
 490
 491         * ftp.c (ftp_loop): Propagate the result of ftp_retrieve_glob.
 492
 493 2002-03-26  Ian Abbott  <abbotti@mev.co.uk>
 494
 495         * Makefile.in: Updated several dependencies for object files.
 496
 497 2002-03-20  Ian Abbott  <abbotti@mev.co.uk>
 498
 499         * mswindows.c: Include "utils.h".
 500
 501 2002-03-18  Ian Abbott  <abbotti@mev.co.uk>
 502
 503         * host.h: Don't include netdb.h on windows.
 504
 505 2002-02-19  Hrvoje Niksic  <hniksic@arsdigita.com>
 506
 507         * recur.c (retrieve_tree): Handle the case when start_url doesn't
 508         parse.
 509
 510 2002-02-19  Andreas Damm  <andreas-sourceforge@radab.org>
 511
 512         * wget.h (DO_REALLOC_FROM_ALLOCA): Multiply with sizeof(type) when
 513         calling xmalloc and memcpy.
 514
 515 2002-02-19  Hrvoje Niksic  <hniksic@arsdigita.com>
 516
 517         * host.h: Include Unix-specific includes #ifndef WINDOWS.
 518         Patch originally provided by Christian Lackas.
 519
 520 2002-02-11  Christian Lackas  <delta@lackas.net>
 521
 522         * recur.c: recurive downloading for https fixed.
 523
 524 2002-02-19  Alan Eldridge  <alane@geeksrus.net>
 525
 526         * host.h: Also include <netinet/in.h> and <sys/socket.h>.
 527
 528         * ftp-basic.c: Also include <netinet/in.h>.
 529
 530 2002-02-05  Ian Abbott  <abbotti@mev.co.uk>
 531
 532         * http.c (gethttp): when -c used, mark already fully retrieved
 533         file as successfully retrieved.
 534
 535 2002-02-19  Hrvoje Niksic  <hniksic@arsdigita.com>
 536
 537         * url.c (url_parse): Don't treat '?' as query string separator
 538         when parsing FTP URLs.
 539
 540 2002-02-01  Hrvoje Niksic  <hniksic@arsdigita.com>
 541
 542         * html-url.c (tag_handle_meta): Don't crash on <meta
 543         http-equiv=refresh> where content is missing.
 544
 545 2002-01-31  Herold Heiko  <Heiko.Herold@previnet.it>
 546
 547         * ftp-basic.c, host.c: don't include sys/socket.h, arpa/inet.h,
 548         netdb.h on windows.
 549
 550 2002-01-30  Hrvoje Niksic  <hniksic@arsdigita.com>
 551
 552         * retr.c (retrieve_url): Remove redirection cycle detection.  This
 553         is because some sites legitimately redirect the user back to the
 554         same location, e.g. after an authorization check performed by
 555         another page.  MAX_REDIRECTIONS is still used to prevent infinite
 556         redirection loops.
 557
 558 2002-01-26  Hrvoje Niksic  <hniksic@arsdigita.com>
 559
 560         * http.c (gethttp): Wrap host name in square brackets if it
 561         contains a colon.
 562
 563 2002-01-26  Hrvoje Niksic  <hniksic@arsdigita.com>
 564
 565         * url.c (url_parse): Allow all hex digits, not only decimal ones,
 566         to form an IP address.
 567
 568 2002-01-26  Hrvoje Niksic  <hniksic@arsdigita.com>
 569
 570         * url.c (urlchr_table): Make square braces reserved, so we can
 571         parse http://[::1]/.
 572         (url_parse): Handle host in braces.
 573         (url_string): If url->host contains colons, wrap it in braces.
 574
 575 2002-01-24  Hrvoje Niksic  <hniksic@arsdigita.com>
 576
 577         * connect.c (resolve_bind_address): New function.
 578         (connect_to_one): Use it.
 579         (bindport): Ditto.
 580
 581         * init.c: Don't resolve bind-address here.
 582
 583         * host.c (wget_sockaddr_set_address): Would bug out with ADDR == NULL.
 584
 585 2002-01-24  Hrvoje Niksic  <hniksic@arsdigita.com>
 586
 587         * host.c (lookup_host): Use sizeof(ip4_address) to calculate the
 588         offset.
 589         (address_list_new): Use map_ipv4_to_ip.
 590         (wget_sockaddr_set_address): Convert ADDR to IPv4 before using it
 591         in IPv4 context.
 592
 593 2002-01-24  Hrvoje Niksic  <hniksic@arsdigita.com>
 594
 595         * source: Integrated IPv6 support.
 596         Written by Thomas Lussnig <thomas.lussnig@bewegungsmelder.de>.
 597
 598 2002-01-15  Ian Abbott  <abbotti@mev.co.uk>
 599
 600         * init.c (cmd_file): Change `\' to `/' for Windows (yes, really!)
 601         (cmd_directory): New function. Like cmd_file(), but strips
 602         trailing directory separators.
 603         (commands): Change action for "dirprefix" from `cmd_file' to
 604         `cmd_directory'.
 605
 606         * utils.c (make_directory): Allow intermediate `mkdir' calls to
 607         fail, as not all path components that do not exist should be
 608         directory components, especially under Windows.
 609
 610 2002-01-17  Hrvoje Niksic  <hniksic@arsdigita.com>
 611
 612         * netrc.c (parse_netrc): Skip leading whitespace before testing
 613         whether the line is empty.  Empty lines still contain the line
 614         terminator.
 615
 616 2002-01-15  Hrvoje Niksic  <hniksic@arsdigita.com>
 617
 618         * gen_sslfunc.c (ssl_iread): Call select on the file descriptor
 619         only if no data is pending in SSL buffers.
 620         From tony@bluetail.com.
 621
 622 2002-01-14  Hrvoje Niksic  <hniksic@arsdigita.com>
 623
 624         * headers.c (header_get): Strip trailing whitespace from the
 625         header.
 626
 627 2002-01-14  Hrvoje Niksic  <hniksic@arsdigita.com>
 628
 629         * url.c (parse_uname): URL-decode *USER and *PASSWD.
 630
 631 2002-01-07  Ian Abbott <abbotti@mev.co.uk>
 632
 633         * url.c (uri_merge_1): Deal with "net path" relative URL (one that
 634         starts with "//").
 635
 636 2002-01-14  Hrvoje Niksic  <hniksic@arsdigita.com>
 637
 638         * http.c (gethttp): Invalidate SOCK if get_contents encountered an
 639         error.
 640
 641 2001-12-24  Hrvoje Niksic  <hniksic@arsdigita.com>
 642
 643         * version.c: Wget 1.8.1 is released.
 644
 645 2001-12-19  Hrvoje Niksic  <hniksic@arsdigita.com>
 646
 647         * version.c: Wget 1.8.1-pre3 is released.
 648
 649 2001-12-19  Hrvoje Niksic  <hniksic@arsdigita.com>
 650
 651         * recur.c (retrieve_tree): Enqueue the canonical representation of
 652         start_url, so that the test against dl_url_file_map works.
 653
 654 2001-12-19  Hrvoje Niksic  <hniksic@arsdigita.com>
 655
 656         * log.c (logputs): Check for requested verbosity before printing
 657         anything.
 658
 659 2001-12-19  Hrvoje Niksic  <hniksic@arsdigita.com>
 660
 661         * html-url.c (tag_handle_link): Treat the "shortcut icon" link as
 662         inline.
 663
 664 2001-12-18  Hrvoje Niksic  <hniksic@arsdigita.com>
 665
 666         * recur.c (retrieve_tree): Make a copy of file obtained from
 667         dl_url_file_map because the code calls xfree(file) later.
 668
 669 2001-12-18  Hrvoje Niksic  <hniksic@arsdigita.com>
 670
 671         * recur.c (register_html): Maintain a hash table of HTML files
 672         along with the list.  Disallow duplicates.
 673         (retrieve_tree): Use downloaded_html_set to check whether the file
 674         found in dl_url_file_map is an HTML file, and descend into it if
 675         so.
 676         (convert_all_links): Don't guard against duplicates in
 677         downloaded_html_list, since they are no longer possible.
 678
 679 2001-12-18  Ian Abbott  <abbotti@mev.co.uk>
 680
 681         * recur.c (retrieve_tree): Pass on referring URL when retrieving
 682         recursed URL.
 683
 684 2001-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
 685
 686         * version.c: Wget 1.8.1-pre2 is released.
 687
 688 2001-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
 689
 690         * retr.c (sleep_between_retrievals): Simplify indentation.
 691
 692 2001-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
 693
 694         * gen_sslfunc.c (ssl_init_prng): Use random_number to get a byte
 695         of "randomness" at a time.
 696         (ssl_init_prng): Don't seed the PRNG; random_number will do that.
 697
 698         * retr.c (sleep_between_retrievals): Use it.  Make sure that the
 699         random amount averages in opt.wait.
 700         (sleep_between_retrievals): Don't seed the PRNG; random_number
 701         will do that.
 702
 703         * utils.c (random_number): New function.
 704
 705 2001-12-14  Hrvoje Niksic  <hniksic@arsdigita.com>
 706
 707         * url.c (path_simplify): Move here from utils.c, and make static.
 708
 709 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
 710
 711         * init.c (wgetrc_file_name): Print correct message when loading
 712         getenv("WGETRC") fails.
 713
 714 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
 715
 716         * recur.c (register_download): Don't abort when one URL references
 717         two different files.
 718
 719 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
 720
 721         * http.c (gethttp): Check for conn->scheme, not u->scheme, before
 722         calling ssl_iwrite.
 723
 724 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
 725
 726         * version.c: Wget 1.8.1-pre1 is released.
 727
 728 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
 729
 730         * res.c (matches): Fix broken URL in the docstring.
 731
 732 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
 733
 734         * html-url.c (tag_url_attributes): Mark <embed href=...> as
 735         external.
 736
 737 2001-12-12  Hrvoje Niksic  <hniksic@arsdigita.com>
 738
 739         * url.c (get_urls_file): Cosmetic changes.
 740
 741 2001-12-12  Hrvoje Niksic  <hniksic@arsdigita.com>
 742
 743         * html-url.c (append_one_url): Resurrect warning when unable to
 744         resolve a relative link.
 745
 746 2001-12-12  Hrvoje Niksic  <hniksic@arsdigita.com>
 747
 748         * html-url.c (collect_tags_mapper): Break into several functions.
 749         (tag_url_attributes): Collect <embed href=...>.
 750
 751 2001-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
 752
 753         * host.c: New type ipv4_address.  Use it consistently instead of
 754         `unsigned char[4]' and `unsigned char *'.
 755         (pretty_print_address): Accept a `const void *', to require even
 756         less casting.
 757
 758 2001-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
 759
 760         * ftp-ls.c (ftp_parse_vms_ls): Fix obvious memory leaks.
 761
 762 2001-12-10  Hrvoje Niksic  <hniksic@arsdigita.com>
 763
 764         * main.c (main): Initialize progress after fork_to_background, so
 765         that it knows when to use dots.
 766
 767         * mswindows.c (ws_hangup): Call log_request_redirect_output.
 768
 769         * utils.c (fork_to_background): Print the PID of the child
 770         process.
 771
 772         * log.c (log_request_redirect_output): Set a flag that output
 773         redirection has been requested.  Doing anything else in a signal
 774         handler is unsafe.
 775         (check_redirect_output): New function: check whether redirection
 776         has been requested and, if so, call redirect_output().
 777         (logputs): Call check_redirect_output.
 778         (logprintf): Ditto.
 779         (debug_logprintf): Ditto.
 780         (redirect_output): Print clearer messages.
 781
 782         * main.c (redirect_output_signal): Don't call
 783         redirect_output_signal directly.  Instead, call
 784         log_request_redirect_output.
 785
 786         * utils.c (memfatal): Ditto.
 787
 788         * progress.c (display_image): Use it.
 789
 790         * log.c (log_set_save_context): New function: allow the caller to
 791         turn off saving log context lines.
 792
 793 2001-12-10  Hrvoje Niksic  <hniksic@arsdigita.com>
 794
 795         * host.c (address_list_set_faulty): Uncomment a sanity check.
 796
 797 2001-12-10  Hrvoje Niksic  <hniksic@arsdigita.com>
 798
 799         * utils.c (long_to_string): Return a pointer after where the
 800         number ends.
 801         (long_to_string): Rename to number_to_string.
 802
 803 2001-12-10  Hrvoje Niksic  <hniksic@arsdigita.com>
 804
 805         * utils.c (path_simplify): Correctly handle the unlikely case that
 806         b starts out as path + 1.
 807
 808 2001-12-10  Hrvoje Niksic  <hniksic@arsdigita.com>
 809
 810         * utils.c (path_simplify): Rewrite, with better comments, and
 811         without the use of strcpy to move overlapping blocks.
 812
 813 2001-12-09  Hrvoje Niksic  <hniksic@arsdigita.com>
 814
 815         * init.c (cmd_spec_progress): Resurrect.  Check whether VAL is a
 816         valid progress type before setting it.
 817
 818 2001-12-09  Hrvoje Niksic  <hniksic@arsdigita.com>
 819
 820         * main.c (main): Remove stray debugging message.
 821
 822 2001-12-09  Hrvoje Niksic  <hniksic@arsdigita.com>
 823
 824         * progress.c (create_image): Fix ETA padding when hours are prined.
 825
 826 2001-12-09  Hrvoje Niksic  <hniksic@arsdigita.com>
 827
 828         * version.c: Wget 1.8 is released.
 829
 830 2001-12-09  Hrvoje Niksic  <hniksic@arsdigita.com>
 831
 832         * url.c (reencode_string): Declare static.
 833
 834         * res.c (registered_specs): Declare static.
 835
 836         * progress.c (current_impl_locked): Declare static.
 837
 838         * log.c (flush_log_p): Declare static.
 839         (needs_flushing): Ditto.
 840
 841         * http.c (digest_authentication_encode): Declare static.
 842
 843         * html-url.c (init_interesting): Declare static.
 844
 845         * host.c (host_name_addresses_map): Declare static.
 846
 847         * cookies.c (find_matching_chains): Declare static.
 848
 849         * ftp-ls.c (ftp_parse_vms_ls): Warn about the memory leak
 850         indicated by lint.
 851
 852         * utils.c (path_simplify): Remove unused variable STUB_CHAR.
 853
 854         * host.c (address_list_set_faulty): Document that INDEX is
 855         currently unused.
 856
 857         * url.c (rewrite_shorthand_url): Remove unused variable PATH.
 858
 859 2001-12-08  Hrvoje Niksic  <hniksic@arsdigita.com>
 860
 861         * version.c: Wget 1.8-pre2 is released.
 862
 863 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
 864
 865         * progress.c (progress_handle_sigwinch): Set up the signal again.
 866
 867         * utils.c: Include <sys/termios.h>, where Solaris defines
 868         TIOCGWINSZ.
 869
 870         * progress.c (bar_create): Don't use the last column on the screen.
 871         (create_image): Pad ETA to constant size.  Pad SIZE to nine digits
 872         only until it exceeded them.
 873
 874 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
 875
 876         * version.c: Wget 1.8-pre1 is released.
 877
 878 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
 879
 880         * progress.c (progress_create): Make sure that, when the output is
 881         redirected, the progress implementation gets changed to the
 882         fallback one.
 883         (bar_set_params): Set current_impl_locked to 1 when "force" is
 884         specified.
 885         (progress_create): Don't change the progress implementation if
 886         current_impl_locked is non-zero.
 887
 888         * main.c (redirect_output_signal): Call
 889         progress_schedule_redirect.
 890
 891         * progress.c (progress_schedule_redirect): New function.
 892
 893 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
 894
 895         * log.c (logvprintf): Restructure to allow being called multiple
 896         times.
 897         (logprintf): Call logvprintf in a loop.
 898         (debug_logprintf): Ditto.
 899
 900 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
 901
 902         * gen_sslfunc.c (ssl_init_prng): Allow the user to disable EGD by
 903         setting egd_file it to empty string.
 904
 905         * main.c (main): Change the option name from --sslegdsock to
 906         --egd-file.
 907
 908 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
 909
 910         * gen_sslfunc.c (ssl_init_prng): Make the printed message
 911         translatable.
 912
 913 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
 914
 915         * url.c (scheme_disable): New function.
 916
 917         * main.c (main): Call ssl_init_prng from here rather than from
 918         init_ssl, so that it has a chance to disable support for https
 919         before a URL has been resolved.
 920
 921         * gen_sslfunc.c (ssl_init_prng): Seed with rand() if all else
 922         failed.
 923         (ssl_init_prng): Disable support for https if seeding the PRNG
 924         fails.
 925
 926 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
 927
 928         * utils.c (read_whole_line): Handle lines beginning with \0.
 929
 930 2001-12-05  Hrvoje Niksic  <hniksic@arsdigita.com>
 931
 932         * recur.c (convert_all_links): Guard against duplicates in
 933         downloaded_html_files.
 934         (register_download): Don't invalidate similar-looking URLs.
 935         (match_except_index): New function.
 936
 937 2001-12-05  Hrvoje Niksic  <hniksic@arsdigita.com>
 938
 939         * utils.c (path_simplify): Document with test cases.
 940
 941 2001-12-04  Hrvoje Niksic  <hniksic@arsdigita.com>
 942
 943         * gen_sslfunc.c: Ditto.
 944
 945         * rbuf.c: Include <string.h>.
 946
 947 2001-12-04  Hrvoje Niksic  <hniksic@arsdigita.com>
 948
 949         * recur.c (retrieve_tree): Check whether the URL was already
 950         downloaded before downloading it again.
 951         (descend_child_p): Renamed to download_child_p.
 952         (register_download): When one URL is downloaded to a file already
 953         "owned" by another URL, delete all references that map any URL to
 954         that file.
 955         (register_delete_file): New function.
 956         (retrieve_tree): Use it after deleting a file.
 957
 958         * url.c (url_parse): Re-canonicalize the URL also if the path is
 959         empty, so that e.g. "http://www.server.com" ->
 960         "http://www.server.com/".
 961         (lowercase_str): Use ISUPPER instead of !ISLOWER.
 962
 963         * retr.c (retrieve_url): Use the canonical URL form when calling
 964         register_download().
 965
 966 2001-12-04  Ian Abbott <abbotti@mev.co.uk>
 967
 968         * snprintf.c (dopr): Use `unsigned int' as the second argument to
 969         va_arg when casting to `unsigned short' is intended.
 970
 971 2001-12-04  Herold Heiko  <Heiko.Herold@previnet.it>
 972
 973         * gen_sslfunc.c: on windows provide ssl crypto random
 974           initialization through RAND_screen(); could possibly
 975           be not enough for strong ssl communication (see the
 976           relevant manual page from the openssl package).
 977
 978 2001-12-04  Hrvoje Niksic  <hniksic@arsdigita.com>
 979
 980         * url.c (local_quote_string): Reenable quoting of question marks,
 981         but only when `--html-extension' is used.
 982
 983 2001-12-03  Hrvoje Niksic  <hniksic@arsdigita.com>
 984
 985         * version.c: Wget 1.8-beta3 is released.
 986
 987 2001-12-03  Hrvoje Niksic  <hniksic@arsdigita.com>
 988
 989         * snprintf.c (dopr): Cast the result of va_arg to short int and
 990         short unsigned int where these types are expected to be used.
 991
 992 2001-12-03  Hrvoje Niksic  <hniksic@arsdigita.com>
 993
 994         * snprintf.c (dopr): Replace `short int' and `unsigned short int'
 995         with `int' when using it as the second argument to `va_arg'.
 996
 997 2001-12-03  Hrvoje Niksic  <hniksic@arsdigita.com>
 998
 999         * host.c (address_list_new_one): New function.
1000         (lookup_host): Use it.
1001
1002 2001-12-03  Andre Majorel  <amajorel@teaser.fr>
1003
1004         * host.c (lookup_host): Don't initialize TMPSTORE directly because
1005         it's not legal C.
1006
1007 2001-12-03  Hrvoje Niksic  <hniksic@arsdigita.com>
1008
1009         * ftp-basic.c (ftp_port): Don't return HOSTERR if we fail getting
1010         the socket data.
1011
1012         * ftp.c: Ditto.
1013
1014         * http.c: No need to declare h_errno.
1015
1016         * host.c: Declare h_errno.
1017
1018 2001-12-02  Hrvoje Niksic  <hniksic@arsdigita.com>
1019
1020         * utils.c (file_merge): If BASE doesn't contain a slash, just
1021         return a copy of FILE.
1022
1023 2001-12-02  Hrvoje Niksic  <hniksic@arsdigita.com>
1024
1025         * version.c: Wget 1.8-beta2 is released.
1026
1027 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
1028
1029         * ftp.c (getftp): When PWD fails, assume "/".
1030
1031         * ftp-basic.c (ftp_syst): Fix indentation.
1032
1033 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
1034
1035         * url.c (get_urls_file): If opt.base_href is specified, merge each
1036         URL with the base.
1037
1038 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
1039
1040         * main.c (print_help): Don't document the removed `-nh'.
1041
1042 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
1043
1044         * url.c (url_full_path): Document better.
1045
1046         * http.c (gethttp): Use the full path when creating digest
1047         authorization.
1048
1049 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
1050
1051         * cookies.c (path_matches): Return 0 if PREFIX doesn't begin with
1052         '/'.
1053
1054 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
1055
1056         * cookies.c (path_matches): FULL_PATH doesn't begin with '/', but
1057         PREFIX does.
1058
1059 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
1060
1061         * cookies.c (check_domain_match): Reimplement to match Netscape's
1062         "preliminary specification" for cookies.
1063
1064 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
1065
1066         * url.c (replace_attr_refresh_hack): New function.
1067         (convert_links): Call replace_attr_refresh_hack for Refresh
1068         links.  It will add the "TMOUT; URL=" junk before the link.
1069
1070         * html-url.c (collect_tags_mapper): Set ID to the ID of the
1071         "content" attribute, not "http-equiv".
1072         (collect_tags_mapper): Don't use OFFSET to hack the raw_* values;
1073         instead, store the information that this entry belongs to a
1074         "refresh" link.
1075
1076 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
1077
1078         * version.c: Wget 1.8-beta1 is released.
1079
1080 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
1081
1082         * recur.c (retrieve_tree): Allow -p retrievals to exceed maximum
1083         depth by more than one.
1084
1085 2001-11-30  Hrvoje Niksic  <hniksic@arsdigita.com>
1086
1087         * retr.c (retrieve_url): Don't allow more than 20 redirections.
1088
1089 2001-11-30  Hrvoje Niksic  <hniksic@arsdigita.com>
1090
1091         * recur.c (retrieve_tree): Skip the non-inline entries when
1092         enqueuing the children of a leaf HTML node in -p mode.
1093         (descend_url_p): Ignore opt.no_parent when in -p mode and UPOS is
1094         "inline".
1095
1096         * html-url.c (get_urls_html): Don't accept dash_p_leaf_HTML.
1097         (collect_tags_mapper): When an entry is "inline", mark it as such.
1098
1099         * recur.c (descend_url_p): Fix test when checking for
1100         acceptance/rejection rules.
1101
1102 2001-10-31 Daniel BODEA <dali@dali-designs.com>
1103
1104         * netrc.c (search_netrc): When slack_default is 0, still look for
1105         an account with matching password, just not the "default account".
1106         HTTP Authorization using .netrc should now work as expected.
1107
1108 2001-11-30  T. Bharath  <TBharath@responsenetworks.com>
1109
1110         * http.c (persistent_available_p): Call SHUTDOWN_SSL if
1111         test_socket_open fails.
1112
1113 2001-11-30  Hrvoje Niksic  <hniksic@arsdigita.com>
1114
1115         * progress.c (display_image): Just print one CR to reset the
1116         cursor position.
1117
1118 2001-11-30  Christian Fraenkel  <c.fraenkel@gmx.net>
1119
1120         * init.c: New command `ssl_egd_sock'.
1121
1122         * main.c (main): New option `--sslegdsock'.
1123
1124         * gen_sslfunc.c (ssl_init_prng): Seed the RNG using EGD.
1125
1126 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
1127
1128         * cmpt.c (memmove): Include a simple memmove implementation.
1129
1130 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
1131
1132         * headers: Guard against header files being included twice.
1133
1134 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
1135
1136         * gen-md5.c: Use unsigned char * as the buffer argument to
1137         gen_md5_update.
1138
1139 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
1140
1141         * connect.h: Declare select_fd.
1142
1143 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
1144
1145         * recur.c (descend_url_p): When resolving no_parent, compare with
1146         start_url, not parent url.  Otherwise link from /a/b/ to /a/c/
1147         wouldn't be followed, although the download started from /a/.
1148
1149 2001-01-23  Herold Heiko  <Heiko.Herold@previnet.it>
1150
1151         * config.h.ms, mswindows.h: defined HAVE_ISATTY, use _isatty for
1152         MS VC; somebody with Borland compiler please check and provide
1153         patch if possible;
1154
1155         * cmpt.c: provided a usleep emulation.
1156
1157 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
1158
1159         * host.c (address_list_new): Initialize al->faulty.
1160
1161 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
1162
1163         * http.c (http_process_range): Accept the broken output of
1164         "JavaWebServer/1.1.1".
1165
1166 2001-11-28  Hrvoje Niksic  <hniksic@arsdigita.com>
1167
1168         * progress.c (dot_set_params): If PARAMS is unspecified, use
1169         dot_style, if available.
1170
1171         * init.c: Ditto.
1172
1173         * main.c (main): Resurect --dot-style.
1174
1175         * progress.c (dot_finish): Print the quantity if we're left at the
1176         beginning of a row.
1177
1178 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
1179
1180         * cmpt.c (random): Removed.
1181
1182         * retr.c (sleep_between_retrievals): Use the more portable rand()
1183         instead of random().
1184
1185 2001-11-27  Ian Abbott <abbotti@mev.co.uk>
1186
1187         * retr.c (retrieve_from_file): Initialize `new_file' to NULL to
1188         prevent seg fault.
1189
1190 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
1191
1192         * connect.c (connect_to_many): Use address_list_set_faulty to
1193         prevent the faulty address from being reused.
1194
1195         * host.c (address_list_set_faulty): New function.
1196         (address_list_get_bounds): New function, instead of
1197         address_list_count.
1198
1199 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
1200
1201         * url.c (convert_links): Don't translate %d-%d.
1202
1203         * main.c (print_help): Remove stray HAVE_RANDOM code.
1204
1205 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
1206
1207         * ftp.c (getftp): Improve output after sending PASV.  Don't
1208         attempt to "look up" the IP address we already know; call
1209         connect_to_one directly.
1210
1211 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
1212
1213         * progress.c: Change the default progress implementation to "bar".
1214
1215 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
1216
1217         * progress.c (bar_create): Print two newlines.
1218
1219 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
1220
1221         * cmpt.c (random): New function, a simple-minded replacement for
1222         random() on systems that don't have it.
1223
1224 2001-11-26  Hrvoje Niksic  <hniksic@arsdigita.com>
1225
1226         * config.h.in: Put a HAVE_USLEEP stub.
1227
1228         * cmpt.c (usleep): Replacement implementation of usleep using
1229         select.
1230
1231         * init.c: New option init_rate.
1232
1233         * main.c (main): New option --limit-rate.
1234
1235         * retr.c (limit_bandwidth): New function.
1236         (get_contents): Call it to limit the bandwidth used when
1237         downloading.
1238
1239         * progress.c (dot_update): Would print the wrong download speed on
1240         rows other than the first one when the download was continued.
1241         (dot_finish): Ditto.
1242
1243 2001-11-26  Ian Abbott <abbotti@mev.co.uk>
1244
1245         * http.c (gethttp): fix undeclared variable 'err' when compiled
1246         with HAVE_SSL.
1247
1248 2001-11-26  Hrvoje Niksic  <hniksic@arsdigita.com>
1249
1250         * progress.c: Don't allocate new timers; use the timing data
1251         propagated from the caller.
1252
1253         * retr.c (get_contents): Allocate and use a timer.
1254
1255 2001-11-26  Hrvoje Niksic  <hniksic@arsdigita.com>
1256
1257         * http.c (last_host_ip): Made into an address_list.
1258         (invalidate_persistent): Release pc_last_host_ip.
1259         (register_persistent): Use lookup_host.
1260         (persistent_available_p): Check for equality of hosts using
1261         address_list_match_all.  Call address_list_release.
1262         (http_cleanup): New function.
1263
1264         * ftp.c (getftp): Use lookup_host and connect_to_many.
1265
1266         * http.c (gethttp): Use lookup_host and connect_to_many.
1267
1268         * connect.c (make_connection): Removed.
1269         (connect_to_one): New function.
1270         (connect_to_many): Ditto.
1271         (set_connection_host_name): Ditto.
1272
1273         * host.c (lookup_host): New function; new return type.
1274         (address_list_new): New function.
1275         (address_list_count): Ditto.
1276         (address_list_copy_one): Ditto.
1277         (address_list_delete): Ditto.
1278         (address_list_release): Ditto.
1279         (pretty_print_address): Ditto.
1280
1281 2001-11-26  Hrvoje Niksic  <hniksic@arsdigita.com>
1282
1283         * recur.c (retrieve_tree): In case of followed redirection,
1284         blacklist the pre-redirection URL.
1285
1286 2001-11-26  Hrvoje Niksic  <hniksic@arsdigita.com>
1287
1288         * recur.c (descend_redirect_p): New function.
1289         (retrieve_tree): Make sure redirections are not blindly followed.
1290
1291 2001-11-04  Alan Eldridge  <alane@geeksrus.net>
1292
1293         * config.h.in: added HAVE_RANDOM.
1294
1295         * options.h: added random_wait to struct options.
1296
1297         * main.c (print_help [HAVE_RANDOM], main): added arg parsing, help
1298         for --random-wait.
1299
1300         * retr.c (sleep_between_retrievals) [HAVE_RANDOM]: added
1301         implementation of random wait times.
1302
1303         * init.c (commands): added "randomwait" keyword.
1304
1305 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
1306
1307         * recur.c (descend_url_p): Be more conservative with blacklisting
1308         URLs.
1309         (convert_all_links): Print how many files have been converted, and
1310         how long it took.
1311
1312         * progress.c (create_image): Place the number of downloaded bytes
1313         right after the progress bar.
1314
1315         * utils.c (suffix): Return a pointer into the string.
1316
1317 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
1318
1319         * url.c (convert_links): Handle CO_NULLIFY_BASE.
1320
1321         * recur.c (retrieve_tree): Ignore download-ignorable children.
1322         (convert_all_links): Specify CO_NULLIFY_BASE when link_base_p.
1323
1324         * html-url.c (handle_link): Return the newly created urlpos.
1325         (collect_tags_mapper): When dealing with BASE, store the base
1326         reference and mark it as download-ignorable.
1327
1328 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
1329
1330         * url.c (convert_links): Attempt to quote '?' as "%3F" when
1331         linking to local files.  Given up on the attempt, as it breaks
1332         local browsing.
1333
1334 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
1335
1336         * main.c (private_initialize): Removed.
1337         (main): Don't call private_initialize.
1338
1339         * http.c: Call lookup_host.
1340
1341         * host.c (host_init): Removed.
1342         (add_host_to_cache): Initialize host_name_address_map here, on
1343         demand.
1344         (ngethostbyname): Commented out.
1345
1346         * connect.c (make_connection): Remove dead code; use lookup_host.
1347
1348         * host.c (store_hostaddress): Renamed to lookup_host and reversed
1349         the args.
1350         Removed host_address_name_map and host_slave_master_map.
1351
1352 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
1353
1354         * progress.c (dot_create): Align the "[ skipping ... ]" string
1355         with the dots.
1356
1357         * retr.c (rate): Split into two functions: calc_rate and
1358         retr_rate.
1359
1360         * progress.c (create_image): Draw a dummy progress bar even when
1361         total size is unknown.
1362         (display_image): Place the text cursor at the end of the "image".
1363
1364 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
1365
1366         * url.c (reencode_string): Use unsigned char, not char --
1367         otherwise the hex digits come out wrong for 8-bit chars such as
1368         nbsp.
1369         (lowercase_str): New function.
1370         (url_parse): Canonicalize u->url if needed.
1371         (get_urls_file): Parse each URL, and return only the valid ones.
1372         (free_urlpos): Call url_free.
1373         (mkstruct): Add :port if the port is non-standard.
1374         (mkstruct): Append the query string to the file name, if any.
1375         (urlpath_length): Use strpbrk_or_eos.
1376         (uri_merge_1): Handle the cases where LINK is an empty string,
1377         where LINK consists only of query, and where LINK consists only of
1378         fragment.
1379         (convert_links): Count and report both kinds of conversion.
1380         (downloaded_file): Use a hash table, not a list.
1381         (downloaded_files_free): Free the hash table.
1382
1383         * retr.c (retrieve_from_file): Ditto.
1384
1385         * main.c (main): Call either retrieve_url or retrieve_tree
1386         for each URL, not both.
1387
1388         * retr.c (register_all_redirections): New function.
1389         (register_redirections_mapper): Ditto.
1390         (retrieve_url): Register the redirections.
1391         (retrieve_url): Make the string "Error parsing proxy ..."
1392         translatable.
1393
1394         * res.c (add_path): Strip leading slash from robots.txt paths so
1395         that the path representations are "compatible".
1396         (free_specs): Free each individual path, too.
1397         (res_cleanup): New function.
1398         (cleanup_hash_table_mapper): Ditto.
1399
1400         * recur.c (url_queue_new): New function.
1401         (url_queue_delete): Ditto.
1402         (url_enqueue): Ditto.
1403         (url_dequeue): Ditto.
1404         (retrieve_tree): New function, replacement for recursive_retrieve.
1405         (descend_url_p): New function.
1406         (register_redirection): New function.
1407
1408         * progress.c (create_image): Cosmetic changes.
1409
1410         * init.c (cleanup): Do all those complex cleanups only if
1411         DEBUG_MALLOC is defined.
1412
1413         * main.c: Removed --simple-check and the corresponding
1414         simple_host_check in init.c.
1415
1416         * html-url.c (handle_link): Parse the URL here, and propagate the
1417         parsed URL to the caller, who would otherwise have to parse it
1418         again.
1419
1420         * host.c (xstrdup_lower): Moved to utils.c.
1421         (realhost): Removed.
1422         (same_host): Ditto.
1423
1424 2001-11-24  Hrvoje Niksic  <hniksic@arsdigita.com>
1425
1426         * utils.c (path_simplify): Preserver the (non-)existence of
1427         leading slash.  Return non-zero if changes were made.
1428
1429 2001-11-24  Hrvoje Niksic  <hniksic@arsdigita.com>
1430
1431         * progress.c (bar_update): Don't modify bp->total_length if it is
1432         zero.
1433
1434 2001-11-24  Hrvoje Niksic  <hniksic@arsdigita.com>
1435
1436         * retr.c (retrieve_url): When the redirection URL doesn't parse,
1437         print the correct error message rather than "UNKNOWN".
1438
1439 2001-11-24  Hrvoje Niksic  <hniksic@arsdigita.com>
1440
1441         * progress.c (bar_finish): If the timer didn't record any time
1442         since the download beginning, fake 1ms.
1443
1444 2001-11-24  Hrvoje Niksic  <hniksic@arsdigita.com>
1445
1446         * recur.c (recursive_retrieve): Fix typo.
1447
1448 2001-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
1449
1450         * progress.c (create_image): Don't translate "%ld ".
1451
1452 2001-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
1453
1454         * progress.c (bar_set_params): Allow the user to force the use of
1455         the bar.
1456
1457 2001-11-23  Lemble Gregory  <gregory.lemble@st.com>
1458
1459         * gen_sslfunc.c (ssl_init_prng): New function; seed the SSL RNG.
1460
1461 2001-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
1462
1463         * progress.c: Renamed dp_* functions to dot_* for greater clarity
1464         and consistency with bar_*.
1465         (print_download_speed): Get rid of the unneeded '@' character.
1466         (create_image): Fix download rate geometry.
1467
1468         * progress.c (print_elapsed): Remove spurious space.
1469         (print_elapsed): Renamed to print_download_speed, since that's
1470         what it does.
1471
1472 2001-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
1473
1474         * progress.c (bar_update): If the downloaded amount becomes larger
1475         than the expected amount, adjust the expected amount accordingly.
1476
1477 2001-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
1478
1479         * utils.c (determine_screen_width): New function.
1480
1481         * main.c (main): New option `--progress=TYPE'.
1482         (main): Implement compatibility with the old option `--dot-style'.
1483
1484         * init.c: Removed cmd_spec_dotstyle -- that logic is now in
1485         dp_set_params.
1486         (cmd_spec_progress): New function.
1487
1488         * retr.c (get_contents): Use the progress_* functions instead of
1489         the old show_progress().
1490         (show_progress): Removed.
1491         (rate): Print "xxxx.xx K/s" instead of "KB/s".  Ditto for MB/s,
1492         etc.
1493
1494         * progress.c (set_progress_implementation): New function.
1495         (valid_progress_implementation_p): Ditto.
1496         (progress_create): Ditto.
1497         (progress_update): Ditto.
1498         (progress_finish): Ditto.
1499         (dp_create): Ditto.
1500         (dp_update): Ditto.
1501         (dp_finish): Ditto.
1502         (dp_set_params): Ditto.
1503         (print_elapsed): Ditto.
1504
1505 2001-11-22  Hrvoje Niksic  <hniksic@arsdigita.com>
1506
1507         * retr.c (show_progress): Use it.
1508
1509         * log.c (log_set_flush): New function.
1510
1511 2001-11-22  Hrvoje Niksic  <hniksic@arsdigita.com>
1512
1513         * utils.c (path_simplify): Don't remove trailing slashes.
1514
1515         * ftp.c (ftp_get_listing): Use it.
1516
1517         * utils.c (file_merge): New function.
1518
1519         * url.c (opt_url): Removed.
1520
1521         * recur.c (recursive_retrieve): Inline "opt_url" logic.
1522
1523         * main.c (main): Use xfree(), not free().
1524
1525         * url.c (rewrite_url_maybe): Renamed to rewrite_shorthand_url.
1526
1527         * ftp.c (ccon): Move `ccon' typedef here, since it's only used
1528         internally.
1529
1530         * config.h.in: Include a stub for HAVE_STRPBRK.
1531
1532         * cmpt.c (strpbrk): Include a replacement for systems without
1533         strpbrk().
1534
1535         * ftp.c: Use url_set_dir and url_set_file when modifying the URL.
1536
1537         * url.c (url_set_dir): New function.
1538         (url_set_file): Ditto.
1539
1540         * ftp-basic.c (ftp_process_type): Process FTP type here; the URL
1541         parser makes the URL "params" available, so we can do that in this
1542         function.
1543
1544         * retr.c: Ditto.
1545
1546         * ftp.c: Ditto; pass the local file information in `ccon'.
1547
1548         * http.c: Get rid of the ugly kludge that had URL being replaced
1549         with the proxy URL when proxy retrieval was requested.  Use a
1550         separate parameter to http_loop and gethttp for the proxy URL.
1551
1552         * http.c: Changed to reflect the fact that local file, proxy, and
1553         referer information are no longer stored in struct url.  The local
1554         file information is passed in `struct hstat' now.
1555
1556         * url.c: Reworked URL parsing to be more regular.  Reencode the
1557         URL using reencode_string.
1558         Removed non-URL-related information from struct url.  This
1559         includes fields `proxy', `local', and `referer'.
1560
1561 2001-11-22  Jochen Hein  <jochen@jochen.org>
1562
1563         * main.c (main): Split the copyright notice for easier
1564         translation.
1565
1566 2001-08-21  Dave Turner <dct25@hermes.cam.ac.uk>
1567
1568         * ftp-basic.c (ftp_size): New function to send non-standard SIZE
1569           command to server to request file size.
1570         * ftp.h (ftp_size): Export it.
1571         * ftp.c (getftp): Use new ftp_size function if restoring
1572           transfer of a file with unknown size.
1573
1574 2001-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
1575
1576         * url.c (parseurl): Don't depend on the now-obsolete TYPE.
1577
1578 2001-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
1579
1580         * url.c (getproxy): Handle URL shorthands.
1581
1582 2001-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
1583
1584         * main.c: Remove --wait / --waitretry backwards compatibility
1585         code.
1586
1587 2001-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
1588
1589         * main.c (main): Use it.
1590
1591         * url.c (rewrite_url_maybe): New function.
1592
1593 2001-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
1594
1595         * url.c: Clean up handling of URL schemes.
1596
1597 2001-05-13  Hrvoje Niksic  <hniksic@arsdigita.com>
1598
1599         * url.c: Get rid of `protostrings'.
1600         (skip_proto): Don't use protostrings.
1601         (has_proto): Ditto.
1602
1603 2001-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
1604
1605         * Makefile.in: Conditionally compile getopt.o.
1606
1607 2001-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
1608
1609         * md5.h: Renamed to gnu-md5.h.
1610
1611         * md5.c: Renamed to gnu-md5.c.
1612
1613         * http.c: Ditto.
1614
1615         * ftp-opie.c: Use the new macros.
1616
1617         * sysdep.h: Define md5-related macros.
1618
1619         * config.h.in: Define HAVE_SOLARIS_MD5 or HAVE_BUILTIN_MD5
1620         depending on which md5 implementation is used.
1621
1622 2001-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
1623
1624         * res.c (res_register_specs): Initialize OLD and HP_OLD to appease
1625         the compiler.
1626
1627 2001-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
1628
1629         * http.c (gethttp): Print the whole response line when printing
1630         headers is requested.
1631
1632 2001-05-12  Hrvoje Niksic  <hniksic@arsdigita.com>
1633
1634         * res.c: New file.  Implement all RES-related code here.
1635
1636 2001-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
1637
1638         * version.c: Wget 1.7.1 is released.
1639
1640 2001-11-16  Hrvoje Niksic  <hniksic@arsdigita.com>
1641
1642         * headers.c (header_extract_number): Ignore trailing whitespace.
1643
1644 2001-08-24  Ian Abbott  <abbotti@mev.co.uk>
1645
1646         * html-url.c (collect_tags_mapper): Fix bug converting links
1647         with -k option for tags with multiple link attributes by
1648         handling links in the order they appear.
1649
1650 2001-08-15  Ian Abbott  <abbotti@mev.co.uk>
1651
1652         * ftp.c (ftp_loop_internal): Avoid a potential buffer overflow in
1653           the call to the 'rate' function by moving it past the error
1654           checking for the 'getftp' function return value.
1655
1656 2001-11-16  Hrvoje Niksic  <hniksic@arsdigita.com>
1657
1658         * html-parse.c (advance_declaration): Use 0x22 instead of '"' or
1659         '\"'.  Different compilers' assert macros are broken in different
1660         ways.
1661
1662 2001-09-29  Christian Fraenkel  <c.fraenkel@gmx.net>
1663
1664         * http.c (gethttp): print debug output for errors occuring during
1665         the ssl handshake.
1666
1667 2001-11-16  Chris Seawood  <cls@seawood.org>
1668
1669         * init.c: Ditto.
1670
1671         * host.c: Ditto.
1672
1673         * connect.c: Ditto.
1674
1675         * sysdep.h: Support compilation under BEOS.
1676
1677 2001-06-08  Edward J. Sabol  <sabol@alderaan.gsfc.nasa.gov>
1678
1679         * url.c (url_equal): Fix a memory leak when parseurl returns an
1680         error on the second URL. Also, since url_equal is not used at the
1681         moment, do not compile it.
1682
1683         * url.h: Ditto for the prototype of url_equal.
1684
1685 2001-11-16  Hrvoje Niksic  <hniksic@arsdigita.com>
1686
1687         * html-parse.c (map_html_tags): Support XML-style empty tags.
1688
1689 2001-06-26  Hrvoje Niksic  <hniksic@arsdigita.com>
1690
1691         * wget.h (DO_REALLOC_FROM_ALLOCA): Check for do_realloc_newsize in
1692         loop condition because we're no longer setting SIZEVAR here.
1693
1694 2001-06-26  Hrvoje Niksic  <hniksic@arsdigita.com>
1695
1696         * wget.h (DO_REALLOC_FROM_ALLOCA): Set SIZEVAR after the memcpy()
1697         call because it needs the old value.
1698
1699 2001-06-18  Hrvoje Niksic  <hniksic@arsdigita.com>
1700
1701         * cookies.c (ATTR_NAME_CHAR): Allow almost any character to be in
1702         an attribute name.
1703
1704 2001-06-18  Hrvoje Niksic  <hniksic@arsdigita.com>
1705
1706         * url.c (url_filename): Make sure that slashes that sneak in to
1707         u->file via query string get protected.
1708         (file_name_protect_query_string): New function.
1709
1710 2001-06-14  Hrvoje Niksic  <hniksic@arsdigita.com>
1711
1712         * recur.c (recursive_retrieve): Also check undesirable_urls with
1713         canonicalized URL.
1714
1715 2001-06-14  Hrvoje Niksic  <hniksic@arsdigita.com>
1716
1717         * http.c (gethttp): Search `.netrc' with real host, not the proxy
1718         one.
1719
1720 2001-06-14  Hrvoje Niksic  <hniksic@arsdigita.com>
1721
1722         * sysdep.h (MAP_FAILED): Provide MAP_FAILED for systems that don't
1723         define it.
1724
1725 2001-06-09  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
1726
1727         * ftp.h: Provide correct prototype for ftp_parse_ls().
1728
1729 2001-06-04  Hrvoje Niksic  <hniksic@arsdigita.com>
1730
1731         * version.c: Wget 1.7 is released.
1732
1733 2001-06-03  Karl Eichwalder  <ke@suse.de>
1734
1735         * ftp-ls.c (ftp_parse_ls): Fix typo.
1736
1737 2001-05-27  Hrvoje Niksic  <hniksic@arsdigita.com>
1738
1739         * all: Update copyright information.
1740
1741 2001-05-26  Hrvoje Niksic  <hniksic@arsdigita.com>
1742
1743         * http.c (gethttp): Indicate that the continued download failed
1744         for *this* file.
1745
1746 2001-05-26  Hrvoje Niksic  <hniksic@arsdigita.com>
1747
1748         * version.c: Wget 1.7-pre1 is released.
1749
1750 2001-05-26  Hrvoje Niksic  <hniksic@arsdigita.com>
1751
1752         * version.c: Updated version to 1.7-pre1.
1753
1754 2001-05-14  Hrvoje Niksic  <hniksic@arsdigita.com>
1755
1756         * gen_sslfunc.c: Don't include <sys/time.h> directly.
1757
1758 2001-05-14  Hrvoje Niksic  <hniksic@arsdigita.com>
1759
1760         * http.c (gethttp): Use real URL data for cookies, not the proxy
1761         stuff.
1762
1763 2001-05-12  Hrvoje Niksic  <hniksic@arsdigita.com>
1764
1765         * main.c (print_help): Document `--no-http-keep-alive'.
1766
1767         * utils.c (numdigit): Handle negative numbers *correctly*.
1768
1769         * hash.c (make_nocase_string_hash_table): Use term "nocase" rather
1770         than the confusing "unsigned".
1771
1772         * utils.c (string_set_contains): Renamed from string_set_exists.
1773
1774         * hash.c (hash_table_contains): Renamed from hash_table_exists.
1775
1776         * cookies.c: Move case-insensitive hash tables to hash.c.
1777
1778 2001-05-09  Hrvoje Niksic  <hniksic@arsdigita.com>
1779
1780         * http.c (gethttp): Before concluding that the file is already
1781         fully retrieved, make sure that the file existed and `Range' was
1782         actually requested.
1783
1784 2001-05-09  Hrvoje Niksic  <hniksic@arsdigita.com>
1785
1786         * cookies.c (eliminate_dups): New function.
1787         (build_cookies_request): Use it.
1788         (build_cookies_request): Set chain_store_size after reallocating
1789         all_chains.
1790         (check_domain_match): Annotated for easier future debugging.
1791         (store_cookie): In the debug message, print whether the cookie is
1792         permanent.
1793
1794 2001-05-08  Hrvoje Niksic  <hniksic@arsdigita.com>
1795
1796         * http.c (http_loop): Reset no_truncate before deciding whether to
1797         set it.
1798         (gethttp): Further clarify "-c conflicts with existing file" error
1799         message, based on input from Herold Heiko.
1800
1801 2001-05-07  Hrvoje Niksic  <hniksic@arsdigita.com>
1802
1803         * http.c (http_loop): If restval is set, set no_truncate to 1
1804         unconditionally.
1805
1806 2001-05-02  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
1807
1808         * ftp-ls.c (ftp_parse_winnt_ls): Assure months are being correctly
1809         converted. Pointed out by <Stefan.Weil@de.heidelberg.com>.
1810         (ftp_parse_vms_ls): Ditto.
1811
1812 2001-04-30  Hrvoje Niksic  <hniksic@arsdigita.com>
1813
1814         * init.c (cmd_address): Zero SIN before using it; apparently
1815         needed on *BSD.
1816
1817 2001-04-29  Hrvoje Niksic  <hniksic@arsdigita.com>
1818
1819         * ftp.c (ftp_loop_internal): Don't set NO_TRUNCATE if the file is
1820         empty.
1821
1822 2001-04-29  Hrvoje Niksic  <hniksic@arsdigita.com>
1823
1824         * main.c (main): Make `--cookies' respect its argument.
1825
1826 2001-04-28  Hrvoje Niksic  <hniksic@arsdigita.com>
1827
1828         * main.c (main): Removed undocumented option `--email-address'.
1829
1830         * netrc.c: Use the latest read_whole_line.
1831
1832         * init.c (defaults): Set opt.ftp_pass to "-wget@".
1833
1834         * mswindows.c (pwd_cuserid): Ditto.
1835
1836         * utils.c (pwd_cuserid): Removed.
1837
1838         * host.c (ftp_getaddress): Removed.
1839
1840 2001-04-28  Hrvoje Niksic  <hniksic@arsdigita.com>
1841
1842         (http_loop): Allocate space for filename_plus_orig_suffix with
1843         alloca; this is more efficient and removes the need to free it
1844         before each and every return.
1845
1846 2001-04-28  Hrvoje Niksic  <hniksic@arsdigita.com>
1847
1848         * http.c (gethttp): Return RETRUNNEEDED when the retrieval is
1849         unneeded because the file is already there and fully downloaded,
1850         and -c is specified.
1851         (http_loop): Handle RETRUNNEEDED.
1852
1853         * wget.h (uerr_t): New value RETRUNNEEDED.
1854
1855         * http.c (http_loop): Set no_truncate for files that both exist
1856         and are non-empty.
1857         (gethttp): Consider the download finished when restval >= contlen,
1858         not only when restval==contlen.
1859         (gethttp): Handle redirection before giving up due to -c.
1860         (gethttp): Clarify error message which explains that -c will not
1861         truncate the file.
1862         (gethttp): When returning CONTNOTSUPPORTED, don't forget to free
1863         the stuff that needs freeing and release the socket.
1864
1865 2001-04-27  Hrvoje Niksic  <hniksic@arsdigita.com>
1866
1867         * main.c (print_help): Wget booleans accept "off", not "no".
1868
1869 2001-04-27  Hrvoje Niksic  <hniksic@arsdigita.com>
1870
1871         * http.c (http_loop): If allow_cache is zero, always disable
1872         caching, not only when retrieving through proxy.
1873
1874         * init.c: Ditto.
1875
1876         * options.h (struct options): Rename proxy_cache to allow_cache.
1877
1878 2001-04-27  Hrvoje Niksic  <hniksic@arsdigita.com>
1879
1880         * http.c (mktime_from_utc): Improve documentation.
1881         (http_atotm): Put format strings into a separate array.
1882
1883 2001-04-27  Hrvoje Niksic  <hniksic@arsdigita.com>
1884
1885         * safe-ctype.h: Instead of throwing #error when isalpha is
1886         defined, redefine it to something that will throw a compile-time
1887         error if actually *used*.  Do the same for the rest of the
1888         standard C macros.
1889
1890 2001-04-26  Hrvoje Niksic  <hniksic@arsdigita.com>
1891
1892         * url.c (getproxy): Ignore empty proxy vars.
1893
1894 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
1895
1896         * http.c (http_loop): Would load cookies every time.
1897
1898         * cookies.c (load_cookies): Handle cookies whose values contain
1899         embedded spaces.
1900
1901 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
1902
1903         * utils.c: Define each DIGITS_* in one line.
1904
1905 2001-04-25  Roger L. Beeman  <beeman@cisco.com>
1906
1907         * http.c (http_atotm): Initialize t.tm_isdst to 0.
1908         (mktime_from_utc): Prevent mktime() from having discontinuities at
1909         DST transition points.
1910
1911 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
1912
1913         * html-url.c (get_urls_html): Fix documentation.
1914
1915 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
1916
1917         * url.c (UNSAFE_CHAR): Reimplement using a static table.
1918         (url_init): Removed.
1919         (init_unsafe_char_table): Removed.
1920
1921 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
1922
1923         * snprintf.c (dopr): Replace ISDIGIT with '0' <= ch && ch <= '9'.
1924
1925 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
1926
1927         * utils.c: Document timer functions.
1928
1929         * retr.c (rate): Use it.
1930         (rate): Print in GB/s if transfer rate exceeds 1 GB/s.
1931
1932         * utils.c (wtimer_granularity): New function.
1933
1934 2001-04-24  Hrvoje Niksic  <hniksic@arsdigita.com>
1935
1936         * retr.c (show_progress): Ditto.
1937
1938         * ftp.c (getftp): Ditto.
1939
1940         * http.c (gethttp): Use new timer functions.
1941
1942         * utils.c (wtimer_allocate): New function.
1943         (wtimer_new): Ditto.
1944         (wtimer_delete): Ditto.
1945         (wtimer_reset): Ditto.
1946         (wtimer_elapsed): Ditto.
1947
1948 2001-04-24  Hrvoje Niksic  <hniksic@arsdigita.com>
1949
1950         * utils.c (long_to_string): New, faster version.  Favors smaller
1951         numbers; much of the calculation is now done at compile-time.
1952
1953 2001-04-24  Hrvoje Niksic  <hniksic@arsdigita.com>
1954
1955         * utils.c (numdigit): Handle negative numbers.
1956
1957 2001-04-23  Hrvoje Niksic  <hniksic@arsdigita.com>
1958
1959         * retr.c (show_progress): Print the download rate even when the
1960         percentages are not available.
1961
1962 2001-04-21  Hrvoje Niksic  <hniksic@arsdigita.com>
1963
1964         * ftp.c (getftp): Adjust expected_bytes if the length is
1965         authoritative.
1966
1967 2001-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
1968
1969         * url.c: Don't declare `construct'.
1970
1971         * hash.c (grow_hash_table): Speed up rehashing; inline storing of
1972         mappings to new locations.
1973         (hash_table_new): Make resize_threshold a field in the hash table,
1974         so we don't have to recalculate it in each hash_table_put.
1975         (grow_hash_table): Update resize_threshold.
1976         (MAX): Remove unused macro.
1977         (prime_size): Made static.
1978
1979 2001-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
1980
1981         * retr.c (retrieve_url): Call uri_merge, not url_concat.
1982
1983         * html-url.c (collect_tags_mapper): Call uri_merge, not
1984         url_concat.
1985
1986         * url.c (mkstruct): Use encode_string instead of xstrdup followed
1987         by URL_CLEANSE.
1988         (path_simplify_with_kludge): Deleted.
1989         (contains_unsafe): Deleted.
1990         (construct): Renamed to uri_merge_1.
1991         (url_concat): Renamed to uri_merge.
1992
1993 2001-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
1994
1995         * url.c (str_url): Use encode_string instead of the unnecessary
1996         CLEANDUP.
1997         (encode_string_maybe): New function, returns input string if no
1998         encoding is needed.
1999         (encode_string): Call encode_string_maybe to do the dirty work,
2000         xstrdup if no work needed.
2001
2002 2001-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
2003
2004         * wget.h (XDIGIT_TO_xchar): Define here.
2005
2006         * url.c (decode_string): Use new name.
2007         (encode_string): Ditto.
2008
2009         * http.c (XDIGIT_TO_xchar): Rename HEXD2asc to XDIGIT_TO_xchar.
2010         (dump_hash): Use new name.
2011
2012         * wget.h: Rename ASC2HEXD and HEXD2ASC to XCHAR_TO_XDIGIT and
2013         XDIGIT_TO_XCHAR respectively.
2014
2015 2001-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
2016
2017         * init.c: Include cookies.h.
2018
2019         * cookies.h: Declare cookies_cleanup.
2020
2021         * cookies.c (check_domain_match): Remove unused variable.
2022         (save_cookies): Remove extraneous argument from debug statement.
2023
2024         * host.c (same_host): Don't call skip_url.
2025
2026         * url.c (skip_url): Removed.  Removed its calls from various
2027         functions in url.c.
2028
2029 2001-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
2030
2031         * cookies.c (unsigned_string_hash): Use the new code in
2032         string_hash as reference.
2033
2034         * hash.c (hash_table_map): Allow deletion and change of the
2035         element processed by MAPFUN.
2036         (string_hash): Use the function from glib.
2037
2038 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
2039
2040         * config.h.in: Include #undef stub.
2041
2042         * hash.c (hash_table_remove): Rewrite to actually clear deleted
2043         entries instead of just marking them as deleted.
2044
2045 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
2046
2047         * hash.h: Declare hash_table_get_pair and hash_table_count.
2048
2049 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
2050
2051         * cookies.c: Declare http_atotm.
2052
2053 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
2054
2055         * ftp-ls.c (ftp_parse_unix_ls): Use octal constants for
2056         permissions.  A compiler that doesn't accept octal constants is
2057         seriously broken and shouldn't be used -- octal constants were
2058         present in K&R C!
2059
2060 2001-01-20  Karl Eichwalder  <ke@suse.de>
2061
2062         * Makefile.in: Provide and use DESTDIR according to the Coding
2063         Standards.
2064
2065 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
2066
2067         * ftp-ls.c (ftp_parse_vms_ls): Make seconds optional in time
2068         specification.
2069
2070 2001-04-11  Hrvoje Niksic  <hniksic@arsdigita.com>
2071
2072         * url.c (parseurl): Don't strip trailing slash when u->dir is "/"
2073         because that strips the *leading* slash, thus forcing relative
2074         FTP retrieval.
2075
2076 2001-04-10  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
2077
2078         * ftp.c (getftp): Convert initial FTP directory from VMS to UNIX
2079         notation for VMS servers.
2080         (ftp_retrieve_dirs): Do not prepend '/' to f->name when
2081         odir is an empty string.
2082
2083 2001-04-10  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
2084
2085         * ftp-ls.c (ftp_parse_winnt_ls): Made the fix for AM/PM more
2086         effective. Suggested by Edward J. Sabol.
2087
2088 2001-04-10  Hrvoje Niksic  <hniksic@arsdigita.com>
2089
2090         * cookies.c (build_cookies_request): Use and sort cookies from all
2091         matching domains.
2092         (build_cookies_request): Check for duplicates before generating
2093         the `Cookies' header.
2094
2095         * main.c (main): Don't load cookies here.
2096         (main): Make loadcookies and savecookies call the correct command.
2097
2098         * http.c (http_loop): Load cookies on-demand.
2099
2100 2001-04-09  Hrvoje Niksic  <hniksic@arsdigita.com>
2101
2102         * http.c (gethttp): Fix indentation of SSL ifdef.
2103
2104 2001-04-09  Hrvoje Niksic  <hniksic@arsdigita.com>
2105
2106         * ftp.c (ftp_retrieve_dirs): Don't forcibly prepend "/" to u->dir;
2107         that hack is no longer necessary.
2108         (getftp): Prepend initial directory to *non*-absolute u->dir's.
2109
2110 2001-04-09  Hrvoje Niksic  <hniksic@arsdigita.com>
2111
2112         * init.c (cmd_file): New function.
2113         (enable_tilde_expansion): New variable.
2114         (run_wgetrc): Use it.
2115         (cmd_file): Use it.
2116
2117 2001-04-08  Hrvoje Niksic  <hniksic@arsdigita.com>
2118
2119         * init.c: Include cookie-related options.
2120
2121         * main.c (main): Include cookie-specific options.
2122         (main): Load cookies before download is finished.
2123         (main): Save cookies when done.
2124
2125         * http.c (gethttp): Process the `Set-Cookie' header.
2126         (gethttp): Include cookies in the response.
2127
2128         * cookies.c: New file.
2129
2130 2001-04-08  Hrvoje Niksic  <hniksic@arsdigita.com>
2131
2132         * utils.c (datetime_str): New function.
2133
2134 2001-04-08  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
2135
2136         * ftp-ls.c (ftp_parse_winnt_ls): The AM/PM change did assume
2137         12:01PM == 00:01, which was obviously wrong. Taken care of this
2138         anomaly.
2139
2140         * ChangeLog: Removed an excess conflict marker. Reformatted the
2141         entry by Philipp Thomas from 2001-03-09.
2142
2143         * ftp-ls.c (ftp_parse_winnt_ls): Ensure that adjusted PM hours lay
2144         between 0 and 23. Elminate unused variable `sec'.
2145
2146 2001-04-08  Hrvoje Niksic  <hniksic@arsdigita.com>
2147
2148         * hash.c (hash_table_count): New function.
2149
2150 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
2151
2152         * utils.c (read_file): Cast MAP_FAILED to char *.  Enforced by
2153         Digital Unix cc.
2154
2155 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
2156
2157         * config.h.in: Oops, do the namespace tweaks only on systems we
2158         know about.
2159
2160 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
2161
2162         * hash.c: Include <string.h>.
2163
2164 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
2165
2166         * config.h.in: Define "compilation environment" options that work
2167         under Linux and Solaris.  To be reviewed on other OS'es.
2168
2169 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
2170
2171         * http.c (gethttp): Prepend literal newline with `\n\'.
2172
2173 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
2174
2175         * sysdep.h: Don't define VERY_LONG_FORMAT.
2176
2177         * utils.c (very_long_to_string): New function.
2178         (legible_very_long): Use it; don't use VERY_LONG_FORMAT.
2179
2180 2001-04-04  Christian Fraenkel  <christian.fraenkel@gmx.net>
2181
2182         * url.c (parse_uname): Would run past the end of the string if the
2183         username was present, but the URL did not contain a slash, e.g.
2184         http://foo:bar@myhost.
2185
2186 2001-04-03  KOJIMA Hajime  <kjm@rins.ryukoku.ac.jp>
2187
2188         * http.c (http_atotm): Use %A instead of %a to match full
2189         weekday.  (On most systems there is no difference.)
2190
2191 2001-04-03  Paul Bludov  <paul@ozero.net>
2192
2193         * mswindows.c (sleep): Use SleepEx() instead of Sleep().
2194         (ws_changetitle): Use alloca() instead of malloc() to avoid memory
2195         leak.
2196         (ws_mypath): Use GetModuleFileName instead of argv[0].
2197         (ws_startup): Use data.wVersion for comparison.
2198
2199 2001-04-02  Hrvoje Niksic  <hniksic@arsdigita.com>
2200
2201         * http.c (http_loop): Ditto.
2202
2203         * ftp.c (ftp_loop_internal): Made the check whether to continue
2204         retrieval `-O'-friendly.
2205
2206 2001-04-02  Hrvoje Niksic  <hniksic@arsdigita.com>
2207
2208         * netrc.c (parse_netrc): Don't trim the line endings explicitly;
2209         they will be handled as whitespace.
2210         (parse_netrc): Correctly handle lines that end with whitespace.
2211
2212 2001-04-02  Hrvoje Niksic  <hniksic@arsdigita.com>
2213
2214         * retr.c (retrieve_url): New variable global_download_count used
2215         to identify first retrieval.
2216
2217         * ftp.c (getftp): Ditto.
2218
2219         * http.c (gethttp): Rewind opt.dfp only on first retrieval.
2220
2221 2001-04-02  Hrvoje Niksic  <hniksic@arsdigita.com>
2222
2223         * init.c (cmd_address): Heap-allocate the address that gets stored
2224         to CLOSURE.  Old code would simply assign an address on the stack.
2225
2226 2001-04-01  Nicolas Lichtmaier <nick@debian.org>
2227
2228         * ftp.c (ftp_get_listing): Propagate error status.
2229         (ftp_retrieve_glob): Use it.
2230         (ftp_loop): Ditto.
2231
2232 2001-04-01  Nicolas Lichtmaier <nick@debian.org>
2233
2234         * main.c (main): Add -C to the string that is the third arg to
2235         getopt_long().
2236
2237 2001-04-01  Hrvoje Niksic  <hniksic@arsdigita.com>
2238
2239         * ftp.c (getftp): Don't start the download from scratch if `-c'
2240         was specified, but the file is already fully downloaded.
2241
2242         * http.c (gethttp): Don't truncate a pre-existing file if `-c' was
2243         specified and the server doesn't support continued download.
2244         (gethttp): Don't start the download from scratch if `-c' was
2245         specified, but the file is already fully downloaded.
2246
2247 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
2248
2249         (recursive_retrieve): Don't clear the hash tables at this point at
2250         all; it interferes with the normal operation of register_download.
2251
2252 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
2253
2254         * recur.c (recursive_retrieve): Clear the hash tables only when
2255         they are defined.
2256
2257 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
2258
2259         * http.c (gethttp): Make sure the socket is closed with
2260         CLOSE_INVALIDATE before we have drained the body.
2261
2262 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
2263
2264         * retr.c (retrieve_url): Call register_download() for downloaded
2265         files and register_html() for downloaded HTML files.
2266
2267         * recur.c (register_download): New function; register here that a
2268         file has been downloaded, rather than in recursive_retrieve().
2269         (register_html): New function; enqueue the location of HTML files
2270         here rather than in recursive_retrieve().
2271
2272 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
2273
2274         * main.c (print_help): Use multiple fputs instead of a single ugly
2275         printf().
2276         (main): Consistently assign numbers >128 to options without a
2277         corresponding character.
2278
2279 2001-03-09  Philipp Thomas  <pthomas@suse.de>
2280
2281         * safe-ctype.h: New file. Locale independent ctype.h replacement
2282         taken from libiberty.
2283
2284         * safe-ctype.c: New file. Tables for above.
2285
2286         * Makefile.in: Add safe-ctype$o to OBJS.  Add dependencies for
2287         safe-ctype$o.
2288
2289         * cmpt.c: Remove include of ctype.h. Use ISSPACE instead of
2290         isspace.
2291
2292         * ftp-basic.c: Don't include ctype.h.
2293
2294         * ftp-ls.c: Likewise.
2295
2296         * ftp.c: Likewise.
2297
2298         * headers.c: Likewise.
2299
2300         * host.c: Likewise.
2301
2302         * html-parse.c: Likewise.
2303
2304         * html-url.c: Likewise.
2305
2306         * http.c: Likewise.
2307
2308         * init.c: Likewise.
2309
2310         * main.c: Likewise. Set LC_CTYPE along with LC_MESSAGES.
2311
2312         * netrc.c: Likewise.
2313
2314         * recur.c: Likewise.
2315
2316         * retr.c: Likewise.
2317
2318         * snprintf.c: Replace ctype.h with safe-ctype.h. Use ISDIGIT
2319         instead of isdigit.
2320
2321         * sysdep.h: Remove defines of ctype macros as they aren't needed
2322         for safe-ctype-h.
2323
2324         * url.c: Don't include ctype.h.
2325
2326         * utils.c: Likewise.
2327
2328         * wget.h: Include safe-ctype.h.
2329
2330 2001-03-27  Dan Harkless  <wget@harkless.org>
2331
2332         * Makefile.in: Moved top_builddir out of "User configuration
2333         section" of top Makefile and analogous spot in this one.
2334
2335 2001-03-17  Dan Harkless  <wget@harkless.org>
2336
2337         * Makefile.in: Include @SSL_INCLUDES@ substition in INCLUDES.
2338         Define top_builddir.  Link wget with libtool so the user doesn't
2339         have to supply a bunch of custom environment variables to
2340         correctly link with the OpenSSL shared libraries.
2341
2342 2001-03-06  Hack Kampbjorn  <hack@hackdata.com>
2343
2344         * http.c (gethttp): skip :port in host header if it is the
2345         DEFAULT_HTTPS_PORT when using SSL.
2346
2347         * url.c: move the #define of DEFAULT_HTTP_PORT, DEFAULT_FTP_PORT
2348         and DEFAULT_HTTPS_PORT to the header file so it can be use in the
2349         rest of the code.
2350         * url.h: Ditto
2351
2352 2001-03-01  Jonas Jensen  <bones@huleboer.dk>
2353
2354         * retr.c (show_progress): Correctly calculate the number of bytes
2355         in the first line of the download that have been actually
2356         downloaded in this run.
2357
2358 2001-02-23  Dan Harkless  <wget@harkless.org>
2359
2360         * main.c (print_help): --help documentation for -N said it would
2361         re-download files if they had the _same_ timestamp on server.
2362         (print_help): -nr belongs in "FTP options" section of --help
2363         output, not "Recursive retrieval" section.  Alphabetized FTP
2364         options by long option name.
2365
2366 2001-02-16  Dan Harkless  <wget@harkless.org>
2367
2368         * init.c (commands): Hack Kampbjørn <hack@hackdata.com> discovered
2369         that "httpsproxy" had been inserted into commands[] out of
2370         alphabetical order, causing "BUG: unknown command `httpuser'".
2371
2372 2001-02-13  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
2373
2374         * ftp-ls.c (ftp_parse_ls): Added support of ST_MACOS (Unix-like
2375         listing without correct permissons).
2376
2377         * ftp.h (stype): Added ST_MACOS to identify the NetPresenz MacOS
2378         FTP server.
2379
2380         * ftp.c (ftp_retrieve_list): New mirroring logic: A remote file
2381         shall be donwloaded only when it's newer than the local copy or
2382         when it has the same timeestamp but its size is different. ST_VMS
2383         and ST_MACOS as special cases that lie about file size.
2384
2385         * ftp-ls.c (ftp_parse_ls): Support for ST_MACOS.
2386
2387         * Makefile.in: Removed dependency on ftpparse library due to unclear
2388         copyright issues and absence of any feedback to our queries.
2389
2390         * ftp-ls.c: Removed dependency on ftpparse library due to unclear
2391         copyright issues and absence of any feedback to our queries.
2392         (ftp_parse_ls): Added a warning message when remote server system
2393         does not seem to be suported by wget.
2394         (ftp_parse_vms_ls): New function for parsing VMS ftp
2395         server listing output.
2396         (clean_line): New function responsible for removing
2397         end-of-line characters from FTP listing texts.
2398
2399         * ftp.c (getftp): Global variables pwd and host_type are now
2400         member of the ccon structure under names ccon.id and ccon.rs.
2401
2402         * ftp.h (struct ccon): Added formed global variables from ftp.c,
2403         enum stype rs (remote system identification) and char *id (initial
2404         working directory), as suggested by Hrvoje.
2405
2406         * url.c (parse_uname): Added support for passwords containing '@'
2407         characters.
2408         (skip_uname): Ditto.
2409
2410 2001-02-11  Hrvoje Niksic  <hniksic@arsdigita.com>
2411
2412         * ftp.c (ftp_loop): Reset con.
2413
2414 2001-01-06  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
2415
2416         * url.c (parse_uname): Added support for passwords containing '@'
2417         characters.
2418         (skip_uname): Ditto.
2419
2420 2001-02-11  Hack Kampbjørn  <hack@hackdata.com>
2421
2422         * url.c (parseurl): Debug-print u->ftp_type.
2423
2424 2001-02-11  Hrvoje Niksic  <hniksic@arsdigita.com>
2425
2426         * ftp.c (ftp_loop_internal): Disable padding.
2427         (getftp): Ditto.
2428
2429         * http.c (http_loop): Disable padding.
2430
2431         * retr.c (show_progress): Use it to enable padding.
2432
2433         * retr.c (rate): Optional parameter PAD for padding the rate.
2434
2435 2001-02-10  Hrvoje Niksic  <hniksic@arsdigita.com>
2436
2437         * retr.c (show_progress): Make sure that the last output line
2438         includes progress.
2439
2440 2001-02-10  Jonas Jensen  <bones@huleboer.dk>
2441
2442         * retr.c (show_progress): Print the download rate along with the
2443         percentages.
2444         Along with Anders Thorsby <anders@thorsby.dk>.
2445
2446 2001-02-10  Tim Mooney  <mooney@dogbert.cc.ndsu.NoDak.edu>
2447
2448         * ftp.h: Rename enums `command' to `wget_ftp_command' and
2449         `fstatus' to `wget_ftp_status' because old names clash with Tru64
2450         net/if.h.
2451
2452 2001-02-08  Christian Fraenkel <christian.fraenkel@gmx.net>
2453
2454         * gen_sslfunc.c: verify_callback is now static
2455
2456         * gen_sslfunc.c (init_ssl): load certificate if specified
2457
2458         * gen_sslfunc.c (ssl_printerr): new function
2459
2460         * init.c: added new --sslcertfile and --sslcertkey switches
2461
2462         * main.c: ditto
2463
2464         * options.h: ditto
2465
2466         * http.c (gethttp): abort when init_ssl fails
2467
2468 2001-01-23  Herold Heiko  <Heiko.Herold@previnet.it>
2469
2470         * mswindows.h: Include <malloc.h>; it's needed for alloca().
2471
2472 2001-01-10  Dan Harkless  <wget@harkless.org>
2473
2474         * url.c (str_url): Clarified this function's comment header after
2475         Hrvoje answered my question on the list as to when hide != 1.
2476         Also Hrvoje pointed out I need to use xstrdup() on the string literal.
2477
2478 2001-01-06  Hrvoje Niksic  <hniksic@arsdigita.com>
2479
2480         * connect.c (bindport): Declare addrlen as int.  Diagnosed by
2481         Drazen Kacar <dave@arsdigita.com>.
2482         (conaddr): Ditto.
2483
2484 2001-01-09  Dan Harkless  <wget@harkless.org>
2485
2486         * html-url.c: A bunch of fixup of `--page-requisites'-related
2487         comments to reflect Hrvoje's changes to my code when transplanting
2488         it into this new file, to fix spelling mistakes, to clarify, etc.
2489
2490         * url.c (write_backup_file): Clarified a comment.
2491         (str_url): Henrik van Ginhoven pointed out on the list that we
2492         shouldn't give away the number of characters in the password by
2493         replacing each character with a 'x'.  Use "<password>" instead.
2494
2495         * ftp.c (ftp_retrieve_dirs): The bug where recursion into FTP
2496         directories didn't work if logging in put you in a directory other
2497         than "/" is fixed now.  Removed the comment here warning of the bug.
2498
2499         * main.c (print_help): --continue's description was misleading.
2500         We don't "restart", we "resume".  Also, better to say
2501         "partially-downloaded file" rather than just "existing file".
2502
2503 2001-01-06  Dan Harkless  <wget@harkless.org>
2504
2505         * ChangeLog: The '[Not in 1.6 branch.]'s were decided not to be
2506         the best way to go about my aim.  Removed them in favor of:
2507
2508         * ChangeLog-branches/1.6_branch.ChangeLog: New file.
2509
2510 2001-01-04  Hrvoje Niksic  <hniksic@arsdigita.com>
2511
2512         * url.c (replace_attr): New function, to be used by both
2513         TO_COMPLETE and TO_RELATIVE case in convert_links.
2514         (find_fragment): New function for finding URL fragments.
2515         (replace_attr): Better handle the case where the original string
2516         is not quoted.  Use find_fragment.
2517         (convert_links): Use replace_attr().
2518
2519 2000-12-31  Dan Harkless  <wget@harkless.org>
2520
2521         * ChangeLog: Since this flat file doesn't have multiple branches,
2522         looking at the dates would make you think that things went into
2523         1.6 that actually just went into the 1.7-dev branch.  Added "[Not
2524         in 1.6 branch.]" where appropriate to clarify.
2525
2526 2000-12-30  Dan Harkless  <wget@harkless.org>
2527
2528         * ftp.c, http.c:  Applied Hack Kampbjørn <hack@hackdata.com>'s
2529         patch to deal with h_errno not being defined in netdb.h under Cygwin.
2530
2531 2000-12-18  Csaba Raduly  <csaba.raduly@sophos.com>
2532
2533         * sysdep.h: Include <malloc.h> and <io.h> under Watcom.
2534
2535 2000-12-17  Igor Khristophorov  <igor@atdot.org>
2536
2537         * http.c (check_end): Fix test for '+' or '-'.
2538
2539 2000-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
2540
2541         * url.c (parseurl): Rename inner loop var from i to ind to avoid
2542         clash with the function top-level-declared variable i.
2543         (str_url): Likewise, rename inner-loop i to j.
2544
2545         * recur.c (parse_robots): Don't declare LEN at top of function.
2546         (robots_match): Renamed parameter FORBIDDEN to avoid hiding of
2547         global variable.
2548
2549         * main.c (main): Change erroneous use of bitwise and to logical.
2550
2551         * init.c (cmd_address): Don't heap-allocate `sin'; it can be on
2552         the stack because it will be copied to closure.
2553
2554         Thanks to Csaba Raduly's run of PC-LINT over the sources.
2555
2556 2000-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
2557
2558         * http.c (basic_authentication_encode): Use xmalloc(), not
2559         malloc().  Thanks to Csaba Raduly's run of PC-LINT over the
2560         sources.
2561
2562 2000-12-17  Csaba Raduly  <csaba.raduly@sophos.com>
2563
2564         * sysdep.h: Test for __EMX__ rather than for EMXOS2 for OS/2
2565         compilation.
2566
2567 2000-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
2568
2569         * mswindows.c: Include <errno.h>.
2570
2571         * gen_sslfunc.c: Include <errno.h>.
2572
2573         * ftp-basic.c: Don't attempt to declare errno or h_errno because
2574         they're not used.
2575
2576         * main.c: Include <errno.h> because errno is used.
2577
2578         * ftp.c: Ditto.
2579
2580         * http.c: Include <netdb.h> for h_errno.
2581
2582 2000-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
2583
2584         * html-parse.c (advance_declaration): MSVC assert() chokes on
2585         '\"'.  Use '"' instead.
2586
2587 2000-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
2588
2589         * utils.c (xfree_real): Removed.
2590         (xfree_debug): Just call free().
2591
2592         * wget.h (xfree): Make it an alias for free.
2593
2594 2000-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
2595
2596         * http.c (http_loop): Furthermore, touch output_document only if
2597         it is known to be an existing regular file.
2598
2599 2000-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
2600
2601         * ftp.c (ftp_retrieve_list): Ditto.
2602
2603         * http.c (http_loop): Touch output_document if that is used for
2604         output.
2605
2606 2000-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
2607
2608         * http.c: Include gen_sslfunc.h after including Wget's headers.
2609         (persistent_available_p): Needed coma before `int ssl'.
2610
2611 2000-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
2612
2613         * ftp.c (ftp_loop_internal): Ditto.
2614
2615         * http.c (http_loop): Use it.
2616
2617         * retr.c (sleep_between_retrievals): New function that handles the
2618         logic of opt.wait and opt.waitretry.
2619
2620 2000-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
2621
2622         * rbuf.h: Implement only a single version of RBUF_READCHAR, using
2623         rbuf_read_bufferful when the buffer is depleted.
2624
2625         * rbuf.c (rbuf_read_bufferful): New function.
2626
2627 2000-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
2628
2629         * gen_sslfunc.h: Use ansi2knr style function declarations.
2630
2631         * gen_sslfunc.c: Reformat according to the GNU coding standards.
2632         More should be done.
2633
2634         * http.c (persistent_available_p): Place the cheap SSL test nearer
2635         the top of the function.
2636         (CLOSE_FINISH, CLOSE_INVALIDATE): Define only one version of each.
2637
2638 2000-12-05  Hrvoje Niksic  <hniksic@arsdigita.com>
2639
2640         * url.c (init_unsafe_char_table): Reinstate space as an unsafe
2641         char.
2642
2643 2000-12-03  Christian Fraenkel <christian.fraenkel@gmx.net>
2644
2645         * Makefile.in: added gen_sslfunc object
2646         * config.h.in: added HAVE_SSL define
2647         * connect.c: changed select_fd from static int to int
2648         * connect.h: ditto
2649         * gen_sslfunc.h: New file
2650         * gen_sslfunc.c: ditto
2651         * http.c: added HTTPS fuctionality
2652         * retrc.c: ditto
2653         * url.c: ditto
2654         * init.c: added opt.httpsproxy
2655         * options.h: ditto
2656         * rbuf.h: added alternate rbuf struct
2657         * wget.h: added CONSSLERR
2658         * rbuf.c: ditto
2659
2660         * http.c: Added HTTPS fuctionality.
2661
2662         * retrc.c: Ditto.
2663
2664         * url.c: Ditto.
2665
2666         * init.c: Added opt.httpsproxy.
2667
2668         * options.h: Ditto.
2669
2670         * rbuf.h: Added alternate rbuf struct.
2671
2672         * wget.h: Added CONSSLERR.
2673
2674         * rbuf.c: Ditto.
2675
2676 2000-11-30  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
2677
2678         * ftp-ls.c (ftp_parse_unix_ls): Added second parameter
2679         "ignore_perms" to ignore file and directory permissions for
2680         Windows NT FTP server listings.
2681         (ftp_parse_winnt_ls): New function.
2682         (ftp_parse_ls): Parses UNIX and Windows NT listings
2683         separately. Simple heuristics for distinguishing between UNIX and
2684         MS-DOS-like FTP listing provided by Windows NT FTP service.
2685
2686 2000-11-18  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
2687
2688         * ftpparse.c, ftpparse.h: New files.
2689
2690         * ftp-ls.c (ftp_parse_ls): Use ftp_parse_unix_ls for UNIX servers
2691         only. Use ftp_parse_nonunix_ls otherwise.
2692         (ftp_parse_nonunix_ls): Stub to the ftpparse library handling all
2693         exotic FTP servers.
2694
2695         * ftp.h (stype): New enum, distinguishes UNIX, VMS, and "other"
2696         FTP servers.
2697
2698         * ftp.c: New static wariables host_type, pwd, and pwd_len.
2699         (getftp): Support for VMS. Support for FTP servers that do not
2700         place you in the root directory after login.
2701         (ftp_retrieve_list): VMS is silent about the real file size, issue
2702         a more appropriate message.
2703         (ftp_get_listing): Pass host_type to ftp_parse_ls.
2704
2705         * ftp-basic.c (ftp_pwd, ftp_syst): New functions.
2706
2707 2000-11-30  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
2708
2709         * ftp-ls.c (ftp_parse_unix_ls): Added second parameter
2710         "ignore_perms" to ignore file and directory permissions for
2711         Windows NT FTP server listings.
2712         (ftp_parse_winnt_ls): New function.
2713         (ftp_parse_ls): Parses UNIX and Windows NT listings
2714         separately. Simple heuristics for distinguishing between UNIX
2715         and MS-DOS-like FTP listing provided by Windows NT FTP service.
2716
2717 2000-11-29  John Summerfield  <summer@OS2.ami.com.au>
2718
2719         * netrc.c (parse_netrc): Get rid of line ending.
2720
2721 2000-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
2722
2723         * ftp.c (ftp_retrieve_list): Undo typo "fix" until resolution by
2724         Dan.
2725
2726 2000-11-24  Karl Eichwalder  <ke@suse.de>
2727
2728         * main.c (print_help): Untabify.
2729
2730 2000-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
2731
2732         * utils.c (xrealloc_debug): Do the unregister/register thing only
2733         if the pointer has actually changed.
2734         (xmalloc_real): Declare `static' in DEBUG_MALLOC builds.
2735         (xfree_real): Ditto.
2736         (xrealloc_real): Ditto.
2737         (xstrdup_real): Ditto.
2738
2739 2000-11-22  Hrvoje Niksic  <hniksic@arsdigita.com>
2740
2741         * ftp.c (getftp): ftp_getaddress() returns a malloc'ed copy of the
2742         string; no need to strdup() it.
2743         (getftp): Make pwd_len a local variable.
2744         (ftp_loop): Free PWD before returning.
2745
2746         * init.c (cleanup): Free opt.ftp_pass only if it's non-NULL.
2747
2748 2000-11-22  Hrvoje Niksic  <hniksic@arsdigita.com>
2749
2750         * all: Use xfree() instead of free.
2751
2752         * utils.c (xfree): New function.
2753
2754 2000-11-21  Hrvoje Niksic  <hniksic@arsdigita.com>
2755
2756         * url.c (convert_links): HTML-quote the converted string.
2757
2758         * utils.c (html_quote_string): Move here from ftp-ls.c
2759         (html_quote_string): Make non-static; declare in utils.h.
2760         (html_quote_string): Convert SP to &#32;.
2761
2762 2000-11-21  Hrvoje Niksic  <hniksic@arsdigita.com>
2763
2764         * ftp.c (getftp): Reformat Jan's code according to GNU coding
2765         standards; remove (debugging?) printf's; use '\0' for the ASCII
2766         zero character.  Use alloca() instead of malloc() for
2767         inter-function temporary allocations.
2768
2769 2000-11-18  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
2770
2771         * ftpparse.c, ftpparse.h: New files.
2772
2773         * ftp-ls.c (ftp_parse_ls): Use ftp_parse_unix_ls for UNIX servers
2774         only. Use ftp_parse_nonunix_ls otherwise.
2775         (ftp_parse_nonunix_ls): Stub to the ftpparse library handling all
2776         exotic FTP servers.
2777
2778         * ftp.h (stype): New enum, distinguishes UNIX, VMS, and "other"
2779         FTP servers.
2780
2781         * ftp.c: New static wariables host_type, pwd, and pwd_len.
2782         (getftp): Support for VMS. Support for FTP servers that do not
2783         place you in the root directory after login.
2784         (ftp_retrieve_list): VMS is silent about the real file size, issue
2785         a more appropriate message.
2786         (ftp_get_listing): Pass host_type to ftp_parse_ls.
2787
2788         * ftp-basic.c (ftp_pwd, ftp_syst): New functions.
2789
2790 2000-11-21  Hrvoje Niksic  <hniksic@arsdigita.com>
2791
2792         * hash.c (hash_table_put): Don't overwrite deleted mappings.
2793
2794 2000-11-21  Hrvoje Niksic  <hniksic@arsdigita.com>
2795
2796         * hash.c (find_mapping): New function.
2797         (hash_table_get): Use it.
2798         (hash_table_get_pair): Ditto.
2799         (hash_table_exists): Ditto.
2800         (hash_table_remove): Ditto.
2801         (hash_table_remove): Really delete the entry if the mapping
2802         following LOCATION is empty.
2803
2804         * utils.c (string_set_add): Check whether the element has existed
2805         before.
2806
2807         * hash.c (hash_table_get_pair): New function.
2808
2809 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
2810
2811         * http.c (http_process_type): Ignore trailing whitespace; use
2812         strdupdelim().
2813
2814         * recur.c (recursive_retrieve): Use the new `convert' field.
2815         (convert_all_links): Ditto.
2816         (convert_all_links): Don't respect meta_disallow_follow.
2817
2818         * html-url.c (handle_link): Fill out link_relative_p and
2819         link_complete_p.
2820
2821         * url.h (struct _urlpos): Make elements more readable.
2822
2823         * recur.c (recursive_retrieve): Call slist_prepend instead of
2824         slist_append.
2825         (convert_all_links): Call slist_nreverse before iterating through
2826         urls_html.
2827
2828         * utils.c (slist_prepend): New function.
2829         (slist_nreverse): Ditto.
2830
2831 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
2832
2833         * http.c (check_end): Constify.
2834
2835 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
2836
2837         * http.c (http_loop): If username and password are known, try the
2838         `Basic' authentication scheme by default.
2839
2840         * connect.h: Declare test_socket_open.
2841
2842 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
2843
2844         * version.c: Bump version from 1.5.3+dev to 1.7-dev.
2845
2846 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
2847
2848         * http.c (gethttp): Don't use the return value of sprintf().
2849         (gethttp): Inhibit keep-alive if opt.http_keep_alive is 0.
2850
2851 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
2852
2853         * recur.c (recursive_retrieve): Print the "so we don't load"
2854         debugging message only if we really don't load.
2855
2856         * http.c (gethttp): Inhibit keep-alive if proxy is being used.
2857         (gethttp): Don't request keep-alive if keep-alive is inhibited.
2858
2859 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
2860
2861         * http.c (gethttp): Make the HTTP persistent connections more
2862         robust.
2863
2864 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
2865
2866         * retr.c (get_contents): If use_expected, make sure that the
2867         appropriate amount of data is being read.
2868
2869         * http.c (gethttp): Check for both `Keep-Alive: ...' and
2870         `Connection: Keep-Alive'.
2871
2872         * wget.h (DEBUGP): Call debug_logprintf only if opt.debug is
2873         turned on.
2874
2875 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
2876
2877         * http.c (connection_available_p): Use it.
2878
2879         * connect.c (test_socket_open): New function.
2880
2881         * http.c (gethttp): Support persistent connections.  Based on the
2882         ideas, and partly on code, by Sam Horrocks <sam@daemoninc.com>.
2883         (register_persistent): New function.
2884         (connection_available_p): Ditto.
2885         (invalidate_connection): Ditto.
2886
2887 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
2888
2889         * url.c (convert_links): Handle UREL2ABS case.
2890
2891         * recur.c (recursive_retrieve): Instead of the list
2892         urls_downloaded, use hash tables dl_file_url_map and
2893         dl_url_file_map.
2894         (convert_all_links): Use them to retrieve data.
2895
2896         * host.c (clean_hosts): Free the hash tables.
2897
2898         * main.c (private_initialize): Call host_init().
2899
2900         * host.c (store_hostaddress): Use a saner, hash table-based data
2901         model.
2902         (realhost): Ditto.
2903         (host_init): Initialize the hash tables.
2904
2905 2000-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
2906
2907         * utils.c (slist_append): Eviscerate NOSORT.  Hash tables are now
2908         used for what the sorted slists used to be used for.
2909         (slist_contains): Don't rely on the list being sorted.
2910         (slist_append): Simplify the code.
2911
2912         * recur.c (recursive_cleanup): Use free_string_set.
2913
2914         * utils.c (string_set_add, string_set_exists, string_set_free):
2915         New functions for easier freeing of hash tables whose keys are
2916         strdup'ed strings.
2917
2918         * recur.c (recursive_retrieve): Use the hash table functions for
2919         storing undesirable URLs.
2920
2921         * hash.c: New file.
2922
2923 2000-11-17  Hrvoje Niksic  <hniksic@arsdigita.com>
2924
2925         * main.c (private_initialize): Call url_init.
2926         (main): Call private_initialize.
2927
2928         * url.c (unsafe_char_table): New table.
2929         (UNSAFE_CHAR): Use it.
2930         (init_unsafe_char_table): New function.
2931         (url_init): New function; call init_unsafe_char_table.
2932
2933 2000-11-16  Hrvoje Niksic  <hniksic@arsdigita.com>
2934
2935         * mswindows.h: Define snprintf and vsnprintf to _snprintf and
2936         _vsnprintf respectively.
2937
2938 2000-11-15  Hrvoje Niksic  <hniksic@arsdigita.com>
2939
2940         * config.h.in: Do the _XOPEN_SOURCE and _SVID_SOURCE things only
2941         on Linux.
2942
2943 2000-11-15  Hrvoje Niksic  <hniksic@arsdigita.com>
2944
2945         * html-url.c (handle_link): Handle HTML fragment identifiers.
2946
2947         * recur.c (recursive_retrieve): If norobot info is respected and
2948         the file is specified not to be followed by robots, respect that.
2949
2950         * html-url.c (collect_tags_mapper): Handle <meta name=robots
2951         content=X>.  For us the important cases are where X is NONE or
2952         where X contains NOFOLLOW.
2953         (get_urls_html): Propagate that information to the caller.
2954
2955 2000-11-13  Hrvoje Niksic  <hniksic@arsdigita.com>
2956
2957         * url.c (convert_links): Unlink the file we might be reading from
2958         before writing to it.
2959         (convert_links): Use alloca instead of malloc for
2960         filename_plus_orig_suffix.
2961
2962 2000-11-12  Hrvoje Niksic  <hniksic@arsdigita.com>
2963
2964         * host.c (realhost): Add HOST to the list with quality==0 only if
2965         it wasn't already there.
2966         Based on analysis by Lu Guohan <feng@public.bjnet.edu.cn>.
2967
2968 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
2969
2970         * url.c (get_urls_file): Ditto.
2971         (convert_links): Ditto.
2972
2973         * html-url.c (get_urls_html): Use read_file() instead of
2974         load_file().
2975
2976         * utils.c (read_file): New function, instead of the old
2977         load_file().
2978         (read_file_free): Ditto.
2979
2980         * url.c (findurl): Search only for the supported protocols.
2981         (convert_links): Use fwrite() when writing out a region of
2982         characters.
2983
2984 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
2985
2986         * ftp-ls.c: Move html_quote_string and ftp_index here.
2987
2988         * url.c: Remove get_urls_html, since that's now in html-url.c.
2989
2990         * html-url.c: New file.
2991
2992         * html-parse.c: New file.
2993
2994 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
2995
2996         * init.c (run_wgetrc): Don't bother killing off '\r' since
2997         pars_line() skips whitespace at end of line anyway.
2998         (parse_line): Oops, it didn't.  Now it does.
2999
3000         * recur.c (parse_robots): Ditto here.
3001
3002         * ftp-ls.c (ftp_parse_unix_ls): Kill off the newline character
3003         manually because read_whole_line no longer does.
3004
3005         * utils.c (read_whole_line): Rewrite to: a) use less memory
3006         (reallocates to needed size after work), b) work faster -->
3007         fgets() instead of getc, c) be more correct --> doesn't kill the
3008         newline character at the end of line.
3009
3010 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
3011
3012         * init.c (comind): Initialize MAX to array size - 1.
3013
3014 2000-11-08  Hrvoje Niksic  <hniksic@arsdigita.com>
3015
3016         * url.c (construct): Changed last_slash[-1] to *(last_slash - 1).
3017         Suggested by Edward J. Sabol.
3018
3019 2000-11-08  Hrvoje Niksic  <hniksic@arsdigita.com>
3020
3021         * url.c (construct): Handle the case where host name is not
3022         followed by a slash.
3023
3024 2000-11-06  Hrvoje Niksic  <hniksic@arsdigita.com>
3025
3026         * init.c: commands[] need to be sorted!  ("base" wasn't.)
3027
3028 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
3029
3030         * wget.h (DO_REALLOC_FROM_ALLOCA): Use braces to disambiguate
3031         `if'.
3032
3033 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
3034
3035         * url.c (construct): Insert unneeded initialization for the
3036         compiler to shut up.
3037
3038         * config.h.in: Define _XOPEN_SOURCE to 500 to get the prototype
3039         for strptime() (*duh*).  Define _SVID_SOURCE to get S_IFLNK which
3040         otherwise gets lost when you define _XOPEN_SOURCE.
3041
3042         * utils.c (touch): Include the file name in the error message.
3043         From Debian.
3044
3045 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
3046
3047         * log.c (logvprintf): Use vsnprintf() in all cases.  If necessary,
3048         resize the buffer to fit the formated message.  That way, messages
3049         of arbitrary size may be printed.
3050         (logvprintf): Use saved_append() to optionally log the last
3051         several lines of output.
3052         (logputs): Ditto.
3053         (log_close): Adapt to new data structures.
3054         (log_dump): Ditto.
3055         (redirect_output): Print messages to stderr, not to stdout.
3056
3057         * log.c (saved_append_1): New function.  Replaces the old logging
3058         system ("log all output until 10M characters") with a new, much
3059         more reasonable one ("log last screenful of text").
3060         (saved_append): New function; call saved_append_1.
3061         (free_log_line): New function.
3062
3063 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
3064
3065         * url.c (construct): Fix comment.
3066         (find_last_char): Document.
3067
3068 2000-11-04  Hrvoje Niksic  <hniksic@arsdigita.com>
3069
3070         * snprintf.c: New file.
3071
3072 2000-11-03  Hrvoje Niksic  <hniksic@arsdigita.com>
3073
3074         * wget.h: If HAVE_STDARG_H is not defined, don't declare argument
3075         types to logprintf() and debug_logprintf().
3076
3077 2000-11-02  Hrvoje Niksic  <hniksic@arsdigita.com>
3078
3079         * ftp.c (ftp_loop_internal): Hide the password from the URL when
3080         printing non-verbose.  Problem spotted by Dariusz Mlynarczyk
3081         <darekm@bydg.lomac.com.pl>.
3082
3083 2000-11-02  Junio Hamano  <junio@twinsun.com>
3084
3085         * ftp-basic.c (ftp_login): Make comparison case-insensitive.
3086
3087 2000-11-02  Tyler Riddle  <triddle@liquidmarket.com>
3088
3089         * http.c (known_authentication_scheme_p): Recognize NTML
3090         authentication.
3091         (create_authorization_line): Treat NTML the same as `Basic'.
3092
3093 2000-11-02  Hrvoje Niksic  <hniksic@arsdigita.com>
3094
3095         * retr.c (retrieve_url): Free url before returning.
3096         (retrieve_url): Free mynewloc before returning.
3097         Spotted by Mark A. Mankins <Mankins_Mark@prc.com>.
3098
3099 2000-11-02  Hrvoje Niksic  <hniksic@arsdigita.com>
3100
3101         * url.c (parseurl): Remove possible reading past the end of
3102         sup_protos[].  Spotted by Mark A. Mankins <Mankins_Mark@prc.com>.
3103
3104 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
3105
3106         * main.c (main): In case of opt.downloaded overflowing, print
3107         <overflow> instead of a totally bogus random value.
3108
3109         * retr.c (retrieve_from_file): Ditto.
3110
3111         * recur.c (recursive_retrieve): Ditto.
3112
3113         * main.c (main): Ditto.
3114
3115         * http.c (http_loop): Ditto.
3116
3117         * ftp.c (ftp_loop_internal): Use downloaded_increase() instead of
3118         `+=', and downloaded_exceeds_quota() instead of the simple-minded
3119         check.
3120         (ftp_retrieve_list): Ditto.
3121         (ftp_retrieve_dirs): Ditto.
3122         (ftp_retrieve_glob): Ditto.
3123
3124         * retr.c (downloaded_increase): New function.  Notice overflows of
3125         opt.downloaded.
3126         (downloaded_exceeds_quota): Make sure that opt.downloaded is not
3127         used if it overflowed.
3128
3129         * options.h (struct options): New member downloaded_overflow.
3130
3131 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
3132
3133         * wget.h (enum): Remove extra space after last enumeration.
3134
3135 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
3136
3137         * main.c (main): Use legible_very_long() for printing
3138         opt.downloaded.
3139
3140         * utils.c (legible_1): New function that operates on strings and
3141         does the brunt of legible()'s work.
3142         (legible): Use legible_1().
3143         (legible_very_long): New function; dump the argument with
3144         sprintf(), and call legible_1().
3145
3146         * options.h (struct options): Use VERY_LONG_TYPE for
3147         opt.downloaded.
3148
3149         * sysdep.h (VERY_LONG_TYPE): Define it to have a 64-bit or greater
3150         type.
3151
3152         * config.h.in: Make sure that SIZEOF_LONG and SIZEOF_LONG_LONG get
3153         defined.  Define HAVE_LONG_LONG if long long is available.
3154
3155 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
3156
3157         * utils.c (long_to_string): Update with a later, better version.
3158
3159 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
3160
3161         * url.c (path_simplify_with_kludge): New function.
3162         (path_simplify_with_kludge): Disable it.  Instead...
3163         (parse_dir): ...make sure that at this point the right thing is
3164         done, i.e. that "query" part of the URL (?...) is always assigned
3165         to the file, never to the directory portion of the path.
3166
3167 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
3168
3169         * retr.c (retrieve_url): Detect redirection cycles.
3170
3171 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
3172
3173         * url.c (get_urls_html): Decode HTML entities using
3174         html_decode_entities.
3175
3176         * html.c (htmlfindurl): Don't count the `#' in numeric entities
3177         (&#NNN;) as an HTML fragemnt.
3178         (html_decode_entities): New function.
3179
3180 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
3181
3182         * html.c (htmlfindurl): Fix recognition of # HTML fragments.
3183
3184 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
3185
3186         * url.c (construct): Rewritten for clarity.  Avoids the
3187         unnecessary copying and stack-allocation the old version
3188         performed.
3189
3190 2000-10-31  Hrvoje Niksic  <hniksic@arsdigita.com>
3191
3192         * ftp.c (getftp): Ditto.
3193
3194         * http.c (gethttp): Rewind the stream when retrying from scratch.
3195
3196 2000-10-31  Hrvoje Niksic  <hniksic@arsdigita.com>
3197
3198         * retr.c (retrieve_url): Use url_concat() to handle relative
3199         redirections instead of /ad hoc/ code.
3200
3201         * url.c (url_concat): New function encapsulating weird
3202         construct().
3203         (urllen_http_hack): New function.
3204         (construct): When constructing new URLs, recognize that `?' does
3205         not form part of the file name in HTTP.
3206
3207 2000-10-13  Adrian Aichner  <adrian@xemacs.org>
3208
3209         * retr.c: Add msec timing support for WINDOWS.
3210         * retr.c (reset_timer): GetSystemTime() on WINDOWS.
3211         * retr.c (elapsed_time): Calculate delta time to msec on WINDOWS.
3212
3213 2000-10-27  Dan Harkless  <wget@harkless.org>
3214
3215         * retr.c (retrieve_url): Manually applied T. Bharath
3216         <TBharath@responsenetworks.com>'s patch to get wget to grok
3217         illegal relative URL redirects.  Reformatted and re-commented it.
3218
3219 2000-10-23  Dan Harkless  <wget@harkless.org>
3220
3221         * connect.c (make_connection and bindport): Manually applied Rob
3222         Mayoff <mayoff@dqd.com>'s 1.5.3 patch to add --bind-address,
3223         changing coding style to GNU's.
3224
3225         * ftp.c (ftp_loop_internal): --delete-after wasn't implemented for
3226         files downloaded via FTP.  Per a comment, .listing files were not
3227         counted towards number of bytes and files downloaded because they're
3228         deleted anyway.  Well, they aren't under -nr, so count them then.
3229
3230         * init.c: Manually applied Rob Mayoff's 1.5.3 patch to add
3231         --bind-address, alphabetizing, changing coding style to GNU's,
3232         commenting, and renaming cmd_ip_address() to cmd_address() to
3233         imply hostnames also okay.
3234
3235         * main.c (main): --delete-after didn't delete the root of the
3236         tree.  Ignore --convert-links if --delete-after was specified.
3237         Manually applied Rob Mayoff's 1.5.3 patch to add --bind-address,
3238         fixing duplicate use of added-since-1.5.3 case value.
3239         (print_help): Clarified that --delete-after deletes local files.
3240         Rob forgot to add a line for his new --bind-address option.
3241
3242         * options.h (struct options): Manually applied Rob Mayoff's patch
3243         to add --bind-address (bind_address structure member).
3244
3245         * recur.c (recursive_retrieve): Improved comment; added DEBUGP().
3246         Ignore --convert-links if --delete-after was specified.
3247
3248         * retr.c (retrieve_from_file): Just added a DEBUGP().
3249
3250 2000-10-19  Dan Harkless  <wget@harkless.org>
3251
3252         * ftp.c (ftp_loop_internal): downloaded_file() enumerators changed.
3253         (getftp): Applied Piotr Sulecki <Piotr.Sulecki@ios.krakow.pl>'s
3254         patch to work around FTP servers that incorrectly respond to the
3255         "REST" command with the remaining size rather than the total file size.
3256
3257         * http.c (gethttp): Improved a comment and added code to tack on
3258         ".html" to text/html files without that extension when -E specified.
3259         (http_loop): Use new downloaded_file() enumerators and deal with
3260         the case of gethttp() called xrealloc() on u->local.
3261
3262         * init.c (commands): Added new "htmlextension" command.
3263         Also renamed John Daily's cmd_quad() to the more descriptive
3264         cmd_lockable_boolean(), alpha-sorted the CMD_DECLARE()s and
3265         removed duplicate cmd_boolean() declaration.
3266
3267         * main.c (print_help): Added my new -E / --html-extension option.
3268         (main): Undocumented --email-address option previously used -E synonym.
3269         Stole it away for the much more deserving --html-extension's use.
3270
3271         * options.h (struct options): Added html_extension field.
3272
3273         * url.c (convert_links): URL X that we saved as X.html locally due
3274         to -E needs to be backed up as X.orig, not X.html.orig.  Added comments.
3275         (downloaded_file): Now remembers if we added .html extension to a file.
3276
3277         * url.h (downloaded_file_t): Added extra enumerators to support above.
3278         (downloaded_file): Now takes and returns a downloaded_file_t.
3279
3280         * wget.h (unnamed "dt" enum): Added ADDED_HTML_EXTENSION enumerator.
3281
3282 2000-10-09  Dan Harkless  <wget@harkless.org>
3283
3284         * html.c (htmlfindurl): Added unneeded initialization to quiet warning.
3285
3286         * main.c (print_help): Clarified what --retr-symlinks does.
3287
3288 2000-09-15  John Daily  <jdaily@cyberdude.com>
3289
3290         * init.c: Add support for "always" and "never" values to allow
3291         .wgetrc to override commandline (useful e.g. with .pm files
3292         calling `wget --passive-ftp' when your firewall doesn't allow that).
3293
3294         * ftp.c (getftp): passive_ftp is first option to support always/never.
3295
3296 2000-08-30  Dan Harkless  <wget@harkless.org>
3297
3298         * ftp.c (ftp_retrieve_list): Use new INFINITE_RECURSION #define.
3299
3300         * html.c: htmlfindurl() now takes final `dash_p_leaf_HTML' parameter.
3301         Wrapped some > 80-column lines.  When -p is specified and we're at a
3302         leaf node, do not traverse <A>, <AREA>, or <LINK> tags other than
3303         <LINK REL="stylesheet">.
3304
3305         * html.h (htmlfindurl): Now takes final `dash_p_leaf_HTML' parameter.
3306
3307         * init.c: Added new -p / --page-requisites / page_requisites option.
3308
3309         * main.c (print_help): Clarified that -l inf and -l 0 both allow
3310         infinite recursion.  Changed the unhelpful --mirrior description
3311         to simply give the options it's equivalent to.  Added new -p option.
3312         (main): Added some comments; handle new -p / --page-requisites.
3313
3314         * options.h (struct options): Added new page_requisites field.
3315
3316         * recur.c: Changed "URL-s" to "URLs" and "HTML-s" to "HTMLs".
3317         Calculate and pass down new `dash_p_leaf_HTML' parameter to
3318         get_urls_html().  Use new INFINITE_RECURSION #define.
3319
3320         * retr.c: Changed "URL-s" to "URLs".  get_urls_html() now takes
3321         final `dash_p_leaf_HTML' parameter.
3322
3323         * url.c: get_urls_html() and htmlfindurl() now take final
3324         `dash_p_leaf_HTML' parameter.
3325
3326         * url.h (get_urls_html): Now takes final `dash_p_leaf_HTML' parameter.
3327
3328         * wget.h: Added some comments and new INFINITE_RECURSION #define.
3329
3330 2000-08-23  Dan Harkless  <wget@harkless.org>
3331
3332         * main.c (print_help): -B / --base was not mentioned.
3333
3334 2000-08-22  Dan Harkless  <wget@harkless.org>
3335
3336         * main.c (print_help): Modified -nc description to mention that it
3337         also prevents the creation of multiple versions of the same file
3338         with ".<number>" suffixes.
3339
3340 2000-07-14  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
3341
3342         * retr.c (retrieve_url): Consistently strdup opt.referer when
3343         setting u->referer.
3344
3345 2000-06-09  Dan Harkless  <wget@harkless.org>
3346
3347         * main.c (print_help): --help output for --waitretry was over 80 cols.
3348
3349 2000-06-09  Hrvoje Niksic  <hniksic@iskon.hr>
3350
3351         * url.c (encode_string): Fix comment.
3352         Suggested by Herold Heiko <Heiko.Herold@previnet.it>.
3353
3354 2000-06-01  Const Kaplinsky  <const@ce.cctpu.edu.ru>
3355
3356         * ftp.c (ftp_retrieve_list): Change permissions only on plain
3357         files.
3358
3359 2000-06-01  Hrvoje Niksic  <hniksic@iskon.hr>
3360
3361         * url.c (str_url): Print the port number only if it's different
3362         from the default port number for that protocol.
3363
3364 2000-05-22  Dan Harkless  <wget@harkless.org>
3365
3366         * main.c (print_help): Added --help line for Damir Dzeko
3367         <ddzeko@zesoi.fer.hr>'s until-now-undocumented --referer option.
3368         Removed comments that --referer and --waitretry were undocumented.
3369         Changed "`.wgetrc' command" to "`.wgetrc'-style command" on --help
3370         line for --execute.
3371
3372 2000-05-18  Hrvoje Niksic  <hniksic@iskon.hr>
3373
3374         * ftp.c (getftp): Ditto.
3375
3376         * http.c (gethttp): Check for return value of fclose/fflush.
3377
3378 2000-04-12  Hrvoje Niksic  <hniksic@iskon.hr>
3379
3380         * host.c (store_hostaddress): Instead of shifting ADDR, start
3381         copying from the correct address.
3382
3383 2000-04-12  Hrvoje Niksic  <hniksic@iskon.hr>
3384
3385         * http.c (gethttp): Don't free REQUEST -- it was allocated with
3386         alloca().
3387         Pointed out by Gisle Vanem <gvanem@eunet.no>.
3388
3389 2000-04-04  Dan Harkless  <wget@harkless.org>
3390
3391         * host.c (store_hostaddress): R. K. Owen's patch introduces a
3392         "left shift count >= width of type" warning on 32-bit
3393         architectures.  Got rid of it by tricking the compiler w/ a variable.
3394
3395         * url.c (UNSAFE_CHAR): The macro didn't include all the illegal
3396         characters per RFC1738, namely everything above '~'.  It also
3397         generated a warning on OSes where char =~ unsigned char.  Fixed.
3398
3399 1998-10-17  Hrvoje Niksic  <hniksic@srce.hr>
3400
3401         * http.c (http_process_type): Removed needless strdup(), a memory
3402         leak.
3403
3404 1998-09-25  Hrvoje Niksic  <hniksic@srce.hr>
3405
3406         * html.c (htmlfindurl): Set PH to the first occurrence of `#'.
3407
3408 1998-09-25  Simon Munton  <simonm@m4data.co.uk>
3409
3410         * init.c (wgetrc_file_name): Don't free HOME under Windows.
3411
3412 1998-12-01  "R. K. Owen"  <rkowen@Nersc.GOV>
3413
3414         * host.c (store_hostaddress): Fix for big endian 64-bit machines.
3415
3416 1998-12-01  Hrvoje Niksic  <hniksic@srce.hr>
3417
3418         * url.c (UNSAFE_CHAR): New macro.
3419         (contains_unsafe): Use it.
3420         (encode_string): Ditto.
3421
3422 1998-12-01  Hrvoje Niksic  <hniksic@srce.hr>
3423
3424         * main.c (i18n_initialize): Use LC_MESSAGES only if available.
3425
3426 2000-03-31  Hrvoje Niksic  <hniksic@srce.hr>
3427
3428         * Use TOUPPER/TOLOWER.
3429
3430 1998-12-22  Alexander V. Lukyanov  <lav@yars.free.net>
3431
3432         * ftp-opie.c (btoe): Zero-terminate OSTORE.
3433
3434 2000-03-21  Hrvoje Niksic  <hniksic@iskon.hr>
3435
3436         * wget.h (DO_REALLOC_FROM_ALLOCA): Ditto.
3437
3438         * sysdep.h (ISALNUM): New macro.
3439         (TOLOWER): Ditto.
3440         (TOUPPER): Ditto.
3441
3442 2000-03-10  Dan Harkless  <wget@harkless.org>
3443
3444         * html.c (idmatch): Implemented checking of my new --follow-tags
3445         and --ignore-tags options.
3446
3447         * init.c (commands): Added comment reminding people adding new
3448         entries doing allocation to add corresponding freeing in cleanup().
3449         (commands): Added new followtags and ignoretags commands.
3450         (cleanup): Free storage for new followtags and ignoretags.
3451
3452         * main.c: Use of "comma-separated list" was random -- normalized
3453         it.  Did some alphabetization.  Added comments pointing out
3454         "Options without arguments" and "Options accepting an argument"
3455         sections of long_options[].  Added new options --follow-tags and
3456         -G / --ignore-tags.  Added comment that Damir's --referer is
3457         currently undocumented.  Added comment that Heiko's --waitretry is
3458         partially undocumented (mentioned in --help but not in
3459         wget.texi).  Moved improperly sorted 24, 129, and 'G' cases.
3460
3461         * options.h (struct options): Added new fields follow_tags and
3462         ignore_tags.
3463
3464         * wget.h: Added "#define EQ 0" so we can say "strcmp(a, b) == EQ".
3465
3466 2000-03-02  Dan Harkless  <wget@harkless.org>
3467
3468         * ftp.c (ftp_loop_internal): Heiko introduced "suggest explicit
3469         braces to avoid ambiguous `else'" warnings.  Eliminated them.
3470
3471         * http.c (gethttp): Dan Berger's query string patch is totally
3472         bogus.  If you have two different URLs, gen_page.cgi?page1 and
3473         get_page.cgi?page2, they'll both be saved as get_page.cgi and the
3474         second will overwrite the first.  Also, parameters to implicit
3475         CGIs, like "http://www.host.com/db/?2000-03-02" cause the URLs to
3476         be printed with trailing garbage characters, and could seg fault.
3477         Backing out the patch, which Dan B. informed me by email was just
3478         a kludge to download StarOffice from Sun made necessary due to
3479         wget's unconditional escaping of certain characters (room for an
3480         option there?).
3481         (http_loop): Heiko introduced "suggest explicit braces to avoid
3482         ambiguous `else'" warnings.  Eliminated them.
3483
3484         * main.c: Heiko's --wait / --waitretry backwards compatibility
3485         code looks to have been totally untested -- automatic variable
3486         'wr' was used without being initialized, and a long int was passed
3487         into setval()'s char* val parameter.
3488
3489         * recur.c (parse_robots): Applied Edward J. Sabol
3490         <sabol@alderaan.gsfc.nasa.gov>'s patch for Guan Yang's reported
3491         problem with "User-agent:<space>*<space>" lines in robots.txt.
3492
3493         * url.c (parseurl, str_url): Removing Dan Berger's code (see
3494         http.c above for explanation).
3495
3496 1999-08-25  Heiko Herold  <Heiko.Herold@previnet.it>
3497
3498         * ftp.c: Respect new option waitretry.
3499
3500 2000-01-30  Damir Dzeko  <ddzeko@zesoi.fer.hr>
3501
3502         * http.c (gethttp): Send custom Referer, if required.
3503
3504 1999-09-24  Charles G Waldman  <cgw@fnal.gov>
3505
3506         * netrc.c (parse_netrc): Allow passwords to contain spaces.
3507
3508         * netrc.c (parse_netrc): New function.
3509
3510 1999-09-17  Dan Berger  <dberger@ix.netcom.com>
3511
3512         * http.c (gethttp): Send it.
3513
3514         * url.c (parseurl): Detect query string in HTTP URL-s.
3515         (str_url): Print it.
3516
3517 2000-03-02  HIROSE Masaaki  <hirose31@t3.rim.or.jp>
3518
3519         * html.c (html_allow): Add <link href=...> and <script src=...>.
3520
3521 1999-05-02  andrew deryabin  <djsf@softhome.net>
3522
3523         * http.c (gethttp): Specify port in `Host' header only if it's
3524         different from 80.
3525
3526 1998-11-03  Edward J. Sabol  <sabol@alderaan.gsfc.nasa.gov>
3527
3528         * recur.c (recursive_retrieve): If a finite maximum depth is
3529         specified, and we're are already at that depth, don't download the
3530         HTML file for parsing.
3531
3532 2000-03-01  Dan Harkless  <wget@harkless.org>
3533
3534         * ftp.c (ftp_loop_internal): Call new downloaded_file() function,
3535         even though we don't do conversion on HTML files retrieved via
3536         FTP, so _current_ usage of downloaded_file() makes this call unneeded.
3537         (ftp_retrieve_list): Added a comment saying where we need to
3538         stat() a .orig file if FTP'd HTML file conversion is ever implemented.
3539         (ftp_retrieve_list): "Local file '%s' is more recent," is sometimes
3540         a lie -- reworded as "Server file no newer than local file '%s' --".
3541
3542         * http.c (http_loop): Fixed a typo and clarified a comment.
3543         (http_loop): When -K and -N are specified together, compare size
3544         and timestamp of server file X against local file X.orig (if
3545         extant) rather than converted local file X.
3546         (http_loop): "Local file '%s' is more recent," is sometimes a lie
3547         -- reworded as "Server file no newer than local file '%s' --".
3548         (http_loop): Call new downloaded_file() function to prevent
3549         wrongful overwriting of .orig file when -N is specified.
3550
3551         * url.c (convert_links): When -K specified, only rename X to
3552         X.orig if downloaded_file() returns TRUE.  Otherwise when we skip
3553         file X due to -N, we clobber an X.orig from a previous invocation.
3554         (convert_links): Call the failsafe xstrdup(), not the real strdup().
3555         (convert_links): Added a note asking anyone who understands how
3556         multiple URLs can correspond to a single file to comment it.
3557         (downloaded_file): Added this new function.
3558
3559         * url.h (downloaded_file): Added prototype for this new function
3560         as well as its downloaded_file_t enum type.
3561
3562         * wget.h (boolean): Added this new typedef and TRUE and FALSE #defines.
3563
3564 2000-02-29  Dan Harkless  <wget@harkless.org>
3565
3566         * version.c: Upped version to developer-only "1.5.3+dev".
3567
3568 2000-02-18  Dan Harkless  <wget@harkless.org>
3569
3570         * init.c (backup_converted): Added this new option.
3571
3572         * main.c (-K / --backup-converted): Added this new option.
3573
3574         * options.h (backup_converted): Added this new option.
3575
3576         * url.c (convert_links): When backup_converted is specified, save
3577         file X as X.orig before converting.
3578
3579         * url.h (urlpos): Fixed typo -- said "Rekative" instead of "Relative".
3580
3581 1998-09-21  Hrvoje Niksic  <hniksic@srce.hr>
3582
3583         * version.c: Wget 1.5.3 is released.
3584
3585 1998-09-21  Hrvoje Niksic  <hniksic@srce.hr>
3586
3587         * host.c (ftp_getaddress): Don't warn when reverse-lookup of local
3588         address doesn't yield FQDN.
3589
3590 1998-09-21  Andreas Schwab  <schwab@issan.informatik.uni-dortmund.de>
3591
3592         * cmpt.c (strerror): Fix declaration of sys_errlist.
3593
3594 1998-09-11  Hrvoje Niksic  <hniksic@srce.hr>
3595
3596         * main.c (main): Don't use an array subscript as the first
3597         argument to STRDUP_ALLOCA.
3598         From Kaveh R. Ghazi.
3599
3600 1998-09-11  Szakacsits Szabolcs  <szaka@sienet.hu>
3601
3602         * html.c (htmlfindurl): Download table background.
3603
3604 1998-09-11  Hans Grobler  <grobh@conde.ee.sun.ac.za>
3605
3606         * init.c (parse_line): Would free *com before allocating it.
3607         (parse_line): Would free com instead of *com.
3608
3609 1998-09-10  Howard Gayle  <howard@fjst.com>
3610
3611         * url.c (get_urls_html): Would drop the last character of the
3612         link.
3613
3614 1998-09-10  Hrvoje Niksic  <hniksic@srce.hr>
3615
3616         * http.c (http_loop): Don't print status code if quiet.
3617
3618 1998-09-10  Kaveh R. Ghazi  <ghazi@caip.rutgers.edu>
3619
3620         * log.c: Use <stdarg.h> only when __STDC__.
3621
3622 1998-09-10  Adam D. Moss  <adam@foxbox.org>
3623
3624         * html.c (htmlfindurl): Download <layer src=...>.
3625
3626 1998-09-10  Howard Gayle  <howard@fjst.com>
3627
3628         * ftp.c (ftp_retrieve_list): Don't update the time stamp of a file
3629         not retrieved.
3630
3631 1998-06-27  Hrvoje Niksic  <hniksic@srce.hr>
3632
3633         * utils.c: Include <libc.h> on NeXT.
3634
3635 1998-06-26  Heinz Salzmann  <heinz.salzmann@intermetall.de>
3636
3637         * url.c (get_urls_html): Fix calculation of URL position.
3638
3639 1998-06-23  Hrvoje Niksic  <hniksic@srce.hr>
3640
3641         * version.c: Wget 1.5.2 is released.
3642
3643 1998-06-23  Dave Love  <d.love@dl.ac.uk>
3644
3645         * ftp.c, init.c, netrc.c: Include errno.h.
3646
3647         * http.c: Include errno.h and time header.
3648
3649         * Makefile.in (exext): Define.
3650         (install.bin, uninstall.bin): Use it.
3651
3652 1998-06-21  Hrvoje Niksic  <hniksic@srce.hr>
3653
3654         * http.c (http_loop): Don't attempt to compare local and remote
3655         sizes if the remote size is unknown.
3656
3657 1998-06-16  Hrvoje Niksic  <hniksic@srce.hr>
3658
3659         * url.c (get_urls_html): Use malloc() instead of alloca in the
3660         loop.
3661
3662 1998-06-13  Hrvoje Niksic  <hniksic@srce.hr>
3663
3664         * version.c: Wget 1.5.2-b4 is released.
3665
3666 1998-06-13  Hrvoje Niksic  <hniksic@srce.hr>
3667
3668         * url.c (get_urls_html): Ignore spaces before and after the URI.
3669
3670 1998-06-08  Wanderlei Antonio Cavassin  <cavassin@conectiva.com.br>
3671
3672         * ftp.c (getftp): Translate `done'.
3673
3674 1998-06-06  Hrvoje Niksic  <hniksic@srce.hr>
3675
3676         * version.c: Wget 1.5.2-b3 is released.
3677
3678 1998-06-06  Alexander Kourakos  <awk@bnt.com>
3679
3680         * init.c (cleanup): Close dfp, don't free it.
3681
3682 1998-06-06  Hrvoje Niksic  <hniksic@srce.hr>
3683
3684         * utils.c (make_directory): Twiddle.
3685
3686         * config.h.in: Added template for access().
3687
3688 1998-06-05  Mathieu Guillaume  <mat@cythere.com>
3689
3690         * html.c (htmlfindurl): Download <input src=...>
3691
3692 1998-06-03  Hrvoje Niksic  <hniksic@srce.hr>
3693
3694         * utils.c (file_exists_p): Use access() with two arguments.
3695
3696 1998-05-27  Martin Kraemer  <Martin.Kraemer@mch.sni.de>
3697
3698         * netrc.c (parse_netrc): Correct logic.
3699
3700 1998-05-27  Hrvoje Niksic  <hniksic@srce.hr>
3701
3702         * ftp.c (getftp): Added `break'; suggested by Lin Zhe Min
3703         <ljm@ljm.wownet.net>.
3704
3705 1998-05-24  Hrvoje Niksic  <hniksic@srce.hr>
3706
3707         * version.c: Wget 1.5.2-b2 is released.
3708
3709 1998-05-18  Juan Jose Rodriguez  <jcnsoft@jal1.telmex.net.mx>
3710
3711         * mswindows.h: Don't translate mkdir to _mkdir under Borland.
3712
3713 1998-05-17  Hrvoje Niksic  <hniksic@srce.hr>
3714
3715         * retr.c (elapsed_time): Return correct value when
3716         HAVE_GETTIMEOFDAY is undefined.
3717
3718 1998-05-13  Hrvoje Niksic  <hniksic@srce.hr>
3719
3720         * version.c: Wget 1.5.2-b1 is released.
3721
3722 1998-05-08  Hrvoje Niksic  <hniksic@srce.hr>
3723
3724         * getopt.c (_getopt_internal): Use exec_name instead of argv[0].
3725         (_getopt_internal): Don't translate `#if 0'-ed strings.
3726
3727 1998-05-06  Douglas E. Wegscheid  <wegscd@whirlpool.com>
3728
3729         * mswindows.c (ws_handler): Use fork_to_background().
3730
3731 1998-05-05  Hrvoje Niksic  <hniksic@srce.hr>
3732
3733         * version.c: Wget 1.5.1 is released.
3734
3735 1998-05-05  Hrvoje Niksic  <hniksic@srce.hr>
3736
3737         * http.c (parse_http_status_line): Avoid `minor' and `major'
3738         names.
3739
3740 1998-05-02  Hrvoje Niksic  <hniksic@srce.hr>
3741
3742         * utils.c (mkdirhier): Renamed to make_directory.
3743
3744 1998-05-01  Hrvoje Niksic  <hniksic@srce.hr>
3745
3746         * mswindows.c (fork_to_background): Define under Windows.
3747
3748         * utils.c (fork_to_background): New function.
3749
3750         * html.c (htmlfindurl): Removed rerdundant casts.
3751
3752 1998-05-01  Douglas E. Wegscheid  <wegscd@whirlpool.com>
3753
3754         * mswindows.c (ws_mypath): Cache the path.
3755
3756 1998-04-30  Douglas E. Wegscheid  <wegscd@whirlpool.com>
3757
3758         * ftp.h: Prefix enum ftype members with FT_.
3759
3760         * ftp-ls.c, ftp.c, html.h: Adjust accordingly.
3761
3762         * mswindows.h: Use stat under Borland, _stat under MSVC.
3763
3764 1998-04-28  Hrvoje Niksic  <hniksic@srce.hr>
3765
3766         * http.c (known_authentication_scheme_p): New function.
3767         (gethttp): Handle authorization more correctly.
3768
3769         * ftp-basic.h: Removed.
3770
3771         * cmpt.h: Removed.
3772
3773         * utils.c: Include <unistd.h> before <pwd.h>; needed under SunOS
3774         with gcc 2.8.
3775         (numdigit): Use `while' loop.
3776
3777         * http.c (create_authorization_line): Detect authentication
3778         schemes case-insensitively.
3779
3780         * http.c (extract_header_attr): Use strdupdelim().
3781         (digest_authentication_encode): Move declaration of local
3782         variables to smaller scope.
3783         (digest_authentication_encode): Reset REALM, OPAQUE and NONCE.
3784         (create_authorization_line): Detect authentication schemes
3785         case-insensitively.
3786
3787         * utils.c (touch): Constify.
3788
3789         * http.c (gethttp): Report a nicer error when no data is received.
3790
3791         * rbuf.h (RBUF_READCHAR): Ditto.
3792
3793         * ftp-basic.c (ftp_response): Use sizeof.
3794
3795 1998-04-27  Hrvoje Niksic  <hniksic@srce.hr>
3796
3797         * retr.c (print_percentage): EXPECTED is long, not int.
3798         (print_percentage): Use floating-point arithmetic to avoid
3799         overflow with large files' sizes multiplied with 100.
3800
3801 1998-04-27  Gregor Hoffleit  <flight@mathi.uni-heidelberg.de>
3802
3803         * config.h.in: Added pid_t stub.
3804
3805         * sysdep.h (S_ISREG): Moved here from mswindows.h (NeXT doesn't
3806         define it).
3807
3808 1998-04-20  Hrvoje Niksic  <hniksic@srce.hr>
3809
3810         * version.c: Wget 1.5.0 is released.
3811
3812 1998-04-18  Hrvoje Niksic  <hniksic@srce.hr>
3813
3814         * url.c (str_url): Ditto.
3815
3816         * ftp-basic.c (ftp_rest): Use new name.
3817
3818         * utils.c (long_to_string): Renamed from prnum().
3819
3820 1998-04-16  Hrvoje Niksic  <hniksic@srce.hr>
3821
3822         * version.c: Wget 1.5-b17 is released.
3823
3824 1998-04-08  Hrvoje Niksic  <hniksic@srce.hr>
3825
3826         * headers.c (header_get): New argument FLAGS.
3827
3828         * http.c (gethttp): If request is malformed, bail out of the
3829         header loop.
3830         (gethttp): Check for empty header *after* the status line checks.
3831         (gethttp): Disallow continuations for status line.
3832
3833 1998-04-08  Hrvoje Niksic  <hniksic@srce.hr>
3834
3835         * version.c: Wget 1.5-b16 is released.
3836
3837 1998-04-08  Hrvoje Niksic  <hniksic@srce.hr>
3838
3839         * init.c (commands): Renamed `always_rest' to `continue'.
3840
3841 1998-04-05  Hrvoje Niksic  <hniksic@srce.hr>
3842
3843         * all: Use it.
3844
3845         * log.c (logputs): New argument.
3846         (logvprintf): Ditto.
3847         (logprintf): Ditto.
3848
3849 1998-04-04  Hrvoje Niksic  <hniksic@srce.hr>
3850
3851         * http.c (http_atotm): Update comment.
3852
3853         * main.c (i18n_initialize): Set LC_MESSAGES, not LC_ALL.
3854
3855         * wget.h: Renamed ENABLED_NLS to HAVE_NLS.
3856
3857         * main.c (i18n_initialize): New function.
3858         (main): Use it.
3859
3860         * log.c: Include <unistd.h>.
3861
3862         * retr.c (show_progress): Cast alloca to char *.
3863
3864 1998-04-04  Hrvoje Niksic  <hniksic@srce.hr>
3865
3866         * version.c: Wget 1.5-b15 is released.
3867
3868 1998-04-04  Hrvoje Niksic  <hniksic@srce.hr>
3869
3870         * utils.h: Declare file_non_directory_p().
3871
3872 1998-04-03  Hrvoje Niksic  <hniksic@srce.hr>
3873
3874         * main.c (main): It's `tries', not `numtries' now.
3875
3876 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
3877
3878         * init.c (getperms): Removed.
3879
3880 1998-04-01  Tim Charron  <tcharron@interlog.com>
3881
3882         * log.c (logvprintf): Don't use ARGS twice.
3883
3884 1998-04-01  John  <john@futuresguide.com>
3885
3886         * mswindows.c: Cleaned up.
3887
3888 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
3889
3890         * version.c: Wget 1.5-b14 is released.
3891
3892 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
3893
3894         * ftp-opie.c (STRLEN4): New macro.
3895         (btoe): Use it.
3896
3897 1998-04-01  Junio Hamano  <junio@twinsun.com>
3898
3899         * http.c: Document all the Digest functions.
3900
3901 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
3902
3903         * utils.c (file_non_directory_p): Renamed from isfile().
3904
3905         * mswindows.h (S_ISREG): New macro, suggested by Tim Adam.
3906
3907 1998-03-31  Hrvoje Niksic  <hniksic@srce.hr>
3908
3909         * utils.c (mkdirhier): Use 0777 instead of opt.dirmode.
3910
3911         * init.c (cmd_spec_dotstyle): Use 48 dots per line for binary
3912         style.
3913         (cmd_permissions): Removed.
3914
3915         * config.h.in: Add template for WORDS_BIGENDIAN.
3916
3917 1998-03-31  Junio Hamano  <junio@twinsun.com>
3918
3919         * http.c (HEXD2asc): New macro.
3920         (dump_hash): Use it.
3921
3922 1998-03-31  Hrvoje Niksic  <hniksic@srce.hr>
3923
3924         * version.c: Wget 1.5-b13 is released.
3925
3926 1998-03-31  Hrvoje Niksic  <hniksic@srce.hr>
3927
3928         * main.c (main): Don't try to use `com'.
3929
3930 1998-03-30  Hrvoje Niksic  <hniksic@srce.hr>
3931
3932         * init.c (cmd_permissions): New function.
3933
3934 1998-03-30  Hrvoje Niksic  <hniksic@srce.hr>
3935
3936         * version.c: Wget 1.5-b12 is released.
3937
3938 1998-03-30  Hrvoje Niksic  <hniksic@srce.hr>
3939
3940         * init.c (commands): Renamed `numtries' to `tries'.
3941         (cmd_spec_debug): Removed.
3942         (home_dir): Under Windows, return `C:\' if HOME is undefined.
3943
3944 1998-03-29  Hrvoje Niksic  <hniksic@srce.hr>
3945
3946         * config.h.in: Define _XOPEN_SOURCE.
3947
3948         * init.c (check_user_specified_header): New function.
3949         (cmd_spec_header): Use it.
3950         (cmd_spec_useragent): New function.
3951
3952 1998-03-29  Hrvoje Niksic  <hniksic@srce.hr>
3953
3954         * version.c: Wget 1.5-b11 is released.
3955
3956 1998-03-28  Hrvoje Niksic  <hniksic@srce.hr>
3957
3958         * wget.h: Include <libintl.h> only if NLS is enabled.
3959
3960 1998-03-26  Hrvoje Niksic  <hniksic@srce.hr>
3961
3962         * options.h (struct options): Made `wait' a long.
3963         (struct options): Ditto for `timeout'.
3964
3965 1998-03-19  Hrvoje Niksic  <hniksic@srce.hr>
3966
3967         * utils.c (exists): Renamed to file_exists_p.
3968         (file_exists_p): Use access() if available.
3969
3970 1998-03-17  Hrvoje Niksic  <hniksic@srce.hr>
3971
3972         * utils.c (memfatal): Set save_log_p to 0 to avoid potential
3973         infloop.
3974
3975         * log.c: do_logging -> save_log_p.
3976
3977         * config.h.in: Added template for HAVE_VSNPRINTF.
3978
3979 1998-03-16  Hrvoje Niksic  <hniksic@srce.hr>
3980
3981         * init.c: Ditto.
3982
3983         * http.c: Protect declaration against non-ANSI compiler.
3984
3985         * log.c (logvprintf): Use vsnprintf() if available.
3986
3987         * getopt.c (main): Don't translate test stuff.
3988
3989 1998-03-16  Hrvoje Niksic  <hniksic@srce.hr>
3990
3991         * version.c: Wget 1.5-b10 is released.
3992
3993 1998-03-11  Hrvoje Niksic  <hniksic@srce.hr>
3994
3995         * ftp.c (getftp): Don't translate "CWD %s".
3996
3997         * wget.h (GCC_FORMAT_ATTR): Renamed from FORMAT_ATTR.
3998
3999 1998-03-07  Hrvoje Niksic  <hniksic@srce.hr>
4000
4001         * ftp-opie.c (btoe): Use memcpy() instead of strncat().
4002
4003         * log.c (logputs): New function.
4004         (logvprintf): Renamed from vlogmsg; use logputs().
4005
4006         * retr.c (show_progress): Print `[100%]' when the retrieval is
4007         finished.
4008
4009         * init.c (run_wgetrc): Use FILE, not PATH.
4010         (wgetrc_file_name): Ditto.
4011
4012 1998-03-07  Tim Adam  <tma@osa.com.au>
4013
4014         * recur.c (parse_robots): Correctly reset `entries' on empty
4015         disallow.
4016
4017 1998-03-07  Hrvoje Niksic  <hniksic@srce.hr>
4018
4019         * init.c (cmd_spec_debug): Use cmd_boolean().
4020
4021 1998-02-23  Hrvoje Niksic  <hniksic@srce.hr>
4022
4023         * http.c (gethttp): Create proxy-authorization correctly.
4024
4025 1998-02-22  Hrvoje Niksic  <hniksic@srce.hr>
4026
4027         * md5.c: Ditto.
4028
4029         * getopt.c: Use ANSI function definitions.
4030
4031         * ftp-opie.c: New file.
4032
4033         * options.h: Don't redefine EXTERN.
4034
4035         * init.c: Sort it correctly.
4036
4037 1998-02-22  Hrvoje Niksic  <hniksic@srce.hr>
4038
4039         * version.c: Wget 1.5-b9 is released.
4040
4041 1998-02-22  Hrvoje Niksic  <hniksic@srce.hr>
4042
4043         * recur.c (recursive_retrieve): Reset `first_time'.
4044
4045         * ftp.c (getftp): Added `default' clause to switches of uerr_t.
4046
4047         * rbuf.c (rbuf_peek): Simplified.
4048         (rbuf_flush): Use MINVAL.
4049
4050         * wget.h (MINVAL): Moved from url.h.
4051
4052         * rbuf.h (RBUF_FD): New macro.
4053
4054         * url.c (add_url): Add to the head of the list.
4055
4056         * ftp.c (ftp_retrieve_list): Set the permissions to downloaded
4057         file.
4058         (getftp): Set the default permissions to 0600.
4059
4060 1998-02-21  Hrvoje Niksic  <hniksic@srce.hr>
4061
4062         * url.c (get_urls_html): Ditto.
4063         (convert_links): Ditto.
4064
4065         * recur.c (parse_robots): Ditto.
4066
4067         * html.c (ftp_index): Ditto.
4068
4069         * ftp-ls.c (ftp_parse_unix_ls): Open file as binary.
4070
4071         * init.c (defaults): Initialize `opt' to zero via memset.
4072
4073         * http.c (digest_authentication_encode): goto considered harmful.
4074
4075 1998-02-19  Hrvoje Niksic  <hniksic@srce.hr>
4076
4077         * ftp.c (delelement): Simplify and fix leak.
4078
4079 1998-02-18  Hrvoje Niksic  <hniksic@srce.hr>
4080
4081         * http.c (dump_hash): Use HEXD2ASC instead of home-grown stuff.
4082
4083         * url.h (HEXD2ASC): Removed warning.
4084
4085         * init.c (comind): Use binary search.
4086         (commands): Reorganized.
4087         (setval): Ditto.
4088         (cmd_boolean): New function.
4089         (cmd_number): Ditto.
4090         (cmd_number_inf): Ditto.
4091         (cmd_string): Ditto.
4092         (cmd_vector): Ditto.
4093         (cmd_directory_vector): Ditto.
4094         (cmd_bytes): Ditto.
4095         (cmd_time): Ditto.
4096         (cmd_spec_debug): Ditto.
4097         (cmd_spec_dirmode): Ditto.
4098         (cmd_spec_dirstruct): Ditto.
4099         (cmd_spec_dotstyle): Ditto.
4100         (cmd_spec_header): Ditto.
4101         (cmd_spec_htmlify): Ditto.
4102         (cmd_spec_mirror): Ditto.
4103         (cmd_spec_outputdocument): Ditto.
4104         (cmd_spec_recursive): Ditto.
4105         (settime): Merged with cmd_time().
4106         (setbytes): Merged with cmd_bytes().
4107         (setonoff): Merged with cmd_boolean().
4108         (onoff): Ditto.
4109
4110 1998-02-17  Hrvoje Niksic  <hniksic@srce.hr>
4111
4112         * Makefile.in (distclean): Remove `config.h'.
4113
4114 1998-02-17  Hrvoje Niksic  <hniksic@srce.hr>
4115
4116         * version.c: Wget 1.5-b8 is released.
4117
4118 1998-02-17  Hrvoje Niksic  <hniksic@srce.hr>
4119
4120         * http.c (digest_authentication_encode): New function.
4121         (create_authorization_line): Use it.
4122         (dump_hash): New function.
4123         (digest_authentication_encode): Use it.
4124
4125         * fnmatch.c: Renamed from `mtch.c'.
4126
4127 1998-02-15  Karl Eichwalder  <ke@suse.de>
4128
4129         * main.c (main): Tag "Written by..." string as translatable.
4130
4131 1998-02-15  Hrvoje Niksic  <hniksic@srce.hr>
4132
4133         * wget.h (FREE_MAYBE): New macro.
4134
4135         * http.c (create_authorization_line): Don't use ANSI C string
4136         concatenation feature.
4137         (basic_authentication_encode): Use alloca() for temporary
4138         variables.
4139
4140         * recur.h: Ditto.
4141
4142         * http.c: Ditto.
4143
4144         * headers.h: Ditto.
4145
4146         * ftp-basic.c: Protect declaration against non-ANSI compiler.
4147
4148         * http.c (create_authorization_line): Cast `unsigned char *' to
4149         `char *' for sprintf, to shut up the noisy Digital Unix cc.
4150
4151 1998-02-15  Hrvoje Niksic  <hniksic@srce.hr>
4152
4153         * version.c: Wget 1.5-b7 is released.
4154
4155 1998-02-15  Hrvoje Niksic  <hniksic@srce.hr>
4156
4157         * cmpt.c (strstr): Synched with glibc-2.0.6.
4158
4159         * ftp-basic.c (calculate_skey_response): Ditto.
4160         (calculate_skey_response): Use alloca().
4161
4162         * http.c (create_authorization_line): Work with FSF's version of
4163         md5.c.
4164
4165         * md5.c: New file, from GNU libc.
4166
4167 1998-02-14  Hrvoje Niksic  <hniksic@srce.hr>
4168
4169         * url.h (URL_CLEANSE): Name the temporary variable more carefully.
4170
4171 1998-02-13  Hrvoje Niksic  <hniksic@srce.hr>
4172
4173         * http.c (basic_authentication_encode): New function, instead of
4174         the macro.
4175
4176 1998-02-13  Junio Hamano  <junio@twinsun.com>
4177
4178         * http.c: Add HTTP-DA support.
4179         * ftp-basic.c: Add Opie/S-key support.
4180         * config.h.in, Makefile.in: Add HTTP-DA and Opie/S-key support.
4181         * md5.c, md5.h: New files.
4182
4183 1998-02-13  Hrvoje Niksic  <hniksic@srce.hr>
4184
4185         * http.c (http_process_range): Renamed from hprocrange().
4186         (http_process_range): Parse the whole header.
4187
4188         * headers.c: New file.
4189         (header_process): New function.
4190         (header_get): Renamed from fetch_next_header.
4191
4192         * all: Include utils.h only where necessary.
4193
4194         * wget.h: Declare xmalloc(), xrealloc() and xstrdup() here.
4195
4196         * wget.h: Add provisions for dmalloc.
4197
4198 1998-02-12  Hrvoje Niksic  <hniksic@srce.hr>
4199
4200         * version.c: Wget 1.5-b6 is released.
4201
4202 1998-02-12  Hrvoje Niksic  <hniksic@srce.hr>
4203
4204         * ftp.c (ftp_loop): Determine `filename' more precisely.
4205
4206         * init.c (setval): Don't set `opt.quiet' if output-document is
4207         `-'.
4208
4209         * log.c (log_init): Print to STDERR instead of STDOUT.
4210         (vlogmsg): Use STDERR by default.
4211         (logflush): Ditto.
4212
4213 1998-02-11  Simon Josefsson  <jas@pdc.kth.se>
4214
4215         * host.c: Use addr_in again.
4216
4217 1998-02-08  Karl Eichwalder  <karl@suse.de>
4218
4219         * http.c (gethttp): Fixed typo.
4220
4221 1998-02-08  Hrvoje Niksic  <hniksic@srce.hr>
4222
4223         * version.c: Wget 1.5-b5 is released.
4224
4225 1998-02-08  Hrvoje Niksic  <hniksic@srce.hr>
4226
4227         * retr.c (show_progress): Use it.
4228
4229         * log.c (logflush): New function.
4230
4231         * wget.h: Utilize __attribute__ if on gcc.
4232
4233 1998-02-07  Hrvoje Niksic  <hniksic@srce.hr>
4234
4235         * http.c (base64_encode_line): New argument LENGTH.
4236         (BASIC_AUTHENTICATION_ENCODE): Use it.
4237         (BASIC_AUTHENTICATION_ENCODE): Take length of HEADER into account.
4238
4239         * main.c (main): Fixed fprintf() format mismatch.
4240
4241 1998-02-06  Hrvoje Niksic  <hniksic@srce.hr>
4242
4243         * version.c: Wget 1.5-b4 is released.
4244
4245 1998-02-03  Simon Josefsson  <jas@pdc.kth.se>
4246
4247         * host.c: use sockaddr_in instead of addr_in.
4248
4249 1998-02-04  Hrvoje Niksic  <hniksic@srce.hr>
4250
4251         * init.c (cleanup): Use it.
4252
4253         * recur.c (recursive_cleanup): New function.
4254
4255         * retr.c (retrieve_from_file): Ditto.
4256
4257         * main.c (main): Use it.
4258
4259         * recur.c (recursive_reset): New function.
4260
4261         * retr.c (retrieve_from_file): Ditto.
4262
4263         * main.c (main): Simplify call to recursive_retrieve().
4264
4265         * recur.c (recursive_retrieve): Removed FLAGS argument.
4266
4267         * http.c (gethttp): Changed call to iwrite().
4268
4269 1998-02-03  Hrvoje Niksic  <hniksic@srce.hr>
4270
4271         * url.c (get_urls_html): Ditto.
4272         (free_urlpos): Ditto.
4273         (mkstruct): Ditto.
4274         (construct): Ditto.
4275
4276         * retr.c (retrieve_url): Move declaration of local variables to
4277         smaller scope.
4278
4279         * url.c (urlproto): Use it.
4280         (parseurl): Ditto.
4281         (str_url): Ditto.
4282         (get_urls_html): Ditto.
4283
4284         * utils.h (ARRAY_SIZE): New macro.
4285
4286         * url.c (proto): Moved from url.h.
4287
4288         * url.h (URL_CLEANSE): Reformatted.
4289         (USE_PROXY_P): Renamed from USE_PROXY.
4290
4291         * ftp-basic.c: Adjust to the new interface of iwrite().
4292
4293         * ftp-basic.c (ftp_port): Use alloca().
4294
4295 1998-02-03  Hrvoje Niksic  <hniksic@srce.hr>
4296
4297         * version.c: Wget 1.5-b3 is released.
4298
4299         * host.c (ftp_getaddress): Don't print to stderr directly.
4300
4301         * init.c (setbytes): Support `g' for gigabytes.
4302         (cmdtype): New specification CTIME.
4303         (setval): Use it with settime().
4304         (commands): Use it for WAIT and TIMEOUT.
4305
4306 1998-02-02  Hrvoje Niksic  <hniksic@srce.hr>
4307
4308         * http.c (BASIC_AUTHENTICATION_ENCODE): New macro.
4309         (gethttp): Use it.
4310
4311         * utils.c (unique_name_1): Moved from url.c.
4312         (unique_name): Ditto.
4313
4314         * url.c (url_filename): Ditto.
4315
4316         * log.c (redirect_output): Changed call to unique_name().
4317
4318         * url.c (unique_name_1): Renamed from unique_name().
4319         (unique_name): Changed interface.
4320
4321         * init.c (enum cmdid): Moved from init.h.
4322         (cmdtype): Ditto.
4323         (struct cmd): Ditto.
4324
4325         * main.c (main): Use it.
4326         (main): Moved `--backups' to not have a short option.
4327
4328         * options.h (struct options): New member BACKGROUND.
4329
4330         * main.c (print_help): Rearranged.
4331         (main): New long options for -n* short options: --no-directories,
4332         --no-host-directories, --non-verbose, --no-host-lookup and
4333         --dont-remove-listing.
4334
4335 1998-02-01  Hrvoje Niksic  <hniksic@srce.hr>
4336
4337         * main.c (main): Use log_close().
4338
4339         * log.c: New variable LOGFP.
4340         (vlogmsg): Use it.
4341         (redirect_output): Don't open /dev/null; set LOGFP to stdin
4342         instead.
4343         (log_close): New function.
4344
4345         * options.h (struct options): Removed LFILE.
4346
4347         * log.c (log_enable): Removed.
4348
4349         * main.c (main): Use it.
4350
4351         * log.c (log_init): New function.
4352
4353         * url.c (get_urls_html): Removed needless assignment to BASE.
4354
4355         * host.c (add_hlist): Don't set CMP needlessly.
4356
4357         * utils.c (match_backwards): Ditto.
4358         (in_acclist): Ditto.
4359
4360         * url.c (findurl): Ditto.
4361
4362         * netrc.c (parse_netrc): Ditto.
4363
4364         * log.c (log_dump): Ditto.
4365
4366         * html.c (html_quote_string): Ditto.
4367
4368         * ftp-basic.c (ftp_request): Made static.
4369
4370         * connect.c: Made global variables static.
4371
4372         * url.c (construct): Ditto.
4373
4374         * init.c (init_path): Avoid assignment inside `if'-condition.
4375
4376         * ftp.c: Don't include in.h or winsock.h.
4377
4378         * ftp.c (ftp_loop): Use SZ.
4379
4380         * connect.c (bindport): Cast &addrlen to int *.
4381         (conaddr): Ditto.
4382
4383         * init.c (initialize): Don't use SYSTEM_WGETRC unconditionally.
4384
4385 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
4386
4387         * ftp.c (getftp): Initialize opt.ftp_pass here.
4388         (ftp_retrieve_dirs): Use alloca().
4389
4390         * init.c (defaults): Don't initialize opt.ftp_pass.
4391
4392         * sysdep.h (S_ISLNK): Declare for OS/2; ditto for lstat.
4393         From Ivan F. Martinez <ivanfm@ecodigit.com.br>.
4394
4395 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
4396
4397         * recur.c (parse_robots): Check for comments more correctly.
4398
4399         * host.c (ftp_getaddress): Use STRDUP_ALLOCA.
4400         (ftp_getaddress): Add diagnostics when reverse-lookup yields only
4401         hostname.
4402
4403 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
4404
4405         * version.c: Wget 1.5-b2 is released.
4406
4407         * netrc.c (NETRC_FILE_NAME): Moved from netrc.h.
4408
4409         * utils.c (proclist): Pass FNM_PATHNAME to fnmatch().
4410
4411         * ftp-basic.c (ftp_pasv): Avoid unnecessary casting to unsigned
4412         char.
4413
4414         * log.c: Don't attempt to hide arguments from ansi2knr.
4415
4416         * cmpt.c: Synched strptime() and mktime() with glibc-2.0.6.
4417
4418         * ansi2knr.c: Use a later version, from fileutils-3.16l alpha.
4419
4420         * ftp.c (getftp): Ditto.
4421
4422         * http.c (gethttp): Use it.
4423
4424         * retr.c (get_contents): New argument EXPECTED; pass it to
4425         show_progress().
4426         (show_progress): New argument EXPECTED; use it to display
4427         percentages.
4428
4429         * init.c (setval): Ditto.
4430
4431         * http.c (gethttp): Ditto.
4432         (http_loop): Ditto.
4433
4434         * ftp.c (getftp): Ditto.
4435         (ftp_loop_internal): Ditto.
4436
4437         * ftp-ls.c (ftp_parse_unix_ls): Use abort() instead of assert(0).
4438
4439         * sysdep.h (CLOSE): Simplify; use DEBUGP.
4440
4441         * netrc.c (search_netrc): Use alloca().
4442
4443         * init.c (defaults): Initialize no_flush.
4444
4445         * log.c (vlogmsg): Don't flush if no_flush.
4446
4447         * options.h (struct options): New variable no_flush.
4448
4449         * main.c (main): Don't play games with buffering.
4450
4451         * log.c (vlogmsg): Flush the output after every message.
4452
4453 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
4454
4455         * init.c (parse_line): Ditto.
4456
4457         * url.c (get_urls_html): Ditto.
4458
4459         * main.c (main): Don't cast to unsigned char.
4460
4461         * init.c (run_wgetrc): Don't cast to unsigned char.
4462         (parse_line): Accept char instead of unsigned char.
4463
4464         * html.c (htmlfindurl): Use char instead of unsigned char.
4465
4466         * all: Use them.
4467
4468         * sysdep.h: Add wrappers to ctype macros to make them
4469         eight-bit-clean:
4470
4471 1998-01-30  Hrvoje Niksic  <hniksic@srce.hr>
4472
4473         * html.c (htmlfindurl): Download <img lowsrc=...>
4474
4475         * main.c (main): Ignore SIGPIPE.
4476
4477         * connect.c (select_fd): New argument WRITEP.
4478         (iwrite): Call select_fd().
4479
4480 1997-02-27  Fila Kolodny <fila@ibi.com>
4481
4482         * ftp.c (ftp_retrieve_list): If retrieving symlink and the proper
4483         one already exists, just skip it.
4484
4485 1998-01-30  Hrvoje Niksic  <hniksic@srce.hr>
4486
4487         * http.c (gethttp): Cosmetic changes.
4488
4489         * http.c (check_end): Allow `+D...' instead of `GMT'.
4490         From Fabrizio Pollastri <pollastri@cstv.to.cnr.it>.
4491
4492         * url.c (process_ftp_type): New function.
4493         (parseurl): Use it.
4494
4495         * connect.c (iwrite): Allow writing in a few chunks.
4496         (bindport): Made SRV static, so addr can point to it.
4497         (select_fd): Removed HPUX kludge.
4498
4499         * host.c (free_hlist): Incorporated into clean_hosts().
4500
4501 1998-01-29  Hrvoje Niksic  <hniksic@srce.hr>
4502
4503         * host.c (hlist): Made static.
4504         (search_address): Cosmetic change.
4505
4506 1998-01-29  Hrvoje Niksic  <hniksic@srce.hr>
4507
4508         * version.c: Wget v1.5-b1 is released.
4509
4510         * http.c (hgetlen): Use sizeof() to get the header length.
4511         (hgetrange): Ditto.
4512         (hgettype): Ditto.
4513         (hgetlocation): Ditto.
4514         (hgetmodified): Ditto.
4515         (haccepts_none): Ditto.
4516
4517         * main.c (main): Updated `--version' and `--help' output, as per
4518         Francois Pinard's suggestions.
4519
4520         * main.c: Include locale.h; call setlocale(), bindtextdomain() and
4521         textdomain().
4522
4523         * config.h.in: Define stubs for I18N3.
4524
4525         * wget.h: Include libintl.h.
4526
4527 1998-01-28  Hrvoje Niksic  <hniksic@srce.hr>
4528
4529         * url.c (mkstruct): Check for opt.cut_dirs.
4530         (mkstruct): alloca()-te more, xmalloc() less.
4531
4532         * utils.c (load_file): Check for ferror().
4533
4534         * url.c (get_urls_file): Close only the files we opened.
4535         (get_urls_html): Ditto.
4536         (count_slashes): New function.
4537
4538         * http.h: Removed.
4539
4540         * http.c (gethttp): Respect username and password provided by
4541         proxy URL.
4542         (base64_encode_line): Write into an existing buffer instead of
4543         malloc-ing a new one.
4544         (struct http_stat): Moved from http.h
4545
4546         * retr.c (retrieve_url): Free SUF.
4547
4548         * all: Removed lots of unnecessary .h dependencies.
4549
4550         * html.c (global_state): Made static.
4551
4552         * utils.h (ALLOCA_ARRAY): New macro.
4553
4554         * main.c (main): New option `--cut-dirs'.
4555
4556         * url.c (construct): Use alloca() for T.
4557
4558         * utils.c (mkdirhier): Use STRDUP_ALLOCA.
4559
4560         * host.c (_host_t): Moved from host.h.
4561         (struct host): Renamed from _host_t.
4562         (store_hostaddress): Use STRDUP_ALLOCA for INET_S.
4563         (realhost): Ditto.
4564
4565         * host.h: Don't include url.h.
4566
4567         * ftp.c (LIST_FILENAME): Moved from ftp.h.
4568
4569         * init.c (DEFAULT_FTP_ACCT): Moved from ftp.h.
4570
4571         * main.c (main): Enable log if the output goes to a TTY.
4572
4573         * connect.h: Removed unused constant `BACKLOG'.
4574
4575         * config.h.in: Check for isatty().
4576
4577         * Makefile.in (LINK): Use CFLAGS when linking.
4578
4579 1998-01-27  Hrvoje Niksic  <hniksic@srce.hr>
4580
4581         * mswindows.c (ws_hangup): Use redirect_output().
4582
4583         * main.c (redirect_output_signal): New function; use
4584         redirect_output().
4585
4586         * log.c (redirect_output): New function, based on hangup(), which
4587         is deleted.
4588
4589         * log.c (vlogmsg): New function.
4590
4591         * wget.h (DEBUGP): Use debug_logmsg().
4592
4593         * main.c (hangup): Use it.
4594
4595         * log.c (log_dump): New function.
4596
4597         * utils.h (DO_REALLOC): Use `long' for various sizes.
4598
4599         * http.c (hskip_lws): Use `while', for clarity.
4600         (HTTP_DYNAMIC_LINE_BUFFER): New constant.
4601         (fetch_next_header): Use it instead of DYNAMIC_LINE_BUFFER.
4602
4603         * ftp-basic.c (FTP_DYNAMIC_LINE_BUFFER): New constant.
4604         (ftp_response): Use it instead of DYNAMIC_LINE_BUFFER.
4605
4606         * utils.c (DYNAMIC_LINE_BUFFER): Moved from utils.c.
4607         (LEGIBLE_SEPARATOR): Ditto.
4608         (FILE_BUFFER_SIZE): Ditto.
4609
4610         * retr.c (BUFFER_SIZE): Moved from retr.h.
4611
4612         * log.c: New file.
4613         (logmsg): Moved from utils.c.
4614         (debug_logmsg): New function.
4615
4616         * mswindows.h: Include it here.
4617
4618         * init.c: Ditto.
4619
4620         * utils.c: Don't include <windows.h>.
4621
4622 1998-01-25  Hrvoje Niksic  <hniksic@srce.hr>
4623
4624         * host.c (ftp_getaddress): Ditto.
4625
4626         * main.c (main): Use it.
4627
4628         * utils.h (STRDUP_ALLOCA): New macro.
4629
4630         * init.c: Prepend `wget: ' to error messages printed on stderr.
4631
4632         * utils.c (mkdirhier): Renamed from mymkdir.
4633         (touch): Renamed from my_touch.
4634         (pwd_cuserid): Renamed from my_cuserid().
4635
4636 1998-01-24  Andy Eskilsson  <andy.eskilsson@telelogic.se>
4637
4638         * utils.c (accdir): Process wildcards.
4639         (proclist): New function.
4640         (accdir): Use it to avoid code repetition.
4641
4642 1998-01-24  Hrvoje Niksic  <hniksic@srce.hr>
4643
4644         * recur.c (parse_robots): Respect opt.useragent; use alloca().
4645
4646         * http.c (gethttp): Construct useragent accordingly.
4647
4648         * version.c: Changed version string to numbers-only.
4649
4650         * main.c (print_help): List all the options.
4651
4652         * mswindows.c (windows_main_junk): Initialize argv0 here.
4653
4654 1998-01-24  Karl Heuer  <kwzh@gnu.org>
4655
4656         * netrc.c (search_netrc): Initialize `l' only after processing
4657         netrc.
4658
4659         * main.c (main): Don't trap SIGHUP if it's being ignored.
4660
4661 1998-01-24  Hrvoje Niksic  <hniksic@srce.hr>
4662
4663         * all: Use logmsg().
4664
4665         * utils.c (time_str): Moved from retr.c.
4666         (logmsg): New function.
4667         (logmsg_noflush): Ditto.
4668
4669         * rbuf.c: New file, moved buf_* functions here.
4670
4671         * ftp.c (ftp_expected_bytes): Moved from ftp-basic.c.
4672
4673         * ftp-basic.c (ftp_rest): Use prnum().
4674
4675         * ftp-basic.c: Ditto.
4676
4677         * ftp.c: Use the new reading functions and macros.
4678
4679         * retr.c (buf_initialize): New function.
4680         (buf_initialized_p): Ditto.
4681         (buf_uninitialize): Ditto.
4682         (buf_fd): Ditto.
4683
4684         * http.c (fetch_next_header): Use the BUF_READCHAR macro for
4685         efficiency.
4686         (gethttp): Use alloca() where appropriate.
4687
4688         * retr.c (buf_readchar): Use it.
4689         (buf_peek): Use rstreams.
4690
4691         * retr.h (BUF_READCHAR): New macro.
4692
4693         * init.c (home_dir): Rewritten for clarity.
4694         (init_path): Ditto.
4695
4696         * mswindows.c (ws_backgnd): Made static.
4697         (read_registry): Ditto.
4698         (ws_cleanup): Ditto.
4699         (ws_handler): Ditto.
4700
4701 1998-01-23  Hrvoje Niksic  <hniksic@srce.hr>
4702
4703         * alloca.c: New file.
4704
4705         * Makefile.in (ALLOCA): Define.
4706
4707         * mswindows.c (ws_help): Constify.
4708         (ws_help): Use alloca.
4709
4710         * mswindows.c: Reformat.
4711
4712         * all: Added _(...) annotations for I18N snarfing and translation.
4713
4714         * host.c (ftp_getaddress): Nuke SYSINFO.
4715         (ftp_getaddress): Don't use getdomainname().
4716         (ftp_getaddress): Use uname(), where available.
4717
4718         * http.c (gethttp): Protect a stray fprintf().
4719
4720         * init.c (settime): New function.
4721         (setval): Treat WAIT specially, allowing suffixes like `m' for
4722         minutes, etc.
4723
4724 1998-01-21  Hrvoje Niksic  <hniksic@srce.hr>
4725
4726         * url.c (get_urls_html): Use alloca() for TEMP.
4727
4728 1998-01-21  Jordan Mendelson  <jordy@wserv.com>
4729
4730         * url.c (rotate_backups): New function.
4731
4732         * http.c (gethttp): Ditto.
4733
4734         * ftp.c (getftp): Rotate backups.
4735
4736 1997-12-18  Hrvoje Niksic  <hniksic@srce.hr>
4737
4738         * all: Renamed nmalloc(), nrealloc() and nstrdup() to xmalloc(),
4739         xrealloc() and xstrdup().  Use the new functions.
4740
4741         * url.c (decode_string): Made static.
4742         (has_proto): Ditto.
4743         (parse_dir): Ditto.
4744         (parse_uname): Ditto.
4745         (mkstruct): Ditto.
4746         (construct): Ditto.
4747         (construct_relative): Ditto.
4748
4749         * retr.c (show_progress): Made static.
4750
4751         * recur.c (robots_url): Made static.
4752         (retrieve_robots): Ditto.
4753         (parse_robots): Ditto.
4754         (robots_match): Ditto.
4755
4756         * main.h: Removed.
4757
4758         * main.c (printhelp): Made static.
4759         (hangup): Ditto.
4760
4761         * init.c (comind): Made static.
4762         (defaults): Ditto.
4763         (init_path): Ditto.
4764         (run_wgetrc): Ditto.
4765         (onoff): Ditto.
4766         (setonoff): Ditto.
4767         (setnum): Ditto.
4768         (myatoi): Ditto.
4769         (getperms): Ditto.
4770         (setbytes): Ditto.
4771
4772         * http.c (fetch_next_header): Made static.
4773         (hparsestatline): Ditto.
4774         (hskip_lws): Ditto.
4775         (hgetlen): Ditto.
4776         (hgetrange): Ditto.
4777         (hgettype): Ditto.
4778         (hgetlocation): Ditto.
4779         (hgetmodified): Ditto.
4780         (haccepts_none): Ditto.
4781         (gethttp): Ditto.
4782         (base64_encode_line): Ditto.
4783         (mktime_from_utc): Ditto.
4784         (http_atotm): Ditto.
4785
4786         * html.c (idmatch): Made static.
4787
4788         * host.c (search_host): Made static.
4789         (search_address): Ditto.
4790         (free_hlist): Ditto.
4791
4792         * ftp.c (getftp): Made static.
4793         (ftp_loop_internal): Ditto.
4794         (ftp_get_listing): Ditto.
4795         (ftp_retrieve_list): Ditto.
4796         (ftp_retrieve_dirs): Ditto.
4797         (ftp_retrieve_glob): Ditto.
4798         (freefileinfo): Ditto.
4799         (delelement): Ditto.
4800
4801         * ftp-ls.c (symperms): Made static.
4802         (ftp_parse_unix_ls): Ditto.
4803
4804         * connect.c (select_fd): Made static.
4805
4806         * utils.c (xmalloc): Renamed from nmalloc.
4807         (xrealloc): Renamed from nrealloc.
4808         (xstrdup): Renamed from nstrdup.
4809
4810         * getopt.c (exchange): Use alloca.
4811
4812         * mswindows.c (mycuserid): Use strncpy.
4813
4814         * New files mswindows.c, mswindows.h, sysdep.h.  winjunk.c,
4815         systhings.h, windecl.h and winjunk.h removed.
4816
4817         * mswindows.c (sleep): New function.
4818
4819         * utils.c: Include <windows.h> under Windows.
4820
4821 1997-06-12  Darko Budor  <dbudor@zesoi.fer.hr>
4822
4823         * url.h (URL_UNSAFE): Change default under Windows.
4824
4825         * retr.c (retrieve_from_file): Respect opt.delete_after.
4826
4827         * main.c (main): Call ws_help on Windows.
4828
4829         * winjunk.c (windows_main_junk): New function.
4830
4831         * main.c (main): Junk-process argv[0].
4832
4833         * http.c (mktime_from_utc): Return -1 if mktime failed.
4834
4835         * http.c (http_loop): Ditto.
4836
4837         * ftp.c (ftp_loop_internal): Change title on Windows when using a
4838         new URL.
4839
4840         * winjunk.c (getdomainname): Lots of functions.
4841
4842 1997-06-12  Hrvoje Niksic  <hniksic@srce.hr>
4843
4844         * cmpt.c (strptime_internal): Handle years more correctly for
4845         `%y'.
4846
4847 1997-06-09  Mike Thomas <mthomas@reality.ctron.com>
4848
4849         * http.c (gethttp): Allocate enough space for
4850         `Proxy-Authorization' header.
4851
4852 1997-05-10  Hrvoje Niksic  <hniksic@srce.hr>
4853
4854         * version.c: Wget/1.4.5 is released.
4855
4856 1997-05-10  Hrvoje Niksic  <hniksic@srce.hr>
4857
4858         * retr.c (get_contents): Check return value of fwrite more
4859         carefully.
4860
4861 1997-03-30  Andreas Schwab  <schwab@issan.informatik.uni-dortmund.de>
4862
4863         * cmpt.c (strptime_internal) [case 'Y']: Always subtract 1900 from
4864         year, regardless of century.
4865
4866 1997-03-30  Hrvoje Niksic  <hniksic@srce.hr>
4867
4868         * utils.c (isfile): Use `lstat' instead of `stat'.
4869
4870 1997-03-29  Hrvoje Niksic  <hniksic@srce.hr>
4871
4872         * utils.c (numdigit): Use explicit test.
4873
4874 1997-03-21  Hrvoje Niksic  <hniksic@srce.hr>
4875
4876         * http.c (http_loop): Always use `url_filename' to get u->local.
4877
4878 1997-03-20  Hrvoje Niksic  <hniksic@srce.hr>
4879
4880         * url.c: Recognize https.
4881
4882 1997-03-13  Hrvoje Niksic  <hniksic@srce.hr>
4883
4884         * recur.c (recursive_retrieve): Lowercase just the host name.
4885
4886 1997-03-09  Hrvoje Niksic  <hniksic@srce.hr>
4887
4888         * url.c (get_urls_file): Use the correct test.
4889         (get_urls_html): Ditto.
4890
4891 1997-03-07  Hrvoje Niksic  <hniksic@srce.hr>
4892
4893         * connect.c: Reverted addrlen to int.
4894
4895         * init.c (parse_line): Check for -1 instead of NONE.
4896
4897         * version.c: Changed version to 1.4.5.
4898
4899 1997-02-17  Hrvoje Niksic  <hniksic@srce.hr>
4900
4901         * init.c: New option netrc.
4902         (initialize): Don't parse .netrc.
4903
4904         * cmpt.c (recursive): Return rp.
4905         (strptime_internal): Match the long strings first, the abbreviated
4906         second.
4907
4908 1997-02-16  Hrvoje Niksic  <hniksic@srce.hr>
4909
4910         * http.c (check_end): New function.
4911         (http_atotm): Use it.
4912
4913 1997-02-13  gilles Cedoc  <gilles@cedocar.fr>
4914
4915         * http.c (gethttp): Use them.
4916
4917         * init.c: New options proxy_user and proxy_passwd.
4918
4919 1997-02-14  Hrvoje Niksic  <hniksic@srce.hr>
4920
4921         * ftp.c (ftp_retrieve_list): Create links even if not relative.
4922
4923 1997-02-10  Hrvoje Niksic  <hniksic@srce.hr>
4924
4925         * recur.c (recursive_retrieve): Lowercase the host name, if the
4926         URL is not "optimized".
4927
4928         * host.c (realhost): Return l->hostname, even if it matches with
4929         host.
4930
4931 1997-02-10  Marin Purgar  <pmc@asgard.hr>
4932
4933         * connect.c: Make addrlen size_t instead of int.
4934         (conaddr): Ditto.
4935
4936 1997-02-09  Gregor Hoffleit  <flight@mathi.uni-heidelberg.DE>
4937
4938         * systhings.h: Define S_ISLNK on NeXT too.
4939
4940 1997-02-09  Hrvoje Niksic  <hniksic@srce.hr>
4941
4942         * version.c: Released 1.4.3.
4943
4944         * url.c: Futher update to list of protostrings.
4945         (skip_proto): Skip `//' correctly for FTP and HTTP.
4946
4947         * url.c (get_urls_html): Handle bogus `http:' things a little
4948         different.
4949
4950         * main.c (main): Removed `follow-ftp' from `f'.
4951         (main): Dumped the `prefix-files' and `file-prefix' options and
4952         features; old and bogus.
4953         (main): Exit on failed setval() in `-e'.
4954
4955         * http.c (fetch_next_header): Use it to detect header continuation
4956         correctly.
4957
4958         * retr.c (buf_peek): New function.
4959
4960 1997-02-08  Hrvoje Niksic  <hniksic@srce.hr>
4961
4962         * wget.h: Include time.h and stuff.
4963
4964 1997-02-08  Roger Beeman  <beeman@cisco.com>
4965
4966         * ftp.c: Include <time.h>
4967
4968 1997-02-07  Hrvoje Niksic  <hniksic@srce.hr>
4969
4970         * url.c (findurl): Would read over buffer limits.
4971
4972 1997-02-06  Hrvoje Niksic  <hniksic@srce.hr>
4973
4974         * ftp-ls.c (ftp_parse_unix_ls): Allow spaces in file names.
4975
4976 1997-02-05  Hrvoje Niksic  <hniksic@srce.hr>
4977
4978         * http.c (http_atotm): Initialize tm.is_dst.
4979
4980 1997-02-02  Hrvoje Niksic  <hniksic@srce.hr>
4981
4982         * http.c (gethttp): Don't print the number of retrieved headers.
4983
4984         * main.c (main): New option `--no-clobber', alias for `-nc'.
4985
4986         * url.c: Recognize `https://'.
4987
4988 1997-02-01  Hrvoje Niksic  <hniksic@srce.hr>
4989
4990         * host.c (herrmsg): Don't use h_errno.
4991
4992 1997-01-30  Hrvoje Niksic  <hniksic@srce.hr>
4993
4994         * host.c (accept_domain): Use it.
4995
4996         * main.c (main): New option `--exclude-domains'.
4997
4998         * retr.c (retrieve_url): Use it.
4999         (retrieve_url): Bail out when an URL is redirecting to itself.
5000
5001         * url.c (url_equal): New function.
5002
5003 1997-01-29  Hrvoje Niksic  <hniksic@srce.hr>
5004
5005         * connect.c: Include arpa/inet.h instead of arpa/nameser.h.
5006
5007         * http.c (mk_utc_time): New function.
5008         (http_atotm): Use it; handle time zones correctly.
5009
5010 1997-01-28  Hrvoje Niksic  <hniksic@srce.hr>
5011
5012         * http.c: Ditto.
5013
5014         * ftp-basic.c: Use it instead of WRITE.
5015
5016         * connect.c (iwrite): New function.
5017
5018 1997-01-27  Hrvoje Niksic  <hniksic@srce.hr>
5019
5020         * cmpt.c (mktime): New function.
5021
5022         * netrc.c: Include <sys/types.h>.
5023
5024         * main.c (main): Wouldn't recognize --spider.
5025
5026         * retr.c (rate): Use `B', `KB' and `MB'.
5027         (reset_timer,elapsed_time): Moved from utils.c.
5028
5029         * ftp.c (ftp_retrieve_list): Ditto.
5030
5031         * http.c (http_loop): Don't touch the file if opt.dfp.
5032
5033 1997-01-24  Hrvoje Niksic  <hniksic@srce.hr>
5034
5035         * cmpt.c: New file.
5036
5037         * ftp.c (ftp_retrieve_glob): New argument semantics.
5038         (ftp_retrieve_dirs): Use it.
5039         (ftp_loop): Ditto.
5040
5041         * html.c (htmlfindurl): Recognize `'' as the quote char.
5042
5043 1997-01-23  Hrvoje Niksic  <hniksic@srce.hr>
5044
5045         * ftp.c (ftp_loop_internal): Use it.
5046
5047         * utils.c (remove_link): New function.
5048
5049 1997-01-22  Hrvoje Niksic  <hniksic@srce.hr>
5050
5051         * retr.c (retrieve_url): Require STRICT redirection URL.
5052
5053         * url.c (parseurl): New argument STRICT.
5054
5055         * http.c (hparsestatline): Be a little-bit less strict about
5056         status line format.
5057
5058 1997-01-21  Hrvoje Niksic  <hniksic@srce.hr>
5059
5060         * http.c (gethttp): Use it.
5061
5062         * main.c (main): Don't use '<digit>' as options.
5063
5064         * init.c: New option ignore_length.
5065
5066         * http.c (gethttp): Ditto.
5067         (http_loop): Check for redirection without Location:.
5068         (gethttp): Don't print Length unless RETROKF.
5069
5070         * ftp.c (getftp): Use it.
5071
5072         * url.c (mkalldirs): New function.
5073
5074         * utils.c (mymkdir): Don't check for existing non-directory.
5075
5076         * url.c (mkstruct): Don't create the directory.
5077
5078 1997-01-20  Hrvoje Niksic  <hniksic@srce.hr>
5079
5080         * init.c (setval): Removed NO_RECURSION checks.
5081
5082 1997-01-19  Hrvoje Niksic  <hniksic@srce.hr>
5083
5084         * version.c: "Released" 1.4.3-pre2.
5085
5086         * recur.c (recursive_retrieve): Bypass host checking only if URL
5087         is ftp AND parent URL is not ftp.
5088
5089         * ftp-basic.c (ftp_request): Print out Turtle Power.
5090
5091         * ftp.c (ftp_loop): Call ftp_retrieve_glob with 0 if there's no
5092         wildcard.
5093         (ftp_retrieve_glob): Call ftp_loop_internal even on empty list, if
5094         not glob.
5095
5096         * http.c (gethttp): Be a little bit smarter about status codes.
5097
5098         * recur.c (recursive_retrieve): Always reset opt.recursive when
5099         dealing with FTP.
5100
5101 1997-01-18  Hrvoje Niksic  <hniksic@srce.hr>
5102
5103         * retr.c (retrieve_url): New variable location_changed; use it for
5104         tests instead of mynewloc.
5105         (retrieve_url): Allow heuristic adding of html.
5106
5107         * url.c (url_filename): Don't use the `%' in Windows file names.
5108
5109         * http.c (http_loop): Always time-stamp the local file.
5110
5111         * http.c (http_loop): Ditto.
5112
5113         * ftp.c (ftp_retrieve_list): Use it.
5114
5115         * utils.c (my_touch): New function.
5116
5117         * ftp.c (ftp_retrieve_list): Use #ifdef HAVE_STRUCT_UTIMBUF
5118         instead of #ifndef NeXT.
5119
5120         * utils.c (strptime): New version, by Ulrich Drepper.
5121
5122 1997-01-17  Hrvoje Niksic  <hniksic@srce.hr>
5123
5124         * http.c (haccepts_none): Renamed from `haccepts_bytes'.
5125         (gethttp): If haccepts_none(), disable ACCEPTRANGES.
5126         (http_loop): Would remove ACCEPTRANGES.
5127
5128         * ftp.c (getftp): Call ftp_list with NULL.
5129
5130 1997-01-15  Hrvoje Niksic  <hniksic@srce.hr>
5131
5132         * html.c (ftp_index): Don't print minutes and seconds if we don't
5133         know them; beautify the output.
5134
5135         * ftp.c (getftp): Don't close the socket on FTPNSFOD.
5136
5137 1997-01-14  Hrvoje Niksic  <hniksic@srce.hr>
5138
5139         * utils.c (strptime): New function.
5140         (strptime): Don't use get_alt_number.
5141         (strptime): Don't use locale.
5142         (match_string): Made it a function.
5143
5144 1997-01-12  Hrvoje Niksic  <hniksic@srce.hr>
5145
5146         * http.c (http_atotm): New function.
5147         (http_loop): Use it.
5148
5149         * atotm.c: Removed from the distribution.
5150
5151         * http.c (base64_encode_line): Rewrite.
5152
5153 1997-01-09  Hrvoje Niksic  <hniksic@srce.hr>
5154
5155         * ftp.c (getftp): Use ftp_expected_bytes; print size.
5156
5157         * ftp-basic.c (ftp_response): Use ftp_last_respline.
5158         (ftp_expected_bytes): New function.
5159
5160         * ftp.c (getftp): Print the unauthoritative file length.
5161
5162         * ftp-ls.c: Renamed from ftp-unix.c.
5163         (ftp_parse_ls): Moved from ftp.c.
5164         (ftp_parse_unix_ls): Recognize seconds in time spec.
5165         (ftp_parse_unix_ls): Recognize year-less dates of the previous
5166         year.
5167
5168 1997-01-08  Hrvoje Niksic  <hniksic@srce.hr>
5169
5170         * ftp-basic.c: Don't declare errno if #defined.
5171
5172         * host.c (ftp_getaddress): Check for sysinfo legally.
5173
5174 1997-01-08  Darko Budor  <dbudor@diana.zems.fer.hr>
5175
5176         * connect.c (iread): Use READ.
5177
5178 1996-12-23  Hrvoje Niksic  <hniksic@srce.hr>
5179
5180         * url.c: Recognize finger, rlogin, tn3270, mid and cid as valid
5181         schemes.
5182
5183 1996-12-22  Hrvoje Niksic  <hniksic@srce.hr>
5184
5185         * host.c (ftp_getaddress): Allow `.' in hostname.
5186
5187 1996-12-26  Darko Budor <dbudor@zems.fer.hr>
5188
5189         * wget.h: READ and WRITE macros for use instead of read and write
5190         on sockets, grep READ *.c, grep WRITE *.c
5191
5192         * wsstartup.c: new file - startup for winsock
5193
5194         * wsstartup.h: new file
5195
5196         * win32decl.h: new file - fixup for <errno.h> and winsock trouble
5197
5198         * configure.bat: Configure utility for MSVC
5199
5200         * src/Makefile.ms,config.h.ms: new files for use with MSVC 4.x
5201
5202 1996-12-22  Hrvoje Niksic  <hniksic@srce.hr>
5203
5204         * version.c: Released 1.4.3-pre.
5205
5206         * utils.c (prnum): Accept long.
5207         (legible): Use prnum().
5208
5209         * connect.c (make_connection): Accept port as short.
5210         (bindport): Ditto.
5211
5212         * http.c (gethttp): Use search_netrc.
5213
5214 1996-12-21  Hrvoje Niksic  <hniksic@srce.hr>
5215
5216         * ftp.c (getftp): Use search_netrc.
5217
5218         * netrc.c (free_netrc): New function.
5219
5220         * init.c (home_dir): New function.
5221
5222         * url.c (convert_links): Allow REL2ABS changes.
5223
5224 1996-12-21  Gordon Matzigkeit  <gord@gnu.ai.mit.edu>
5225
5226         * netrc.c: New file.
5227         (parse_netrc, maybe_add_to_list): New functions.
5228
5229 1996-12-17  Hrvoje Niksic  <hniksic@srce.hr>
5230
5231         * retr.c (retrieve_url): Reset opt.recursion before calling
5232         ftp_loop if it is reached through newloc.
5233
5234         * init.c (run_wgetrc): Print the wgetrc path too, when reporting
5235         error; don't use "Syntax error", since we don't know if it is
5236         really a syntax error.
5237
5238 1996-12-16  Hrvoje Niksic  <hniksic@srce.hr>
5239
5240         * utils.c (acceptable): Extract the filename part of the path.
5241
5242         * recur.c (recursive_retrieve): Call acceptable() with the right
5243         argument; would bug out on wildcards.
5244
5245         * init.c (parse_line): Likewise.
5246
5247         * html.c (htmlfindurl): Cast to char * when calling stuff.
5248
5249 1996-12-15  Hrvoje Niksic  <hniksic@srce.hr>
5250
5251         * ftp.c (getftp): Use ftp_pasv.
5252
5253         * ftp-basic.c (ftp_request): Accept NULL value.
5254         (ftp_pasv): New function.
5255
5256         * options.h (struct options): Add passive FTP option.
5257
5258 1996-12-15  Hrvoje Niksic  <hniksic@srce.hr>
5259
5260         * url.c (parseurl): Debug output.
5261
5262         * utils.c (path_simplify): New one, adapted from bash's
5263         canonicalize_pathname().
5264
5265 1996-12-14  Hrvoje Niksic  <hniksic@srce.hr>
5266
5267         * ftp.c (getftp): Don't discard the buffer.
5268
5269         * retr.c (get_contents): New parameter nobuf.
5270
5271 1996-12-13  Shawn McHorse  <riffraff@txdirect.net>
5272
5273         * html.c (htmlfindurl): Recognize <meta contents="d; URL=...".
5274
5275         * init.c (setval): Strip the trailing slashes on CVECDIR.
5276
5277 1996-12-13  Hrvoje Niksic  <hniksic@srce.hr>
5278
5279         * init.c: Make excludes and includes under CVECDIR instead of
5280         CVEC.
5281
5282 1996-12-13  Shawn McHorse  <riffraff@txdirect.net>
5283
5284         * url.c (get_urls_html): Skip "http:".
5285
5286 1996-12-13  Hrvoje Niksic  <hniksic@srce.hr>
5287
5288         * utils.c (strcasecmp): From glibc.
5289         (strncasecmp): Also.
5290         (strstr): Also.
5291
5292         * url.c: Added javascript: to the list of URLs prefixes.
5293
5294 1996-12-12  Shawn McHorse  <riffraff@txdirect.net>
5295
5296         * recur.c (retrieve_robots): Print the warning message only if
5297         verbose.
5298
5299 1996-12-12  Gregor Hoffleit  <flight@mathi.uni-heidelberg.DE>
5300
5301         * ftp.c (ftp_retrieve_list): Use NeXT old utime interface.
5302
5303 1996-12-12  Hrvoje Niksic  <hniksic@srce.hr>
5304
5305         * systhings.h: New file.
5306
5307         * ../configure.in: Check for utime.h
5308
5309         * ftp.c: Check whether we have unistd.h.
5310
5311 1996-11-27  Hrvoje Niksic  <hniksic@srce.hr>
5312
5313         * recur.c (recursive_retrieve): Send the canonical URL as referer.
5314         (recursive_retrieve): Call get_urls_html with the canonical URL.
5315
5316 1996-12-13  Kaveh R. Ghazi  <ghazi@caip.rutgers.edu>
5317
5318         * (configure.in, config.h.in, src/Makefile.in, src/*.[ch]): Add
5319         ansi2knr support for compilers which don't support ANSI style
5320         function prototypes and signatures.
5321
5322         * (aclocal.m4, src/ansi2knr.c, src/ansi2knr.1): New files.
5323
5324 1996-11-26  Hrvoje Niksic  <hniksic@srce.hr>
5325
5326         * url.c: Use it; Recognize paths ending with "." and ".." as
5327         directories.
5328         (url_filename): Append .n whenever file exists and could be a
5329         directory.
5330
5331         * url.h (ISDDOT): New macro.
5332
5333         * init.c (parse_line): Use unsigned char.
5334
5335         * url.c (get_urls_html): Cast to unsigned char * when calling
5336         htmlfindurl.
5337
5338         * html.c (htmlfindurl): Use unsigned char.
5339
5340         * version.c: Changed version to 1.4.3.
5341
5342 1996-11-25  Hrvoje Niksic  <hniksic@srce.hr>
5343
5344         * version.c: Released 1.4.2.
5345
5346         * ftp.c (getftp): Simplified assertion.
5347         (ftp_loop_internal): Remove symlink before downloading.
5348         (ftp_retrieve_list): Unlink the symlink name before attempting to
5349         create a symlink!
5350
5351         * options.h (struct options): Renamed print_server_response to
5352         server_response.
5353
5354         * ftp.c (rel_constr): Removed.
5355         (ftp_retrieve_list): Don't use it.
5356         (ftp_retrieve_list): Use opt.retr_symlinks.
5357
5358 1996-11-24  Hrvoje Niksic  <hniksic@srce.hr>
5359
5360         * main.c (main): New option retr_symlinks.
5361
5362         * url.c (convert_links): Print verbose message.
5363
5364 1996-11-24  Hrvoje Niksic  <hniksic@srce.hr>
5365
5366         * http.c (http_loop): Reset newloc in the beginning of function;
5367         would cause FMR in retrieve_url.
5368
5369 1996-11-23  Hrvoje Niksic  <hniksic@srce.hr>
5370
5371         * recur.c (convert_all_links): Find the URL of each HTML document,
5372         and feed it to get_urls_html; would bug out.
5373         (convert_all_links): Check for l2 instead of dl; removed dl.
5374
5375         * url.c (convert_links): Don't refer to freed newname.
5376
5377         * recur.c (recursive_retrieve): Add this_url to urls_downloaded.
5378
5379         * main.c (main): Print the OS_TYPE in the debug output, too.
5380
5381         * recur.c (recursive_retrieve): Check for opt.delete_after.
5382
5383         * main.c (main): New option delete-after.
5384
5385         * init.c (setval): Cleaned up.
5386
5387 1996-11-21  Hrvoje Niksic  <hniksic@srce.hr>
5388
5389         * Makefile.in (wget): Make `wget' the default target.
5390
5391         * ftp.c (ftp_loop_internal): Move noclobber checking out of the
5392         loop.
5393         (ftp_retrieve_list): Warn about non-matching sizes.
5394
5395         * http.c (http_loop): Made -nc non-dependent on opt.recursive.
5396
5397         * init.c (setnum): Renamed from setnuminf; New argument flags.
5398         (setval): Use it.
5399
5400         * main.c (main): Sorted the options.
5401         (main): New option --wait.
5402
5403 1996-11-21  Shawn McHorse  <riffraff@txdirect.net>
5404
5405         * html.c (htmlfindurl): Reset s->in_quote after getting out of
5406         quotes.
5407
5408 1996-11-20  Hrvoje Niksic  <hniksic@srce.hr>
5409
5410         * version.c: Changed version to 1.4.2.
5411
5412 1996-11-20  Hrvoje Niksic  <hniksic@srce.hr>
5413
5414         * version.c: Released 1.4.1.
5415
5416         * html.c (html_quote_string): New function.
5417         (ftp_index): Use it.
5418         (htmlfindurl): A more gentle ending debug message.
5419
5420         * ftp.c (ftp_loop): Check for opt.htmlify.
5421
5422         * init.c: New command htmlify.
5423
5424         * ftp.c (getftp): Nicer error messages, with `'-encapsulated
5425         strings.
5426         (ftp_loop): Print size of index.html.
5427
5428         * init.c (setval): Implement "styles".
5429
5430         * main.c (main): New option dotstyle.
5431
5432 1996-11-19  Hrvoje Niksic  <hniksic@srce.hr>
5433
5434         * ftp.c (getftp): Close the master socket in case of errors, after
5435         bindport().
5436
5437         * connect.c (bindport): Initialize msock to -1.
5438
5439         * ftp.c (getftp): Initialize dtsock to -1.
5440
5441         * connect.c (closeport): Don't close sock if sock == -1.
5442
5443 1996-11-18  Hrvoje Niksic  <hniksic@srce.hr>
5444
5445         * init.c (setnuminf): Nuked default value -- just leave unchanged.
5446         (setval): Don't send default values.
5447         (defaults): Use DEFAULT_TIMEOUT -- aaargh.
5448
5449         * options.h (struct options): Use long for dot_bytes.
5450
5451         * init.c (setquota): Renamed to setbytes.
5452         (setval): Use setbytes on DOTBYTES.
5453
5454 1996-11-17  Hrvoje Niksic  <hniksic@srce.hr>
5455
5456         * ftp.c (getftp): Initialize con->dltime.
5457
5458         * recur.c (recursive_retrieve): Use same_host instead of
5459         try_robots; simply load robots_txt whenever the host is changed.
5460         (recursive_retrieve): Free forbidden before calling parse_robots.
5461
5462 1996-11-16  Hrvoje Niksic  <hniksic@srce.hr>
5463
5464         * retr.c (show_progress): Use them.
5465
5466         * options.h (struct options): New options dot_bytes, dots_on_line
5467         and dot_spacing.
5468
5469 1996-11-16  Mark Boyns  <boyns@sdsu.edu>
5470
5471         * recur.c (recursive_retrieve): Retrieve directories regardless of
5472         acc/rej rules; check for empty u->file.
5473
5474 1996-11-14  Hrvoje Niksic  <hniksic@srce.hr>
5475
5476         * init.c (setval): Use it.
5477
5478         * utils.c (merge_vecs): New function.
5479
5480         * init.c (setval): Reset the list-type functions when encountering
5481         "".
5482
5483 1996-11-14  Shawn McHorse  <riffraff@txdirect.net>
5484
5485         * recur.c (recursive_retrieve): Use base_url instead of this_url
5486         for no_parent.
5487
5488 1996-11-14  Shawn McHorse  <riffraff@txdirect.net>
5489
5490         * html.c (htmlfindurl): Reset s->in_quote after exiting the quote.
5491
5492 1996-11-13  Hrvoje Niksic  <hniksic@srce.hr>
5493
5494         * utils.c (sepstring): Rewrote; don't use strtok.
5495
5496         * recur.c (recursive_retrieve): Enter assorted this_url to slist
5497         when running the first time.
5498         (retrieve_robots): Warn to ignore errors when robots are loaded.
5499
5500         * utils.c (load_file): Moved from url.c.
5501
5502         * http.c: Made static variables const too in h* functions.
5503
5504         * main.c (main): Renamed --continue-ftp to --continue.
5505
5506         * recur.c (recursive_retrieve): Use it.
5507
5508         * utils.c (frontcmp): New function.
5509
5510         * url.c (accdir): New function.
5511
5512         * html.c (htmlfindurl): Recognize <area href=...>.
5513
5514         * ftp.c (ftp_retrieve_dirs): Implemented opt.includes.
5515
5516         * init.c (setval): Free the existing opt.excludes and
5517         opt.includes, if available.
5518
5519         * main.c (main): New option -I.
5520
5521 1996-11-12  Hrvoje Niksic  <hniksic@srce.hr>
5522
5523         * ftp.c (ftp_retrieve_glob): Do not weed out directories.
5524
5525         * version.c: Changed version to 1.4.1.
5526
5527 1996-11-11  Hrvoje Niksic  <hniksic@srce.hr>
5528
5529         * version.c: Released 1.4.0.
5530
5531 1996-11-10  Hrvoje Niksic  <hniksic@srce.hr>
5532
5533         * main.c (main): Free com and val after parse_line.
5534         (printhelp): Reorder the listing.
5535
5536         * http.c: More robust header parsing.
5537
5538         * http.c: Allow any number of spaces, or no spaces, precede ':'.
5539         (hskip_lws): New function.
5540         (haccepts_bytes): New function.
5541         (gethttp): Use it.
5542
5543         * init.c (setval): Check header sanity.
5544         (setval): Allow resetting of headers.
5545
5546 1996-11-10  Hrvoje Niksic  <hniksic@srce.hr>
5547
5548         * http.c (http_loop): Don't use has_wildcards.
5549
5550         * http.c (gethttp): Free all_headers -- would leak.
5551
5552         * recur.c (recursive_retrieve): Initialize depth to 1 instead of
5553         0 -- this fixes a long-standing bug in -rl.
5554
5555 1996-11-09  Hrvoje Niksic  <hniksic@srce.hr>
5556
5557         * ftp.c: Use -1 as "impossible" value for con->fd.
5558
5559         * url.h (URL_SEPARATOR): Don't treat `*' and `+' as separators.
5560
5561         * init.c (parse_line): Use isalpha.
5562
5563         * ftp-unix.c: Use HAVE_UNISTD_H.
5564
5565         * mtch.c (has_wildcards): Don't match \.
5566
5567         * http.c (http_loop): Warn on HTTP wildcard usage.
5568
5569 1996-11-08  Hrvoje Niksic  <hniksic@srce.hr>
5570
5571         * url.c (url_filename): Do not create numbered suffixes if
5572         opt.noclobber -- would bug out on -nc.
5573
5574 1996-11-07  Hrvoje Niksic  <hniksic@srce.hr>
5575
5576         * recur.c (parse_robots): Don't chuck out the commands without
5577         arguments (`Disallow:<empty>' didn't work).
5578         (parse_robots): Compare versions lowercase.
5579         (parse_robots): Match on base_version, not version_string!
5580         (parse_robots): Handle comments properly.
5581         (parse_robots): Match versions in a sane way.
5582
5583         * init.c: Print nicer error messages.
5584
5585         * version.c: Changed version to 1.4.0.
5586
5587 1996-11-06  Hrvoje Niksic  <hniksic@srce.hr>
5588
5589         * version.c: Released 1.4.0-test2.
5590
5591         * init.c (run_wgetrc): Close fp.
5592
5593         * ftp.c (ftp_retrieve_dirs): Allocate the correct length for
5594         u->dir.
5595
5596 1996-11-06  Hrvoje Niksic  <hniksic@srce.hr>
5597
5598         * init.c (setquota): Allow inf as quota specification.
5599
5600 1996-11-05  Hrvoje Niksic  <hniksic@srce.hr>
5601
5602         * ftp.c (ftp_retrieve_dirs): Return QUOTEXC if quota exceeded.
5603         (ftp_retrieve_glob): Return QUOTEXC on quota exceeded.
5604
5605         * main.c (main): Check for quota by comparison with downloaded
5606         stuff, not from status.
5607
5608         * connect.c (select_fd): Should compile on HPUX without warnings now.
5609
5610         * ftp.c (ftp_get_listing): Check whether ftp_loop_internal
5611         returned RETROK.
5612
5613 1996-11-04  Hrvoje Niksic  <hniksic@srce.hr>
5614
5615         * ftp.c (ftp_retrieve_glob): Print the pattern nicely.
5616         (getftp): Return FTPRETRINT on control connection error.
5617
5618         * html.c (htmlfindurl): Recognize <embed src=...> and
5619         <bgsound src=...>.
5620         (ftp_index): Handle username and password correctly.
5621
5622         * main.c (main): Made `-np' a synonim for --no-parent.
5623
5624 1996-11-02  Hrvoje Niksic  <hniksic@srce.hr>
5625
5626         * ftp.c (ftp_loop): Check for opt.ftp_glob too before calling
5627         ftp_retrieve_glob.
5628
5629         * version.c: Changed version to 1.4.0-test2.
5630
5631 1996-11-02  Hrvoje Niksic  <hniksic@srce.hr>
5632
5633         * version.c: Released 1.4.0-test1.
5634
5635         * url.c (str_url): Don't use sprintf when creating %2F-prefixed
5636         directory.
5637         (convert_links): Removed definition of make_backup.
5638
5639         * http.h: Removed definition of MAX_ERROR_LENGTH.
5640
5641         * host.c (ftp_getaddress): Check for "(none)" domains.
5642
5643         * ftp.c (ftp_retrieve_dirs): Docfix.
5644
5645         * http.c (gethttp): Use ou->referer instead of u->referer.
5646
5647         * retr.c (retrieve_url): Reset u to avoid freeing pointers twice;
5648         this was known to cause coredumps on Linux.
5649
5650         * html.c (ftp_index): Cast the argument to local_time to time_t *.
5651
5652 1996-11-01  Hrvoje Niksic  <hniksic@srce.hr>
5653
5654         * connect.c (select_fd): Use exceptfds -- once and for all.
5655
5656         * retr.c (retrieve_from_file): Free filename after
5657         recursive_retrieve.
5658         (retrieve_from_file): Send RFIRST_TIME to recursive_retrieve on
5659         first-time retrieval.
5660         (retrieve_from_file): Return uerr_t; new argument, count.
5661         (retrieve_from_file): Break on QUOTEXC.
5662
5663         * init.c (setquota): Fixed a bug that caused rejection of
5664         non-postfixed values..
5665
5666 1996-10-30  Hrvoje Niksic  <hniksic@srce.hr>
5667
5668         * version.c: Changed name to wget.
5669
5670         * connect.c (iread): Smarter use of select.
5671         (select_fd): Set errno on timeout.  If not timeout, return 1
5672         instead of 0.
5673
5674 1996-10-29  Hrvoje Niksic  <hniksic@srce.hr>
5675
5676         * ftp.c (ftp_loop_internal): Don't use con->cmd before
5677         establishing it.
5678
5679 1996-10-26  Hrvoje Niksic  <hniksic@srce.hr>
5680
5681         * http.c (gethttp): Send correct referer when using proxy.
5682         (gethttp): Use struct urlinfo ou to access the relevant data; send
5683         correct authorization in all cases.
5684
5685         * host.c (same_host): Use skip_uname to skip username and
5686         password.
5687
5688         * url.c (skip_uname): New function.
5689         (parseurl): Use it.
5690
5691         * host.c (same_host): Do not assume HTTP -- same_host should now
5692         be totally foolproof.
5693
5694         * url.c (skip_proto): New function.
5695         (parse_uname): Use it.
5696
5697         * http.c (gethttp): Create local user and passwd from what is
5698         given.
5699
5700         * url.c (parseurl): Check for HTTP username and password too.
5701
5702 1996-10-25  Hrvoje Niksic  <hniksic@srce.hr>
5703
5704         * config.h.in: Removed #define gethostbyname R...
5705
5706 1996-10-22  Hrvoje Niksic  <hniksic@srce.hr>
5707
5708         * version.c: Changed version to 1.4.0-test1.
5709
5710 1996-10-21  Hrvoje Niksic  <hniksic@srce.hr>
5711
5712         * version.c: "Released" 1.4b29.
5713
5714         * recur.c (recursive_retrieve): Check for no_parent.
5715
5716         * init.c (setval): Option update.
5717
5718         * main.c (main): New option no-parent.
5719
5720         * options.h (struct options): New variable no_parent.
5721
5722         * recur.c (recursive_retrieve): Only files are checked for
5723         opt.accepts and opt.rejects.
5724         (recursive_retrieve): Check directories for opt.excludes.
5725         (recursive_retrieve): Make the dir absolute when checking
5726         opt.excludes.
5727
5728         * html.c (htmlfindurl): Recognize <applet code=...> and <script
5729         src=...>
5730
5731 1996-10-18  Hrvoje Niksic  <hniksic@srce.hr>
5732
5733         * ftp.c (getftp): Do not line-break assert entries at all.
5734         (ftp_retrieve_dirs): docfix.
5735
5736         * connect.c (select_fd): Use fd + 1 as nfds.
5737
5738         * version.c: Changed version to 1.4b29.
5739
5740 1996-10-18  Hrvoje Niksic  <hniksic@srce.hr>
5741
5742         * version.c: "Released" 1.4b28.
5743
5744         * ftp.c (ftp_loop_internal): Check whether f->size == len and
5745         don't continue the loop if it is.
5746         (ftp_get_listing): Remove list_filename on unsuccesful loop.
5747
5748 1996-10-17  Hrvoje Niksic  <hniksic@srce.hr>
5749
5750         * ftp.c (ftp_loop_internal): Use strcpy to initialize tmp.
5751         (getftp): Do not use multiline assert.
5752
5753         * http.c (hparsestatline): Use mjr and mnr instead of major and
5754         minor, which don't compile on Ultrix.
5755         (http_loop): Use strcpy() to initialize tmp.
5756
5757         * all: Geturl -> Fetch
5758
5759 1996-10-17  Hrvoje Niksic  <hniksic@srce.hr>
5760
5761         * recur.c (parse_robots): Fixed an off-by-one bug when looking for
5762         ':'.
5763
5764         * html.c (htmlfindurl): Fixed several possible off-by-one bugs by
5765         moving `bufsize &&' to the beginning of each check in for-loops.
5766
5767         * recur.c (parse_robots): Close fp on exit.
5768
5769         * url.c (mymkdir): Check for each directory before creating.
5770
5771 1996-10-16  Hrvoje Niksic  <hniksic@srce.hr>
5772
5773         * version.c: Changed version to 1.4b28.
5774
5775 1996-10-16  Hrvoje Niksic  <hniksic@srce.hr>
5776
5777         * version.c: "Released" 1.4b27.
5778
5779         * init.c (parse_line): Use isspace.
5780         (parse_line): Free *com on all errors.
5781
5782         * ftp.c (ftp_loop): Change FTPOK to RETROK before exiting.
5783         (delelement): Use next instead of f->next and prev instead of
5784         f->prev.
5785         (delelement): Free the members of the deleted element.
5786
5787         * http.c (http_loop): Do not return RETROK on code != 20x.
5788
5789         * init.c (cleanup): Free opt.user_header.
5790         (cleanup): Free opt.domains.
5791
5792         * url.c (freelists): Moved to cleanup().
5793
5794         * http.c (hparsestatline): Docfix.
5795
5796         * main.c (main): Return with error status on unsuccesful
5797         retrieval.
5798
5799         * init.c (setval): Do not remove listing when mirroring.
5800
5801         * url.c (url_filename): Use opt.fileprefix.
5802
5803         * ftp.c (ftp_get_listing): Use url_filename to get filename for
5804         .listing.
5805
5806         * main.c (main): New option: -rn.
5807
5808 1996-10-15  Hrvoje Niksic  <hniksic@srce.hr>
5809
5810         * Makefile.in (RM): Added RM = rm -f.
5811
5812         * host.c (clean_hosts): New function.
5813         (free_hlist): Just free the list, no reset.
5814
5815         * version.c: Changed version to 1.4b27.
5816
5817 1996-10-13  Hrvoje Niksic  <hniksic@srce.hr>
5818
5819         * version.c: "Released" 1.4b26.
5820
5821         * retr.c (retrieve_from_file): If call get_urls_html with
5822         opt.spider to make it silent in spider mode.
5823
5824         * url.c (str_url): Use CLEANDUP instead of URL_CLEANSE.
5825
5826         * url.h (CLEANDUP): New macro.
5827
5828         * http.c (gethttp): Fixed a bug that freed location only when it
5829         was NULL.
5830
5831         * retr.c (retrieve_url): Free url if it will not be stored,
5832         i.e. newloc is NULL.
5833
5834         * html.c (htmlfindurl): Handle exiting from quotes correctly; the
5835         old version would bug out on <a href="x#a"href="y">.
5836
5837         * html.h (state_t): New member in_quote.
5838
5839         * html.c (htmlfindurl): Free s->attr at the beginning of
5840         attr-loop.
5841
5842         * recur.c (recursive_retrieve): Recognize RCLEANUP.
5843         (tried_robots): Make hosts a global variable.
5844         (recursive_retrieve): Free constr after URL host optimization.
5845         (tried_robots): Free urlinfo before exiting.
5846
5847         * utils.c (free_slist): New function.
5848
5849         * recur.c (recursive_retrieve): Use flags to add cleanup
5850         possibility.
5851
5852         * main.c (main): Free filename after recursive_retrieve.
5853
5854         * http.c (gethttp): Store successful responses too.
5855
5856 1996-10-12  Hrvoje Niksic  <hniksic@srce.hr>
5857
5858         * all: Constified the whole source.  This required some minor
5859         changes in many functions in url.c, possibly introducing bugs -- I
5860         hope not.
5861
5862         * ftp-basic.c: Removed last_respline.
5863
5864         * http.c (gethttp): Free type.
5865
5866         * host.c (same_host): Free real1 and real2.
5867
5868         * main.c (main): New option --spider.
5869
5870         * retr.c (get_contents): Don't reset errno.
5871
5872         * main.c (main): Sorted the options.
5873
5874         * connect.c (iread): Set errno to ETIMEDOUT only if it was left
5875         uninitialized by select().
5876
5877         * http.c (http_loop): Print the time when the connection is
5878         closed.
5879         (gethttp): Debug-print the HTTP request.
5880
5881 1996-10-11  Hrvoje Niksic  <hniksic@srce.hr>
5882
5883         * connect.c (iread): Do not try reading after timeout.
5884
5885         * main.c (main): Would bug out on -T.
5886
5887         * connect.c (select_fd): Do not use exceptfds.
5888         (iread): Set ETIMEDOUT on select_fd <= 0.
5889
5890         * version.c: Changed version to 1.4b26.
5891
5892 1996-10-10  Hrvoje Niksic  <hniksic@srce.hr>
5893
5894         * version.c: "Released" 1.4b25.
5895
5896         * ftp-unix.c (ftp_parse_unix_ls): Ignore lines without file name
5897         or link name.
5898
5899         * http.c (gethttp): Add errcode to struct hstat.
5900         (http_loop): Use it.
5901
5902         * url.c (no_proxy_match): Simplify using char** for no_proxy.
5903
5904         * options.h (struct options): Make opt.no_proxy a vector.
5905
5906         * utils.c (sepstring): Use !*s instead of !strlen(s).
5907
5908         * init.c (setval): Set opt.maxreclevel to 0 on --mirror.
5909         (getperms): Use ISODIGIT instead of isdigit.
5910
5911         * ftp.c (getftp): Print time.
5912
5913         * main.c (main): Use legible output of downloaded quantity.
5914
5915         * ftp.c (getftp): Use elapsed_time().
5916         (ftp_loop_internal): Use rate().
5917
5918         * http.c (http_loop): Add download ratio output; Use rate().
5919
5920         * utils.c (rate): New function.
5921
5922 1996-10-09  Hrvoje Niksic  <hniksic@srce.hr>
5923
5924         * http.c (http_loop): Use timer.
5925
5926         * ftp.c: Split to ftp-basic.c and ftp.c
5927
5928         * utils.c (reset_timer): New function.
5929         (elapsed_time): New function.
5930
5931         * retr.c (show_progress): Make bytes_in_line and offs long; should
5932         work on 16-bit machines.
5933
5934 1996-10-08  Hrvoje Niksic  <hniksic@srce.hr>
5935
5936         * url.c (in_acclist): New argument backward.
5937
5938         * ftp.c (ftp_retrieve_glob): Use acceptable() to determine whether
5939         a file should be retrieved according to suffix.
5940         (ftp_get_listing): Check the return value of unlink; Do not call
5941         ftp_retrieve_dirs if depth reached maxreclevel.
5942         (ftp_retrieve_dirs): Check whether the directory is in
5943         exclude-list.
5944
5945         * main.c (main): Print the version number at the beginning of
5946         DEBUG output.
5947         (main): Use strrchr when creating exec_name.
5948
5949         * ftp.c (ftp_retrieve_glob): Do not close control connection.
5950
5951         * version.c: Changed version to 1.4b25.
5952
5953 1996-10-07  Hrvoje Niksic  <hniksic@srce.hr>
5954
5955         * version.c: "Released" 1.4b24.
5956
5957         * Makefile.in: Rewrite.
5958
5959         * ftp.c (ftp_loop_internal): Likewise.
5960
5961         * retr.c (time_str): Check for failed time().
5962
5963         * html.c (htmlfindurl): Recognize <fig src> and <overlay src> from
5964         HTML3.0.
5965
5966         * retr.c (time_str): Return time_t *.
5967
5968         * connect.c (bindport): Close msock on unsuccesful bind.
5969         (bindport): The same for getsockname and listen.
5970
5971         * retr.c (retrieve_url): Allow any number of retries on
5972         proxy.
5973
5974         * http.c (gethttp): Do not treat errno == 0 as timeout.
5975         (http_loop): Likewise.
5976         (http_loop): Cosmetic changes.
5977
5978         * connect.c (iread): Set errno to ETIMEDOUT in case of timeout.
5979
5980         * retr.c (get_contents): Reset errno.
5981
5982         * ftp.c (getftp): Minor fixes.
5983
5984 1996-10-06  Hrvoje Niksic  <hniksic@srce.hr>
5985
5986         * http.c: Do not use backups.
5987
5988         * geturl.1 (WARNING): Warn that man-page could be obsolete.
5989
5990         * getopt.c (getopt_long): Moved to getopt.c
5991
5992         * geturl.texi: Enhanced.
5993
5994         * main.c (main): Use it.
5995
5996         * recur.c (convert_all_links): New function.
5997
5998         * utils.c (add_slist): New argument flags.
5999
6000         * recur.c (recursive_retrieve): Update a list of downloaded URLs.
6001         (parse_robots): Do not chuck out empty value fields.
6002         (parse_robots): Make yourself welcome on empty Disallow.
6003
6004         * version.c: Changed version to 1.4b24.
6005
6006 1996-10-06  Hrvoje Niksic  <hniksic@srce.hr>
6007
6008         * version.c: "Released" 1.4b23.
6009
6010         * ftp.c (ftp_loop_internal): Get the time after getftp.
6011
6012         * Makefile.in (install.info): New target.
6013         (install): Use it.
6014
6015         * http.c (http_loop): Fix output when doing -O.
6016
6017 1996-10-05  Hrvoje Niksic  <hniksic@srce.hr>
6018
6019         * geturl.texi: New file.
6020
6021         * main.c (main): Do not print the warnings and download summary if
6022         opt.quiet is set.
6023
6024         * version.c: Changed version to 1.4b23.
6025
6026 1996-10-05  Hrvoje Niksic  <hniksic@srce.hr>
6027
6028         * "Released" 1.4b22.
6029
6030         * atotm.c (atotm): Use True and False instead of TRUE and FALSE,
6031         to avoid redefinition warnings.
6032
6033         * host.c (store_hostaddress): Use memcpy() to copy the address
6034         returned by inet_addr.
6035
6036         * version.c: Changed version to 1.4b22.
6037
6038 1996-10-04  Hrvoje Niksic  <hniksic@srce.hr>
6039
6040         * version.c: "Released" 1.4b21.
6041
6042         * ftp-unix.c (ftp_parse_ls): Renamed to ftp_parse_unix_ls.
6043
6044         * ftp.c (ftp_port): Use conaddr.
6045         (getftp): Print the file length.
6046         (ftp_retrieve_list): Check the stamps of plain files only.
6047
6048         * connect.c (closeport): Do not call shutdown().
6049         (conaddr): New function.
6050
6051         * html.c (ftp_index): Made it dfp-aware.
6052
6053         * init.c (cleanup): New name of freemem. Close opt.dfp.
6054
6055         * ftp.c (getftp): Use opt.dfp if it is set.
6056
6057         * ftp-unix.c (ftp_parse_ls): Recognize time in h:mm format.
6058
6059         * ftp.c (ftp_retrieve_dirs): Fixed a bug that caused incorrect
6060         CWDs to be sent with recursive FTP retrievals.
6061
6062 1996-10-03  Hrvoje Niksic  <hniksic@srce.hr>
6063
6064         * recur.c (parse_robots): Made it more compliant with "official"
6065         specifications.
6066
6067         * http.c: New function.
6068
6069         * ftp-unix.c (ftp_parse_ls): Added better debug output.
6070
6071         * ftp.c (getftp): Print out the LIST in case of
6072         opt.print_server_response.
6073
6074         * version.c: Changed version to 1.4b21.
6075
6076 1996-10-01  Hrvoje Niksic  <hniksic@srce.hr>
6077
6078         * version.c: "Released" 1.4b20.
6079
6080         * README: Update.
6081
6082         * http.c (gethttp): Preset lengths of various headers instead of
6083         calculating them dynamically.
6084         (gethttp): Check for 206 partial contents.
6085
6086 1996-09-30  Hrvoje Niksic  <hniksic@srce.hr>
6087
6088         * configure.in: Set SYSTEM_GETURLRC to $libdir/geturlrc
6089
6090         * http.c (gethttp): Send the port number in the Host: header.
6091
6092 1996-09-29  Hrvoje Niksic  <hniksic@srce.hr>
6093
6094         * http.c (gethttp): Send host: header.
6095         (gethttp): Add the possibility of user-defined headers.
6096         (gethttp): Move decision about pragma: no-cache to http_loop,
6097         where it belongs.
6098         (gethttp): Pass a struct instead of enormous argument list.
6099         (http_loop): Use a new, fancier display format.
6100         (ftp_loop): Likewise.
6101
6102         * main.c: (hangup): Turn off buffering of the new log file.
6103
6104         * install-sh: Likewise.
6105
6106         * config.sub: Replace with the one in autoconf-2.10
6107
6108         * geturl.1: Update.
6109
6110         * init.c: New options httpuser and httppasswd.
6111
6112         * http.c: (base64_encode_line): New function.
6113         (gethttp): Send authentication.
6114
6115         * connect.c (make_connection): Use store_hostaddress.
6116
6117 1996-09-28  Hrvoje Niksic  <hniksic@srce.hr>
6118
6119         * host.c (store_hostaddress): New function.
6120
6121         * NEWS: Update.
6122
6123         * http.c (hgetrange): New function.
6124         (gethttp): Use ranges.
6125
6126         * utils.c (numdigit): Accept long instead of int.
6127
6128         * http.c (http_loop): Add restart capabilities.
6129
6130         * ftp.c (ftp_retrieve_glob): Fixed a bug that could cause matchres
6131         being used uninitialized.
6132         (ftp_retrieve_list): Similar fix.
6133
6134         * host.c (add_hlist): Fixed a bug that could cause cmp being used
6135         uninitialized.
6136
6137         * url.c (construct_relative): New function.
6138
6139         * recur.c (recursive_retrieve): Use it.
6140
6141         * retr.c (convert_links): New function.
6142
6143 1996-09-27  Hrvoje Niksic  <hniksic@srce.hr>
6144
6145         * url.c (free_urlpos): New function.
6146
6147         * recur.c (recursive_retrieve): Adapt.
6148
6149         * url.c (get_urls_html): Return a linked list instead of a vector.
6150
6151         * url.c (get_urls_file): Return a linked list instead of a vector.
6152
6153         * geturl.1: Update.
6154
6155         * http.c (gethttp): Implement it.
6156
6157         * init.c (setval): New option: SAVEHEADERS
6158
6159         * ftp.c (ftp_loop_internal): Do not set restval if listing is to
6160         be retrieved. Lack of this test caused bugs when the connection
6161         was lost during listing.
6162
6163         * retr.c (retrieve_url): Fixed a bug that caused
6164         coredumps. *newloc is now reset by default.
6165         (retrieve_url): Lift the twenty-tries limit on proxies.
6166
6167         * version.c: Changed version to 1.4b20.
6168
6169 1996-09-20  Hrvoje Niksic  <hniksic@srce.hr>
6170
6171         * version.c: "Released" 1.4b19.
6172
6173 1996-09-19  Hrvoje Niksic  <hniksic@srce.hr>
6174
6175         * ftp.c (ftp_loop_internal): Renamed from ftp_1fl_loop.
6176         (getftp): Changed prototype to accept ccon *.
6177
6178 1996-09-17  Hrvoje Niksic  <hniksic@srce.hr>
6179
6180         * ftp.c (ftp_retrieve_list): Fixed a bug that caused setting
6181         incorrect values to files pointed to by symbolic links.
6182         (ftp_1fl_loop): Do not count listings among the downloaded URL-s.
6183
6184 1996-09-16  Hrvoje Niksic  <hniksic@srce.hr>
6185
6186         * url.c (mkstruct): Do not prepend "./" in front of a pathname.
6187
6188         * main.c (main): New option: --user-agent.
6189
6190         * geturl.1: Ditto.
6191
6192         * init.h: Ditto.
6193
6194         * init.c (setval): Ditto.
6195
6196         * main.c (main): Rename "server-headers" to "server-response".
6197
6198         * ftp-unix.c (ftp_parse_ls): Check for asterisks at the end of
6199         executables in 'ls -F' listings.
6200
6201 1996-09-15  Hrvoje Niksic  <hniksic@srce.hr>
6202
6203         * url.c (parseurl): Remove realloc() and sprintf().
6204         (str_url): Get rid of sprintf().
6205
6206         * recur.c (recursive_retrieve): Enable FTP recursion through proxy
6207         servers.
6208
6209         * url.h (URL_CLEANSE): Made it else-resistant.
6210         (USE_PROXY): New macro.
6211
6212 1996-09-14  Hrvoje Niksic  <hniksic@srce.hr>
6213
6214         * NEWS: Update.
6215
6216         * version.c: Changed version to 1.4b19.
6217
6218 1996-09-14  Hrvoje Niksic  <hniksic@srce.hr>
6219
6220         * version.c: "Released" 1.4b18.
6221
6222         * url.c: Made it reallocate space exponentially.
6223
6224 1996-09-14  Drazen Kacar  <dave@fly.cc.fer.hr>
6225
6226         * html.c (htmlfindurl): Added <frame src> and <iframe src> among
6227         the list of stuff to fetch.
6228
6229 1996-09-13  Hrvoje Niksic  <hniksic@srce.hr>
6230
6231         * url.c (get_urls_html): Fixed a bug that caused SIGSEGV's with
6232         -Fi.
6233
6234         * html.c (htmlfindurl): Rewrite.
6235
6236         * http.c (gethttp): Use opt.proxy_cache.
6237
6238         * main.c (main): Added --cache option.
6239
6240         * ftp.c (ftp_response): Print server response if opt.print_server
6241         response is set.
6242         (getftp): Print newlines after each request if the server response
6243         is to be printed.
6244         (ftp_response): Copy the last response line to last_respline.
6245
6246         * http.c (gethttp): Add Pragma: nocache for retried
6247         proxy-retrievals.
6248
6249         * ftp.c (getftp): Use it.
6250
6251         * retr.c (buf_discard): New function.
6252
6253         * ftp.c (ftp_response): Use buf_readchar().
6254         (getftp): Flush the control connection buffer before calling
6255         get_contents().
6256
6257         * retr.c (buf_readchar): New function.
6258         (buf_flush): New function.
6259         (get_contents): Use buf_readchar() instead of read(x, x, 1).
6260         (get_contents): Use buf_flush.
6261
6262 1996-09-12  Hrvoje Niksic  <hniksic@srce.hr>
6263
6264         * ftp.c: Incorporate changes to ftp_response.
6265
6266         * ftp.c (ftp_response): Allocate the server response dynamically,
6267         as in read_whole_line and fetch_next_header.
6268
6269         * utils.c (read_whole_line): Fixed a bug that prevented reading
6270         the last line if it is not \n-terminated. Also fixed a possible
6271         memory overflow.
6272
6273         * http.c (fetch_next_header): Return malloc-ed string as large as
6274         needed.
6275         (gethttp): Use new fetch_next_header.
6276
6277 1996-09-12  Hrvoje Niksic  <hniksic@srce.hr>
6278
6279         * http.c (hgetlen): Compute the header length the first time only.
6280         (hgettype): Ditto.
6281         (hgetlocation): Ditto.
6282         (hgetmodified): Ditto.
6283
6284 1996-09-11  Hrvoje Niksic  <hniksic@srce.hr>
6285
6286         * sample.geturlrc: Update.
6287
6288 1996-09-10  Hrvoje Niksic  <hniksic@srce.hr>
6289
6290         * http.c (http_loop): Ditto.
6291
6292         * ftp.c (getftp): Open the output file as binary.
6293
6294         * version.c: Changed version to 1.4b18.
6295
6296 1996-09-10  Hrvoje Niksic  <hniksic@srce.hr>
6297
6298         * version.c: "Released" 1.4b17.
6299
6300         * ftp-unix.c (ftp_parse_ls): If unable to open file, return NULL
6301         instead of failed assertion.
6302
6303 1996-09-09  Hrvoje Niksic  <hniksic@srce.hr>
6304
6305         * ftp.c (ftp_get_listing): Add a numbered suffix to LIST_FILENAME
6306         if a file of that name already exists.
6307
6308 1996-09-05  Hrvoje Niksic  <hniksic@srce.hr>
6309
6310         * ftp.c (ftp_1fl_loop): Handler FTPPORTERR and FOPENERR correctly.
6311
6312         * config.h.in: Define gethostbyname as Rgethostbyname when using
6313         Socks.
6314
6315         * configure.in: Check for -lresolv if using Socks.
6316
6317         * version.c: Changed version to 1.4b17.
6318
6319 1996-07-15  Hrvoje Niksic  <hniksic@srce.hr>
6320
6321         * version.c: "Released" 1.4b16.
6322
6323         * http.c (gethttp): More intelligent check for first line of HTTP
6324         response.
6325         (gethttp): Would bug out on time-stamping.
6326
6327         * version.c: Changed version to 1.4b16.
6328
6329 1996-07-11  Hrvoje Niksic  <hniksic@srce.hr>
6330
6331         * version.c: Released 1.4b15.
6332
6333         * http.c (http_loop): Print \n after the loop entry, not before.
6334
6335         * url.c (url_filename): Use ISDOT.
6336
6337         * url.h (ISDOT): New macro.
6338
6339         * recur.c (recursive_retrieve): Change only opt.recursive for
6340         following FTP.
6341
6342 1996-07-11  Antonio Rosella <antonio.rosella@agip.it>
6343
6344         * socks/geturl.cgi: Fixed version No.
6345
6346         * socks/download-netscape.html: Ditto.
6347
6348         * socks/download.html: Changed socks.html to download.html.
6349
6350 1996-07-11  Hrvoje Niksic  <hniksic@srce.hr>
6351
6352         * url.c (url_filename): Check for opt.dirstruct instead for
6353         opt.recursive && opt.dirstruct.
6354
6355         * init.c (defaults): Ditto.
6356         (defaults): Reset dirstruct by default.
6357         (setval): Set opt.dirstruct whenever setting recursive.
6358
6359         * init.h: Removed FORCEDIRHIER.
6360
6361         * INSTALL: Added -L to socks-description.
6362
6363         * version.c: Changed version to 1.4b15.
6364
6365 1996-07-10  Hrvoje Niksic  <hniksic@srce.hr>
6366
6367         * version.c: "Released" 1.4b14.
6368
6369         * geturl.1: Update AUTHOR to include Rosella as contributor.
6370
6371         * NEWS: Update.
6372
6373         * socks/geturl.cgi: Simplified command creation, nuked <blink>.
6374
6375         * socks/geturl.cgi: Wrap nutscape extensions within if $netscape.
6376         (cal_time): Fix == to eq.
6377
6378         * socks/geturl.cgi: GPL-ized with permission of A. Rosella.
6379
6380         * geturl.1 (hostname): Moved URL CONVENTIONS to the beginning.
6381
6382         * Makefile.in: Use @VERSION@.
6383
6384         * configure.in: Check version from version.c.
6385
6386         * socks/geturl.cgi: Changed /pub/bin/perl to /usr/bin/perl.
6387
6388         * socks/download.html: Created from download-netscape.html, made
6389         HTML-2.0 compliant.
6390
6391         * recur.c (recursive_retrieve): Set opt.force_dir_hier when
6392         following FTP links from recursions.
6393
6394 1996-07-09  Hrvoje Niksic  <hniksic@srce.hr>
6395
6396         * url.c (mymkdir): Fixed a bug that prevented mymkdir() to create
6397         absolute directories correctly.
6398
6399         * version.c: Changed version to 1.4b14.
6400
6401 1996-07-09  Hrvoje Niksic  <hniksic@srce.hr>
6402
6403         * version.c: "Released" 1.4b13.
6404
6405         * url.c (make_backup): New function.
6406
6407         * http.c (http_loop): Make a backup copy of the local file (using
6408         rename(2)) before opening it.
6409
6410         * main.c (main): Added --backups.
6411
6412         * host.c (ftp_getaddress): Bail out on failed mycuserid().
6413         (ftp_getaddress): Check for leading dot on MY_DOMAIN.
6414         (ftp_getaddress): Check for empty, null or (null) domain.
6415
6416         * url.c (get_urls_html): If this_url is NULL, the base must have a
6417         protocol.
6418         (parseurl): Use has_proto.
6419
6420         * retr.c (retrieve_url): Warn when proxy is used with more than 20
6421         retries.
6422
6423         * url.c (mkstruct): Create the directory (calling mymkdir()) only
6424         if it is not already there.
6425         (has_proto): New function.
6426         (get_urls_html): Eliminate the remaining call to findurl -- use
6427         has_proto.
6428
6429         * geturl.1: Ditto.
6430
6431         * main.c: Change -X to -x.
6432
6433         * url.c (url_filename): Simplify creation of filename if
6434         prefix_files is set.
6435         (url_filename): Simplify everything. And I do mean *everything*.
6436         (mkstruct): Add dir_prefix before hostname.
6437         (path_simplify): Fixed a bug that caused writing outside the path
6438         string in case of "." and ".." path strings.
6439
6440 1996-07-06  Hrvoje Niksic  <hniksic@srce.hr>
6441
6442         * init.c: Added --mirror.
6443
6444         * main.c (main): Added -X to force saving of directory hierarchy.
6445
6446         * ftp.c (ftp_retrieve_list): Added recursion depth counter.
6447         (ftp_retrieve_list): Check whether quota is exceeded.
6448
6449         * url.c (get_urls_html): Skip leading blanks for absolute URIs.
6450
6451         * http.c (gethttp): Use referer if present.
6452
6453         * recur.c (recursive_retrieve): Set u->referer before calling
6454         retrieve_url.
6455
6456         * url.c (newurl): Use memset to nullify the struct members.
6457         (freeurl): Free the referer field too.
6458
6459         * url.h: Added referer to urlinfo.
6460
6461         * geturl.1: Updated the manual to document some of the new features.
6462
6463         * utils.c (numdigit): Moved from url.c.
6464
6465         * README: Rewritten.
6466
6467         * config.h.in: Add the support for socks.
6468
6469         * configure.in: Add the support for socks.
6470
6471         * url.c (url_filename): If the dir_prefix is ".", work with just
6472         the file name.
6473         (url_filename): Do not look for .n extensions if timestamping if
6474         turned on.
6475
6476         * retr.c (show_progress): Skip the over-abundant restval data, and
6477         print the rest of it with ',' instead of '.'.
6478
6479 1996-07-05  Hrvoje Niksic  <hniksic@srce.hr>
6480
6481         * retr.c (show_progress): Changed second arg. to long (as it
6482         should be).
6483         (show_progress): Moved to retr.c.
6484         (get_contents): Moved to retr.c.
6485
6486         * version.c: Change version to 1.4b13.
6487
6488 1996-07-05  Hrvoje Lacko <hlacko@fly.cc.fer.hr>
6489
6490         * url.c (in_acclist): Would return after the first suffix.
6491
6492 1996-07-04  Hrvoje Niksic  <hniksic@srce.hr>
6493
6494         * version.c: "Released" 1.4b12.
6495
6496         * url.c (path_simplify): More kludgifications.
6497         (get_urls_html): Use new parameters for htmlfindurl.
6498
6499         * html.c: Removed memorizing "parser states", since the new
6500         organization does not require them.
6501
6502         * init.c (run_geturlrc): Use read_whole_line.
6503
6504         * ftp-unix.c (ftp_parse_ls): Use read_whole_line.
6505
6506         * recur.c (parse_robots): Use read_whole_line.
6507
6508         * utils.c (read_whole_line): New function.
6509
6510         * recur.c (tried_robots): Use add_slist/in_slist, *much* cleaner.
6511
6512         * host.c (ngethostbyname): Call inet_addr just once. Yet to be
6513         tested on OSF and Ultrix.
6514         (add_hlist): New function.
6515         (free_hlist): New function.
6516         (search_host): New function.
6517         (search_address): New function.
6518         (realhost): Use search_host, search_address and add_hlist.
6519         (same_host): Replaced realloc() with strdupdelim(), made
6520         case-insensitive, fixed a memory leak.
6521
6522         * html.c (ftp_index): Fixed tm_min and tm_sec to be tm_hour and
6523         tm_min, like intended.
6524
6525         * version.c: Change user agent information to
6526         Geturl/version.
6527
6528 1996-07-03  Hrvoje Niksic  <hniksic@srce.hr>
6529
6530         * utils.c: Renamed nmalloc.c to utils.c, .h likewise.
6531
6532         * url.c (acceptable): Always accept directories.
6533
6534         * ftp-unix.c (ftp_parse_ls): Support brain-damaged "ls -F"-loving
6535         servers by stripping trailing @ from symlinks and trailing / from
6536         directories.
6537
6538         * ftp.c (ftp_loop): Debugged the "enhanced" heuristics. :-)
6539
6540         * url.c (skip_url): Use toupper instead of UCASE.
6541
6542         * host.c (sufmatch): Made it case-insensitive.
6543
6544         * url.c (match_backwards_or_pattern): Fixed i == -1 to j == -1.
6545         (match_backwards): New function, instead of
6546         match_backwards_or_pattern.
6547
6548         * recur.c (recursive_retrieve): Increased performance by
6549         introducing inl, which reduces number of calls to in_slist to only
6550         one.
6551
6552         * ftp.c (ftp_loop): Enhanced the heuristics that decides which
6553         routine to use.
6554
6555         * main.c (printhelp): Removed the warranty stuff.
6556
6557 1996-07-02  Hrvoje Niksic  <hniksic@srce.hr>
6558
6559         * url.c (add_slist): Simplify.
6560         (match_backwards_or_pattern): New function.
6561         (in_acclist): Use match_backwards_or_pattern.
6562         (matches): Remove.
6563
6564 1996-06-30  Hrvoje Niksic  <hniksic@srce.hr>
6565
6566         * ftp.c (ftp_loop): Call ftp_index on empty file names, if not
6567         recursive.
6568
6569         * html.c (ftp_index): Fixed to work. Beautified the output.
6570
6571         * ftp.c (ftp_retrieve_glob): Another argument to control whether
6572         globbing is to be used.
6573         (ftp_retrieve_list): Compare the time-stamps of local and remote
6574         files to determine whether to download.
6575
6576 1996-06-29  Hrvoje Niksic  <hniksic@srce.hr>
6577
6578         * ftp.c (rel_constr): New function.
6579
6580         * retr.c (retrieve_from_file): Check for text/html before
6581         retrieving recursively.
6582
6583         * main.c (main): Check whether the file is HTML before going into
6584         recursive HTML retrieving.
6585
6586         * ftp.c (ftp_retrieve_list): Manage directories.
6587         (ftp_retrieve_glob): Pass all the file-types to ftp_retrieve_list.
6588         (ftp_1fl_loop): Fixed a bug that caused con->com to be incorrectly
6589         initialized, causing bugchecks in getftp to fail.
6590
6591         * configure.in: Check for symlink.
6592
6593         * ftp.c (ftp_retrieve_list): Added support for symlinks.
6594
6595         * version.c: "Released" 1.4b10.
6596
6597         * atotm.c (atotm): Redeclared as time_t.
6598
6599         * init.c: New variable "timestamping".
6600
6601         * main.c (main): New option 'N'.
6602
6603         * http.c (hgetlocation): Case-insensitive match.
6604         (hgetmodified): New function.
6605         (http_loop): Implement time-stamping.
6606
6607 1996-06-28  Hrvoje Niksic  <hniksic@srce.hr>
6608
6609         * version.c: Changed version to 1.4b10
6610
6611         * atotm.c: New file, from phttpd.
6612
6613         * options.h (struct options): New parameter timestamping.
6614
6615         * version.c: 1.4b9 "released".
6616
6617         * recur.c (recursive_retrieve): Used linked list (ulist) for
6618         faster storing of URLs.
6619
6620         * url.c (get_urls_html): Removed the old kludge with comparing the
6621         outputs of htmlfindurl and findurl.
6622         (get_urls_html): Added better protocol support here.
6623         (create_hash): Removed, as well as add_hash and in_hash.
6624         (addslist): New function.
6625         (in_slist): ditto
6626
6627         * version.c: Released 1.4b8, changed version to b9.
6628
6629 1996-06-27  Hrvoje Niksic  <hniksic@srce.hr>
6630
6631         * ftp.c (freefileinfo): New function.
6632         (delelement): New function.
6633
6634         * everywhere: GPL!
6635
6636         * ftp.c (ftp_loop): Use ccon.
6637         (ftp_retrieve_glob): Likewise.
6638
6639         * ftp.h: Define ccon, to define status of control connection.
6640
6641         * ftp.c (ftp_get_listing): New function.
6642         (ftp_retrieve_more): New function.
6643         (ftp_retrieve_glob): New function.
6644
6645 1996-06-25  Hrvoje Niksic  <hniksic@srce.hr>
6646
6647         * configure.in: Removed the search for cuserid().
6648
6649         * init.c (getmode): Renamed to getperms.
6650
6651 1996-06-24  Hrvoje Niksic  <hniksic@srce.hr>
6652
6653         * version.c: New version.
6654
6655         * main.c (hangup): New function, that handles hangup. Hangup
6656         signal now causes geturl to stop writing on stdout, and to write
6657         to a log file.
6658
6659         * ftp.c (getftp): "Released" 1.4b7.
6660
6661         * html.c (htmlfindurl): Ignore everything inside <head>...</head>.
6662         (ftp_index): Use fileinfo/urlinfo.
6663
6664         * ftp-unix.c (ftp_parse_ls): New function.
6665         (symperms): New function.
6666
6667         * ftp.c (ftp_1fl_loop): New function, to handle 1-file loops.
6668
6669         * retr.c (retrieve_url): Added FTP support.
6670
6671 1996-06-23  Hrvoje Niksic  <hniksic@srce.hr>
6672
6673         * geturl.h: Removed NOTFTP2HTML enum.
6674         Added DO_LOGIN, DO_CWD and DO_LIST. LIST_ONLY is obsolete.
6675
6676         * ftp.c (getftp): Resynched with urlinfo.
6677         (getftp): Removed HMTL-ization of index.html from getftp.
6678
6679         * version.c: 1.4b6 "released".
6680
6681         * options.h (options): New struct, to keep options in.
6682
6683         * http.c (http_loop,gethttp): Synched with proxy.
6684
6685         * retr.c (retrieve_url): Implemented proxy retrieval.
6686
6687         * main.c (main): Use retrieve_from_file.
6688
6689 1996-06-22  Hrvoje Niksic  <hniksic@srce.hr>
6690
6691         * retr.c (retrieve_from_file): New function.
6692
6693         * url.c (parseurl): Modified to return URLOK if all OK. Protocol
6694         can be found in u->proto.
6695
6696         * ftp.c (ftp_response): Fixed to accept multi-line responses as
6697         per RFC 959.
6698
6699         * recr.c (recursive_retrieve): Take newloc from retrieve_url.
6700
6701         * url.c (mymkdir): Removed the file of the same name, if one
6702         exists.
6703         (isfile): New function.
6704         (mkstruct): Fixed the '/' glitches.
6705         (path_simplify): Hacked to treat something/.. correctly.
6706
6707 1996-06-21  Hrvoje Niksic  <hniksic@srce.hr>
6708
6709         * http.c (gethttp): Close the socket after error in headers.
6710         (http_loop): HEOF no longer a fatal header.
6711
6712         * loop.c (retrieve_url): When dt is NULL, do not modify it. This
6713         simplifies the syntax of calling retrieve_url.
6714
6715         * recr.c (recursive_retrieve): Modified to use get_urls_html.
6716
6717         * url.c (get_urls_file): New function.
6718         (get_urls_html): New function.
6719
6720         * recr.c (recursive_retrieve): Patched up to conform to the
6721         standards.
6722
6723         * http.c (gethttp): Synched with the rest...
6724         (gethttp): Treat only CONREFUSED specially, with connection
6725         errors.
6726
6727         * init.c,geturl.1,http.c (http_loop): Removed kill_error.
6728
6729 1996-06-20  Hrvoje Niksic  <hniksic@srce.hr>
6730
6731         * http.c (http_loop): New function.
6732
6733         * loop.c: Removed *lots* of stuff from retrieve_url.
6734
6735         * url.c (parseurl): Changed to work with urlinfo. Integrated
6736         username finding and path parsing.
6737         (newurl): New function.
6738         (freeurl): New function.
6739         (mkstruct): Removed the old bogosities, made it urlinfo-compliant.
6740         (url_filename): Likewise.
6741         (path_simplify): Accept relative paths too.
6742         (opt_url): Made urlinfo-compliant, removed bogosities.
6743         (path_simplify): Expanded to accept relative paths.
6744         (str_url): A replacement for hide_url
6745         (decode_string): Fixed a bug that caused malfunctioning when
6746         encountering an illegal %.. combination.
6747         (opt_url): Removed the argument. Dot-optimizations are now default.
6748
6749         * nmalloc.c (strdupdelim): New function.
6750
6751         * url.h: Added the urlinfo structure
6752
6753 1996-06-19  Hrvoje Niksic  <hniksic@srce.hr>
6754
6755         * url.c (hide_url): Thrown out the protocol assertion. Do not
6756         change the URL if the protocol if not recognized.
6757         (findurl): Put continue instead of break.
6758
6759 1996-06-18  Hrvoje Niksic  <hniksic@srce.hr>
6760
6761         * sample.geturlrc: Changed the defaults to be commented out and
6762         harmless (previous defaults caused pains if copied to
6763         ~/.geturlrc).
6764
6765         * http.c (gethttp): Print the HTTP request in debug mode.
6766
6767         * connect.c (iread): Added EINTR check loop to select-ing
6768         too. EINTR is now correctly handled with select().
6769
6770         * TODO: new file
6771
6772 1996-05-07  Hrvoje Niksic  <hniksic@srce.hr>
6773
6774         * host.c (same_host): Made the function a little bit more
6775         intelligent regarding diversified URL syntaxes.
6776
6777         * url.c (skip_url): Spaces are now skipped after URL:
6778
6779         * Released 1.3.1 with the patch to prevent crashing when sending
6780         NULL to robot* functions and the patch to compile "out of the box"
6781         on AIX.
6782
6783         * recr.c (recursive_retrieve): Added checking whether this_url is
6784         NULL when calling the robot functions.
6785
6786         * ChangeLog: New file.