sjero.net Git - wget/blob - src/ChangeLog

   1 2003-09-19  Hrvoje Niksic  <hniksic@xemacs.org>
   2
   3         * safe-ctype.h (_sch_test): Cast BIT to unsigned char, like latest
   4         gcc does.
   5
   6 2003-09-19  Hrvoje Niksic  <hniksic@xemacs.org>
   7
   8         * wget.h (BOUNDED_TO_ALLOCA): Evaluate PLACE only once.
   9         (ARRAY_SIZE): Renamed to countof.  All callers updated.
  10
  11 2003-09-19  Hrvoje Niksic  <hniksic@xemacs.org>
  12
  13         * main.c (main): New option --strict-comments.
  14
  15         * html-parse.c (find_comment_end): New function: simple BM search
  16         for "-->".
  17         (map_html_tags): Use it if looking at a comment and not in strict
  18         comments mode.
  19
  20 2003-09-17  Aurelien Marchand  <artaxerxes@users.sf.net>
  21
  22         * ftp.h: Added OS400 system in enum
  23         * ftp-basic.c: recognize OS400 systems
  24         * ftp.c: don't prepend the CWD if talking to OS400, since it
  25         breaks the change in library
  26
  27 2003-09-18  Hrvoje Niksic  <hniksic@xemacs.org>
  28
  29         * retr.c (get_contents): Pass the correct argument to ssl_iread.
  30
  31 2003-09-18  Hrvoje Niksic  <hniksic@xemacs.org>
  32
  33         * safe-ctype.h: Don't #define ctype.h macros to errors because
  34         that loses when someone #include's ctype.h after safe-ctype.h.
  35
  36 2003-09-17  Hrvoje Niksic  <hniksic@xemacs.org>
  37
  38         * url.c: Undef U, W, C after use.
  39
  40 2003-09-17  Hrvoje Niksic  <hniksic@xemacs.org>
  41
  42         * init.c (cmd_spec_restrict_file_names): Allow the OS setting to
  43         be augmented by ",nocontrol" which means don't escape the control
  44         characters, but otherwise keep OS settings.
  45
  46         * url.c (file_unsafe_char): Deleted.
  47         (append_uri_pathel): Query filechr_table directly.
  48         (filechr_table): Separated Unix, Windows, and control-unsafe
  49         characters.
  50
  51 2003-09-17  Hrvoje Niksic  <hniksic@xemacs.org>
  52
  53         * url.c (url_escape_1): New function.
  54         (url_escape): Use it.
  55         (sync_path): Handle pathological cases where u->file and u->dir
  56         contain really strange characters.
  57         (ENCODE): Deleted.
  58         (REENCODE): Deleted.
  59
  60 2003-09-16  Hrvoje Niksic  <hniksic@xemacs.org>
  61
  62         * url.c (url_file_name): Don't reallocate FNAME if the file
  63         doesn't exist, as is usually the case.
  64
  65         * utils.c (unique_name): New flag allow_passthrough.
  66
  67 2003-09-16  Hrvoje Niksic  <hniksic@xemacs.org>
  68
  69         * utils.c (wtimer_sys_diff): Convert the time difference to signed
  70         __int64, then to double.  This works around MS VC++ 6 which can't
  71         convert unsigned __int64 to double directly.
  72
  73 2003-09-16  Hrvoje Niksic  <hniksic@xemacs.org>
  74
  75         * Makefile.in (clean): Also remove the core.<number> files
  76         produced by recent Linux systems.
  77
  78 2003-09-16  Hrvoje Niksic  <hniksic@xemacs.org>
  79
  80         * http.c (post_file): Don't pad the file if it's not large
  81         enough.  Bail out instead.
  82
  83 2003-09-15  Hrvoje Niksic  <hniksic@xemacs.org>
  84
  85         * retr.c (get_contents): Reduce the buffer size to the amount of
  86         data that may pass through for one second.  This prevents long
  87         sleeps when limiting bandwidth.
  88
  89         * connect.c (connect_to_one): Reduce the socket's RCVBUF when
  90         bandwidth limitation to small values is requested.
  91
  92 2003-09-15  Hrvoje Niksic  <hniksic@xemacs.org>
  93
  94         * progress.c (update_speed_ring): Moved the speed ring update to a
  95         separate function and documented it better.
  96
  97         * progress.c: Use `double' for most timers to support granularity
  98         smaller than 1ms.
  99
 100 2003-09-15  Hrvoje Niksic  <hniksic@xemacs.org>
 101
 102         * wget.h (XDIGIT_TO_XCHAR): Implement as index into a literal
 103         string.
 104         (XDIGIT_TO_xchar): Ditto.
 105
 106 2003-09-15  Hrvoje Niksic  <hniksic@xemacs.org>
 107
 108         * utils.c: Change the type of timer-related functions from long to
 109         double, for better precision.  On machines supporting gettimeofday
 110         the timers now work with granularity of less than one millisecond.
 111
 112 2003-09-15  Hrvoje Niksic  <hniksic@xemacs.org>
 113
 114         * cookies.c (parse_set_cookies): Fixed the parser to handle more
 115         edge conditions.
 116         (test_cookies): New function, contains a test suite for
 117         parse_set_cookies.
 118
 119 2003-09-15  Hrvoje Niksic  <hniksic@xemacs.org>
 120
 121         * url.c (strpbrk_or_eos): Implement as a macro under Gcc.
 122
 123 2003-09-15  Hrvoje Niksic  <hniksic@xemacs.org>
 124
 125         * cookies.c (parse_set_cookies): Allow trailing space in
 126         set-cookies header.  Also, allow any amount of whitespace, not
 127         only one character.  Allow empty set-cookies header without
 128         spewing an error.
 129
 130 2003-09-14  Hrvoje Niksic  <hniksic@xemacs.org>
 131
 132         * url.c (append_uri_pathel): Use opt.restrict_file_names when
 133         calling file_unsafe_char.
 134
 135         * init.c: New command restrict_file_names.
 136
 137         * main.c (main): New option --restrict-file-names[=windows,unix].
 138
 139         * url.c (url_file_name): Renamed from url_filename.
 140         (url_file_name): Add directory and hostdir prefix here, not in
 141         mkstruct.
 142         (append_dir_structure): New function, does part of the work that
 143         used to be in mkstruct.  Iterates over path elements in u->path,
 144         calling append_uri_pathel on each one to append it to the file
 145         name.
 146         (append_uri_pathel): URL-unescape a path element and reencode it
 147         with a different set of rules, more appropriate for handling of
 148         files.
 149         (file_unsafe_char): New function, uses a lookup table to decide
 150         whether a character should be escaped for use in file name.
 151         (append_string): New utility function.
 152         (append_char): Ditto.
 153         (file_unsafe_char): New argument restrict_for_windows, decide
 154         whether Windows file names should be escaped in run-time.
 155
 156         * connect.c: Include <stdlib.h> to get prototype for abort().
 157
 158 2003-09-14  Hrvoje Niksic  <hniksic@xemacs.org>
 159
 160         * utils.c (wtimer_sys_set): Extracted the code that sets the
 161         current time here.
 162         (wtimer_reset): Call it.
 163         (wtimer_sys_diff): Extracted the code that calculates the
 164         difference between two system times here.
 165         (wtimer_elapsed): Call it.
 166         (wtimer_elapsed): Don't return a value smaller than the previous
 167         one, which could previously happen when system time is set back.
 168         Instead, reset start time to current time and note the elapsed
 169         offset for future calculations.  The returned times are now
 170         guaranteed to be monotonically nondecreasing.
 171
 172 2003-09-10  Hrvoje Niksic  <hniksic@xemacs.org>
 173
 174         * host.c (lookup_host): Print the result of the DNS lookup.
 175
 176 2003-09-10  Hrvoje Niksic  <hniksic@xemacs.org>
 177
 178         * init.c (cmd_boolean): Accept yes/no along with on/off.
 179         (cmd_lockable_boolean): Ditto.
 180
 181 2003-09-10  Hrvoje Niksic  <hniksic@xemacs.org>
 182
 183         * init.c: New command dns_cache.
 184
 185         * main.c (main): New option --dns-cache[=off].
 186
 187 2003-09-09  Hrvoje Niksic  <hniksic@xemacs.org>
 188
 189         * config.h.in: Initialize HAVE_GETADDRINFO and ENABLE_IPV6.
 190
 191         * all: Use #ifdef ENABLE_IPV6 instead of the older INET6.  Use
 192         HAVE_GETADDRINFO for getaddrinfo-related stuff.
 193
 194 2003-09-09  Hrvoje Niksic  <hniksic@xemacs.org>
 195
 196         * url.c (url_parse): Return an error if the URL contains a [...]
 197         IPv6 numeric address and we don't support IPv6.
 198
 199 2003-09-05  Hrvoje Niksic  <hniksic@xemacs.org>
 200
 201         * url.c (is_valid_ipv6_address): Modified to not require
 202         zero-terminated strings.
 203         (is_valid_ipv4_address): Ditto.
 204
 205 2003-09-05  Mauro Tortonesi <mauro@deepspace6.net>
 206
 207         src/url.c: added RFC 2732 compliance for URL parsing. The
 208         functions is_*_address valid are a modified version of
 209         glibc 2.3.2 inet_pton's code.
 210
 211 2003-09-03  Ahmon Dancy  <dancy@dancysoft.com>
 212
 213         * main.c init.c options.h: Added --retry-connrefused option so
 214         that Connection Refused failures are treated as non-fatal (when
 215         trying to retrieve from busy servers).
 216
 217         * wget.h: New CONNECT_ERROR macro for encapsulating this
 218         modification.
 219
 220         * ftp.c http.c : Use CONNECT_ERROR macro in places where
 221         ECONNREFUSED was checked.
 222
 223 2003-01-11  Ian Abbott  <abbotti@mev.co.uk>
 224
 225         * ftp.c (ftp_retrieve_glob): Reject insecure filenames as determined
 226         by calling new function has_insecure_name_p.  This is based on a
 227         patch by Red Hat.
 228
 229         * fnmatch.c (has_insecure_name_p): New function: returns non-zero
 230         if filename starts with `/' or contains `../' and is therefore
 231         considered insecure.
 232
 233         * fnmatch.h: Declare has_insecure_name_p().
 234
 235 2002-08-03  Hrvoje Niksic  <hniksic@xemacs.org>
 236
 237         * init.c (cmd_file): Allocate RESULT correctly.
 238
 239 2002-07-24  Hrvoje Niksic  <hniksic@xemacs.org>
 240
 241         * recur.c (retrieve_tree): Check whether downloaded_html_set is
 242         non-NULL before using it.
 243
 244 2002-05-27  Hrvoje Niksic  <hniksic@arsdigita.com>
 245
 246         * html-parse.c (NAME_CHAR_P): Allow almost any character here.
 247
 248 2002-05-24  Hrvoje Niksic  <hniksic@arsdigita.com>
 249
 250         * progress.c (bar_set_params): Fall back to dot progress if the
 251         terminal type is "emacs".
 252
 253 2002-05-20  Hrvoje Niksic  <hniksic@arsdigita.com>
 254
 255         * log.c: Don't #undef WGET_USE_STDARG.
 256
 257 2002-05-16  Hrvoje Niksic  <hniksic@arsdigita.com>
 258
 259         * hash.c (prime_size): Store the offset of the prime number in the
 260         prime table.  When searching, start with the given offset.
 261         (hash_table_new): Pass the pointer to ht->prime_offset to
 262         prime_size.
 263         (grow_hash_table): Ditto.
 264         (prime_size): Make 13 the first prime to make empty hash tables
 265         slightly smaller.
 266
 267 2002-05-16  Ian Abbott  <abbotti@mev.co.uk>
 268
 269         * recur.c (download_child_p): Minor optimization to avoid an
 270         unnecessary additional call to schemes_are_similar_p function.
 271
 272 2002-05-16  Ian Abbott  <abbotti@mev.co.uk>
 273
 274         * url.c (schemes_are_similar_p): New function to test enumerated
 275         scheme codes for similarity.
 276
 277         * url.h: Declare it.
 278
 279         * recur.c (download_child_p): Use it to compare schemes.  This
 280         also fixes a bug that allows hosts to be spanned (without the
 281         -H option) when the parent scheme is https and the child's is
 282         http or vice versa.
 283
 284 2002-05-14  Bill Richardson  <bill@riverstonenet.com>
 285
 286         * ftp.c (getftp): Don't ftruncate stdout.
 287
 288         * http.c (gethttp): Don't ftruncate stdout.
 289
 290 2002-05-09  Ian Abbott  <abbotti@mev.co.uk>
 291
 292         * cmpt.c (strptime_internal): Synched with glibc-2.1.3.
 293         (get_number): Ditto.
 294         (get_alt_number): Ditto.
 295         (__isleap): New function-like macro used by strptime.
 296         (day_of_the_week): New function used by strptime.
 297         (day_of_the_year): Ditto.
 298         (__mon_yday): Now shared by mktime and strptime implementations.
 299
 300 2002-05-08  Hrvoje Niksic  <hniksic@arsdigita.com>
 301
 302         * cookies.c (check_domain_match): Use match_tail in case
 303         insensitive mode.
 304
 305         * utils.c (match_tail): Allow the caller to specify case
 306         insensitive mode.
 307
 308         * cookies.c (store_cookie): When expiry_time is 0, print it as
 309         undefined, not indefinite.
 310
 311 2002-05-07  Ian Abbott  <abbotti@mev.co.uk>
 312
 313         * cookies.c (cookie_jar_process_set_cookie): Do not store
 314         discarded cookie.
 315
 316 2002-04-21  Hrvoje Niksic  <hniksic@arsdigita.com>
 317
 318         * cookies.c (check_domain_match): Allow cookies to be set for
 319         subdomains of unknown top-level domains under some circumstances.
 320
 321 2002-04-21  Thomas Lussnig  <thomas.lussnig@bewegungsmelder.de>
 322
 323         * gen_ssl.c:
 324         - allow checking of server cert
 325         - allow defining client cert type
 326         - allow limit of ssl protocol
 327         - check more return values
 328         - added debug message on break
 329
 330 2002-04-21  Hrvoje Niksic  <hniksic@arsdigita.com>
 331
 332         * recur.c (download_child_p): Revert order of items in check
 333         number 6 for clarity.
 334
 335 2002-04-20  Hrvoje Niksic  <hniksic@arsdigita.com>
 336
 337         * init.c: Ditto.
 338
 339         * main.c: Ditto.
 340
 341         * http.c: Use the new interface.
 342
 343         * cookies.c: Provide an OO-style "cookie jar" interface to enable
 344         separate cookie jars.
 345
 346         * http.c (http_atotm): Declare argument as const.
 347
 348 2002-04-20  Hrvoje Niksic  <hniksic@arsdigita.com>
 349
 350         * cookies.c (cookie_new): Default to PORT_ANY.
 351         (find_cookie_chain_exact): Only search by DOMAIN.
 352         (find_matching_cookie): Also check that PORT matches.
 353         (store_cookie): Only match the domain.
 354         (set_cookie_header_cb): When a cookie "fakes" a domain, assume it
 355         is valid for that host rather than discarding it completely.
 356         (find_matching_chains): Don't search by PORT.
 357         (matching_cookie): Also match PORT.
 358         (load_cookies): Set the port if specified, otherwise leave it as
 359         ANY.
 360         (save_cookies_mapper): Save the port if specified, otherwise leave
 361         it empty.
 362
 363 2002-04-19  Thomas Lussnig  <thomas.lussnig@bewegungsmelder.de>
 364
 365         * init.c: The option `egdfile' was not in sort order.
 366
 367 2002-04-16  Hrvoje Niksic  <hniksic@arsdigita.com>
 368
 369         * ftp.c (getftp): Treat directories that begin with <letter>: as
 370         absolute.
 371         (getftp): Strip trailing slashes from con->id before merging it
 372         with TARGET.
 373
 374 2002-04-16  Hrvoje Niksic  <hniksic@arsdigita.com>
 375
 376         * http.c (gethttp): If Content-Type is not given, assume
 377         text/html.
 378
 379 2002-04-15  Hrvoje Niksic  <hniksic@arsdigita.com>
 380
 381         * recur.c (download_child_p): Don't ignore rejection of HTML
 382         documents that are themselves leaves of recursion.
 383
 384 2002-04-15  Ian Abbott  <abbotti@mev.co.uk>
 385
 386         Makefile.in: Updated several dependencies for object files to take
 387         account of nested include files.
 388
 389 2002-04-15  Ian Abbott  <abbotti@mev.co.uk>
 390
 391         Makefile.in: The target `connect$o' (connect.o) now depends on
 392         `utils.h'
 393
 394 2002-04-15  Ian Abbott  <abbotti@mev.co.uk>
 395
 396         * host.c (SET_H_ERRNO): New function-like macro to set `h_errno'.
 397         (gethostbyname_with_timeout): Use it.
 398
 399         * utils.c: Don't define `SETJMP()', `run_with_timeout_env' or
 400         `abort_run_with_timeout()' when `USE_SIGNAL_TIMEOUT' is undefined.
 401
 402 2002-04-15  Hrvoje Niksic  <hniksic@arsdigita.com>
 403
 404         * host.c (getaddrinfo_with_timeout): New function.
 405         (gethostbyname_with_timeout): Ditto.
 406         (lookup_host): Use them.
 407
 408 2002-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
 409
 410         * utils.c (number_to_string): Handle the case when n < -INT_MAX.
 411
 412 2002-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
 413
 414         * init.c (comind): Use a marginally faster implementation of
 415         binary search.  To quote Martin Buchholz, "a nanosecond saved is a
 416         nanosecond earned."
 417
 418 2002-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
 419
 420         * main.c (print_help): Document `--post-data' and `--post-file'.
 421
 422 2002-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
 423
 424         * http.c (gethttp): Ditto.
 425
 426         * retr.c (retrieve_url): Initialize variables to appease the
 427         compiler.
 428
 429         * gen_sslfunc.c (ssl_iread): Don't handle EINTR when calling
 430         select_fd.
 431         (ssl_iwrite): Ditto.
 432
 433         * connect.c (select_fd): Rewrite to handle EINTR.  Set errno to
 434         ETIMEDOUT in case of timeout.
 435         (iread): No need to handle EINTR when calling select_fd.
 436         (iwrite): Ditto.
 437
 438 2002-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
 439
 440         * retr.c (retrieve_url): Make sure that POST is not honored for
 441         redirections.
 442
 443         * http.c (gethttp): Send the POST data when requested.
 444         (post_file): New function.
 445         (gethttp): Use it.
 446
 447         * main.c (main): Ditto.
 448
 449         * init.c: Add new options.
 450
 451         * options.h (struct options): New options post_data and
 452         post_file_name.
 453
 454 2002-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
 455
 456         * connect.c (connect_with_timeout): Firing SIGALRM can result in
 457         connect() exiting with EINTR.  Treat EINTR the same as ETIMEDOUT.
 458
 459 2002-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
 460
 461         * connect.c (connect_with_timeout): Use it.
 462
 463         * utils.c (run_with_timeout): New function.
 464
 465 2002-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
 466
 467         * url.c (getproxy): Accept a struct url argument.  This obviates
 468         the need for USE_PROXY_P.
 469
 470         * retr.c (retrieve_url): Allow proxy to be a non-FTP URL.
 471
 472         * ftp.c (getftp): Recognize FWTK-style proxy.
 473
 474 2002-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
 475
 476         * config.h.in: Only define _VA_LIST when compiled with gcc.
 477
 478 2002-04012  Ian Abbott  <abbotti@mev.co.uk>
 479
 480         * http.c (http_loop): Compensate for MS Windows two-second
 481         granularity of file modification time when comparing timestamps.
 482
 483         * ftp.c (ftp_retrieve_list): Ditto.
 484
 485 2002-04-12  Ian Abbott  <abbotti@mev.co.uk>
 486
 487         * utils.c (has_html_suffix_p): New function to test filename for
 488         common html extensions.
 489
 490         * utils.h: Declare it.
 491
 492         * http.c (http_loop): Use it instead of previous test.
 493
 494         * retr.c (retrieve_url): Ditto.
 495
 496         * recur.c (download_child_p): Ditto.
 497
 498 2002-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
 499
 500         * config.h.in: Define _VA_LIST on Solaris to prevent stdio.h from
 501         declaring va_list.
 502         From Kevin Rodgers <kevinr@ihs.com>.
 503
 504 2002-04-12  Ian Abbott  <abbotti@mev.co.uk>
 505
 506         * Makefile.in: Specify libtool mode explicitly when linking.
 507
 508 2002-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
 509
 510         * connect.c (connect_with_timeout): New function.
 511         (connect_to_one): Use it.
 512
 513         * config.h.in: Add stubs for HAVE_SIGSETJMP, HAVE_SIGBLOCK, and
 514         HAVE_SETJMP_H.
 515
 516 2002-04-11  Hrvoje Niksic  <hniksic@arsdigita.com>
 517
 518         * log.c: Set WGET_USE_STDARG if __STDC__ is defined and stdarg.h
 519         is present.
 520
 521 2002-04-11  Hrvoje Niksic  <hniksic@arsdigita.com>
 522
 523         * progress.c (bar_create): If INITIAL is larger than TOTAL, fix
 524         TOTAL.
 525         (bar_finish): Likewise.
 526
 527 2002-04-11  Hrvoje Niksic  <hniksic@arsdigita.com>
 528
 529         * html-url.c (tag_handle_form): New function.  Pick up form
 530         actions and mark them for conversion only.
 531
 532 2002-04-11  Hrvoje Niksic  <hniksic@arsdigita.com>
 533
 534         * progress.c (struct progress_implementation): Use PARAMS when
 535         declaring the parameters of *create, *update, *finish, and
 536         *set_params.
 537
 538         * netrc.c: Ditto.
 539
 540         * http.c: Reformat some function definitions so that ansi2knr can
 541         read them.
 542
 543         * hash.c (struct hash_table): Use the PARAMS macro around
 544         parameters in the declaration of hash_function and test_function.
 545         (prime_size): Spell 2580823717UL and 3355070839UL as (unsigned
 546         long)0x99d43ea5 and (unsigned long)0xc7fa5177 respectively, so
 547         that pre-ANSI compilers can read them.
 548         (find_mapping): Use PARAMS when declaring EQUALS.
 549         (hash_table_put): Ditto.
 550
 551         * ftp.h: Wrap the parameters of ftp_index declaration in PARAMS.
 552
 553         * cookies.c (cookie_new): Use (unsigned long)0 instead of 0UL,
 554         which was unsupported by pre-ANSI compilers.
 555
 556         From Nelson H. F. Beebe <beebe@math.utah.edu>, for the most part.
 557
 558 2002-04-11  Hrvoje Niksic  <hniksic@arsdigita.com>
 559
 560         * url.c (url_filename): Use compose_file_name regardless of
 561         whether opt.dirstruct is set.
 562         (mkstruct): Don't handle the query and the reencoding of DIR; that
 563         is done in compose_file_name.
 564
 565 2002-04-10  Hrvoje Niksic  <hniksic@arsdigita.com>
 566
 567         * wget.h: Ditto for extern char *exec_name.
 568
 569         * options.h: Don't guard against OPTIONS_DEFINED_HERE -- it is
 570         perfectly legal to follow an `extern' with a non-`extern' ones,
 571         provided the types match.
 572
 573         * main.c: Don't define OPTIONS_DEFINED_HERE.
 574
 575 2002-04-10  Hrvoje Niksic  <hniksic@arsdigita.com>
 576
 577         * progress.c (create_image): Revert to calculating ETA based on
 578         average download speed.
 579         (create_image): Don't print ETA until the download has been active
 580         for at least 3 seconds.
 581         (create_image): When ETA is not available, don't print anything.
 582         The previous version would print --:--.
 583
 584 2002-04-10  Hrvoje Niksic  <hniksic@arsdigita.com>
 585
 586         * progress.c (bar_update): Keep updating a subinterval until it
 587         reaches or exceeds a watermark.  That way the measurement will be
 588         guaranteed to span a configurable minimum of time.  The current
 589         default is 3s in 30 100ms intervals.
 590
 591 2002-04-09  Hrvoje Niksic  <hniksic@arsdigita.com>
 592
 593         * progress.c (bar_update): Maintain an array of the time it took
 594         to perform previous 30 network reads.
 595         (create_image): Calculate the download speed and ETA based on the
 596         last 30 reads, not the entire download.
 597         (create_image): Make sure that the ETA is not changed more than
 598         once per second.
 599
 600 2002-04-09  Ian Abbott  <abbotti@mev.co.uk>
 601
 602         * mswindows.c (borland_utime): New function conditionally defined
 603         when `HACK_BCC_UTIME_BUG' is defined.  A reimplementation of
 604         `utime()' as Borland's `utime()' function is broken on Windows 9x
 605         systems.  (Original patch by Chin-yuan Kuo <sr1111111@yahoo.com.tw>.)
 606
 607 2002-04-08  Hrvoje Niksic  <hniksic@arsdigita.com>
 608
 609         * ftp.c (ftp_loop): Propagate the result of ftp_retrieve_glob.
 610
 611 2002-03-26  Ian Abbott  <abbotti@mev.co.uk>
 612
 613         * Makefile.in: Updated several dependencies for object files.
 614
 615 2002-03-20  Ian Abbott  <abbotti@mev.co.uk>
 616
 617         * mswindows.c: Include "utils.h".
 618
 619 2002-03-18  Ian Abbott  <abbotti@mev.co.uk>
 620
 621         * host.h: Don't include netdb.h on windows.
 622
 623 2002-02-19  Hrvoje Niksic  <hniksic@arsdigita.com>
 624
 625         * recur.c (retrieve_tree): Handle the case when start_url doesn't
 626         parse.
 627
 628 2002-02-19  Andreas Damm  <andreas-sourceforge@radab.org>
 629
 630         * wget.h (DO_REALLOC_FROM_ALLOCA): Multiply with sizeof(type) when
 631         calling xmalloc and memcpy.
 632
 633 2002-02-19  Hrvoje Niksic  <hniksic@arsdigita.com>
 634
 635         * host.h: Include Unix-specific includes #ifndef WINDOWS.
 636         Patch originally provided by Christian Lackas.
 637
 638 2002-02-11  Christian Lackas  <delta@lackas.net>
 639
 640         * recur.c: recurive downloading for https fixed.
 641
 642 2002-02-19  Alan Eldridge  <alane@geeksrus.net>
 643
 644         * host.h: Also include <netinet/in.h> and <sys/socket.h>.
 645
 646         * ftp-basic.c: Also include <netinet/in.h>.
 647
 648 2002-02-05  Ian Abbott  <abbotti@mev.co.uk>
 649
 650         * http.c (gethttp): when -c used, mark already fully retrieved
 651         file as successfully retrieved.
 652
 653 2002-02-19  Hrvoje Niksic  <hniksic@arsdigita.com>
 654
 655         * url.c (url_parse): Don't treat '?' as query string separator
 656         when parsing FTP URLs.
 657
 658 2002-02-01  Hrvoje Niksic  <hniksic@arsdigita.com>
 659
 660         * html-url.c (tag_handle_meta): Don't crash on <meta
 661         http-equiv=refresh> where content is missing.
 662
 663 2002-01-31  Herold Heiko  <Heiko.Herold@previnet.it>
 664
 665         * ftp-basic.c, host.c: don't include sys/socket.h, arpa/inet.h,
 666         netdb.h on windows.
 667
 668 2002-01-30  Hrvoje Niksic  <hniksic@arsdigita.com>
 669
 670         * retr.c (retrieve_url): Remove redirection cycle detection.  This
 671         is because some sites legitimately redirect the user back to the
 672         same location, e.g. after an authorization check performed by
 673         another page.  MAX_REDIRECTIONS is still used to prevent infinite
 674         redirection loops.
 675
 676 2002-01-26  Hrvoje Niksic  <hniksic@arsdigita.com>
 677
 678         * http.c (gethttp): Wrap host name in square brackets if it
 679         contains a colon.
 680
 681 2002-01-26  Hrvoje Niksic  <hniksic@arsdigita.com>
 682
 683         * url.c (url_parse): Allow all hex digits, not only decimal ones,
 684         to form an IP address.
 685
 686 2002-01-26  Hrvoje Niksic  <hniksic@arsdigita.com>
 687
 688         * url.c (urlchr_table): Make square braces reserved, so we can
 689         parse http://[::1]/.
 690         (url_parse): Handle host in braces.
 691         (url_string): If url->host contains colons, wrap it in braces.
 692
 693 2002-01-24  Hrvoje Niksic  <hniksic@arsdigita.com>
 694
 695         * connect.c (resolve_bind_address): New function.
 696         (connect_to_one): Use it.
 697         (bindport): Ditto.
 698
 699         * init.c: Don't resolve bind-address here.
 700
 701         * host.c (wget_sockaddr_set_address): Would bug out with ADDR == NULL.
 702
 703 2002-01-24  Hrvoje Niksic  <hniksic@arsdigita.com>
 704
 705         * host.c (lookup_host): Use sizeof(ip4_address) to calculate the
 706         offset.
 707         (address_list_new): Use map_ipv4_to_ip.
 708         (wget_sockaddr_set_address): Convert ADDR to IPv4 before using it
 709         in IPv4 context.
 710
 711 2002-01-24  Hrvoje Niksic  <hniksic@arsdigita.com>
 712
 713         * source: Integrated IPv6 support.
 714         Written by Thomas Lussnig <thomas.lussnig@bewegungsmelder.de>.
 715
 716 2002-01-15  Ian Abbott  <abbotti@mev.co.uk>
 717
 718         * init.c (cmd_file): Change `\' to `/' for Windows (yes, really!)
 719         (cmd_directory): New function. Like cmd_file(), but strips
 720         trailing directory separators.
 721         (commands): Change action for "dirprefix" from `cmd_file' to
 722         `cmd_directory'.
 723
 724         * utils.c (make_directory): Allow intermediate `mkdir' calls to
 725         fail, as not all path components that do not exist should be
 726         directory components, especially under Windows.
 727
 728 2002-01-17  Hrvoje Niksic  <hniksic@arsdigita.com>
 729
 730         * netrc.c (parse_netrc): Skip leading whitespace before testing
 731         whether the line is empty.  Empty lines still contain the line
 732         terminator.
 733
 734 2002-01-15  Hrvoje Niksic  <hniksic@arsdigita.com>
 735
 736         * gen_sslfunc.c (ssl_iread): Call select on the file descriptor
 737         only if no data is pending in SSL buffers.
 738         From tony@bluetail.com.
 739
 740 2002-01-14  Hrvoje Niksic  <hniksic@arsdigita.com>
 741
 742         * headers.c (header_get): Strip trailing whitespace from the
 743         header.
 744
 745 2002-01-14  Hrvoje Niksic  <hniksic@arsdigita.com>
 746
 747         * url.c (parse_uname): URL-decode *USER and *PASSWD.
 748
 749 2002-01-07  Ian Abbott <abbotti@mev.co.uk>
 750
 751         * url.c (uri_merge_1): Deal with "net path" relative URL (one that
 752         starts with "//").
 753
 754 2002-01-14  Hrvoje Niksic  <hniksic@arsdigita.com>
 755
 756         * http.c (gethttp): Invalidate SOCK if get_contents encountered an
 757         error.
 758
 759 2001-12-24  Hrvoje Niksic  <hniksic@arsdigita.com>
 760
 761         * version.c: Wget 1.8.1 is released.
 762
 763 2001-12-19  Hrvoje Niksic  <hniksic@arsdigita.com>
 764
 765         * version.c: Wget 1.8.1-pre3 is released.
 766
 767 2001-12-19  Hrvoje Niksic  <hniksic@arsdigita.com>
 768
 769         * recur.c (retrieve_tree): Enqueue the canonical representation of
 770         start_url, so that the test against dl_url_file_map works.
 771
 772 2001-12-19  Hrvoje Niksic  <hniksic@arsdigita.com>
 773
 774         * log.c (logputs): Check for requested verbosity before printing
 775         anything.
 776
 777 2001-12-19  Hrvoje Niksic  <hniksic@arsdigita.com>
 778
 779         * html-url.c (tag_handle_link): Treat the "shortcut icon" link as
 780         inline.
 781
 782 2001-12-18  Hrvoje Niksic  <hniksic@arsdigita.com>
 783
 784         * recur.c (retrieve_tree): Make a copy of file obtained from
 785         dl_url_file_map because the code calls xfree(file) later.
 786
 787 2001-12-18  Hrvoje Niksic  <hniksic@arsdigita.com>
 788
 789         * recur.c (register_html): Maintain a hash table of HTML files
 790         along with the list.  Disallow duplicates.
 791         (retrieve_tree): Use downloaded_html_set to check whether the file
 792         found in dl_url_file_map is an HTML file, and descend into it if
 793         so.
 794         (convert_all_links): Don't guard against duplicates in
 795         downloaded_html_list, since they are no longer possible.
 796
 797 2001-12-18  Ian Abbott  <abbotti@mev.co.uk>
 798
 799         * recur.c (retrieve_tree): Pass on referring URL when retrieving
 800         recursed URL.
 801
 802 2001-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
 803
 804         * version.c: Wget 1.8.1-pre2 is released.
 805
 806 2001-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
 807
 808         * retr.c (sleep_between_retrievals): Simplify indentation.
 809
 810 2001-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
 811
 812         * gen_sslfunc.c (ssl_init_prng): Use random_number to get a byte
 813         of "randomness" at a time.
 814         (ssl_init_prng): Don't seed the PRNG; random_number will do that.
 815
 816         * retr.c (sleep_between_retrievals): Use it.  Make sure that the
 817         random amount averages in opt.wait.
 818         (sleep_between_retrievals): Don't seed the PRNG; random_number
 819         will do that.
 820
 821         * utils.c (random_number): New function.
 822
 823 2001-12-14  Hrvoje Niksic  <hniksic@arsdigita.com>
 824
 825         * url.c (path_simplify): Move here from utils.c, and make static.
 826
 827 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
 828
 829         * init.c (wgetrc_file_name): Print correct message when loading
 830         getenv("WGETRC") fails.
 831
 832 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
 833
 834         * recur.c (register_download): Don't abort when one URL references
 835         two different files.
 836
 837 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
 838
 839         * http.c (gethttp): Check for conn->scheme, not u->scheme, before
 840         calling ssl_iwrite.
 841
 842 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
 843
 844         * version.c: Wget 1.8.1-pre1 is released.
 845
 846 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
 847
 848         * res.c (matches): Fix broken URL in the docstring.
 849
 850 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
 851
 852         * html-url.c (tag_url_attributes): Mark <embed href=...> as
 853         external.
 854
 855 2001-12-12  Hrvoje Niksic  <hniksic@arsdigita.com>
 856
 857         * url.c (get_urls_file): Cosmetic changes.
 858
 859 2001-12-12  Hrvoje Niksic  <hniksic@arsdigita.com>
 860
 861         * html-url.c (append_one_url): Resurrect warning when unable to
 862         resolve a relative link.
 863
 864 2001-12-12  Hrvoje Niksic  <hniksic@arsdigita.com>
 865
 866         * html-url.c (collect_tags_mapper): Break into several functions.
 867         (tag_url_attributes): Collect <embed href=...>.
 868
 869 2001-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
 870
 871         * host.c: New type ipv4_address.  Use it consistently instead of
 872         `unsigned char[4]' and `unsigned char *'.
 873         (pretty_print_address): Accept a `const void *', to require even
 874         less casting.
 875
 876 2001-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
 877
 878         * ftp-ls.c (ftp_parse_vms_ls): Fix obvious memory leaks.
 879
 880 2001-12-10  Hrvoje Niksic  <hniksic@arsdigita.com>
 881
 882         * main.c (main): Initialize progress after fork_to_background, so
 883         that it knows when to use dots.
 884
 885         * mswindows.c (ws_hangup): Call log_request_redirect_output.
 886
 887         * utils.c (fork_to_background): Print the PID of the child
 888         process.
 889
 890         * log.c (log_request_redirect_output): Set a flag that output
 891         redirection has been requested.  Doing anything else in a signal
 892         handler is unsafe.
 893         (check_redirect_output): New function: check whether redirection
 894         has been requested and, if so, call redirect_output().
 895         (logputs): Call check_redirect_output.
 896         (logprintf): Ditto.
 897         (debug_logprintf): Ditto.
 898         (redirect_output): Print clearer messages.
 899
 900         * main.c (redirect_output_signal): Don't call
 901         redirect_output_signal directly.  Instead, call
 902         log_request_redirect_output.
 903
 904         * utils.c (memfatal): Ditto.
 905
 906         * progress.c (display_image): Use it.
 907
 908         * log.c (log_set_save_context): New function: allow the caller to
 909         turn off saving log context lines.
 910
 911 2001-12-10  Hrvoje Niksic  <hniksic@arsdigita.com>
 912
 913         * host.c (address_list_set_faulty): Uncomment a sanity check.
 914
 915 2001-12-10  Hrvoje Niksic  <hniksic@arsdigita.com>
 916
 917         * utils.c (long_to_string): Return a pointer after where the
 918         number ends.
 919         (long_to_string): Rename to number_to_string.
 920
 921 2001-12-10  Hrvoje Niksic  <hniksic@arsdigita.com>
 922
 923         * utils.c (path_simplify): Correctly handle the unlikely case that
 924         b starts out as path + 1.
 925
 926 2001-12-10  Hrvoje Niksic  <hniksic@arsdigita.com>
 927
 928         * utils.c (path_simplify): Rewrite, with better comments, and
 929         without the use of strcpy to move overlapping blocks.
 930
 931 2001-12-09  Hrvoje Niksic  <hniksic@arsdigita.com>
 932
 933         * init.c (cmd_spec_progress): Resurrect.  Check whether VAL is a
 934         valid progress type before setting it.
 935
 936 2001-12-09  Hrvoje Niksic  <hniksic@arsdigita.com>
 937
 938         * main.c (main): Remove stray debugging message.
 939
 940 2001-12-09  Hrvoje Niksic  <hniksic@arsdigita.com>
 941
 942         * progress.c (create_image): Fix ETA padding when hours are prined.
 943
 944 2001-12-09  Hrvoje Niksic  <hniksic@arsdigita.com>
 945
 946         * version.c: Wget 1.8 is released.
 947
 948 2001-12-09  Hrvoje Niksic  <hniksic@arsdigita.com>
 949
 950         * url.c (reencode_string): Declare static.
 951
 952         * res.c (registered_specs): Declare static.
 953
 954         * progress.c (current_impl_locked): Declare static.
 955
 956         * log.c (flush_log_p): Declare static.
 957         (needs_flushing): Ditto.
 958
 959         * http.c (digest_authentication_encode): Declare static.
 960
 961         * html-url.c (init_interesting): Declare static.
 962
 963         * host.c (host_name_addresses_map): Declare static.
 964
 965         * cookies.c (find_matching_chains): Declare static.
 966
 967         * ftp-ls.c (ftp_parse_vms_ls): Warn about the memory leak
 968         indicated by lint.
 969
 970         * utils.c (path_simplify): Remove unused variable STUB_CHAR.
 971
 972         * host.c (address_list_set_faulty): Document that INDEX is
 973         currently unused.
 974
 975         * url.c (rewrite_shorthand_url): Remove unused variable PATH.
 976
 977 2001-12-08  Hrvoje Niksic  <hniksic@arsdigita.com>
 978
 979         * version.c: Wget 1.8-pre2 is released.
 980
 981 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
 982
 983         * progress.c (progress_handle_sigwinch): Set up the signal again.
 984
 985         * utils.c: Include <sys/termios.h>, where Solaris defines
 986         TIOCGWINSZ.
 987
 988         * progress.c (bar_create): Don't use the last column on the screen.
 989         (create_image): Pad ETA to constant size.  Pad SIZE to nine digits
 990         only until it exceeded them.
 991
 992 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
 993
 994         * version.c: Wget 1.8-pre1 is released.
 995
 996 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
 997
 998         * progress.c (progress_create): Make sure that, when the output is
 999         redirected, the progress implementation gets changed to the
1000         fallback one.
1001         (bar_set_params): Set current_impl_locked to 1 when "force" is
1002         specified.
1003         (progress_create): Don't change the progress implementation if
1004         current_impl_locked is non-zero.
1005
1006         * main.c (redirect_output_signal): Call
1007         progress_schedule_redirect.
1008
1009         * progress.c (progress_schedule_redirect): New function.
1010
1011 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
1012
1013         * log.c (logvprintf): Restructure to allow being called multiple
1014         times.
1015         (logprintf): Call logvprintf in a loop.
1016         (debug_logprintf): Ditto.
1017
1018 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
1019
1020         * gen_sslfunc.c (ssl_init_prng): Allow the user to disable EGD by
1021         setting egd_file it to empty string.
1022
1023         * main.c (main): Change the option name from --sslegdsock to
1024         --egd-file.
1025
1026 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
1027
1028         * gen_sslfunc.c (ssl_init_prng): Make the printed message
1029         translatable.
1030
1031 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
1032
1033         * url.c (scheme_disable): New function.
1034
1035         * main.c (main): Call ssl_init_prng from here rather than from
1036         init_ssl, so that it has a chance to disable support for https
1037         before a URL has been resolved.
1038
1039         * gen_sslfunc.c (ssl_init_prng): Seed with rand() if all else
1040         failed.
1041         (ssl_init_prng): Disable support for https if seeding the PRNG
1042         fails.
1043
1044 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
1045
1046         * utils.c (read_whole_line): Handle lines beginning with \0.
1047
1048 2001-12-05  Hrvoje Niksic  <hniksic@arsdigita.com>
1049
1050         * recur.c (convert_all_links): Guard against duplicates in
1051         downloaded_html_files.
1052         (register_download): Don't invalidate similar-looking URLs.
1053         (match_except_index): New function.
1054
1055 2001-12-05  Hrvoje Niksic  <hniksic@arsdigita.com>
1056
1057         * utils.c (path_simplify): Document with test cases.
1058
1059 2001-12-04  Hrvoje Niksic  <hniksic@arsdigita.com>
1060
1061         * gen_sslfunc.c: Ditto.
1062
1063         * rbuf.c: Include <string.h>.
1064
1065 2001-12-04  Hrvoje Niksic  <hniksic@arsdigita.com>
1066
1067         * recur.c (retrieve_tree): Check whether the URL was already
1068         downloaded before downloading it again.
1069         (descend_child_p): Renamed to download_child_p.
1070         (register_download): When one URL is downloaded to a file already
1071         "owned" by another URL, delete all references that map any URL to
1072         that file.
1073         (register_delete_file): New function.
1074         (retrieve_tree): Use it after deleting a file.
1075
1076         * url.c (url_parse): Re-canonicalize the URL also if the path is
1077         empty, so that e.g. "http://www.server.com" ->
1078         "http://www.server.com/".
1079         (lowercase_str): Use ISUPPER instead of !ISLOWER.
1080
1081         * retr.c (retrieve_url): Use the canonical URL form when calling
1082         register_download().
1083
1084 2001-12-04  Ian Abbott <abbotti@mev.co.uk>
1085
1086         * snprintf.c (dopr): Use `unsigned int' as the second argument to
1087         va_arg when casting to `unsigned short' is intended.
1088
1089 2001-12-04  Herold Heiko  <Heiko.Herold@previnet.it>
1090
1091         * gen_sslfunc.c: on windows provide ssl crypto random
1092           initialization through RAND_screen(); could possibly
1093           be not enough for strong ssl communication (see the
1094           relevant manual page from the openssl package).
1095
1096 2001-12-04  Hrvoje Niksic  <hniksic@arsdigita.com>
1097
1098         * url.c (local_quote_string): Reenable quoting of question marks,
1099         but only when `--html-extension' is used.
1100
1101 2001-12-03  Hrvoje Niksic  <hniksic@arsdigita.com>
1102
1103         * version.c: Wget 1.8-beta3 is released.
1104
1105 2001-12-03  Hrvoje Niksic  <hniksic@arsdigita.com>
1106
1107         * snprintf.c (dopr): Cast the result of va_arg to short int and
1108         short unsigned int where these types are expected to be used.
1109
1110 2001-12-03  Hrvoje Niksic  <hniksic@arsdigita.com>
1111
1112         * snprintf.c (dopr): Replace `short int' and `unsigned short int'
1113         with `int' when using it as the second argument to `va_arg'.
1114
1115 2001-12-03  Hrvoje Niksic  <hniksic@arsdigita.com>
1116
1117         * host.c (address_list_new_one): New function.
1118         (lookup_host): Use it.
1119
1120 2001-12-03  Andre Majorel  <amajorel@teaser.fr>
1121
1122         * host.c (lookup_host): Don't initialize TMPSTORE directly because
1123         it's not legal C.
1124
1125 2001-12-03  Hrvoje Niksic  <hniksic@arsdigita.com>
1126
1127         * ftp-basic.c (ftp_port): Don't return HOSTERR if we fail getting
1128         the socket data.
1129
1130         * ftp.c: Ditto.
1131
1132         * http.c: No need to declare h_errno.
1133
1134         * host.c: Declare h_errno.
1135
1136 2001-12-02  Hrvoje Niksic  <hniksic@arsdigita.com>
1137
1138         * utils.c (file_merge): If BASE doesn't contain a slash, just
1139         return a copy of FILE.
1140
1141 2001-12-02  Hrvoje Niksic  <hniksic@arsdigita.com>
1142
1143         * version.c: Wget 1.8-beta2 is released.
1144
1145 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
1146
1147         * ftp.c (getftp): When PWD fails, assume "/".
1148
1149         * ftp-basic.c (ftp_syst): Fix indentation.
1150
1151 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
1152
1153         * url.c (get_urls_file): If opt.base_href is specified, merge each
1154         URL with the base.
1155
1156 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
1157
1158         * main.c (print_help): Don't document the removed `-nh'.
1159
1160 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
1161
1162         * url.c (url_full_path): Document better.
1163
1164         * http.c (gethttp): Use the full path when creating digest
1165         authorization.
1166
1167 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
1168
1169         * cookies.c (path_matches): Return 0 if PREFIX doesn't begin with
1170         '/'.
1171
1172 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
1173
1174         * cookies.c (path_matches): FULL_PATH doesn't begin with '/', but
1175         PREFIX does.
1176
1177 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
1178
1179         * cookies.c (check_domain_match): Reimplement to match Netscape's
1180         "preliminary specification" for cookies.
1181
1182 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
1183
1184         * url.c (replace_attr_refresh_hack): New function.
1185         (convert_links): Call replace_attr_refresh_hack for Refresh
1186         links.  It will add the "TMOUT; URL=" junk before the link.
1187
1188         * html-url.c (collect_tags_mapper): Set ID to the ID of the
1189         "content" attribute, not "http-equiv".
1190         (collect_tags_mapper): Don't use OFFSET to hack the raw_* values;
1191         instead, store the information that this entry belongs to a
1192         "refresh" link.
1193
1194 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
1195
1196         * version.c: Wget 1.8-beta1 is released.
1197
1198 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
1199
1200         * recur.c (retrieve_tree): Allow -p retrievals to exceed maximum
1201         depth by more than one.
1202
1203 2001-11-30  Hrvoje Niksic  <hniksic@arsdigita.com>
1204
1205         * retr.c (retrieve_url): Don't allow more than 20 redirections.
1206
1207 2001-11-30  Hrvoje Niksic  <hniksic@arsdigita.com>
1208
1209         * recur.c (retrieve_tree): Skip the non-inline entries when
1210         enqueuing the children of a leaf HTML node in -p mode.
1211         (descend_url_p): Ignore opt.no_parent when in -p mode and UPOS is
1212         "inline".
1213
1214         * html-url.c (get_urls_html): Don't accept dash_p_leaf_HTML.
1215         (collect_tags_mapper): When an entry is "inline", mark it as such.
1216
1217         * recur.c (descend_url_p): Fix test when checking for
1218         acceptance/rejection rules.
1219
1220 2001-10-31 Daniel BODEA <dali@dali-designs.com>
1221
1222         * netrc.c (search_netrc): When slack_default is 0, still look for
1223         an account with matching password, just not the "default account".
1224         HTTP Authorization using .netrc should now work as expected.
1225
1226 2001-11-30  T. Bharath  <TBharath@responsenetworks.com>
1227
1228         * http.c (persistent_available_p): Call SHUTDOWN_SSL if
1229         test_socket_open fails.
1230
1231 2001-11-30  Hrvoje Niksic  <hniksic@arsdigita.com>
1232
1233         * progress.c (display_image): Just print one CR to reset the
1234         cursor position.
1235
1236 2001-11-30  Christian Fraenkel  <c.fraenkel@gmx.net>
1237
1238         * init.c: New command `ssl_egd_sock'.
1239
1240         * main.c (main): New option `--sslegdsock'.
1241
1242         * gen_sslfunc.c (ssl_init_prng): Seed the RNG using EGD.
1243
1244 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
1245
1246         * cmpt.c (memmove): Include a simple memmove implementation.
1247
1248 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
1249
1250         * headers: Guard against header files being included twice.
1251
1252 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
1253
1254         * gen-md5.c: Use unsigned char * as the buffer argument to
1255         gen_md5_update.
1256
1257 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
1258
1259         * connect.h: Declare select_fd.
1260
1261 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
1262
1263         * recur.c (descend_url_p): When resolving no_parent, compare with
1264         start_url, not parent url.  Otherwise link from /a/b/ to /a/c/
1265         wouldn't be followed, although the download started from /a/.
1266
1267 2001-01-23  Herold Heiko  <Heiko.Herold@previnet.it>
1268
1269         * config.h.ms, mswindows.h: defined HAVE_ISATTY, use _isatty for
1270         MS VC; somebody with Borland compiler please check and provide
1271         patch if possible;
1272
1273         * cmpt.c: provided a usleep emulation.
1274
1275 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
1276
1277         * host.c (address_list_new): Initialize al->faulty.
1278
1279 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
1280
1281         * http.c (http_process_range): Accept the broken output of
1282         "JavaWebServer/1.1.1".
1283
1284 2001-11-28  Hrvoje Niksic  <hniksic@arsdigita.com>
1285
1286         * progress.c (dot_set_params): If PARAMS is unspecified, use
1287         dot_style, if available.
1288
1289         * init.c: Ditto.
1290
1291         * main.c (main): Resurect --dot-style.
1292
1293         * progress.c (dot_finish): Print the quantity if we're left at the
1294         beginning of a row.
1295
1296 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
1297
1298         * cmpt.c (random): Removed.
1299
1300         * retr.c (sleep_between_retrievals): Use the more portable rand()
1301         instead of random().
1302
1303 2001-11-27  Ian Abbott <abbotti@mev.co.uk>
1304
1305         * retr.c (retrieve_from_file): Initialize `new_file' to NULL to
1306         prevent seg fault.
1307
1308 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
1309
1310         * connect.c (connect_to_many): Use address_list_set_faulty to
1311         prevent the faulty address from being reused.
1312
1313         * host.c (address_list_set_faulty): New function.
1314         (address_list_get_bounds): New function, instead of
1315         address_list_count.
1316
1317 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
1318
1319         * url.c (convert_links): Don't translate %d-%d.
1320
1321         * main.c (print_help): Remove stray HAVE_RANDOM code.
1322
1323 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
1324
1325         * ftp.c (getftp): Improve output after sending PASV.  Don't
1326         attempt to "look up" the IP address we already know; call
1327         connect_to_one directly.
1328
1329 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
1330
1331         * progress.c: Change the default progress implementation to "bar".
1332
1333 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
1334
1335         * progress.c (bar_create): Print two newlines.
1336
1337 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
1338
1339         * cmpt.c (random): New function, a simple-minded replacement for
1340         random() on systems that don't have it.
1341
1342 2001-11-26  Hrvoje Niksic  <hniksic@arsdigita.com>
1343
1344         * config.h.in: Put a HAVE_USLEEP stub.
1345
1346         * cmpt.c (usleep): Replacement implementation of usleep using
1347         select.
1348
1349         * init.c: New option init_rate.
1350
1351         * main.c (main): New option --limit-rate.
1352
1353         * retr.c (limit_bandwidth): New function.
1354         (get_contents): Call it to limit the bandwidth used when
1355         downloading.
1356
1357         * progress.c (dot_update): Would print the wrong download speed on
1358         rows other than the first one when the download was continued.
1359         (dot_finish): Ditto.
1360
1361 2001-11-26  Ian Abbott <abbotti@mev.co.uk>
1362
1363         * http.c (gethttp): fix undeclared variable 'err' when compiled
1364         with HAVE_SSL.
1365
1366 2001-11-26  Hrvoje Niksic  <hniksic@arsdigita.com>
1367
1368         * progress.c: Don't allocate new timers; use the timing data
1369         propagated from the caller.
1370
1371         * retr.c (get_contents): Allocate and use a timer.
1372
1373 2001-11-26  Hrvoje Niksic  <hniksic@arsdigita.com>
1374
1375         * http.c (last_host_ip): Made into an address_list.
1376         (invalidate_persistent): Release pc_last_host_ip.
1377         (register_persistent): Use lookup_host.
1378         (persistent_available_p): Check for equality of hosts using
1379         address_list_match_all.  Call address_list_release.
1380         (http_cleanup): New function.
1381
1382         * ftp.c (getftp): Use lookup_host and connect_to_many.
1383
1384         * http.c (gethttp): Use lookup_host and connect_to_many.
1385
1386         * connect.c (make_connection): Removed.
1387         (connect_to_one): New function.
1388         (connect_to_many): Ditto.
1389         (set_connection_host_name): Ditto.
1390
1391         * host.c (lookup_host): New function; new return type.
1392         (address_list_new): New function.
1393         (address_list_count): Ditto.
1394         (address_list_copy_one): Ditto.
1395         (address_list_delete): Ditto.
1396         (address_list_release): Ditto.
1397         (pretty_print_address): Ditto.
1398
1399 2001-11-26  Hrvoje Niksic  <hniksic@arsdigita.com>
1400
1401         * recur.c (retrieve_tree): In case of followed redirection,
1402         blacklist the pre-redirection URL.
1403
1404 2001-11-26  Hrvoje Niksic  <hniksic@arsdigita.com>
1405
1406         * recur.c (descend_redirect_p): New function.
1407         (retrieve_tree): Make sure redirections are not blindly followed.
1408
1409 2001-11-04  Alan Eldridge  <alane@geeksrus.net>
1410
1411         * config.h.in: added HAVE_RANDOM.
1412
1413         * options.h: added random_wait to struct options.
1414
1415         * main.c (print_help [HAVE_RANDOM], main): added arg parsing, help
1416         for --random-wait.
1417
1418         * retr.c (sleep_between_retrievals) [HAVE_RANDOM]: added
1419         implementation of random wait times.
1420
1421         * init.c (commands): added "randomwait" keyword.
1422
1423 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
1424
1425         * recur.c (descend_url_p): Be more conservative with blacklisting
1426         URLs.
1427         (convert_all_links): Print how many files have been converted, and
1428         how long it took.
1429
1430         * progress.c (create_image): Place the number of downloaded bytes
1431         right after the progress bar.
1432
1433         * utils.c (suffix): Return a pointer into the string.
1434
1435 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
1436
1437         * url.c (convert_links): Handle CO_NULLIFY_BASE.
1438
1439         * recur.c (retrieve_tree): Ignore download-ignorable children.
1440         (convert_all_links): Specify CO_NULLIFY_BASE when link_base_p.
1441
1442         * html-url.c (handle_link): Return the newly created urlpos.
1443         (collect_tags_mapper): When dealing with BASE, store the base
1444         reference and mark it as download-ignorable.
1445
1446 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
1447
1448         * url.c (convert_links): Attempt to quote '?' as "%3F" when
1449         linking to local files.  Given up on the attempt, as it breaks
1450         local browsing.
1451
1452 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
1453
1454         * main.c (private_initialize): Removed.
1455         (main): Don't call private_initialize.
1456
1457         * http.c: Call lookup_host.
1458
1459         * host.c (host_init): Removed.
1460         (add_host_to_cache): Initialize host_name_address_map here, on
1461         demand.
1462         (ngethostbyname): Commented out.
1463
1464         * connect.c (make_connection): Remove dead code; use lookup_host.
1465
1466         * host.c (store_hostaddress): Renamed to lookup_host and reversed
1467         the args.
1468         Removed host_address_name_map and host_slave_master_map.
1469
1470 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
1471
1472         * progress.c (dot_create): Align the "[ skipping ... ]" string
1473         with the dots.
1474
1475         * retr.c (rate): Split into two functions: calc_rate and
1476         retr_rate.
1477
1478         * progress.c (create_image): Draw a dummy progress bar even when
1479         total size is unknown.
1480         (display_image): Place the text cursor at the end of the "image".
1481
1482 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
1483
1484         * url.c (reencode_string): Use unsigned char, not char --
1485         otherwise the hex digits come out wrong for 8-bit chars such as
1486         nbsp.
1487         (lowercase_str): New function.
1488         (url_parse): Canonicalize u->url if needed.
1489         (get_urls_file): Parse each URL, and return only the valid ones.
1490         (free_urlpos): Call url_free.
1491         (mkstruct): Add :port if the port is non-standard.
1492         (mkstruct): Append the query string to the file name, if any.
1493         (urlpath_length): Use strpbrk_or_eos.
1494         (uri_merge_1): Handle the cases where LINK is an empty string,
1495         where LINK consists only of query, and where LINK consists only of
1496         fragment.
1497         (convert_links): Count and report both kinds of conversion.
1498         (downloaded_file): Use a hash table, not a list.
1499         (downloaded_files_free): Free the hash table.
1500
1501         * retr.c (retrieve_from_file): Ditto.
1502
1503         * main.c (main): Call either retrieve_url or retrieve_tree
1504         for each URL, not both.
1505
1506         * retr.c (register_all_redirections): New function.
1507         (register_redirections_mapper): Ditto.
1508         (retrieve_url): Register the redirections.
1509         (retrieve_url): Make the string "Error parsing proxy ..."
1510         translatable.
1511
1512         * res.c (add_path): Strip leading slash from robots.txt paths so
1513         that the path representations are "compatible".
1514         (free_specs): Free each individual path, too.
1515         (res_cleanup): New function.
1516         (cleanup_hash_table_mapper): Ditto.
1517
1518         * recur.c (url_queue_new): New function.
1519         (url_queue_delete): Ditto.
1520         (url_enqueue): Ditto.
1521         (url_dequeue): Ditto.
1522         (retrieve_tree): New function, replacement for recursive_retrieve.
1523         (descend_url_p): New function.
1524         (register_redirection): New function.
1525
1526         * progress.c (create_image): Cosmetic changes.
1527
1528         * init.c (cleanup): Do all those complex cleanups only if
1529         DEBUG_MALLOC is defined.
1530
1531         * main.c: Removed --simple-check and the corresponding
1532         simple_host_check in init.c.
1533
1534         * html-url.c (handle_link): Parse the URL here, and propagate the
1535         parsed URL to the caller, who would otherwise have to parse it
1536         again.
1537
1538         * host.c (xstrdup_lower): Moved to utils.c.
1539         (realhost): Removed.
1540         (same_host): Ditto.
1541
1542 2001-11-24  Hrvoje Niksic  <hniksic@arsdigita.com>
1543
1544         * utils.c (path_simplify): Preserver the (non-)existence of
1545         leading slash.  Return non-zero if changes were made.
1546
1547 2001-11-24  Hrvoje Niksic  <hniksic@arsdigita.com>
1548
1549         * progress.c (bar_update): Don't modify bp->total_length if it is
1550         zero.
1551
1552 2001-11-24  Hrvoje Niksic  <hniksic@arsdigita.com>
1553
1554         * retr.c (retrieve_url): When the redirection URL doesn't parse,
1555         print the correct error message rather than "UNKNOWN".
1556
1557 2001-11-24  Hrvoje Niksic  <hniksic@arsdigita.com>
1558
1559         * progress.c (bar_finish): If the timer didn't record any time
1560         since the download beginning, fake 1ms.
1561
1562 2001-11-24  Hrvoje Niksic  <hniksic@arsdigita.com>
1563
1564         * recur.c (recursive_retrieve): Fix typo.
1565
1566 2001-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
1567
1568         * progress.c (create_image): Don't translate "%ld ".
1569
1570 2001-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
1571
1572         * progress.c (bar_set_params): Allow the user to force the use of
1573         the bar.
1574
1575 2001-11-23  Lemble Gregory  <gregory.lemble@st.com>
1576
1577         * gen_sslfunc.c (ssl_init_prng): New function; seed the SSL RNG.
1578
1579 2001-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
1580
1581         * progress.c: Renamed dp_* functions to dot_* for greater clarity
1582         and consistency with bar_*.
1583         (print_download_speed): Get rid of the unneeded '@' character.
1584         (create_image): Fix download rate geometry.
1585
1586         * progress.c (print_elapsed): Remove spurious space.
1587         (print_elapsed): Renamed to print_download_speed, since that's
1588         what it does.
1589
1590 2001-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
1591
1592         * progress.c (bar_update): If the downloaded amount becomes larger
1593         than the expected amount, adjust the expected amount accordingly.
1594
1595 2001-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
1596
1597         * utils.c (determine_screen_width): New function.
1598
1599         * main.c (main): New option `--progress=TYPE'.
1600         (main): Implement compatibility with the old option `--dot-style'.
1601
1602         * init.c: Removed cmd_spec_dotstyle -- that logic is now in
1603         dp_set_params.
1604         (cmd_spec_progress): New function.
1605
1606         * retr.c (get_contents): Use the progress_* functions instead of
1607         the old show_progress().
1608         (show_progress): Removed.
1609         (rate): Print "xxxx.xx K/s" instead of "KB/s".  Ditto for MB/s,
1610         etc.
1611
1612         * progress.c (set_progress_implementation): New function.
1613         (valid_progress_implementation_p): Ditto.
1614         (progress_create): Ditto.
1615         (progress_update): Ditto.
1616         (progress_finish): Ditto.
1617         (dp_create): Ditto.
1618         (dp_update): Ditto.
1619         (dp_finish): Ditto.
1620         (dp_set_params): Ditto.
1621         (print_elapsed): Ditto.
1622
1623 2001-11-22  Hrvoje Niksic  <hniksic@arsdigita.com>
1624
1625         * retr.c (show_progress): Use it.
1626
1627         * log.c (log_set_flush): New function.
1628
1629 2001-11-22  Hrvoje Niksic  <hniksic@arsdigita.com>
1630
1631         * utils.c (path_simplify): Don't remove trailing slashes.
1632
1633         * ftp.c (ftp_get_listing): Use it.
1634
1635         * utils.c (file_merge): New function.
1636
1637         * url.c (opt_url): Removed.
1638
1639         * recur.c (recursive_retrieve): Inline "opt_url" logic.
1640
1641         * main.c (main): Use xfree(), not free().
1642
1643         * url.c (rewrite_url_maybe): Renamed to rewrite_shorthand_url.
1644
1645         * ftp.c (ccon): Move `ccon' typedef here, since it's only used
1646         internally.
1647
1648         * config.h.in: Include a stub for HAVE_STRPBRK.
1649
1650         * cmpt.c (strpbrk): Include a replacement for systems without
1651         strpbrk().
1652
1653         * ftp.c: Use url_set_dir and url_set_file when modifying the URL.
1654
1655         * url.c (url_set_dir): New function.
1656         (url_set_file): Ditto.
1657
1658         * ftp-basic.c (ftp_process_type): Process FTP type here; the URL
1659         parser makes the URL "params" available, so we can do that in this
1660         function.
1661
1662         * retr.c: Ditto.
1663
1664         * ftp.c: Ditto; pass the local file information in `ccon'.
1665
1666         * http.c: Get rid of the ugly kludge that had URL being replaced
1667         with the proxy URL when proxy retrieval was requested.  Use a
1668         separate parameter to http_loop and gethttp for the proxy URL.
1669
1670         * http.c: Changed to reflect the fact that local file, proxy, and
1671         referer information are no longer stored in struct url.  The local
1672         file information is passed in `struct hstat' now.
1673
1674         * url.c: Reworked URL parsing to be more regular.  Reencode the
1675         URL using reencode_string.
1676         Removed non-URL-related information from struct url.  This
1677         includes fields `proxy', `local', and `referer'.
1678
1679 2001-11-22  Jochen Hein  <jochen@jochen.org>
1680
1681         * main.c (main): Split the copyright notice for easier
1682         translation.
1683
1684 2001-08-21  Dave Turner <dct25@hermes.cam.ac.uk>
1685
1686         * ftp-basic.c (ftp_size): New function to send non-standard SIZE
1687           command to server to request file size.
1688         * ftp.h (ftp_size): Export it.
1689         * ftp.c (getftp): Use new ftp_size function if restoring
1690           transfer of a file with unknown size.
1691
1692 2001-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
1693
1694         * url.c (parseurl): Don't depend on the now-obsolete TYPE.
1695
1696 2001-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
1697
1698         * url.c (getproxy): Handle URL shorthands.
1699
1700 2001-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
1701
1702         * main.c: Remove --wait / --waitretry backwards compatibility
1703         code.
1704
1705 2001-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
1706
1707         * main.c (main): Use it.
1708
1709         * url.c (rewrite_url_maybe): New function.
1710
1711 2001-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
1712
1713         * url.c: Clean up handling of URL schemes.
1714
1715 2001-05-13  Hrvoje Niksic  <hniksic@arsdigita.com>
1716
1717         * url.c: Get rid of `protostrings'.
1718         (skip_proto): Don't use protostrings.
1719         (has_proto): Ditto.
1720
1721 2001-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
1722
1723         * Makefile.in: Conditionally compile getopt.o.
1724
1725 2001-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
1726
1727         * md5.h: Renamed to gnu-md5.h.
1728
1729         * md5.c: Renamed to gnu-md5.c.
1730
1731         * http.c: Ditto.
1732
1733         * ftp-opie.c: Use the new macros.
1734
1735         * sysdep.h: Define md5-related macros.
1736
1737         * config.h.in: Define HAVE_SOLARIS_MD5 or HAVE_BUILTIN_MD5
1738         depending on which md5 implementation is used.
1739
1740 2001-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
1741
1742         * res.c (res_register_specs): Initialize OLD and HP_OLD to appease
1743         the compiler.
1744
1745 2001-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
1746
1747         * http.c (gethttp): Print the whole response line when printing
1748         headers is requested.
1749
1750 2001-05-12  Hrvoje Niksic  <hniksic@arsdigita.com>
1751
1752         * res.c: New file.  Implement all RES-related code here.
1753
1754 2001-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
1755
1756         * version.c: Wget 1.7.1 is released.
1757
1758 2001-11-16  Hrvoje Niksic  <hniksic@arsdigita.com>
1759
1760         * headers.c (header_extract_number): Ignore trailing whitespace.
1761
1762 2001-08-24  Ian Abbott  <abbotti@mev.co.uk>
1763
1764         * html-url.c (collect_tags_mapper): Fix bug converting links
1765         with -k option for tags with multiple link attributes by
1766         handling links in the order they appear.
1767
1768 2001-08-15  Ian Abbott  <abbotti@mev.co.uk>
1769
1770         * ftp.c (ftp_loop_internal): Avoid a potential buffer overflow in
1771           the call to the 'rate' function by moving it past the error
1772           checking for the 'getftp' function return value.
1773
1774 2001-11-16  Hrvoje Niksic  <hniksic@arsdigita.com>
1775
1776         * html-parse.c (advance_declaration): Use 0x22 instead of '"' or
1777         '\"'.  Different compilers' assert macros are broken in different
1778         ways.
1779
1780 2001-09-29  Christian Fraenkel  <c.fraenkel@gmx.net>
1781
1782         * http.c (gethttp): print debug output for errors occuring during
1783         the ssl handshake.
1784
1785 2001-11-16  Chris Seawood  <cls@seawood.org>
1786
1787         * init.c: Ditto.
1788
1789         * host.c: Ditto.
1790
1791         * connect.c: Ditto.
1792
1793         * sysdep.h: Support compilation under BEOS.
1794
1795 2001-06-08  Edward J. Sabol  <sabol@alderaan.gsfc.nasa.gov>
1796
1797         * url.c (url_equal): Fix a memory leak when parseurl returns an
1798         error on the second URL. Also, since url_equal is not used at the
1799         moment, do not compile it.
1800
1801         * url.h: Ditto for the prototype of url_equal.
1802
1803 2001-11-16  Hrvoje Niksic  <hniksic@arsdigita.com>
1804
1805         * html-parse.c (map_html_tags): Support XML-style empty tags.
1806
1807 2001-06-26  Hrvoje Niksic  <hniksic@arsdigita.com>
1808
1809         * wget.h (DO_REALLOC_FROM_ALLOCA): Check for do_realloc_newsize in
1810         loop condition because we're no longer setting SIZEVAR here.
1811
1812 2001-06-26  Hrvoje Niksic  <hniksic@arsdigita.com>
1813
1814         * wget.h (DO_REALLOC_FROM_ALLOCA): Set SIZEVAR after the memcpy()
1815         call because it needs the old value.
1816
1817 2001-06-18  Hrvoje Niksic  <hniksic@arsdigita.com>
1818
1819         * cookies.c (ATTR_NAME_CHAR): Allow almost any character to be in
1820         an attribute name.
1821
1822 2001-06-18  Hrvoje Niksic  <hniksic@arsdigita.com>
1823
1824         * url.c (url_filename): Make sure that slashes that sneak in to
1825         u->file via query string get protected.
1826         (file_name_protect_query_string): New function.
1827
1828 2001-06-14  Hrvoje Niksic  <hniksic@arsdigita.com>
1829
1830         * recur.c (recursive_retrieve): Also check undesirable_urls with
1831         canonicalized URL.
1832
1833 2001-06-14  Hrvoje Niksic  <hniksic@arsdigita.com>
1834
1835         * http.c (gethttp): Search `.netrc' with real host, not the proxy
1836         one.
1837
1838 2001-06-14  Hrvoje Niksic  <hniksic@arsdigita.com>
1839
1840         * sysdep.h (MAP_FAILED): Provide MAP_FAILED for systems that don't
1841         define it.
1842
1843 2001-06-09  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
1844
1845         * ftp.h: Provide correct prototype for ftp_parse_ls().
1846
1847 2001-06-04  Hrvoje Niksic  <hniksic@arsdigita.com>
1848
1849         * version.c: Wget 1.7 is released.
1850
1851 2001-06-03  Karl Eichwalder  <ke@suse.de>
1852
1853         * ftp-ls.c (ftp_parse_ls): Fix typo.
1854
1855 2001-05-27  Hrvoje Niksic  <hniksic@arsdigita.com>
1856
1857         * all: Update copyright information.
1858
1859 2001-05-26  Hrvoje Niksic  <hniksic@arsdigita.com>
1860
1861         * http.c (gethttp): Indicate that the continued download failed
1862         for *this* file.
1863
1864 2001-05-26  Hrvoje Niksic  <hniksic@arsdigita.com>
1865
1866         * version.c: Wget 1.7-pre1 is released.
1867
1868 2001-05-26  Hrvoje Niksic  <hniksic@arsdigita.com>
1869
1870         * version.c: Updated version to 1.7-pre1.
1871
1872 2001-05-14  Hrvoje Niksic  <hniksic@arsdigita.com>
1873
1874         * gen_sslfunc.c: Don't include <sys/time.h> directly.
1875
1876 2001-05-14  Hrvoje Niksic  <hniksic@arsdigita.com>
1877
1878         * http.c (gethttp): Use real URL data for cookies, not the proxy
1879         stuff.
1880
1881 2001-05-12  Hrvoje Niksic  <hniksic@arsdigita.com>
1882
1883         * main.c (print_help): Document `--no-http-keep-alive'.
1884
1885         * utils.c (numdigit): Handle negative numbers *correctly*.
1886
1887         * hash.c (make_nocase_string_hash_table): Use term "nocase" rather
1888         than the confusing "unsigned".
1889
1890         * utils.c (string_set_contains): Renamed from string_set_exists.
1891
1892         * hash.c (hash_table_contains): Renamed from hash_table_exists.
1893
1894         * cookies.c: Move case-insensitive hash tables to hash.c.
1895
1896 2001-05-09  Hrvoje Niksic  <hniksic@arsdigita.com>
1897
1898         * http.c (gethttp): Before concluding that the file is already
1899         fully retrieved, make sure that the file existed and `Range' was
1900         actually requested.
1901
1902 2001-05-09  Hrvoje Niksic  <hniksic@arsdigita.com>
1903
1904         * cookies.c (eliminate_dups): New function.
1905         (build_cookies_request): Use it.
1906         (build_cookies_request): Set chain_store_size after reallocating
1907         all_chains.
1908         (check_domain_match): Annotated for easier future debugging.
1909         (store_cookie): In the debug message, print whether the cookie is
1910         permanent.
1911
1912 2001-05-08  Hrvoje Niksic  <hniksic@arsdigita.com>
1913
1914         * http.c (http_loop): Reset no_truncate before deciding whether to
1915         set it.
1916         (gethttp): Further clarify "-c conflicts with existing file" error
1917         message, based on input from Herold Heiko.
1918
1919 2001-05-07  Hrvoje Niksic  <hniksic@arsdigita.com>
1920
1921         * http.c (http_loop): If restval is set, set no_truncate to 1
1922         unconditionally.
1923
1924 2001-05-02  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
1925
1926         * ftp-ls.c (ftp_parse_winnt_ls): Assure months are being correctly
1927         converted. Pointed out by <Stefan.Weil@de.heidelberg.com>.
1928         (ftp_parse_vms_ls): Ditto.
1929
1930 2001-04-30  Hrvoje Niksic  <hniksic@arsdigita.com>
1931
1932         * init.c (cmd_address): Zero SIN before using it; apparently
1933         needed on *BSD.
1934
1935 2001-04-29  Hrvoje Niksic  <hniksic@arsdigita.com>
1936
1937         * ftp.c (ftp_loop_internal): Don't set NO_TRUNCATE if the file is
1938         empty.
1939
1940 2001-04-29  Hrvoje Niksic  <hniksic@arsdigita.com>
1941
1942         * main.c (main): Make `--cookies' respect its argument.
1943
1944 2001-04-28  Hrvoje Niksic  <hniksic@arsdigita.com>
1945
1946         * main.c (main): Removed undocumented option `--email-address'.
1947
1948         * netrc.c: Use the latest read_whole_line.
1949
1950         * init.c (defaults): Set opt.ftp_pass to "-wget@".
1951
1952         * mswindows.c (pwd_cuserid): Ditto.
1953
1954         * utils.c (pwd_cuserid): Removed.
1955
1956         * host.c (ftp_getaddress): Removed.
1957
1958 2001-04-28  Hrvoje Niksic  <hniksic@arsdigita.com>
1959
1960         (http_loop): Allocate space for filename_plus_orig_suffix with
1961         alloca; this is more efficient and removes the need to free it
1962         before each and every return.
1963
1964 2001-04-28  Hrvoje Niksic  <hniksic@arsdigita.com>
1965
1966         * http.c (gethttp): Return RETRUNNEEDED when the retrieval is
1967         unneeded because the file is already there and fully downloaded,
1968         and -c is specified.
1969         (http_loop): Handle RETRUNNEEDED.
1970
1971         * wget.h (uerr_t): New value RETRUNNEEDED.
1972
1973         * http.c (http_loop): Set no_truncate for files that both exist
1974         and are non-empty.
1975         (gethttp): Consider the download finished when restval >= contlen,
1976         not only when restval==contlen.
1977         (gethttp): Handle redirection before giving up due to -c.
1978         (gethttp): Clarify error message which explains that -c will not
1979         truncate the file.
1980         (gethttp): When returning CONTNOTSUPPORTED, don't forget to free
1981         the stuff that needs freeing and release the socket.
1982
1983 2001-04-27  Hrvoje Niksic  <hniksic@arsdigita.com>
1984
1985         * main.c (print_help): Wget booleans accept "off", not "no".
1986
1987 2001-04-27  Hrvoje Niksic  <hniksic@arsdigita.com>
1988
1989         * http.c (http_loop): If allow_cache is zero, always disable
1990         caching, not only when retrieving through proxy.
1991
1992         * init.c: Ditto.
1993
1994         * options.h (struct options): Rename proxy_cache to allow_cache.
1995
1996 2001-04-27  Hrvoje Niksic  <hniksic@arsdigita.com>
1997
1998         * http.c (mktime_from_utc): Improve documentation.
1999         (http_atotm): Put format strings into a separate array.
2000
2001 2001-04-27  Hrvoje Niksic  <hniksic@arsdigita.com>
2002
2003         * safe-ctype.h: Instead of throwing #error when isalpha is
2004         defined, redefine it to something that will throw a compile-time
2005         error if actually *used*.  Do the same for the rest of the
2006         standard C macros.
2007
2008 2001-04-26  Hrvoje Niksic  <hniksic@arsdigita.com>
2009
2010         * url.c (getproxy): Ignore empty proxy vars.
2011
2012 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
2013
2014         * http.c (http_loop): Would load cookies every time.
2015
2016         * cookies.c (load_cookies): Handle cookies whose values contain
2017         embedded spaces.
2018
2019 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
2020
2021         * utils.c: Define each DIGITS_* in one line.
2022
2023 2001-04-25  Roger L. Beeman  <beeman@cisco.com>
2024
2025         * http.c (http_atotm): Initialize t.tm_isdst to 0.
2026         (mktime_from_utc): Prevent mktime() from having discontinuities at
2027         DST transition points.
2028
2029 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
2030
2031         * html-url.c (get_urls_html): Fix documentation.
2032
2033 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
2034
2035         * url.c (UNSAFE_CHAR): Reimplement using a static table.
2036         (url_init): Removed.
2037         (init_unsafe_char_table): Removed.
2038
2039 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
2040
2041         * snprintf.c (dopr): Replace ISDIGIT with '0' <= ch && ch <= '9'.
2042
2043 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
2044
2045         * utils.c: Document timer functions.
2046
2047         * retr.c (rate): Use it.
2048         (rate): Print in GB/s if transfer rate exceeds 1 GB/s.
2049
2050         * utils.c (wtimer_granularity): New function.
2051
2052 2001-04-24  Hrvoje Niksic  <hniksic@arsdigita.com>
2053
2054         * retr.c (show_progress): Ditto.
2055
2056         * ftp.c (getftp): Ditto.
2057
2058         * http.c (gethttp): Use new timer functions.
2059
2060         * utils.c (wtimer_allocate): New function.
2061         (wtimer_new): Ditto.
2062         (wtimer_delete): Ditto.
2063         (wtimer_reset): Ditto.
2064         (wtimer_elapsed): Ditto.
2065
2066 2001-04-24  Hrvoje Niksic  <hniksic@arsdigita.com>
2067
2068         * utils.c (long_to_string): New, faster version.  Favors smaller
2069         numbers; much of the calculation is now done at compile-time.
2070
2071 2001-04-24  Hrvoje Niksic  <hniksic@arsdigita.com>
2072
2073         * utils.c (numdigit): Handle negative numbers.
2074
2075 2001-04-23  Hrvoje Niksic  <hniksic@arsdigita.com>
2076
2077         * retr.c (show_progress): Print the download rate even when the
2078         percentages are not available.
2079
2080 2001-04-21  Hrvoje Niksic  <hniksic@arsdigita.com>
2081
2082         * ftp.c (getftp): Adjust expected_bytes if the length is
2083         authoritative.
2084
2085 2001-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
2086
2087         * url.c: Don't declare `construct'.
2088
2089         * hash.c (grow_hash_table): Speed up rehashing; inline storing of
2090         mappings to new locations.
2091         (hash_table_new): Make resize_threshold a field in the hash table,
2092         so we don't have to recalculate it in each hash_table_put.
2093         (grow_hash_table): Update resize_threshold.
2094         (MAX): Remove unused macro.
2095         (prime_size): Made static.
2096
2097 2001-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
2098
2099         * retr.c (retrieve_url): Call uri_merge, not url_concat.
2100
2101         * html-url.c (collect_tags_mapper): Call uri_merge, not
2102         url_concat.
2103
2104         * url.c (mkstruct): Use encode_string instead of xstrdup followed
2105         by URL_CLEANSE.
2106         (path_simplify_with_kludge): Deleted.
2107         (contains_unsafe): Deleted.
2108         (construct): Renamed to uri_merge_1.
2109         (url_concat): Renamed to uri_merge.
2110
2111 2001-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
2112
2113         * url.c (str_url): Use encode_string instead of the unnecessary
2114         CLEANDUP.
2115         (encode_string_maybe): New function, returns input string if no
2116         encoding is needed.
2117         (encode_string): Call encode_string_maybe to do the dirty work,
2118         xstrdup if no work needed.
2119
2120 2001-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
2121
2122         * wget.h (XDIGIT_TO_xchar): Define here.
2123
2124         * url.c (decode_string): Use new name.
2125         (encode_string): Ditto.
2126
2127         * http.c (XDIGIT_TO_xchar): Rename HEXD2asc to XDIGIT_TO_xchar.
2128         (dump_hash): Use new name.
2129
2130         * wget.h: Rename ASC2HEXD and HEXD2ASC to XCHAR_TO_XDIGIT and
2131         XDIGIT_TO_XCHAR respectively.
2132
2133 2001-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
2134
2135         * init.c: Include cookies.h.
2136
2137         * cookies.h: Declare cookies_cleanup.
2138
2139         * cookies.c (check_domain_match): Remove unused variable.
2140         (save_cookies): Remove extraneous argument from debug statement.
2141
2142         * host.c (same_host): Don't call skip_url.
2143
2144         * url.c (skip_url): Removed.  Removed its calls from various
2145         functions in url.c.
2146
2147 2001-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
2148
2149         * cookies.c (unsigned_string_hash): Use the new code in
2150         string_hash as reference.
2151
2152         * hash.c (hash_table_map): Allow deletion and change of the
2153         element processed by MAPFUN.
2154         (string_hash): Use the function from glib.
2155
2156 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
2157
2158         * config.h.in: Include #undef stub.
2159
2160         * hash.c (hash_table_remove): Rewrite to actually clear deleted
2161         entries instead of just marking them as deleted.
2162
2163 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
2164
2165         * hash.h: Declare hash_table_get_pair and hash_table_count.
2166
2167 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
2168
2169         * cookies.c: Declare http_atotm.
2170
2171 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
2172
2173         * ftp-ls.c (ftp_parse_unix_ls): Use octal constants for
2174         permissions.  A compiler that doesn't accept octal constants is
2175         seriously broken and shouldn't be used -- octal constants were
2176         present in K&R C!
2177
2178 2001-01-20  Karl Eichwalder  <ke@suse.de>
2179
2180         * Makefile.in: Provide and use DESTDIR according to the Coding
2181         Standards.
2182
2183 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
2184
2185         * ftp-ls.c (ftp_parse_vms_ls): Make seconds optional in time
2186         specification.
2187
2188 2001-04-11  Hrvoje Niksic  <hniksic@arsdigita.com>
2189
2190         * url.c (parseurl): Don't strip trailing slash when u->dir is "/"
2191         because that strips the *leading* slash, thus forcing relative
2192         FTP retrieval.
2193
2194 2001-04-10  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
2195
2196         * ftp.c (getftp): Convert initial FTP directory from VMS to UNIX
2197         notation for VMS servers.
2198         (ftp_retrieve_dirs): Do not prepend '/' to f->name when
2199         odir is an empty string.
2200
2201 2001-04-10  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
2202
2203         * ftp-ls.c (ftp_parse_winnt_ls): Made the fix for AM/PM more
2204         effective. Suggested by Edward J. Sabol.
2205
2206 2001-04-10  Hrvoje Niksic  <hniksic@arsdigita.com>
2207
2208         * cookies.c (build_cookies_request): Use and sort cookies from all
2209         matching domains.
2210         (build_cookies_request): Check for duplicates before generating
2211         the `Cookies' header.
2212
2213         * main.c (main): Don't load cookies here.
2214         (main): Make loadcookies and savecookies call the correct command.
2215
2216         * http.c (http_loop): Load cookies on-demand.
2217
2218 2001-04-09  Hrvoje Niksic  <hniksic@arsdigita.com>
2219
2220         * http.c (gethttp): Fix indentation of SSL ifdef.
2221
2222 2001-04-09  Hrvoje Niksic  <hniksic@arsdigita.com>
2223
2224         * ftp.c (ftp_retrieve_dirs): Don't forcibly prepend "/" to u->dir;
2225         that hack is no longer necessary.
2226         (getftp): Prepend initial directory to *non*-absolute u->dir's.
2227
2228 2001-04-09  Hrvoje Niksic  <hniksic@arsdigita.com>
2229
2230         * init.c (cmd_file): New function.
2231         (enable_tilde_expansion): New variable.
2232         (run_wgetrc): Use it.
2233         (cmd_file): Use it.
2234
2235 2001-04-08  Hrvoje Niksic  <hniksic@arsdigita.com>
2236
2237         * init.c: Include cookie-related options.
2238
2239         * main.c (main): Include cookie-specific options.
2240         (main): Load cookies before download is finished.
2241         (main): Save cookies when done.
2242
2243         * http.c (gethttp): Process the `Set-Cookie' header.
2244         (gethttp): Include cookies in the response.
2245
2246         * cookies.c: New file.
2247
2248 2001-04-08  Hrvoje Niksic  <hniksic@arsdigita.com>
2249
2250         * utils.c (datetime_str): New function.
2251
2252 2001-04-08  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
2253
2254         * ftp-ls.c (ftp_parse_winnt_ls): The AM/PM change did assume
2255         12:01PM == 00:01, which was obviously wrong. Taken care of this
2256         anomaly.
2257
2258         * ChangeLog: Removed an excess conflict marker. Reformatted the
2259         entry by Philipp Thomas from 2001-03-09.
2260
2261         * ftp-ls.c (ftp_parse_winnt_ls): Ensure that adjusted PM hours lay
2262         between 0 and 23. Elminate unused variable `sec'.
2263
2264 2001-04-08  Hrvoje Niksic  <hniksic@arsdigita.com>
2265
2266         * hash.c (hash_table_count): New function.
2267
2268 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
2269
2270         * utils.c (read_file): Cast MAP_FAILED to char *.  Enforced by
2271         Digital Unix cc.
2272
2273 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
2274
2275         * config.h.in: Oops, do the namespace tweaks only on systems we
2276         know about.
2277
2278 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
2279
2280         * hash.c: Include <string.h>.
2281
2282 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
2283
2284         * config.h.in: Define "compilation environment" options that work
2285         under Linux and Solaris.  To be reviewed on other OS'es.
2286
2287 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
2288
2289         * http.c (gethttp): Prepend literal newline with `\n\'.
2290
2291 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
2292
2293         * sysdep.h: Don't define VERY_LONG_FORMAT.
2294
2295         * utils.c (very_long_to_string): New function.
2296         (legible_very_long): Use it; don't use VERY_LONG_FORMAT.
2297
2298 2001-04-04  Christian Fraenkel  <christian.fraenkel@gmx.net>
2299
2300         * url.c (parse_uname): Would run past the end of the string if the
2301         username was present, but the URL did not contain a slash, e.g.
2302         http://foo:bar@myhost.
2303
2304 2001-04-03  KOJIMA Hajime  <kjm@rins.ryukoku.ac.jp>
2305
2306         * http.c (http_atotm): Use %A instead of %a to match full
2307         weekday.  (On most systems there is no difference.)
2308
2309 2001-04-03  Paul Bludov  <paul@ozero.net>
2310
2311         * mswindows.c (sleep): Use SleepEx() instead of Sleep().
2312         (ws_changetitle): Use alloca() instead of malloc() to avoid memory
2313         leak.
2314         (ws_mypath): Use GetModuleFileName instead of argv[0].
2315         (ws_startup): Use data.wVersion for comparison.
2316
2317 2001-04-02  Hrvoje Niksic  <hniksic@arsdigita.com>
2318
2319         * http.c (http_loop): Ditto.
2320
2321         * ftp.c (ftp_loop_internal): Made the check whether to continue
2322         retrieval `-O'-friendly.
2323
2324 2001-04-02  Hrvoje Niksic  <hniksic@arsdigita.com>
2325
2326         * netrc.c (parse_netrc): Don't trim the line endings explicitly;
2327         they will be handled as whitespace.
2328         (parse_netrc): Correctly handle lines that end with whitespace.
2329
2330 2001-04-02  Hrvoje Niksic  <hniksic@arsdigita.com>
2331
2332         * retr.c (retrieve_url): New variable global_download_count used
2333         to identify first retrieval.
2334
2335         * ftp.c (getftp): Ditto.
2336
2337         * http.c (gethttp): Rewind opt.dfp only on first retrieval.
2338
2339 2001-04-02  Hrvoje Niksic  <hniksic@arsdigita.com>
2340
2341         * init.c (cmd_address): Heap-allocate the address that gets stored
2342         to CLOSURE.  Old code would simply assign an address on the stack.
2343
2344 2001-04-01  Nicolas Lichtmaier <nick@debian.org>
2345
2346         * ftp.c (ftp_get_listing): Propagate error status.
2347         (ftp_retrieve_glob): Use it.
2348         (ftp_loop): Ditto.
2349
2350 2001-04-01  Nicolas Lichtmaier <nick@debian.org>
2351
2352         * main.c (main): Add -C to the string that is the third arg to
2353         getopt_long().
2354
2355 2001-04-01  Hrvoje Niksic  <hniksic@arsdigita.com>
2356
2357         * ftp.c (getftp): Don't start the download from scratch if `-c'
2358         was specified, but the file is already fully downloaded.
2359
2360         * http.c (gethttp): Don't truncate a pre-existing file if `-c' was
2361         specified and the server doesn't support continued download.
2362         (gethttp): Don't start the download from scratch if `-c' was
2363         specified, but the file is already fully downloaded.
2364
2365 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
2366
2367         (recursive_retrieve): Don't clear the hash tables at this point at
2368         all; it interferes with the normal operation of register_download.
2369
2370 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
2371
2372         * recur.c (recursive_retrieve): Clear the hash tables only when
2373         they are defined.
2374
2375 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
2376
2377         * http.c (gethttp): Make sure the socket is closed with
2378         CLOSE_INVALIDATE before we have drained the body.
2379
2380 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
2381
2382         * retr.c (retrieve_url): Call register_download() for downloaded
2383         files and register_html() for downloaded HTML files.
2384
2385         * recur.c (register_download): New function; register here that a
2386         file has been downloaded, rather than in recursive_retrieve().
2387         (register_html): New function; enqueue the location of HTML files
2388         here rather than in recursive_retrieve().
2389
2390 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
2391
2392         * main.c (print_help): Use multiple fputs instead of a single ugly
2393         printf().
2394         (main): Consistently assign numbers >128 to options without a
2395         corresponding character.
2396
2397 2001-03-09  Philipp Thomas  <pthomas@suse.de>
2398
2399         * safe-ctype.h: New file. Locale independent ctype.h replacement
2400         taken from libiberty.
2401
2402         * safe-ctype.c: New file. Tables for above.
2403
2404         * Makefile.in: Add safe-ctype$o to OBJS.  Add dependencies for
2405         safe-ctype$o.
2406
2407         * cmpt.c: Remove include of ctype.h. Use ISSPACE instead of
2408         isspace.
2409
2410         * ftp-basic.c: Don't include ctype.h.
2411
2412         * ftp-ls.c: Likewise.
2413
2414         * ftp.c: Likewise.
2415
2416         * headers.c: Likewise.
2417
2418         * host.c: Likewise.
2419
2420         * html-parse.c: Likewise.
2421
2422         * html-url.c: Likewise.
2423
2424         * http.c: Likewise.
2425
2426         * init.c: Likewise.
2427
2428         * main.c: Likewise. Set LC_CTYPE along with LC_MESSAGES.
2429
2430         * netrc.c: Likewise.
2431
2432         * recur.c: Likewise.
2433
2434         * retr.c: Likewise.
2435
2436         * snprintf.c: Replace ctype.h with safe-ctype.h. Use ISDIGIT
2437         instead of isdigit.
2438
2439         * sysdep.h: Remove defines of ctype macros as they aren't needed
2440         for safe-ctype-h.
2441
2442         * url.c: Don't include ctype.h.
2443
2444         * utils.c: Likewise.
2445
2446         * wget.h: Include safe-ctype.h.
2447
2448 2001-03-27  Dan Harkless  <wget@harkless.org>
2449
2450         * Makefile.in: Moved top_builddir out of "User configuration
2451         section" of top Makefile and analogous spot in this one.
2452
2453 2001-03-17  Dan Harkless  <wget@harkless.org>
2454
2455         * Makefile.in: Include @SSL_INCLUDES@ substition in INCLUDES.
2456         Define top_builddir.  Link wget with libtool so the user doesn't
2457         have to supply a bunch of custom environment variables to
2458         correctly link with the OpenSSL shared libraries.
2459
2460 2001-03-06  Hack Kampbjorn  <hack@hackdata.com>
2461
2462         * http.c (gethttp): skip :port in host header if it is the
2463         DEFAULT_HTTPS_PORT when using SSL.
2464
2465         * url.c: move the #define of DEFAULT_HTTP_PORT, DEFAULT_FTP_PORT
2466         and DEFAULT_HTTPS_PORT to the header file so it can be use in the
2467         rest of the code.
2468         * url.h: Ditto
2469
2470 2001-03-01  Jonas Jensen  <bones@huleboer.dk>
2471
2472         * retr.c (show_progress): Correctly calculate the number of bytes
2473         in the first line of the download that have been actually
2474         downloaded in this run.
2475
2476 2001-02-23  Dan Harkless  <wget@harkless.org>
2477
2478         * main.c (print_help): --help documentation for -N said it would
2479         re-download files if they had the _same_ timestamp on server.
2480         (print_help): -nr belongs in "FTP options" section of --help
2481         output, not "Recursive retrieval" section.  Alphabetized FTP
2482         options by long option name.
2483
2484 2001-02-16  Dan Harkless  <wget@harkless.org>
2485
2486         * init.c (commands): Hack Kampbjørn <hack@hackdata.com> discovered
2487         that "httpsproxy" had been inserted into commands[] out of
2488         alphabetical order, causing "BUG: unknown command `httpuser'".
2489
2490 2001-02-13  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
2491
2492         * ftp-ls.c (ftp_parse_ls): Added support of ST_MACOS (Unix-like
2493         listing without correct permissons).
2494
2495         * ftp.h (stype): Added ST_MACOS to identify the NetPresenz MacOS
2496         FTP server.
2497
2498         * ftp.c (ftp_retrieve_list): New mirroring logic: A remote file
2499         shall be donwloaded only when it's newer than the local copy or
2500         when it has the same timeestamp but its size is different. ST_VMS
2501         and ST_MACOS as special cases that lie about file size.
2502
2503         * ftp-ls.c (ftp_parse_ls): Support for ST_MACOS.
2504
2505         * Makefile.in: Removed dependency on ftpparse library due to unclear
2506         copyright issues and absence of any feedback to our queries.
2507
2508         * ftp-ls.c: Removed dependency on ftpparse library due to unclear
2509         copyright issues and absence of any feedback to our queries.
2510         (ftp_parse_ls): Added a warning message when remote server system
2511         does not seem to be suported by wget.
2512         (ftp_parse_vms_ls): New function for parsing VMS ftp
2513         server listing output.
2514         (clean_line): New function responsible for removing
2515         end-of-line characters from FTP listing texts.
2516
2517         * ftp.c (getftp): Global variables pwd and host_type are now
2518         member of the ccon structure under names ccon.id and ccon.rs.
2519
2520         * ftp.h (struct ccon): Added formed global variables from ftp.c,
2521         enum stype rs (remote system identification) and char *id (initial
2522         working directory), as suggested by Hrvoje.
2523
2524         * url.c (parse_uname): Added support for passwords containing '@'
2525         characters.
2526         (skip_uname): Ditto.
2527
2528 2001-02-11  Hrvoje Niksic  <hniksic@arsdigita.com>
2529
2530         * ftp.c (ftp_loop): Reset con.
2531
2532 2001-01-06  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
2533
2534         * url.c (parse_uname): Added support for passwords containing '@'
2535         characters.
2536         (skip_uname): Ditto.
2537
2538 2001-02-11  Hack Kampbjørn  <hack@hackdata.com>
2539
2540         * url.c (parseurl): Debug-print u->ftp_type.
2541
2542 2001-02-11  Hrvoje Niksic  <hniksic@arsdigita.com>
2543
2544         * ftp.c (ftp_loop_internal): Disable padding.
2545         (getftp): Ditto.
2546
2547         * http.c (http_loop): Disable padding.
2548
2549         * retr.c (show_progress): Use it to enable padding.
2550
2551         * retr.c (rate): Optional parameter PAD for padding the rate.
2552
2553 2001-02-10  Hrvoje Niksic  <hniksic@arsdigita.com>
2554
2555         * retr.c (show_progress): Make sure that the last output line
2556         includes progress.
2557
2558 2001-02-10  Jonas Jensen  <bones@huleboer.dk>
2559
2560         * retr.c (show_progress): Print the download rate along with the
2561         percentages.
2562         Along with Anders Thorsby <anders@thorsby.dk>.
2563
2564 2001-02-10  Tim Mooney  <mooney@dogbert.cc.ndsu.NoDak.edu>
2565
2566         * ftp.h: Rename enums `command' to `wget_ftp_command' and
2567         `fstatus' to `wget_ftp_status' because old names clash with Tru64
2568         net/if.h.
2569
2570 2001-02-08  Christian Fraenkel <christian.fraenkel@gmx.net>
2571
2572         * gen_sslfunc.c: verify_callback is now static
2573
2574         * gen_sslfunc.c (init_ssl): load certificate if specified
2575
2576         * gen_sslfunc.c (ssl_printerr): new function
2577
2578         * init.c: added new --sslcertfile and --sslcertkey switches
2579
2580         * main.c: ditto
2581
2582         * options.h: ditto
2583
2584         * http.c (gethttp): abort when init_ssl fails
2585
2586 2001-01-23  Herold Heiko  <Heiko.Herold@previnet.it>
2587
2588         * mswindows.h: Include <malloc.h>; it's needed for alloca().
2589
2590 2001-01-10  Dan Harkless  <wget@harkless.org>
2591
2592         * url.c (str_url): Clarified this function's comment header after
2593         Hrvoje answered my question on the list as to when hide != 1.
2594         Also Hrvoje pointed out I need to use xstrdup() on the string literal.
2595
2596 2001-01-06  Hrvoje Niksic  <hniksic@arsdigita.com>
2597
2598         * connect.c (bindport): Declare addrlen as int.  Diagnosed by
2599         Drazen Kacar <dave@arsdigita.com>.
2600         (conaddr): Ditto.
2601
2602 2001-01-09  Dan Harkless  <wget@harkless.org>
2603
2604         * html-url.c: A bunch of fixup of `--page-requisites'-related
2605         comments to reflect Hrvoje's changes to my code when transplanting
2606         it into this new file, to fix spelling mistakes, to clarify, etc.
2607
2608         * url.c (write_backup_file): Clarified a comment.
2609         (str_url): Henrik van Ginhoven pointed out on the list that we
2610         shouldn't give away the number of characters in the password by
2611         replacing each character with a 'x'.  Use "<password>" instead.
2612
2613         * ftp.c (ftp_retrieve_dirs): The bug where recursion into FTP
2614         directories didn't work if logging in put you in a directory other
2615         than "/" is fixed now.  Removed the comment here warning of the bug.
2616
2617         * main.c (print_help): --continue's description was misleading.
2618         We don't "restart", we "resume".  Also, better to say
2619         "partially-downloaded file" rather than just "existing file".
2620
2621 2001-01-06  Dan Harkless  <wget@harkless.org>
2622
2623         * ChangeLog: The '[Not in 1.6 branch.]'s were decided not to be
2624         the best way to go about my aim.  Removed them in favor of:
2625
2626         * ChangeLog-branches/1.6_branch.ChangeLog: New file.
2627
2628 2001-01-04  Hrvoje Niksic  <hniksic@arsdigita.com>
2629
2630         * url.c (replace_attr): New function, to be used by both
2631         TO_COMPLETE and TO_RELATIVE case in convert_links.
2632         (find_fragment): New function for finding URL fragments.
2633         (replace_attr): Better handle the case where the original string
2634         is not quoted.  Use find_fragment.
2635         (convert_links): Use replace_attr().
2636
2637 2000-12-31  Dan Harkless  <wget@harkless.org>
2638
2639         * ChangeLog: Since this flat file doesn't have multiple branches,
2640         looking at the dates would make you think that things went into
2641         1.6 that actually just went into the 1.7-dev branch.  Added "[Not
2642         in 1.6 branch.]" where appropriate to clarify.
2643
2644 2000-12-30  Dan Harkless  <wget@harkless.org>
2645
2646         * ftp.c, http.c:  Applied Hack Kampbjørn <hack@hackdata.com>'s
2647         patch to deal with h_errno not being defined in netdb.h under Cygwin.
2648
2649 2000-12-18  Csaba Raduly  <csaba.raduly@sophos.com>
2650
2651         * sysdep.h: Include <malloc.h> and <io.h> under Watcom.
2652
2653 2000-12-17  Igor Khristophorov  <igor@atdot.org>
2654
2655         * http.c (check_end): Fix test for '+' or '-'.
2656
2657 2000-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
2658
2659         * url.c (parseurl): Rename inner loop var from i to ind to avoid
2660         clash with the function top-level-declared variable i.
2661         (str_url): Likewise, rename inner-loop i to j.
2662
2663         * recur.c (parse_robots): Don't declare LEN at top of function.
2664         (robots_match): Renamed parameter FORBIDDEN to avoid hiding of
2665         global variable.
2666
2667         * main.c (main): Change erroneous use of bitwise and to logical.
2668
2669         * init.c (cmd_address): Don't heap-allocate `sin'; it can be on
2670         the stack because it will be copied to closure.
2671
2672         Thanks to Csaba Raduly's run of PC-LINT over the sources.
2673
2674 2000-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
2675
2676         * http.c (basic_authentication_encode): Use xmalloc(), not
2677         malloc().  Thanks to Csaba Raduly's run of PC-LINT over the
2678         sources.
2679
2680 2000-12-17  Csaba Raduly  <csaba.raduly@sophos.com>
2681
2682         * sysdep.h: Test for __EMX__ rather than for EMXOS2 for OS/2
2683         compilation.
2684
2685 2000-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
2686
2687         * mswindows.c: Include <errno.h>.
2688
2689         * gen_sslfunc.c: Include <errno.h>.
2690
2691         * ftp-basic.c: Don't attempt to declare errno or h_errno because
2692         they're not used.
2693
2694         * main.c: Include <errno.h> because errno is used.
2695
2696         * ftp.c: Ditto.
2697
2698         * http.c: Include <netdb.h> for h_errno.
2699
2700 2000-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
2701
2702         * html-parse.c (advance_declaration): MSVC assert() chokes on
2703         '\"'.  Use '"' instead.
2704
2705 2000-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
2706
2707         * utils.c (xfree_real): Removed.
2708         (xfree_debug): Just call free().
2709
2710         * wget.h (xfree): Make it an alias for free.
2711
2712 2000-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
2713
2714         * http.c (http_loop): Furthermore, touch output_document only if
2715         it is known to be an existing regular file.
2716
2717 2000-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
2718
2719         * ftp.c (ftp_retrieve_list): Ditto.
2720
2721         * http.c (http_loop): Touch output_document if that is used for
2722         output.
2723
2724 2000-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
2725
2726         * http.c: Include gen_sslfunc.h after including Wget's headers.
2727         (persistent_available_p): Needed coma before `int ssl'.
2728
2729 2000-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
2730
2731         * ftp.c (ftp_loop_internal): Ditto.
2732
2733         * http.c (http_loop): Use it.
2734
2735         * retr.c (sleep_between_retrievals): New function that handles the
2736         logic of opt.wait and opt.waitretry.
2737
2738 2000-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
2739
2740         * rbuf.h: Implement only a single version of RBUF_READCHAR, using
2741         rbuf_read_bufferful when the buffer is depleted.
2742
2743         * rbuf.c (rbuf_read_bufferful): New function.
2744
2745 2000-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
2746
2747         * gen_sslfunc.h: Use ansi2knr style function declarations.
2748
2749         * gen_sslfunc.c: Reformat according to the GNU coding standards.
2750         More should be done.
2751
2752         * http.c (persistent_available_p): Place the cheap SSL test nearer
2753         the top of the function.
2754         (CLOSE_FINISH, CLOSE_INVALIDATE): Define only one version of each.
2755
2756 2000-12-05  Hrvoje Niksic  <hniksic@arsdigita.com>
2757
2758         * url.c (init_unsafe_char_table): Reinstate space as an unsafe
2759         char.
2760
2761 2000-12-03  Christian Fraenkel <christian.fraenkel@gmx.net>
2762
2763         * Makefile.in: added gen_sslfunc object
2764         * config.h.in: added HAVE_SSL define
2765         * connect.c: changed select_fd from static int to int
2766         * connect.h: ditto
2767         * gen_sslfunc.h: New file
2768         * gen_sslfunc.c: ditto
2769         * http.c: added HTTPS fuctionality
2770         * retrc.c: ditto
2771         * url.c: ditto
2772         * init.c: added opt.httpsproxy
2773         * options.h: ditto
2774         * rbuf.h: added alternate rbuf struct
2775         * wget.h: added CONSSLERR
2776         * rbuf.c: ditto
2777
2778         * http.c: Added HTTPS fuctionality.
2779
2780         * retrc.c: Ditto.
2781
2782         * url.c: Ditto.
2783
2784         * init.c: Added opt.httpsproxy.
2785
2786         * options.h: Ditto.
2787
2788         * rbuf.h: Added alternate rbuf struct.
2789
2790         * wget.h: Added CONSSLERR.
2791
2792         * rbuf.c: Ditto.
2793
2794 2000-11-30  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
2795
2796         * ftp-ls.c (ftp_parse_unix_ls): Added second parameter
2797         "ignore_perms" to ignore file and directory permissions for
2798         Windows NT FTP server listings.
2799         (ftp_parse_winnt_ls): New function.
2800         (ftp_parse_ls): Parses UNIX and Windows NT listings
2801         separately. Simple heuristics for distinguishing between UNIX and
2802         MS-DOS-like FTP listing provided by Windows NT FTP service.
2803
2804 2000-11-18  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
2805
2806         * ftpparse.c, ftpparse.h: New files.
2807
2808         * ftp-ls.c (ftp_parse_ls): Use ftp_parse_unix_ls for UNIX servers
2809         only. Use ftp_parse_nonunix_ls otherwise.
2810         (ftp_parse_nonunix_ls): Stub to the ftpparse library handling all
2811         exotic FTP servers.
2812
2813         * ftp.h (stype): New enum, distinguishes UNIX, VMS, and "other"
2814         FTP servers.
2815
2816         * ftp.c: New static wariables host_type, pwd, and pwd_len.
2817         (getftp): Support for VMS. Support for FTP servers that do not
2818         place you in the root directory after login.
2819         (ftp_retrieve_list): VMS is silent about the real file size, issue
2820         a more appropriate message.
2821         (ftp_get_listing): Pass host_type to ftp_parse_ls.
2822
2823         * ftp-basic.c (ftp_pwd, ftp_syst): New functions.
2824
2825 2000-11-30  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
2826
2827         * ftp-ls.c (ftp_parse_unix_ls): Added second parameter
2828         "ignore_perms" to ignore file and directory permissions for
2829         Windows NT FTP server listings.
2830         (ftp_parse_winnt_ls): New function.
2831         (ftp_parse_ls): Parses UNIX and Windows NT listings
2832         separately. Simple heuristics for distinguishing between UNIX
2833         and MS-DOS-like FTP listing provided by Windows NT FTP service.
2834
2835 2000-11-29  John Summerfield  <summer@OS2.ami.com.au>
2836
2837         * netrc.c (parse_netrc): Get rid of line ending.
2838
2839 2000-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
2840
2841         * ftp.c (ftp_retrieve_list): Undo typo "fix" until resolution by
2842         Dan.
2843
2844 2000-11-24  Karl Eichwalder  <ke@suse.de>
2845
2846         * main.c (print_help): Untabify.
2847
2848 2000-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
2849
2850         * utils.c (xrealloc_debug): Do the unregister/register thing only
2851         if the pointer has actually changed.
2852         (xmalloc_real): Declare `static' in DEBUG_MALLOC builds.
2853         (xfree_real): Ditto.
2854         (xrealloc_real): Ditto.
2855         (xstrdup_real): Ditto.
2856
2857 2000-11-22  Hrvoje Niksic  <hniksic@arsdigita.com>
2858
2859         * ftp.c (getftp): ftp_getaddress() returns a malloc'ed copy of the
2860         string; no need to strdup() it.
2861         (getftp): Make pwd_len a local variable.
2862         (ftp_loop): Free PWD before returning.
2863
2864         * init.c (cleanup): Free opt.ftp_pass only if it's non-NULL.
2865
2866 2000-11-22  Hrvoje Niksic  <hniksic@arsdigita.com>
2867
2868         * all: Use xfree() instead of free.
2869
2870         * utils.c (xfree): New function.
2871
2872 2000-11-21  Hrvoje Niksic  <hniksic@arsdigita.com>
2873
2874         * url.c (convert_links): HTML-quote the converted string.
2875
2876         * utils.c (html_quote_string): Move here from ftp-ls.c
2877         (html_quote_string): Make non-static; declare in utils.h.
2878         (html_quote_string): Convert SP to &#32;.
2879
2880 2000-11-21  Hrvoje Niksic  <hniksic@arsdigita.com>
2881
2882         * ftp.c (getftp): Reformat Jan's code according to GNU coding
2883         standards; remove (debugging?) printf's; use '\0' for the ASCII
2884         zero character.  Use alloca() instead of malloc() for
2885         inter-function temporary allocations.
2886
2887 2000-11-18  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
2888
2889         * ftpparse.c, ftpparse.h: New files.
2890
2891         * ftp-ls.c (ftp_parse_ls): Use ftp_parse_unix_ls for UNIX servers
2892         only. Use ftp_parse_nonunix_ls otherwise.
2893         (ftp_parse_nonunix_ls): Stub to the ftpparse library handling all
2894         exotic FTP servers.
2895
2896         * ftp.h (stype): New enum, distinguishes UNIX, VMS, and "other"
2897         FTP servers.
2898
2899         * ftp.c: New static wariables host_type, pwd, and pwd_len.
2900         (getftp): Support for VMS. Support for FTP servers that do not
2901         place you in the root directory after login.
2902         (ftp_retrieve_list): VMS is silent about the real file size, issue
2903         a more appropriate message.
2904         (ftp_get_listing): Pass host_type to ftp_parse_ls.
2905
2906         * ftp-basic.c (ftp_pwd, ftp_syst): New functions.
2907
2908 2000-11-21  Hrvoje Niksic  <hniksic@arsdigita.com>
2909
2910         * hash.c (hash_table_put): Don't overwrite deleted mappings.
2911
2912 2000-11-21  Hrvoje Niksic  <hniksic@arsdigita.com>
2913
2914         * hash.c (find_mapping): New function.
2915         (hash_table_get): Use it.
2916         (hash_table_get_pair): Ditto.
2917         (hash_table_exists): Ditto.
2918         (hash_table_remove): Ditto.
2919         (hash_table_remove): Really delete the entry if the mapping
2920         following LOCATION is empty.
2921
2922         * utils.c (string_set_add): Check whether the element has existed
2923         before.
2924
2925         * hash.c (hash_table_get_pair): New function.
2926
2927 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
2928
2929         * http.c (http_process_type): Ignore trailing whitespace; use
2930         strdupdelim().
2931
2932         * recur.c (recursive_retrieve): Use the new `convert' field.
2933         (convert_all_links): Ditto.
2934         (convert_all_links): Don't respect meta_disallow_follow.
2935
2936         * html-url.c (handle_link): Fill out link_relative_p and
2937         link_complete_p.
2938
2939         * url.h (struct _urlpos): Make elements more readable.
2940
2941         * recur.c (recursive_retrieve): Call slist_prepend instead of
2942         slist_append.
2943         (convert_all_links): Call slist_nreverse before iterating through
2944         urls_html.
2945
2946         * utils.c (slist_prepend): New function.
2947         (slist_nreverse): Ditto.
2948
2949 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
2950
2951         * http.c (check_end): Constify.
2952
2953 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
2954
2955         * http.c (http_loop): If username and password are known, try the
2956         `Basic' authentication scheme by default.
2957
2958         * connect.h: Declare test_socket_open.
2959
2960 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
2961
2962         * version.c: Bump version from 1.5.3+dev to 1.7-dev.
2963
2964 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
2965
2966         * http.c (gethttp): Don't use the return value of sprintf().
2967         (gethttp): Inhibit keep-alive if opt.http_keep_alive is 0.
2968
2969 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
2970
2971         * recur.c (recursive_retrieve): Print the "so we don't load"
2972         debugging message only if we really don't load.
2973
2974         * http.c (gethttp): Inhibit keep-alive if proxy is being used.
2975         (gethttp): Don't request keep-alive if keep-alive is inhibited.
2976
2977 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
2978
2979         * http.c (gethttp): Make the HTTP persistent connections more
2980         robust.
2981
2982 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
2983
2984         * retr.c (get_contents): If use_expected, make sure that the
2985         appropriate amount of data is being read.
2986
2987         * http.c (gethttp): Check for both `Keep-Alive: ...' and
2988         `Connection: Keep-Alive'.
2989
2990         * wget.h (DEBUGP): Call debug_logprintf only if opt.debug is
2991         turned on.
2992
2993 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
2994
2995         * http.c (connection_available_p): Use it.
2996
2997         * connect.c (test_socket_open): New function.
2998
2999         * http.c (gethttp): Support persistent connections.  Based on the
3000         ideas, and partly on code, by Sam Horrocks <sam@daemoninc.com>.
3001         (register_persistent): New function.
3002         (connection_available_p): Ditto.
3003         (invalidate_connection): Ditto.
3004
3005 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
3006
3007         * url.c (convert_links): Handle UREL2ABS case.
3008
3009         * recur.c (recursive_retrieve): Instead of the list
3010         urls_downloaded, use hash tables dl_file_url_map and
3011         dl_url_file_map.
3012         (convert_all_links): Use them to retrieve data.
3013
3014         * host.c (clean_hosts): Free the hash tables.
3015
3016         * main.c (private_initialize): Call host_init().
3017
3018         * host.c (store_hostaddress): Use a saner, hash table-based data
3019         model.
3020         (realhost): Ditto.
3021         (host_init): Initialize the hash tables.
3022
3023 2000-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
3024
3025         * utils.c (slist_append): Eviscerate NOSORT.  Hash tables are now
3026         used for what the sorted slists used to be used for.
3027         (slist_contains): Don't rely on the list being sorted.
3028         (slist_append): Simplify the code.
3029
3030         * recur.c (recursive_cleanup): Use free_string_set.
3031
3032         * utils.c (string_set_add, string_set_exists, string_set_free):
3033         New functions for easier freeing of hash tables whose keys are
3034         strdup'ed strings.
3035
3036         * recur.c (recursive_retrieve): Use the hash table functions for
3037         storing undesirable URLs.
3038
3039         * hash.c: New file.
3040
3041 2000-11-17  Hrvoje Niksic  <hniksic@arsdigita.com>
3042
3043         * main.c (private_initialize): Call url_init.
3044         (main): Call private_initialize.
3045
3046         * url.c (unsafe_char_table): New table.
3047         (UNSAFE_CHAR): Use it.
3048         (init_unsafe_char_table): New function.
3049         (url_init): New function; call init_unsafe_char_table.
3050
3051 2000-11-16  Hrvoje Niksic  <hniksic@arsdigita.com>
3052
3053         * mswindows.h: Define snprintf and vsnprintf to _snprintf and
3054         _vsnprintf respectively.
3055
3056 2000-11-15  Hrvoje Niksic  <hniksic@arsdigita.com>
3057
3058         * config.h.in: Do the _XOPEN_SOURCE and _SVID_SOURCE things only
3059         on Linux.
3060
3061 2000-11-15  Hrvoje Niksic  <hniksic@arsdigita.com>
3062
3063         * html-url.c (handle_link): Handle HTML fragment identifiers.
3064
3065         * recur.c (recursive_retrieve): If norobot info is respected and
3066         the file is specified not to be followed by robots, respect that.
3067
3068         * html-url.c (collect_tags_mapper): Handle <meta name=robots
3069         content=X>.  For us the important cases are where X is NONE or
3070         where X contains NOFOLLOW.
3071         (get_urls_html): Propagate that information to the caller.
3072
3073 2000-11-13  Hrvoje Niksic  <hniksic@arsdigita.com>
3074
3075         * url.c (convert_links): Unlink the file we might be reading from
3076         before writing to it.
3077         (convert_links): Use alloca instead of malloc for
3078         filename_plus_orig_suffix.
3079
3080 2000-11-12  Hrvoje Niksic  <hniksic@arsdigita.com>
3081
3082         * host.c (realhost): Add HOST to the list with quality==0 only if
3083         it wasn't already there.
3084         Based on analysis by Lu Guohan <feng@public.bjnet.edu.cn>.
3085
3086 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
3087
3088         * url.c (get_urls_file): Ditto.
3089         (convert_links): Ditto.
3090
3091         * html-url.c (get_urls_html): Use read_file() instead of
3092         load_file().
3093
3094         * utils.c (read_file): New function, instead of the old
3095         load_file().
3096         (read_file_free): Ditto.
3097
3098         * url.c (findurl): Search only for the supported protocols.
3099         (convert_links): Use fwrite() when writing out a region of
3100         characters.
3101
3102 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
3103
3104         * ftp-ls.c: Move html_quote_string and ftp_index here.
3105
3106         * url.c: Remove get_urls_html, since that's now in html-url.c.
3107
3108         * html-url.c: New file.
3109
3110         * html-parse.c: New file.
3111
3112 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
3113
3114         * init.c (run_wgetrc): Don't bother killing off '\r' since
3115         pars_line() skips whitespace at end of line anyway.
3116         (parse_line): Oops, it didn't.  Now it does.
3117
3118         * recur.c (parse_robots): Ditto here.
3119
3120         * ftp-ls.c (ftp_parse_unix_ls): Kill off the newline character
3121         manually because read_whole_line no longer does.
3122
3123         * utils.c (read_whole_line): Rewrite to: a) use less memory
3124         (reallocates to needed size after work), b) work faster -->
3125         fgets() instead of getc, c) be more correct --> doesn't kill the
3126         newline character at the end of line.
3127
3128 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
3129
3130         * init.c (comind): Initialize MAX to array size - 1.
3131
3132 2000-11-08  Hrvoje Niksic  <hniksic@arsdigita.com>
3133
3134         * url.c (construct): Changed last_slash[-1] to *(last_slash - 1).
3135         Suggested by Edward J. Sabol.
3136
3137 2000-11-08  Hrvoje Niksic  <hniksic@arsdigita.com>
3138
3139         * url.c (construct): Handle the case where host name is not
3140         followed by a slash.
3141
3142 2000-11-06  Hrvoje Niksic  <hniksic@arsdigita.com>
3143
3144         * init.c: commands[] need to be sorted!  ("base" wasn't.)
3145
3146 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
3147
3148         * wget.h (DO_REALLOC_FROM_ALLOCA): Use braces to disambiguate
3149         `if'.
3150
3151 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
3152
3153         * url.c (construct): Insert unneeded initialization for the
3154         compiler to shut up.
3155
3156         * config.h.in: Define _XOPEN_SOURCE to 500 to get the prototype
3157         for strptime() (*duh*).  Define _SVID_SOURCE to get S_IFLNK which
3158         otherwise gets lost when you define _XOPEN_SOURCE.
3159
3160         * utils.c (touch): Include the file name in the error message.
3161         From Debian.
3162
3163 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
3164
3165         * log.c (logvprintf): Use vsnprintf() in all cases.  If necessary,
3166         resize the buffer to fit the formated message.  That way, messages
3167         of arbitrary size may be printed.
3168         (logvprintf): Use saved_append() to optionally log the last
3169         several lines of output.
3170         (logputs): Ditto.
3171         (log_close): Adapt to new data structures.
3172         (log_dump): Ditto.
3173         (redirect_output): Print messages to stderr, not to stdout.
3174
3175         * log.c (saved_append_1): New function.  Replaces the old logging
3176         system ("log all output until 10M characters") with a new, much
3177         more reasonable one ("log last screenful of text").
3178         (saved_append): New function; call saved_append_1.
3179         (free_log_line): New function.
3180
3181 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
3182
3183         * url.c (construct): Fix comment.
3184         (find_last_char): Document.
3185
3186 2000-11-04  Hrvoje Niksic  <hniksic@arsdigita.com>
3187
3188         * snprintf.c: New file.
3189
3190 2000-11-03  Hrvoje Niksic  <hniksic@arsdigita.com>
3191
3192         * wget.h: If HAVE_STDARG_H is not defined, don't declare argument
3193         types to logprintf() and debug_logprintf().
3194
3195 2000-11-02  Hrvoje Niksic  <hniksic@arsdigita.com>
3196
3197         * ftp.c (ftp_loop_internal): Hide the password from the URL when
3198         printing non-verbose.  Problem spotted by Dariusz Mlynarczyk
3199         <darekm@bydg.lomac.com.pl>.
3200
3201 2000-11-02  Junio Hamano  <junio@twinsun.com>
3202
3203         * ftp-basic.c (ftp_login): Make comparison case-insensitive.
3204
3205 2000-11-02  Tyler Riddle  <triddle@liquidmarket.com>
3206
3207         * http.c (known_authentication_scheme_p): Recognize NTML
3208         authentication.
3209         (create_authorization_line): Treat NTML the same as `Basic'.
3210
3211 2000-11-02  Hrvoje Niksic  <hniksic@arsdigita.com>
3212
3213         * retr.c (retrieve_url): Free url before returning.
3214         (retrieve_url): Free mynewloc before returning.
3215         Spotted by Mark A. Mankins <Mankins_Mark@prc.com>.
3216
3217 2000-11-02  Hrvoje Niksic  <hniksic@arsdigita.com>
3218
3219         * url.c (parseurl): Remove possible reading past the end of
3220         sup_protos[].  Spotted by Mark A. Mankins <Mankins_Mark@prc.com>.
3221
3222 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
3223
3224         * main.c (main): In case of opt.downloaded overflowing, print
3225         <overflow> instead of a totally bogus random value.
3226
3227         * retr.c (retrieve_from_file): Ditto.
3228
3229         * recur.c (recursive_retrieve): Ditto.
3230
3231         * main.c (main): Ditto.
3232
3233         * http.c (http_loop): Ditto.
3234
3235         * ftp.c (ftp_loop_internal): Use downloaded_increase() instead of
3236         `+=', and downloaded_exceeds_quota() instead of the simple-minded
3237         check.
3238         (ftp_retrieve_list): Ditto.
3239         (ftp_retrieve_dirs): Ditto.
3240         (ftp_retrieve_glob): Ditto.
3241
3242         * retr.c (downloaded_increase): New function.  Notice overflows of
3243         opt.downloaded.
3244         (downloaded_exceeds_quota): Make sure that opt.downloaded is not
3245         used if it overflowed.
3246
3247         * options.h (struct options): New member downloaded_overflow.
3248
3249 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
3250
3251         * wget.h (enum): Remove extra space after last enumeration.
3252
3253 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
3254
3255         * main.c (main): Use legible_very_long() for printing
3256         opt.downloaded.
3257
3258         * utils.c (legible_1): New function that operates on strings and
3259         does the brunt of legible()'s work.
3260         (legible): Use legible_1().
3261         (legible_very_long): New function; dump the argument with
3262         sprintf(), and call legible_1().
3263
3264         * options.h (struct options): Use VERY_LONG_TYPE for
3265         opt.downloaded.
3266
3267         * sysdep.h (VERY_LONG_TYPE): Define it to have a 64-bit or greater
3268         type.
3269
3270         * config.h.in: Make sure that SIZEOF_LONG and SIZEOF_LONG_LONG get
3271         defined.  Define HAVE_LONG_LONG if long long is available.
3272
3273 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
3274
3275         * utils.c (long_to_string): Update with a later, better version.
3276
3277 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
3278
3279         * url.c (path_simplify_with_kludge): New function.
3280         (path_simplify_with_kludge): Disable it.  Instead...
3281         (parse_dir): ...make sure that at this point the right thing is
3282         done, i.e. that "query" part of the URL (?...) is always assigned
3283         to the file, never to the directory portion of the path.
3284
3285 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
3286
3287         * retr.c (retrieve_url): Detect redirection cycles.
3288
3289 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
3290
3291         * url.c (get_urls_html): Decode HTML entities using
3292         html_decode_entities.
3293
3294         * html.c (htmlfindurl): Don't count the `#' in numeric entities
3295         (&#NNN;) as an HTML fragemnt.
3296         (html_decode_entities): New function.
3297
3298 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
3299
3300         * html.c (htmlfindurl): Fix recognition of # HTML fragments.
3301
3302 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
3303
3304         * url.c (construct): Rewritten for clarity.  Avoids the
3305         unnecessary copying and stack-allocation the old version
3306         performed.
3307
3308 2000-10-31  Hrvoje Niksic  <hniksic@arsdigita.com>
3309
3310         * ftp.c (getftp): Ditto.
3311
3312         * http.c (gethttp): Rewind the stream when retrying from scratch.
3313
3314 2000-10-31  Hrvoje Niksic  <hniksic@arsdigita.com>
3315
3316         * retr.c (retrieve_url): Use url_concat() to handle relative
3317         redirections instead of /ad hoc/ code.
3318
3319         * url.c (url_concat): New function encapsulating weird
3320         construct().
3321         (urllen_http_hack): New function.
3322         (construct): When constructing new URLs, recognize that `?' does
3323         not form part of the file name in HTTP.
3324
3325 2000-10-13  Adrian Aichner  <adrian@xemacs.org>
3326
3327         * retr.c: Add msec timing support for WINDOWS.
3328         * retr.c (reset_timer): GetSystemTime() on WINDOWS.
3329         * retr.c (elapsed_time): Calculate delta time to msec on WINDOWS.
3330
3331 2000-10-27  Dan Harkless  <wget@harkless.org>
3332
3333         * retr.c (retrieve_url): Manually applied T. Bharath
3334         <TBharath@responsenetworks.com>'s patch to get wget to grok
3335         illegal relative URL redirects.  Reformatted and re-commented it.
3336
3337 2000-10-23  Dan Harkless  <wget@harkless.org>
3338
3339         * connect.c (make_connection and bindport): Manually applied Rob
3340         Mayoff <mayoff@dqd.com>'s 1.5.3 patch to add --bind-address,
3341         changing coding style to GNU's.
3342
3343         * ftp.c (ftp_loop_internal): --delete-after wasn't implemented for
3344         files downloaded via FTP.  Per a comment, .listing files were not
3345         counted towards number of bytes and files downloaded because they're
3346         deleted anyway.  Well, they aren't under -nr, so count them then.
3347
3348         * init.c: Manually applied Rob Mayoff's 1.5.3 patch to add
3349         --bind-address, alphabetizing, changing coding style to GNU's,
3350         commenting, and renaming cmd_ip_address() to cmd_address() to
3351         imply hostnames also okay.
3352
3353         * main.c (main): --delete-after didn't delete the root of the
3354         tree.  Ignore --convert-links if --delete-after was specified.
3355         Manually applied Rob Mayoff's 1.5.3 patch to add --bind-address,
3356         fixing duplicate use of added-since-1.5.3 case value.
3357         (print_help): Clarified that --delete-after deletes local files.
3358         Rob forgot to add a line for his new --bind-address option.
3359
3360         * options.h (struct options): Manually applied Rob Mayoff's patch
3361         to add --bind-address (bind_address structure member).
3362
3363         * recur.c (recursive_retrieve): Improved comment; added DEBUGP().
3364         Ignore --convert-links if --delete-after was specified.
3365
3366         * retr.c (retrieve_from_file): Just added a DEBUGP().
3367
3368 2000-10-19  Dan Harkless  <wget@harkless.org>
3369
3370         * ftp.c (ftp_loop_internal): downloaded_file() enumerators changed.
3371         (getftp): Applied Piotr Sulecki <Piotr.Sulecki@ios.krakow.pl>'s
3372         patch to work around FTP servers that incorrectly respond to the
3373         "REST" command with the remaining size rather than the total file size.
3374
3375         * http.c (gethttp): Improved a comment and added code to tack on
3376         ".html" to text/html files without that extension when -E specified.
3377         (http_loop): Use new downloaded_file() enumerators and deal with
3378         the case of gethttp() called xrealloc() on u->local.
3379
3380         * init.c (commands): Added new "htmlextension" command.
3381         Also renamed John Daily's cmd_quad() to the more descriptive
3382         cmd_lockable_boolean(), alpha-sorted the CMD_DECLARE()s and
3383         removed duplicate cmd_boolean() declaration.
3384
3385         * main.c (print_help): Added my new -E / --html-extension option.
3386         (main): Undocumented --email-address option previously used -E synonym.
3387         Stole it away for the much more deserving --html-extension's use.
3388
3389         * options.h (struct options): Added html_extension field.
3390
3391         * url.c (convert_links): URL X that we saved as X.html locally due
3392         to -E needs to be backed up as X.orig, not X.html.orig.  Added comments.
3393         (downloaded_file): Now remembers if we added .html extension to a file.
3394
3395         * url.h (downloaded_file_t): Added extra enumerators to support above.
3396         (downloaded_file): Now takes and returns a downloaded_file_t.
3397
3398         * wget.h (unnamed "dt" enum): Added ADDED_HTML_EXTENSION enumerator.
3399
3400 2000-10-09  Dan Harkless  <wget@harkless.org>
3401
3402         * html.c (htmlfindurl): Added unneeded initialization to quiet warning.
3403
3404         * main.c (print_help): Clarified what --retr-symlinks does.
3405
3406 2000-09-15  John Daily  <jdaily@cyberdude.com>
3407
3408         * init.c: Add support for "always" and "never" values to allow
3409         .wgetrc to override commandline (useful e.g. with .pm files
3410         calling `wget --passive-ftp' when your firewall doesn't allow that).
3411
3412         * ftp.c (getftp): passive_ftp is first option to support always/never.
3413
3414 2000-08-30  Dan Harkless  <wget@harkless.org>
3415
3416         * ftp.c (ftp_retrieve_list): Use new INFINITE_RECURSION #define.
3417
3418         * html.c: htmlfindurl() now takes final `dash_p_leaf_HTML' parameter.
3419         Wrapped some > 80-column lines.  When -p is specified and we're at a
3420         leaf node, do not traverse <A>, <AREA>, or <LINK> tags other than
3421         <LINK REL="stylesheet">.
3422
3423         * html.h (htmlfindurl): Now takes final `dash_p_leaf_HTML' parameter.
3424
3425         * init.c: Added new -p / --page-requisites / page_requisites option.
3426
3427         * main.c (print_help): Clarified that -l inf and -l 0 both allow
3428         infinite recursion.  Changed the unhelpful --mirrior description
3429         to simply give the options it's equivalent to.  Added new -p option.
3430         (main): Added some comments; handle new -p / --page-requisites.
3431
3432         * options.h (struct options): Added new page_requisites field.
3433
3434         * recur.c: Changed "URL-s" to "URLs" and "HTML-s" to "HTMLs".
3435         Calculate and pass down new `dash_p_leaf_HTML' parameter to
3436         get_urls_html().  Use new INFINITE_RECURSION #define.
3437
3438         * retr.c: Changed "URL-s" to "URLs".  get_urls_html() now takes
3439         final `dash_p_leaf_HTML' parameter.
3440
3441         * url.c: get_urls_html() and htmlfindurl() now take final
3442         `dash_p_leaf_HTML' parameter.
3443
3444         * url.h (get_urls_html): Now takes final `dash_p_leaf_HTML' parameter.
3445
3446         * wget.h: Added some comments and new INFINITE_RECURSION #define.
3447
3448 2000-08-23  Dan Harkless  <wget@harkless.org>
3449
3450         * main.c (print_help): -B / --base was not mentioned.
3451
3452 2000-08-22  Dan Harkless  <wget@harkless.org>
3453
3454         * main.c (print_help): Modified -nc description to mention that it
3455         also prevents the creation of multiple versions of the same file
3456         with ".<number>" suffixes.
3457
3458 2000-07-14  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
3459
3460         * retr.c (retrieve_url): Consistently strdup opt.referer when
3461         setting u->referer.
3462
3463 2000-06-09  Dan Harkless  <wget@harkless.org>
3464
3465         * main.c (print_help): --help output for --waitretry was over 80 cols.
3466
3467 2000-06-09  Hrvoje Niksic  <hniksic@iskon.hr>
3468
3469         * url.c (encode_string): Fix comment.
3470         Suggested by Herold Heiko <Heiko.Herold@previnet.it>.
3471
3472 2000-06-01  Const Kaplinsky  <const@ce.cctpu.edu.ru>
3473
3474         * ftp.c (ftp_retrieve_list): Change permissions only on plain
3475         files.
3476
3477 2000-06-01  Hrvoje Niksic  <hniksic@iskon.hr>
3478
3479         * url.c (str_url): Print the port number only if it's different
3480         from the default port number for that protocol.
3481
3482 2000-05-22  Dan Harkless  <wget@harkless.org>
3483
3484         * main.c (print_help): Added --help line for Damir Dzeko
3485         <ddzeko@zesoi.fer.hr>'s until-now-undocumented --referer option.
3486         Removed comments that --referer and --waitretry were undocumented.
3487         Changed "`.wgetrc' command" to "`.wgetrc'-style command" on --help
3488         line for --execute.
3489
3490 2000-05-18  Hrvoje Niksic  <hniksic@iskon.hr>
3491
3492         * ftp.c (getftp): Ditto.
3493
3494         * http.c (gethttp): Check for return value of fclose/fflush.
3495
3496 2000-04-12  Hrvoje Niksic  <hniksic@iskon.hr>
3497
3498         * host.c (store_hostaddress): Instead of shifting ADDR, start
3499         copying from the correct address.
3500
3501 2000-04-12  Hrvoje Niksic  <hniksic@iskon.hr>
3502
3503         * http.c (gethttp): Don't free REQUEST -- it was allocated with
3504         alloca().
3505         Pointed out by Gisle Vanem <gvanem@eunet.no>.
3506
3507 2000-04-04  Dan Harkless  <wget@harkless.org>
3508
3509         * host.c (store_hostaddress): R. K. Owen's patch introduces a
3510         "left shift count >= width of type" warning on 32-bit
3511         architectures.  Got rid of it by tricking the compiler w/ a variable.
3512
3513         * url.c (UNSAFE_CHAR): The macro didn't include all the illegal
3514         characters per RFC1738, namely everything above '~'.  It also
3515         generated a warning on OSes where char =~ unsigned char.  Fixed.
3516
3517 1998-10-17  Hrvoje Niksic  <hniksic@srce.hr>
3518
3519         * http.c (http_process_type): Removed needless strdup(), a memory
3520         leak.
3521
3522 1998-09-25  Hrvoje Niksic  <hniksic@srce.hr>
3523
3524         * html.c (htmlfindurl): Set PH to the first occurrence of `#'.
3525
3526 1998-09-25  Simon Munton  <simonm@m4data.co.uk>
3527
3528         * init.c (wgetrc_file_name): Don't free HOME under Windows.
3529
3530 1998-12-01  "R. K. Owen"  <rkowen@Nersc.GOV>
3531
3532         * host.c (store_hostaddress): Fix for big endian 64-bit machines.
3533
3534 1998-12-01  Hrvoje Niksic  <hniksic@srce.hr>
3535
3536         * url.c (UNSAFE_CHAR): New macro.
3537         (contains_unsafe): Use it.
3538         (encode_string): Ditto.
3539
3540 1998-12-01  Hrvoje Niksic  <hniksic@srce.hr>
3541
3542         * main.c (i18n_initialize): Use LC_MESSAGES only if available.
3543
3544 2000-03-31  Hrvoje Niksic  <hniksic@srce.hr>
3545
3546         * Use TOUPPER/TOLOWER.
3547
3548 1998-12-22  Alexander V. Lukyanov  <lav@yars.free.net>
3549
3550         * ftp-opie.c (btoe): Zero-terminate OSTORE.
3551
3552 2000-03-21  Hrvoje Niksic  <hniksic@iskon.hr>
3553
3554         * wget.h (DO_REALLOC_FROM_ALLOCA): Ditto.
3555
3556         * sysdep.h (ISALNUM): New macro.
3557         (TOLOWER): Ditto.
3558         (TOUPPER): Ditto.
3559
3560 2000-03-10  Dan Harkless  <wget@harkless.org>
3561
3562         * html.c (idmatch): Implemented checking of my new --follow-tags
3563         and --ignore-tags options.
3564
3565         * init.c (commands): Added comment reminding people adding new
3566         entries doing allocation to add corresponding freeing in cleanup().
3567         (commands): Added new followtags and ignoretags commands.
3568         (cleanup): Free storage for new followtags and ignoretags.
3569
3570         * main.c: Use of "comma-separated list" was random -- normalized
3571         it.  Did some alphabetization.  Added comments pointing out
3572         "Options without arguments" and "Options accepting an argument"
3573         sections of long_options[].  Added new options --follow-tags and
3574         -G / --ignore-tags.  Added comment that Damir's --referer is
3575         currently undocumented.  Added comment that Heiko's --waitretry is
3576         partially undocumented (mentioned in --help but not in
3577         wget.texi).  Moved improperly sorted 24, 129, and 'G' cases.
3578
3579         * options.h (struct options): Added new fields follow_tags and
3580         ignore_tags.
3581
3582         * wget.h: Added "#define EQ 0" so we can say "strcmp(a, b) == EQ".
3583
3584 2000-03-02  Dan Harkless  <wget@harkless.org>
3585
3586         * ftp.c (ftp_loop_internal): Heiko introduced "suggest explicit
3587         braces to avoid ambiguous `else'" warnings.  Eliminated them.
3588
3589         * http.c (gethttp): Dan Berger's query string patch is totally
3590         bogus.  If you have two different URLs, gen_page.cgi?page1 and
3591         get_page.cgi?page2, they'll both be saved as get_page.cgi and the
3592         second will overwrite the first.  Also, parameters to implicit
3593         CGIs, like "http://www.host.com/db/?2000-03-02" cause the URLs to
3594         be printed with trailing garbage characters, and could seg fault.
3595         Backing out the patch, which Dan B. informed me by email was just
3596         a kludge to download StarOffice from Sun made necessary due to
3597         wget's unconditional escaping of certain characters (room for an
3598         option there?).
3599         (http_loop): Heiko introduced "suggest explicit braces to avoid
3600         ambiguous `else'" warnings.  Eliminated them.
3601
3602         * main.c: Heiko's --wait / --waitretry backwards compatibility
3603         code looks to have been totally untested -- automatic variable
3604         'wr' was used without being initialized, and a long int was passed
3605         into setval()'s char* val parameter.
3606
3607         * recur.c (parse_robots): Applied Edward J. Sabol
3608         <sabol@alderaan.gsfc.nasa.gov>'s patch for Guan Yang's reported
3609         problem with "User-agent:<space>*<space>" lines in robots.txt.
3610
3611         * url.c (parseurl, str_url): Removing Dan Berger's code (see
3612         http.c above for explanation).
3613
3614 1999-08-25  Heiko Herold  <Heiko.Herold@previnet.it>
3615
3616         * ftp.c: Respect new option waitretry.
3617
3618 2000-01-30  Damir Dzeko  <ddzeko@zesoi.fer.hr>
3619
3620         * http.c (gethttp): Send custom Referer, if required.
3621
3622 1999-09-24  Charles G Waldman  <cgw@fnal.gov>
3623
3624         * netrc.c (parse_netrc): Allow passwords to contain spaces.
3625
3626         * netrc.c (parse_netrc): New function.
3627
3628 1999-09-17  Dan Berger  <dberger@ix.netcom.com>
3629
3630         * http.c (gethttp): Send it.
3631
3632         * url.c (parseurl): Detect query string in HTTP URL-s.
3633         (str_url): Print it.
3634
3635 2000-03-02  HIROSE Masaaki  <hirose31@t3.rim.or.jp>
3636
3637         * html.c (html_allow): Add <link href=...> and <script src=...>.
3638
3639 1999-05-02  andrew deryabin  <djsf@softhome.net>
3640
3641         * http.c (gethttp): Specify port in `Host' header only if it's
3642         different from 80.
3643
3644 1998-11-03  Edward J. Sabol  <sabol@alderaan.gsfc.nasa.gov>
3645
3646         * recur.c (recursive_retrieve): If a finite maximum depth is
3647         specified, and we're are already at that depth, don't download the
3648         HTML file for parsing.
3649
3650 2000-03-01  Dan Harkless  <wget@harkless.org>
3651
3652         * ftp.c (ftp_loop_internal): Call new downloaded_file() function,
3653         even though we don't do conversion on HTML files retrieved via
3654         FTP, so _current_ usage of downloaded_file() makes this call unneeded.
3655         (ftp_retrieve_list): Added a comment saying where we need to
3656         stat() a .orig file if FTP'd HTML file conversion is ever implemented.
3657         (ftp_retrieve_list): "Local file '%s' is more recent," is sometimes
3658         a lie -- reworded as "Server file no newer than local file '%s' --".
3659
3660         * http.c (http_loop): Fixed a typo and clarified a comment.
3661         (http_loop): When -K and -N are specified together, compare size
3662         and timestamp of server file X against local file X.orig (if
3663         extant) rather than converted local file X.
3664         (http_loop): "Local file '%s' is more recent," is sometimes a lie
3665         -- reworded as "Server file no newer than local file '%s' --".
3666         (http_loop): Call new downloaded_file() function to prevent
3667         wrongful overwriting of .orig file when -N is specified.
3668
3669         * url.c (convert_links): When -K specified, only rename X to
3670         X.orig if downloaded_file() returns TRUE.  Otherwise when we skip
3671         file X due to -N, we clobber an X.orig from a previous invocation.
3672         (convert_links): Call the failsafe xstrdup(), not the real strdup().
3673         (convert_links): Added a note asking anyone who understands how
3674         multiple URLs can correspond to a single file to comment it.
3675         (downloaded_file): Added this new function.
3676
3677         * url.h (downloaded_file): Added prototype for this new function
3678         as well as its downloaded_file_t enum type.
3679
3680         * wget.h (boolean): Added this new typedef and TRUE and FALSE #defines.
3681
3682 2000-02-29  Dan Harkless  <wget@harkless.org>
3683
3684         * version.c: Upped version to developer-only "1.5.3+dev".
3685
3686 2000-02-18  Dan Harkless  <wget@harkless.org>
3687
3688         * init.c (backup_converted): Added this new option.
3689
3690         * main.c (-K / --backup-converted): Added this new option.
3691
3692         * options.h (backup_converted): Added this new option.
3693
3694         * url.c (convert_links): When backup_converted is specified, save
3695         file X as X.orig before converting.
3696
3697         * url.h (urlpos): Fixed typo -- said "Rekative" instead of "Relative".
3698
3699 1998-09-21  Hrvoje Niksic  <hniksic@srce.hr>
3700
3701         * version.c: Wget 1.5.3 is released.
3702
3703 1998-09-21  Hrvoje Niksic  <hniksic@srce.hr>
3704
3705         * host.c (ftp_getaddress): Don't warn when reverse-lookup of local
3706         address doesn't yield FQDN.
3707
3708 1998-09-21  Andreas Schwab  <schwab@issan.informatik.uni-dortmund.de>
3709
3710         * cmpt.c (strerror): Fix declaration of sys_errlist.
3711
3712 1998-09-11  Hrvoje Niksic  <hniksic@srce.hr>
3713
3714         * main.c (main): Don't use an array subscript as the first
3715         argument to STRDUP_ALLOCA.
3716         From Kaveh R. Ghazi.
3717
3718 1998-09-11  Szakacsits Szabolcs  <szaka@sienet.hu>
3719
3720         * html.c (htmlfindurl): Download table background.
3721
3722 1998-09-11  Hans Grobler  <grobh@conde.ee.sun.ac.za>
3723
3724         * init.c (parse_line): Would free *com before allocating it.
3725         (parse_line): Would free com instead of *com.
3726
3727 1998-09-10  Howard Gayle  <howard@fjst.com>
3728
3729         * url.c (get_urls_html): Would drop the last character of the
3730         link.
3731
3732 1998-09-10  Hrvoje Niksic  <hniksic@srce.hr>
3733
3734         * http.c (http_loop): Don't print status code if quiet.
3735
3736 1998-09-10  Kaveh R. Ghazi  <ghazi@caip.rutgers.edu>
3737
3738         * log.c: Use <stdarg.h> only when __STDC__.
3739
3740 1998-09-10  Adam D. Moss  <adam@foxbox.org>
3741
3742         * html.c (htmlfindurl): Download <layer src=...>.
3743
3744 1998-09-10  Howard Gayle  <howard@fjst.com>
3745
3746         * ftp.c (ftp_retrieve_list): Don't update the time stamp of a file
3747         not retrieved.
3748
3749 1998-06-27  Hrvoje Niksic  <hniksic@srce.hr>
3750
3751         * utils.c: Include <libc.h> on NeXT.
3752
3753 1998-06-26  Heinz Salzmann  <heinz.salzmann@intermetall.de>
3754
3755         * url.c (get_urls_html): Fix calculation of URL position.
3756
3757 1998-06-23  Hrvoje Niksic  <hniksic@srce.hr>
3758
3759         * version.c: Wget 1.5.2 is released.
3760
3761 1998-06-23  Dave Love  <d.love@dl.ac.uk>
3762
3763         * ftp.c, init.c, netrc.c: Include errno.h.
3764
3765         * http.c: Include errno.h and time header.
3766
3767         * Makefile.in (exext): Define.
3768         (install.bin, uninstall.bin): Use it.
3769
3770 1998-06-21  Hrvoje Niksic  <hniksic@srce.hr>
3771
3772         * http.c (http_loop): Don't attempt to compare local and remote
3773         sizes if the remote size is unknown.
3774
3775 1998-06-16  Hrvoje Niksic  <hniksic@srce.hr>
3776
3777         * url.c (get_urls_html): Use malloc() instead of alloca in the
3778         loop.
3779
3780 1998-06-13  Hrvoje Niksic  <hniksic@srce.hr>
3781
3782         * version.c: Wget 1.5.2-b4 is released.
3783
3784 1998-06-13  Hrvoje Niksic  <hniksic@srce.hr>
3785
3786         * url.c (get_urls_html): Ignore spaces before and after the URI.
3787
3788 1998-06-08  Wanderlei Antonio Cavassin  <cavassin@conectiva.com.br>
3789
3790         * ftp.c (getftp): Translate `done'.
3791
3792 1998-06-06  Hrvoje Niksic  <hniksic@srce.hr>
3793
3794         * version.c: Wget 1.5.2-b3 is released.
3795
3796 1998-06-06  Alexander Kourakos  <awk@bnt.com>
3797
3798         * init.c (cleanup): Close dfp, don't free it.
3799
3800 1998-06-06  Hrvoje Niksic  <hniksic@srce.hr>
3801
3802         * utils.c (make_directory): Twiddle.
3803
3804         * config.h.in: Added template for access().
3805
3806 1998-06-05  Mathieu Guillaume  <mat@cythere.com>
3807
3808         * html.c (htmlfindurl): Download <input src=...>
3809
3810 1998-06-03  Hrvoje Niksic  <hniksic@srce.hr>
3811
3812         * utils.c (file_exists_p): Use access() with two arguments.
3813
3814 1998-05-27  Martin Kraemer  <Martin.Kraemer@mch.sni.de>
3815
3816         * netrc.c (parse_netrc): Correct logic.
3817
3818 1998-05-27  Hrvoje Niksic  <hniksic@srce.hr>
3819
3820         * ftp.c (getftp): Added `break'; suggested by Lin Zhe Min
3821         <ljm@ljm.wownet.net>.
3822
3823 1998-05-24  Hrvoje Niksic  <hniksic@srce.hr>
3824
3825         * version.c: Wget 1.5.2-b2 is released.
3826
3827 1998-05-18  Juan Jose Rodriguez  <jcnsoft@jal1.telmex.net.mx>
3828
3829         * mswindows.h: Don't translate mkdir to _mkdir under Borland.
3830
3831 1998-05-17  Hrvoje Niksic  <hniksic@srce.hr>
3832
3833         * retr.c (elapsed_time): Return correct value when
3834         HAVE_GETTIMEOFDAY is undefined.
3835
3836 1998-05-13  Hrvoje Niksic  <hniksic@srce.hr>
3837
3838         * version.c: Wget 1.5.2-b1 is released.
3839
3840 1998-05-08  Hrvoje Niksic  <hniksic@srce.hr>
3841
3842         * getopt.c (_getopt_internal): Use exec_name instead of argv[0].
3843         (_getopt_internal): Don't translate `#if 0'-ed strings.
3844
3845 1998-05-06  Douglas E. Wegscheid  <wegscd@whirlpool.com>
3846
3847         * mswindows.c (ws_handler): Use fork_to_background().
3848
3849 1998-05-05  Hrvoje Niksic  <hniksic@srce.hr>
3850
3851         * version.c: Wget 1.5.1 is released.
3852
3853 1998-05-05  Hrvoje Niksic  <hniksic@srce.hr>
3854
3855         * http.c (parse_http_status_line): Avoid `minor' and `major'
3856         names.
3857
3858 1998-05-02  Hrvoje Niksic  <hniksic@srce.hr>
3859
3860         * utils.c (mkdirhier): Renamed to make_directory.
3861
3862 1998-05-01  Hrvoje Niksic  <hniksic@srce.hr>
3863
3864         * mswindows.c (fork_to_background): Define under Windows.
3865
3866         * utils.c (fork_to_background): New function.
3867
3868         * html.c (htmlfindurl): Removed rerdundant casts.
3869
3870 1998-05-01  Douglas E. Wegscheid  <wegscd@whirlpool.com>
3871
3872         * mswindows.c (ws_mypath): Cache the path.
3873
3874 1998-04-30  Douglas E. Wegscheid  <wegscd@whirlpool.com>
3875
3876         * ftp.h: Prefix enum ftype members with FT_.
3877
3878         * ftp-ls.c, ftp.c, html.h: Adjust accordingly.
3879
3880         * mswindows.h: Use stat under Borland, _stat under MSVC.
3881
3882 1998-04-28  Hrvoje Niksic  <hniksic@srce.hr>
3883
3884         * http.c (known_authentication_scheme_p): New function.
3885         (gethttp): Handle authorization more correctly.
3886
3887         * ftp-basic.h: Removed.
3888
3889         * cmpt.h: Removed.
3890
3891         * utils.c: Include <unistd.h> before <pwd.h>; needed under SunOS
3892         with gcc 2.8.
3893         (numdigit): Use `while' loop.
3894
3895         * http.c (create_authorization_line): Detect authentication
3896         schemes case-insensitively.
3897
3898         * http.c (extract_header_attr): Use strdupdelim().
3899         (digest_authentication_encode): Move declaration of local
3900         variables to smaller scope.
3901         (digest_authentication_encode): Reset REALM, OPAQUE and NONCE.
3902         (create_authorization_line): Detect authentication schemes
3903         case-insensitively.
3904
3905         * utils.c (touch): Constify.
3906
3907         * http.c (gethttp): Report a nicer error when no data is received.
3908
3909         * rbuf.h (RBUF_READCHAR): Ditto.
3910
3911         * ftp-basic.c (ftp_response): Use sizeof.
3912
3913 1998-04-27  Hrvoje Niksic  <hniksic@srce.hr>
3914
3915         * retr.c (print_percentage): EXPECTED is long, not int.
3916         (print_percentage): Use floating-point arithmetic to avoid
3917         overflow with large files' sizes multiplied with 100.
3918
3919 1998-04-27  Gregor Hoffleit  <flight@mathi.uni-heidelberg.de>
3920
3921         * config.h.in: Added pid_t stub.
3922
3923         * sysdep.h (S_ISREG): Moved here from mswindows.h (NeXT doesn't
3924         define it).
3925
3926 1998-04-20  Hrvoje Niksic  <hniksic@srce.hr>
3927
3928         * version.c: Wget 1.5.0 is released.
3929
3930 1998-04-18  Hrvoje Niksic  <hniksic@srce.hr>
3931
3932         * url.c (str_url): Ditto.
3933
3934         * ftp-basic.c (ftp_rest): Use new name.
3935
3936         * utils.c (long_to_string): Renamed from prnum().
3937
3938 1998-04-16  Hrvoje Niksic  <hniksic@srce.hr>
3939
3940         * version.c: Wget 1.5-b17 is released.
3941
3942 1998-04-08  Hrvoje Niksic  <hniksic@srce.hr>
3943
3944         * headers.c (header_get): New argument FLAGS.
3945
3946         * http.c (gethttp): If request is malformed, bail out of the
3947         header loop.
3948         (gethttp): Check for empty header *after* the status line checks.
3949         (gethttp): Disallow continuations for status line.
3950
3951 1998-04-08  Hrvoje Niksic  <hniksic@srce.hr>
3952
3953         * version.c: Wget 1.5-b16 is released.
3954
3955 1998-04-08  Hrvoje Niksic  <hniksic@srce.hr>
3956
3957         * init.c (commands): Renamed `always_rest' to `continue'.
3958
3959 1998-04-05  Hrvoje Niksic  <hniksic@srce.hr>
3960
3961         * all: Use it.
3962
3963         * log.c (logputs): New argument.
3964         (logvprintf): Ditto.
3965         (logprintf): Ditto.
3966
3967 1998-04-04  Hrvoje Niksic  <hniksic@srce.hr>
3968
3969         * http.c (http_atotm): Update comment.
3970
3971         * main.c (i18n_initialize): Set LC_MESSAGES, not LC_ALL.
3972
3973         * wget.h: Renamed ENABLED_NLS to HAVE_NLS.
3974
3975         * main.c (i18n_initialize): New function.
3976         (main): Use it.
3977
3978         * log.c: Include <unistd.h>.
3979
3980         * retr.c (show_progress): Cast alloca to char *.
3981
3982 1998-04-04  Hrvoje Niksic  <hniksic@srce.hr>
3983
3984         * version.c: Wget 1.5-b15 is released.
3985
3986 1998-04-04  Hrvoje Niksic  <hniksic@srce.hr>
3987
3988         * utils.h: Declare file_non_directory_p().
3989
3990 1998-04-03  Hrvoje Niksic  <hniksic@srce.hr>
3991
3992         * main.c (main): It's `tries', not `numtries' now.
3993
3994 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
3995
3996         * init.c (getperms): Removed.
3997
3998 1998-04-01  Tim Charron  <tcharron@interlog.com>
3999
4000         * log.c (logvprintf): Don't use ARGS twice.
4001
4002 1998-04-01  John  <john@futuresguide.com>
4003
4004         * mswindows.c: Cleaned up.
4005
4006 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
4007
4008         * version.c: Wget 1.5-b14 is released.
4009
4010 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
4011
4012         * ftp-opie.c (STRLEN4): New macro.
4013         (btoe): Use it.
4014
4015 1998-04-01  Junio Hamano  <junio@twinsun.com>
4016
4017         * http.c: Document all the Digest functions.
4018
4019 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
4020
4021         * utils.c (file_non_directory_p): Renamed from isfile().
4022
4023         * mswindows.h (S_ISREG): New macro, suggested by Tim Adam.
4024
4025 1998-03-31  Hrvoje Niksic  <hniksic@srce.hr>
4026
4027         * utils.c (mkdirhier): Use 0777 instead of opt.dirmode.
4028
4029         * init.c (cmd_spec_dotstyle): Use 48 dots per line for binary
4030         style.
4031         (cmd_permissions): Removed.
4032
4033         * config.h.in: Add template for WORDS_BIGENDIAN.
4034
4035 1998-03-31  Junio Hamano  <junio@twinsun.com>
4036
4037         * http.c (HEXD2asc): New macro.
4038         (dump_hash): Use it.
4039
4040 1998-03-31  Hrvoje Niksic  <hniksic@srce.hr>
4041
4042         * version.c: Wget 1.5-b13 is released.
4043
4044 1998-03-31  Hrvoje Niksic  <hniksic@srce.hr>
4045
4046         * main.c (main): Don't try to use `com'.
4047
4048 1998-03-30  Hrvoje Niksic  <hniksic@srce.hr>
4049
4050         * init.c (cmd_permissions): New function.
4051
4052 1998-03-30  Hrvoje Niksic  <hniksic@srce.hr>
4053
4054         * version.c: Wget 1.5-b12 is released.
4055
4056 1998-03-30  Hrvoje Niksic  <hniksic@srce.hr>
4057
4058         * init.c (commands): Renamed `numtries' to `tries'.
4059         (cmd_spec_debug): Removed.
4060         (home_dir): Under Windows, return `C:\' if HOME is undefined.
4061
4062 1998-03-29  Hrvoje Niksic  <hniksic@srce.hr>
4063
4064         * config.h.in: Define _XOPEN_SOURCE.
4065
4066         * init.c (check_user_specified_header): New function.
4067         (cmd_spec_header): Use it.
4068         (cmd_spec_useragent): New function.
4069
4070 1998-03-29  Hrvoje Niksic  <hniksic@srce.hr>
4071
4072         * version.c: Wget 1.5-b11 is released.
4073
4074 1998-03-28  Hrvoje Niksic  <hniksic@srce.hr>
4075
4076         * wget.h: Include <libintl.h> only if NLS is enabled.
4077
4078 1998-03-26  Hrvoje Niksic  <hniksic@srce.hr>
4079
4080         * options.h (struct options): Made `wait' a long.
4081         (struct options): Ditto for `timeout'.
4082
4083 1998-03-19  Hrvoje Niksic  <hniksic@srce.hr>
4084
4085         * utils.c (exists): Renamed to file_exists_p.
4086         (file_exists_p): Use access() if available.
4087
4088 1998-03-17  Hrvoje Niksic  <hniksic@srce.hr>
4089
4090         * utils.c (memfatal): Set save_log_p to 0 to avoid potential
4091         infloop.
4092
4093         * log.c: do_logging -> save_log_p.
4094
4095         * config.h.in: Added template for HAVE_VSNPRINTF.
4096
4097 1998-03-16  Hrvoje Niksic  <hniksic@srce.hr>
4098
4099         * init.c: Ditto.
4100
4101         * http.c: Protect declaration against non-ANSI compiler.
4102
4103         * log.c (logvprintf): Use vsnprintf() if available.
4104
4105         * getopt.c (main): Don't translate test stuff.
4106
4107 1998-03-16  Hrvoje Niksic  <hniksic@srce.hr>
4108
4109         * version.c: Wget 1.5-b10 is released.
4110
4111 1998-03-11  Hrvoje Niksic  <hniksic@srce.hr>
4112
4113         * ftp.c (getftp): Don't translate "CWD %s".
4114
4115         * wget.h (GCC_FORMAT_ATTR): Renamed from FORMAT_ATTR.
4116
4117 1998-03-07  Hrvoje Niksic  <hniksic@srce.hr>
4118
4119         * ftp-opie.c (btoe): Use memcpy() instead of strncat().
4120
4121         * log.c (logputs): New function.
4122         (logvprintf): Renamed from vlogmsg; use logputs().
4123
4124         * retr.c (show_progress): Print `[100%]' when the retrieval is
4125         finished.
4126
4127         * init.c (run_wgetrc): Use FILE, not PATH.
4128         (wgetrc_file_name): Ditto.
4129
4130 1998-03-07  Tim Adam  <tma@osa.com.au>
4131
4132         * recur.c (parse_robots): Correctly reset `entries' on empty
4133         disallow.
4134
4135 1998-03-07  Hrvoje Niksic  <hniksic@srce.hr>
4136
4137         * init.c (cmd_spec_debug): Use cmd_boolean().
4138
4139 1998-02-23  Hrvoje Niksic  <hniksic@srce.hr>
4140
4141         * http.c (gethttp): Create proxy-authorization correctly.
4142
4143 1998-02-22  Hrvoje Niksic  <hniksic@srce.hr>
4144
4145         * md5.c: Ditto.
4146
4147         * getopt.c: Use ANSI function definitions.
4148
4149         * ftp-opie.c: New file.
4150
4151         * options.h: Don't redefine EXTERN.
4152
4153         * init.c: Sort it correctly.
4154
4155 1998-02-22  Hrvoje Niksic  <hniksic@srce.hr>
4156
4157         * version.c: Wget 1.5-b9 is released.
4158
4159 1998-02-22  Hrvoje Niksic  <hniksic@srce.hr>
4160
4161         * recur.c (recursive_retrieve): Reset `first_time'.
4162
4163         * ftp.c (getftp): Added `default' clause to switches of uerr_t.
4164
4165         * rbuf.c (rbuf_peek): Simplified.
4166         (rbuf_flush): Use MINVAL.
4167
4168         * wget.h (MINVAL): Moved from url.h.
4169
4170         * rbuf.h (RBUF_FD): New macro.
4171
4172         * url.c (add_url): Add to the head of the list.
4173
4174         * ftp.c (ftp_retrieve_list): Set the permissions to downloaded
4175         file.
4176         (getftp): Set the default permissions to 0600.
4177
4178 1998-02-21  Hrvoje Niksic  <hniksic@srce.hr>
4179
4180         * url.c (get_urls_html): Ditto.
4181         (convert_links): Ditto.
4182
4183         * recur.c (parse_robots): Ditto.
4184
4185         * html.c (ftp_index): Ditto.
4186
4187         * ftp-ls.c (ftp_parse_unix_ls): Open file as binary.
4188
4189         * init.c (defaults): Initialize `opt' to zero via memset.
4190
4191         * http.c (digest_authentication_encode): goto considered harmful.
4192
4193 1998-02-19  Hrvoje Niksic  <hniksic@srce.hr>
4194
4195         * ftp.c (delelement): Simplify and fix leak.
4196
4197 1998-02-18  Hrvoje Niksic  <hniksic@srce.hr>
4198
4199         * http.c (dump_hash): Use HEXD2ASC instead of home-grown stuff.
4200
4201         * url.h (HEXD2ASC): Removed warning.
4202
4203         * init.c (comind): Use binary search.
4204         (commands): Reorganized.
4205         (setval): Ditto.
4206         (cmd_boolean): New function.
4207         (cmd_number): Ditto.
4208         (cmd_number_inf): Ditto.
4209         (cmd_string): Ditto.
4210         (cmd_vector): Ditto.
4211         (cmd_directory_vector): Ditto.
4212         (cmd_bytes): Ditto.
4213         (cmd_time): Ditto.
4214         (cmd_spec_debug): Ditto.
4215         (cmd_spec_dirmode): Ditto.
4216         (cmd_spec_dirstruct): Ditto.
4217         (cmd_spec_dotstyle): Ditto.
4218         (cmd_spec_header): Ditto.
4219         (cmd_spec_htmlify): Ditto.
4220         (cmd_spec_mirror): Ditto.
4221         (cmd_spec_outputdocument): Ditto.
4222         (cmd_spec_recursive): Ditto.
4223         (settime): Merged with cmd_time().
4224         (setbytes): Merged with cmd_bytes().
4225         (setonoff): Merged with cmd_boolean().
4226         (onoff): Ditto.
4227
4228 1998-02-17  Hrvoje Niksic  <hniksic@srce.hr>
4229
4230         * Makefile.in (distclean): Remove `config.h'.
4231
4232 1998-02-17  Hrvoje Niksic  <hniksic@srce.hr>
4233
4234         * version.c: Wget 1.5-b8 is released.
4235
4236 1998-02-17  Hrvoje Niksic  <hniksic@srce.hr>
4237
4238         * http.c (digest_authentication_encode): New function.
4239         (create_authorization_line): Use it.
4240         (dump_hash): New function.
4241         (digest_authentication_encode): Use it.
4242
4243         * fnmatch.c: Renamed from `mtch.c'.
4244
4245 1998-02-15  Karl Eichwalder  <ke@suse.de>
4246
4247         * main.c (main): Tag "Written by..." string as translatable.
4248
4249 1998-02-15  Hrvoje Niksic  <hniksic@srce.hr>
4250
4251         * wget.h (FREE_MAYBE): New macro.
4252
4253         * http.c (create_authorization_line): Don't use ANSI C string
4254         concatenation feature.
4255         (basic_authentication_encode): Use alloca() for temporary
4256         variables.
4257
4258         * recur.h: Ditto.
4259
4260         * http.c: Ditto.
4261
4262         * headers.h: Ditto.
4263
4264         * ftp-basic.c: Protect declaration against non-ANSI compiler.
4265
4266         * http.c (create_authorization_line): Cast `unsigned char *' to
4267         `char *' for sprintf, to shut up the noisy Digital Unix cc.
4268
4269 1998-02-15  Hrvoje Niksic  <hniksic@srce.hr>
4270
4271         * version.c: Wget 1.5-b7 is released.
4272
4273 1998-02-15  Hrvoje Niksic  <hniksic@srce.hr>
4274
4275         * cmpt.c (strstr): Synched with glibc-2.0.6.
4276
4277         * ftp-basic.c (calculate_skey_response): Ditto.
4278         (calculate_skey_response): Use alloca().
4279
4280         * http.c (create_authorization_line): Work with FSF's version of
4281         md5.c.
4282
4283         * md5.c: New file, from GNU libc.
4284
4285 1998-02-14  Hrvoje Niksic  <hniksic@srce.hr>
4286
4287         * url.h (URL_CLEANSE): Name the temporary variable more carefully.
4288
4289 1998-02-13  Hrvoje Niksic  <hniksic@srce.hr>
4290
4291         * http.c (basic_authentication_encode): New function, instead of
4292         the macro.
4293
4294 1998-02-13  Junio Hamano  <junio@twinsun.com>
4295
4296         * http.c: Add HTTP-DA support.
4297         * ftp-basic.c: Add Opie/S-key support.
4298         * config.h.in, Makefile.in: Add HTTP-DA and Opie/S-key support.
4299         * md5.c, md5.h: New files.
4300
4301 1998-02-13  Hrvoje Niksic  <hniksic@srce.hr>
4302
4303         * http.c (http_process_range): Renamed from hprocrange().
4304         (http_process_range): Parse the whole header.
4305
4306         * headers.c: New file.
4307         (header_process): New function.
4308         (header_get): Renamed from fetch_next_header.
4309
4310         * all: Include utils.h only where necessary.
4311
4312         * wget.h: Declare xmalloc(), xrealloc() and xstrdup() here.
4313
4314         * wget.h: Add provisions for dmalloc.
4315
4316 1998-02-12  Hrvoje Niksic  <hniksic@srce.hr>
4317
4318         * version.c: Wget 1.5-b6 is released.
4319
4320 1998-02-12  Hrvoje Niksic  <hniksic@srce.hr>
4321
4322         * ftp.c (ftp_loop): Determine `filename' more precisely.
4323
4324         * init.c (setval): Don't set `opt.quiet' if output-document is
4325         `-'.
4326
4327         * log.c (log_init): Print to STDERR instead of STDOUT.
4328         (vlogmsg): Use STDERR by default.
4329         (logflush): Ditto.
4330
4331 1998-02-11  Simon Josefsson  <jas@pdc.kth.se>
4332
4333         * host.c: Use addr_in again.
4334
4335 1998-02-08  Karl Eichwalder  <karl@suse.de>
4336
4337         * http.c (gethttp): Fixed typo.
4338
4339 1998-02-08  Hrvoje Niksic  <hniksic@srce.hr>
4340
4341         * version.c: Wget 1.5-b5 is released.
4342
4343 1998-02-08  Hrvoje Niksic  <hniksic@srce.hr>
4344
4345         * retr.c (show_progress): Use it.
4346
4347         * log.c (logflush): New function.
4348
4349         * wget.h: Utilize __attribute__ if on gcc.
4350
4351 1998-02-07  Hrvoje Niksic  <hniksic@srce.hr>
4352
4353         * http.c (base64_encode_line): New argument LENGTH.
4354         (BASIC_AUTHENTICATION_ENCODE): Use it.
4355         (BASIC_AUTHENTICATION_ENCODE): Take length of HEADER into account.
4356
4357         * main.c (main): Fixed fprintf() format mismatch.
4358
4359 1998-02-06  Hrvoje Niksic  <hniksic@srce.hr>
4360
4361         * version.c: Wget 1.5-b4 is released.
4362
4363 1998-02-03  Simon Josefsson  <jas@pdc.kth.se>
4364
4365         * host.c: use sockaddr_in instead of addr_in.
4366
4367 1998-02-04  Hrvoje Niksic  <hniksic@srce.hr>
4368
4369         * init.c (cleanup): Use it.
4370
4371         * recur.c (recursive_cleanup): New function.
4372
4373         * retr.c (retrieve_from_file): Ditto.
4374
4375         * main.c (main): Use it.
4376
4377         * recur.c (recursive_reset): New function.
4378
4379         * retr.c (retrieve_from_file): Ditto.
4380
4381         * main.c (main): Simplify call to recursive_retrieve().
4382
4383         * recur.c (recursive_retrieve): Removed FLAGS argument.
4384
4385         * http.c (gethttp): Changed call to iwrite().
4386
4387 1998-02-03  Hrvoje Niksic  <hniksic@srce.hr>
4388
4389         * url.c (get_urls_html): Ditto.
4390         (free_urlpos): Ditto.
4391         (mkstruct): Ditto.
4392         (construct): Ditto.
4393
4394         * retr.c (retrieve_url): Move declaration of local variables to
4395         smaller scope.
4396
4397         * url.c (urlproto): Use it.
4398         (parseurl): Ditto.
4399         (str_url): Ditto.
4400         (get_urls_html): Ditto.
4401
4402         * utils.h (ARRAY_SIZE): New macro.
4403
4404         * url.c (proto): Moved from url.h.
4405
4406         * url.h (URL_CLEANSE): Reformatted.
4407         (USE_PROXY_P): Renamed from USE_PROXY.
4408
4409         * ftp-basic.c: Adjust to the new interface of iwrite().
4410
4411         * ftp-basic.c (ftp_port): Use alloca().
4412
4413 1998-02-03  Hrvoje Niksic  <hniksic@srce.hr>
4414
4415         * version.c: Wget 1.5-b3 is released.
4416
4417         * host.c (ftp_getaddress): Don't print to stderr directly.
4418
4419         * init.c (setbytes): Support `g' for gigabytes.
4420         (cmdtype): New specification CTIME.
4421         (setval): Use it with settime().
4422         (commands): Use it for WAIT and TIMEOUT.
4423
4424 1998-02-02  Hrvoje Niksic  <hniksic@srce.hr>
4425
4426         * http.c (BASIC_AUTHENTICATION_ENCODE): New macro.
4427         (gethttp): Use it.
4428
4429         * utils.c (unique_name_1): Moved from url.c.
4430         (unique_name): Ditto.
4431
4432         * url.c (url_filename): Ditto.
4433
4434         * log.c (redirect_output): Changed call to unique_name().
4435
4436         * url.c (unique_name_1): Renamed from unique_name().
4437         (unique_name): Changed interface.
4438
4439         * init.c (enum cmdid): Moved from init.h.
4440         (cmdtype): Ditto.
4441         (struct cmd): Ditto.
4442
4443         * main.c (main): Use it.
4444         (main): Moved `--backups' to not have a short option.
4445
4446         * options.h (struct options): New member BACKGROUND.
4447
4448         * main.c (print_help): Rearranged.
4449         (main): New long options for -n* short options: --no-directories,
4450         --no-host-directories, --non-verbose, --no-host-lookup and
4451         --dont-remove-listing.
4452
4453 1998-02-01  Hrvoje Niksic  <hniksic@srce.hr>
4454
4455         * main.c (main): Use log_close().
4456
4457         * log.c: New variable LOGFP.
4458         (vlogmsg): Use it.
4459         (redirect_output): Don't open /dev/null; set LOGFP to stdin
4460         instead.
4461         (log_close): New function.
4462
4463         * options.h (struct options): Removed LFILE.
4464
4465         * log.c (log_enable): Removed.
4466
4467         * main.c (main): Use it.
4468
4469         * log.c (log_init): New function.
4470
4471         * url.c (get_urls_html): Removed needless assignment to BASE.
4472
4473         * host.c (add_hlist): Don't set CMP needlessly.
4474
4475         * utils.c (match_backwards): Ditto.
4476         (in_acclist): Ditto.
4477
4478         * url.c (findurl): Ditto.
4479
4480         * netrc.c (parse_netrc): Ditto.
4481
4482         * log.c (log_dump): Ditto.
4483
4484         * html.c (html_quote_string): Ditto.
4485
4486         * ftp-basic.c (ftp_request): Made static.
4487
4488         * connect.c: Made global variables static.
4489
4490         * url.c (construct): Ditto.
4491
4492         * init.c (init_path): Avoid assignment inside `if'-condition.
4493
4494         * ftp.c: Don't include in.h or winsock.h.
4495
4496         * ftp.c (ftp_loop): Use SZ.
4497
4498         * connect.c (bindport): Cast &addrlen to int *.
4499         (conaddr): Ditto.
4500
4501         * init.c (initialize): Don't use SYSTEM_WGETRC unconditionally.
4502
4503 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
4504
4505         * ftp.c (getftp): Initialize opt.ftp_pass here.
4506         (ftp_retrieve_dirs): Use alloca().
4507
4508         * init.c (defaults): Don't initialize opt.ftp_pass.
4509
4510         * sysdep.h (S_ISLNK): Declare for OS/2; ditto for lstat.
4511         From Ivan F. Martinez <ivanfm@ecodigit.com.br>.
4512
4513 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
4514
4515         * recur.c (parse_robots): Check for comments more correctly.
4516
4517         * host.c (ftp_getaddress): Use STRDUP_ALLOCA.
4518         (ftp_getaddress): Add diagnostics when reverse-lookup yields only
4519         hostname.
4520
4521 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
4522
4523         * version.c: Wget 1.5-b2 is released.
4524
4525         * netrc.c (NETRC_FILE_NAME): Moved from netrc.h.
4526
4527         * utils.c (proclist): Pass FNM_PATHNAME to fnmatch().
4528
4529         * ftp-basic.c (ftp_pasv): Avoid unnecessary casting to unsigned
4530         char.
4531
4532         * log.c: Don't attempt to hide arguments from ansi2knr.
4533
4534         * cmpt.c: Synched strptime() and mktime() with glibc-2.0.6.
4535
4536         * ansi2knr.c: Use a later version, from fileutils-3.16l alpha.
4537
4538         * ftp.c (getftp): Ditto.
4539
4540         * http.c (gethttp): Use it.
4541
4542         * retr.c (get_contents): New argument EXPECTED; pass it to
4543         show_progress().
4544         (show_progress): New argument EXPECTED; use it to display
4545         percentages.
4546
4547         * init.c (setval): Ditto.
4548
4549         * http.c (gethttp): Ditto.
4550         (http_loop): Ditto.
4551
4552         * ftp.c (getftp): Ditto.
4553         (ftp_loop_internal): Ditto.
4554
4555         * ftp-ls.c (ftp_parse_unix_ls): Use abort() instead of assert(0).
4556
4557         * sysdep.h (CLOSE): Simplify; use DEBUGP.
4558
4559         * netrc.c (search_netrc): Use alloca().
4560
4561         * init.c (defaults): Initialize no_flush.
4562
4563         * log.c (vlogmsg): Don't flush if no_flush.
4564
4565         * options.h (struct options): New variable no_flush.
4566
4567         * main.c (main): Don't play games with buffering.
4568
4569         * log.c (vlogmsg): Flush the output after every message.
4570
4571 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
4572
4573         * init.c (parse_line): Ditto.
4574
4575         * url.c (get_urls_html): Ditto.
4576
4577         * main.c (main): Don't cast to unsigned char.
4578
4579         * init.c (run_wgetrc): Don't cast to unsigned char.
4580         (parse_line): Accept char instead of unsigned char.
4581
4582         * html.c (htmlfindurl): Use char instead of unsigned char.
4583
4584         * all: Use them.
4585
4586         * sysdep.h: Add wrappers to ctype macros to make them
4587         eight-bit-clean:
4588
4589 1998-01-30  Hrvoje Niksic  <hniksic@srce.hr>
4590
4591         * html.c (htmlfindurl): Download <img lowsrc=...>
4592
4593         * main.c (main): Ignore SIGPIPE.
4594
4595         * connect.c (select_fd): New argument WRITEP.
4596         (iwrite): Call select_fd().
4597
4598 1997-02-27  Fila Kolodny <fila@ibi.com>
4599
4600         * ftp.c (ftp_retrieve_list): If retrieving symlink and the proper
4601         one already exists, just skip it.
4602
4603 1998-01-30  Hrvoje Niksic  <hniksic@srce.hr>
4604
4605         * http.c (gethttp): Cosmetic changes.
4606
4607         * http.c (check_end): Allow `+D...' instead of `GMT'.
4608         From Fabrizio Pollastri <pollastri@cstv.to.cnr.it>.
4609
4610         * url.c (process_ftp_type): New function.
4611         (parseurl): Use it.
4612
4613         * connect.c (iwrite): Allow writing in a few chunks.
4614         (bindport): Made SRV static, so addr can point to it.
4615         (select_fd): Removed HPUX kludge.
4616
4617         * host.c (free_hlist): Incorporated into clean_hosts().
4618
4619 1998-01-29  Hrvoje Niksic  <hniksic@srce.hr>
4620
4621         * host.c (hlist): Made static.
4622         (search_address): Cosmetic change.
4623
4624 1998-01-29  Hrvoje Niksic  <hniksic@srce.hr>
4625
4626         * version.c: Wget v1.5-b1 is released.
4627
4628         * http.c (hgetlen): Use sizeof() to get the header length.
4629         (hgetrange): Ditto.
4630         (hgettype): Ditto.
4631         (hgetlocation): Ditto.
4632         (hgetmodified): Ditto.
4633         (haccepts_none): Ditto.
4634
4635         * main.c (main): Updated `--version' and `--help' output, as per
4636         Francois Pinard's suggestions.
4637
4638         * main.c: Include locale.h; call setlocale(), bindtextdomain() and
4639         textdomain().
4640
4641         * config.h.in: Define stubs for I18N3.
4642
4643         * wget.h: Include libintl.h.
4644
4645 1998-01-28  Hrvoje Niksic  <hniksic@srce.hr>
4646
4647         * url.c (mkstruct): Check for opt.cut_dirs.
4648         (mkstruct): alloca()-te more, xmalloc() less.
4649
4650         * utils.c (load_file): Check for ferror().
4651
4652         * url.c (get_urls_file): Close only the files we opened.
4653         (get_urls_html): Ditto.
4654         (count_slashes): New function.
4655
4656         * http.h: Removed.
4657
4658         * http.c (gethttp): Respect username and password provided by
4659         proxy URL.
4660         (base64_encode_line): Write into an existing buffer instead of
4661         malloc-ing a new one.
4662         (struct http_stat): Moved from http.h
4663
4664         * retr.c (retrieve_url): Free SUF.
4665
4666         * all: Removed lots of unnecessary .h dependencies.
4667
4668         * html.c (global_state): Made static.
4669
4670         * utils.h (ALLOCA_ARRAY): New macro.
4671
4672         * main.c (main): New option `--cut-dirs'.
4673
4674         * url.c (construct): Use alloca() for T.
4675
4676         * utils.c (mkdirhier): Use STRDUP_ALLOCA.
4677
4678         * host.c (_host_t): Moved from host.h.
4679         (struct host): Renamed from _host_t.
4680         (store_hostaddress): Use STRDUP_ALLOCA for INET_S.
4681         (realhost): Ditto.
4682
4683         * host.h: Don't include url.h.
4684
4685         * ftp.c (LIST_FILENAME): Moved from ftp.h.
4686
4687         * init.c (DEFAULT_FTP_ACCT): Moved from ftp.h.
4688
4689         * main.c (main): Enable log if the output goes to a TTY.
4690
4691         * connect.h: Removed unused constant `BACKLOG'.
4692
4693         * config.h.in: Check for isatty().
4694
4695         * Makefile.in (LINK): Use CFLAGS when linking.
4696
4697 1998-01-27  Hrvoje Niksic  <hniksic@srce.hr>
4698
4699         * mswindows.c (ws_hangup): Use redirect_output().
4700
4701         * main.c (redirect_output_signal): New function; use
4702         redirect_output().
4703
4704         * log.c (redirect_output): New function, based on hangup(), which
4705         is deleted.
4706
4707         * log.c (vlogmsg): New function.
4708
4709         * wget.h (DEBUGP): Use debug_logmsg().
4710
4711         * main.c (hangup): Use it.
4712
4713         * log.c (log_dump): New function.
4714
4715         * utils.h (DO_REALLOC): Use `long' for various sizes.
4716
4717         * http.c (hskip_lws): Use `while', for clarity.
4718         (HTTP_DYNAMIC_LINE_BUFFER): New constant.
4719         (fetch_next_header): Use it instead of DYNAMIC_LINE_BUFFER.
4720
4721         * ftp-basic.c (FTP_DYNAMIC_LINE_BUFFER): New constant.
4722         (ftp_response): Use it instead of DYNAMIC_LINE_BUFFER.
4723
4724         * utils.c (DYNAMIC_LINE_BUFFER): Moved from utils.c.
4725         (LEGIBLE_SEPARATOR): Ditto.
4726         (FILE_BUFFER_SIZE): Ditto.
4727
4728         * retr.c (BUFFER_SIZE): Moved from retr.h.
4729
4730         * log.c: New file.
4731         (logmsg): Moved from utils.c.
4732         (debug_logmsg): New function.
4733
4734         * mswindows.h: Include it here.
4735
4736         * init.c: Ditto.
4737
4738         * utils.c: Don't include <windows.h>.
4739
4740 1998-01-25  Hrvoje Niksic  <hniksic@srce.hr>
4741
4742         * host.c (ftp_getaddress): Ditto.
4743
4744         * main.c (main): Use it.
4745
4746         * utils.h (STRDUP_ALLOCA): New macro.
4747
4748         * init.c: Prepend `wget: ' to error messages printed on stderr.
4749
4750         * utils.c (mkdirhier): Renamed from mymkdir.
4751         (touch): Renamed from my_touch.
4752         (pwd_cuserid): Renamed from my_cuserid().
4753
4754 1998-01-24  Andy Eskilsson  <andy.eskilsson@telelogic.se>
4755
4756         * utils.c (accdir): Process wildcards.
4757         (proclist): New function.
4758         (accdir): Use it to avoid code repetition.
4759
4760 1998-01-24  Hrvoje Niksic  <hniksic@srce.hr>
4761
4762         * recur.c (parse_robots): Respect opt.useragent; use alloca().
4763
4764         * http.c (gethttp): Construct useragent accordingly.
4765
4766         * version.c: Changed version string to numbers-only.
4767
4768         * main.c (print_help): List all the options.
4769
4770         * mswindows.c (windows_main_junk): Initialize argv0 here.
4771
4772 1998-01-24  Karl Heuer  <kwzh@gnu.org>
4773
4774         * netrc.c (search_netrc): Initialize `l' only after processing
4775         netrc.
4776
4777         * main.c (main): Don't trap SIGHUP if it's being ignored.
4778
4779 1998-01-24  Hrvoje Niksic  <hniksic@srce.hr>
4780
4781         * all: Use logmsg().
4782
4783         * utils.c (time_str): Moved from retr.c.
4784         (logmsg): New function.
4785         (logmsg_noflush): Ditto.
4786
4787         * rbuf.c: New file, moved buf_* functions here.
4788
4789         * ftp.c (ftp_expected_bytes): Moved from ftp-basic.c.
4790
4791         * ftp-basic.c (ftp_rest): Use prnum().
4792
4793         * ftp-basic.c: Ditto.
4794
4795         * ftp.c: Use the new reading functions and macros.
4796
4797         * retr.c (buf_initialize): New function.
4798         (buf_initialized_p): Ditto.
4799         (buf_uninitialize): Ditto.
4800         (buf_fd): Ditto.
4801
4802         * http.c (fetch_next_header): Use the BUF_READCHAR macro for
4803         efficiency.
4804         (gethttp): Use alloca() where appropriate.
4805
4806         * retr.c (buf_readchar): Use it.
4807         (buf_peek): Use rstreams.
4808
4809         * retr.h (BUF_READCHAR): New macro.
4810
4811         * init.c (home_dir): Rewritten for clarity.
4812         (init_path): Ditto.
4813
4814         * mswindows.c (ws_backgnd): Made static.
4815         (read_registry): Ditto.
4816         (ws_cleanup): Ditto.
4817         (ws_handler): Ditto.
4818
4819 1998-01-23  Hrvoje Niksic  <hniksic@srce.hr>
4820
4821         * alloca.c: New file.
4822
4823         * Makefile.in (ALLOCA): Define.
4824
4825         * mswindows.c (ws_help): Constify.
4826         (ws_help): Use alloca.
4827
4828         * mswindows.c: Reformat.
4829
4830         * all: Added _(...) annotations for I18N snarfing and translation.
4831
4832         * host.c (ftp_getaddress): Nuke SYSINFO.
4833         (ftp_getaddress): Don't use getdomainname().
4834         (ftp_getaddress): Use uname(), where available.
4835
4836         * http.c (gethttp): Protect a stray fprintf().
4837
4838         * init.c (settime): New function.
4839         (setval): Treat WAIT specially, allowing suffixes like `m' for
4840         minutes, etc.
4841
4842 1998-01-21  Hrvoje Niksic  <hniksic@srce.hr>
4843
4844         * url.c (get_urls_html): Use alloca() for TEMP.
4845
4846 1998-01-21  Jordan Mendelson  <jordy@wserv.com>
4847
4848         * url.c (rotate_backups): New function.
4849
4850         * http.c (gethttp): Ditto.
4851
4852         * ftp.c (getftp): Rotate backups.
4853
4854 1997-12-18  Hrvoje Niksic  <hniksic@srce.hr>
4855
4856         * all: Renamed nmalloc(), nrealloc() and nstrdup() to xmalloc(),
4857         xrealloc() and xstrdup().  Use the new functions.
4858
4859         * url.c (decode_string): Made static.
4860         (has_proto): Ditto.
4861         (parse_dir): Ditto.
4862         (parse_uname): Ditto.
4863         (mkstruct): Ditto.
4864         (construct): Ditto.
4865         (construct_relative): Ditto.
4866
4867         * retr.c (show_progress): Made static.
4868
4869         * recur.c (robots_url): Made static.
4870         (retrieve_robots): Ditto.
4871         (parse_robots): Ditto.
4872         (robots_match): Ditto.
4873
4874         * main.h: Removed.
4875
4876         * main.c (printhelp): Made static.
4877         (hangup): Ditto.
4878
4879         * init.c (comind): Made static.
4880         (defaults): Ditto.
4881         (init_path): Ditto.
4882         (run_wgetrc): Ditto.
4883         (onoff): Ditto.
4884         (setonoff): Ditto.
4885         (setnum): Ditto.
4886         (myatoi): Ditto.
4887         (getperms): Ditto.
4888         (setbytes): Ditto.
4889
4890         * http.c (fetch_next_header): Made static.
4891         (hparsestatline): Ditto.
4892         (hskip_lws): Ditto.
4893         (hgetlen): Ditto.
4894         (hgetrange): Ditto.
4895         (hgettype): Ditto.
4896         (hgetlocation): Ditto.
4897         (hgetmodified): Ditto.
4898         (haccepts_none): Ditto.
4899         (gethttp): Ditto.
4900         (base64_encode_line): Ditto.
4901         (mktime_from_utc): Ditto.
4902         (http_atotm): Ditto.
4903
4904         * html.c (idmatch): Made static.
4905
4906         * host.c (search_host): Made static.
4907         (search_address): Ditto.
4908         (free_hlist): Ditto.
4909
4910         * ftp.c (getftp): Made static.
4911         (ftp_loop_internal): Ditto.
4912         (ftp_get_listing): Ditto.
4913         (ftp_retrieve_list): Ditto.
4914         (ftp_retrieve_dirs): Ditto.
4915         (ftp_retrieve_glob): Ditto.
4916         (freefileinfo): Ditto.
4917         (delelement): Ditto.
4918
4919         * ftp-ls.c (symperms): Made static.
4920         (ftp_parse_unix_ls): Ditto.
4921
4922         * connect.c (select_fd): Made static.
4923
4924         * utils.c (xmalloc): Renamed from nmalloc.
4925         (xrealloc): Renamed from nrealloc.
4926         (xstrdup): Renamed from nstrdup.
4927
4928         * getopt.c (exchange): Use alloca.
4929
4930         * mswindows.c (mycuserid): Use strncpy.
4931
4932         * New files mswindows.c, mswindows.h, sysdep.h.  winjunk.c,
4933         systhings.h, windecl.h and winjunk.h removed.
4934
4935         * mswindows.c (sleep): New function.
4936
4937         * utils.c: Include <windows.h> under Windows.
4938
4939 1997-06-12  Darko Budor  <dbudor@zesoi.fer.hr>
4940
4941         * url.h (URL_UNSAFE): Change default under Windows.
4942
4943         * retr.c (retrieve_from_file): Respect opt.delete_after.
4944
4945         * main.c (main): Call ws_help on Windows.
4946
4947         * winjunk.c (windows_main_junk): New function.
4948
4949         * main.c (main): Junk-process argv[0].
4950
4951         * http.c (mktime_from_utc): Return -1 if mktime failed.
4952
4953         * http.c (http_loop): Ditto.
4954
4955         * ftp.c (ftp_loop_internal): Change title on Windows when using a
4956         new URL.
4957
4958         * winjunk.c (getdomainname): Lots of functions.
4959
4960 1997-06-12  Hrvoje Niksic  <hniksic@srce.hr>
4961
4962         * cmpt.c (strptime_internal): Handle years more correctly for
4963         `%y'.
4964
4965 1997-06-09  Mike Thomas <mthomas@reality.ctron.com>
4966
4967         * http.c (gethttp): Allocate enough space for
4968         `Proxy-Authorization' header.
4969
4970 1997-05-10  Hrvoje Niksic  <hniksic@srce.hr>
4971
4972         * version.c: Wget/1.4.5 is released.
4973
4974 1997-05-10  Hrvoje Niksic  <hniksic@srce.hr>
4975
4976         * retr.c (get_contents): Check return value of fwrite more
4977         carefully.
4978
4979 1997-03-30  Andreas Schwab  <schwab@issan.informatik.uni-dortmund.de>
4980
4981         * cmpt.c (strptime_internal) [case 'Y']: Always subtract 1900 from
4982         year, regardless of century.
4983
4984 1997-03-30  Hrvoje Niksic  <hniksic@srce.hr>
4985
4986         * utils.c (isfile): Use `lstat' instead of `stat'.
4987
4988 1997-03-29  Hrvoje Niksic  <hniksic@srce.hr>
4989
4990         * utils.c (numdigit): Use explicit test.
4991
4992 1997-03-21  Hrvoje Niksic  <hniksic@srce.hr>
4993
4994         * http.c (http_loop): Always use `url_filename' to get u->local.
4995
4996 1997-03-20  Hrvoje Niksic  <hniksic@srce.hr>
4997
4998         * url.c: Recognize https.
4999
5000 1997-03-13  Hrvoje Niksic  <hniksic@srce.hr>
5001
5002         * recur.c (recursive_retrieve): Lowercase just the host name.
5003
5004 1997-03-09  Hrvoje Niksic  <hniksic@srce.hr>
5005
5006         * url.c (get_urls_file): Use the correct test.
5007         (get_urls_html): Ditto.
5008
5009 1997-03-07  Hrvoje Niksic  <hniksic@srce.hr>
5010
5011         * connect.c: Reverted addrlen to int.
5012
5013         * init.c (parse_line): Check for -1 instead of NONE.
5014
5015         * version.c: Changed version to 1.4.5.
5016
5017 1997-02-17  Hrvoje Niksic  <hniksic@srce.hr>
5018
5019         * init.c: New option netrc.
5020         (initialize): Don't parse .netrc.
5021
5022         * cmpt.c (recursive): Return rp.
5023         (strptime_internal): Match the long strings first, the abbreviated
5024         second.
5025
5026 1997-02-16  Hrvoje Niksic  <hniksic@srce.hr>
5027
5028         * http.c (check_end): New function.
5029         (http_atotm): Use it.
5030
5031 1997-02-13  gilles Cedoc  <gilles@cedocar.fr>
5032
5033         * http.c (gethttp): Use them.
5034
5035         * init.c: New options proxy_user and proxy_passwd.
5036
5037 1997-02-14  Hrvoje Niksic  <hniksic@srce.hr>
5038
5039         * ftp.c (ftp_retrieve_list): Create links even if not relative.
5040
5041 1997-02-10  Hrvoje Niksic  <hniksic@srce.hr>
5042
5043         * recur.c (recursive_retrieve): Lowercase the host name, if the
5044         URL is not "optimized".
5045
5046         * host.c (realhost): Return l->hostname, even if it matches with
5047         host.
5048
5049 1997-02-10  Marin Purgar  <pmc@asgard.hr>
5050
5051         * connect.c: Make addrlen size_t instead of int.
5052         (conaddr): Ditto.
5053
5054 1997-02-09  Gregor Hoffleit  <flight@mathi.uni-heidelberg.DE>
5055
5056         * systhings.h: Define S_ISLNK on NeXT too.
5057
5058 1997-02-09  Hrvoje Niksic  <hniksic@srce.hr>
5059
5060         * version.c: Released 1.4.3.
5061
5062         * url.c: Futher update to list of protostrings.
5063         (skip_proto): Skip `//' correctly for FTP and HTTP.
5064
5065         * url.c (get_urls_html): Handle bogus `http:' things a little
5066         different.
5067
5068         * main.c (main): Removed `follow-ftp' from `f'.
5069         (main): Dumped the `prefix-files' and `file-prefix' options and
5070         features; old and bogus.
5071         (main): Exit on failed setval() in `-e'.
5072
5073         * http.c (fetch_next_header): Use it to detect header continuation
5074         correctly.
5075
5076         * retr.c (buf_peek): New function.
5077
5078 1997-02-08  Hrvoje Niksic  <hniksic@srce.hr>
5079
5080         * wget.h: Include time.h and stuff.
5081
5082 1997-02-08  Roger Beeman  <beeman@cisco.com>
5083
5084         * ftp.c: Include <time.h>
5085
5086 1997-02-07  Hrvoje Niksic  <hniksic@srce.hr>
5087
5088         * url.c (findurl): Would read over buffer limits.
5089
5090 1997-02-06  Hrvoje Niksic  <hniksic@srce.hr>
5091
5092         * ftp-ls.c (ftp_parse_unix_ls): Allow spaces in file names.
5093
5094 1997-02-05  Hrvoje Niksic  <hniksic@srce.hr>
5095
5096         * http.c (http_atotm): Initialize tm.is_dst.
5097
5098 1997-02-02  Hrvoje Niksic  <hniksic@srce.hr>
5099
5100         * http.c (gethttp): Don't print the number of retrieved headers.
5101
5102         * main.c (main): New option `--no-clobber', alias for `-nc'.
5103
5104         * url.c: Recognize `https://'.
5105
5106 1997-02-01  Hrvoje Niksic  <hniksic@srce.hr>
5107
5108         * host.c (herrmsg): Don't use h_errno.
5109
5110 1997-01-30  Hrvoje Niksic  <hniksic@srce.hr>
5111
5112         * host.c (accept_domain): Use it.
5113
5114         * main.c (main): New option `--exclude-domains'.
5115
5116         * retr.c (retrieve_url): Use it.
5117         (retrieve_url): Bail out when an URL is redirecting to itself.
5118
5119         * url.c (url_equal): New function.
5120
5121 1997-01-29  Hrvoje Niksic  <hniksic@srce.hr>
5122
5123         * connect.c: Include arpa/inet.h instead of arpa/nameser.h.
5124
5125         * http.c (mk_utc_time): New function.
5126         (http_atotm): Use it; handle time zones correctly.
5127
5128 1997-01-28  Hrvoje Niksic  <hniksic@srce.hr>
5129
5130         * http.c: Ditto.
5131
5132         * ftp-basic.c: Use it instead of WRITE.
5133
5134         * connect.c (iwrite): New function.
5135
5136 1997-01-27  Hrvoje Niksic  <hniksic@srce.hr>
5137
5138         * cmpt.c (mktime): New function.
5139
5140         * netrc.c: Include <sys/types.h>.
5141
5142         * main.c (main): Wouldn't recognize --spider.
5143
5144         * retr.c (rate): Use `B', `KB' and `MB'.
5145         (reset_timer,elapsed_time): Moved from utils.c.
5146
5147         * ftp.c (ftp_retrieve_list): Ditto.
5148
5149         * http.c (http_loop): Don't touch the file if opt.dfp.
5150
5151 1997-01-24  Hrvoje Niksic  <hniksic@srce.hr>
5152
5153         * cmpt.c: New file.
5154
5155         * ftp.c (ftp_retrieve_glob): New argument semantics.
5156         (ftp_retrieve_dirs): Use it.
5157         (ftp_loop): Ditto.
5158
5159         * html.c (htmlfindurl): Recognize `'' as the quote char.
5160
5161 1997-01-23  Hrvoje Niksic  <hniksic@srce.hr>
5162
5163         * ftp.c (ftp_loop_internal): Use it.
5164
5165         * utils.c (remove_link): New function.
5166
5167 1997-01-22  Hrvoje Niksic  <hniksic@srce.hr>
5168
5169         * retr.c (retrieve_url): Require STRICT redirection URL.
5170
5171         * url.c (parseurl): New argument STRICT.
5172
5173         * http.c (hparsestatline): Be a little-bit less strict about
5174         status line format.
5175
5176 1997-01-21  Hrvoje Niksic  <hniksic@srce.hr>
5177
5178         * http.c (gethttp): Use it.
5179
5180         * main.c (main): Don't use '<digit>' as options.
5181
5182         * init.c: New option ignore_length.
5183
5184         * http.c (gethttp): Ditto.
5185         (http_loop): Check for redirection without Location:.
5186         (gethttp): Don't print Length unless RETROKF.
5187
5188         * ftp.c (getftp): Use it.
5189
5190         * url.c (mkalldirs): New function.
5191
5192         * utils.c (mymkdir): Don't check for existing non-directory.
5193
5194         * url.c (mkstruct): Don't create the directory.
5195
5196 1997-01-20  Hrvoje Niksic  <hniksic@srce.hr>
5197
5198         * init.c (setval): Removed NO_RECURSION checks.
5199
5200 1997-01-19  Hrvoje Niksic  <hniksic@srce.hr>
5201
5202         * version.c: "Released" 1.4.3-pre2.
5203
5204         * recur.c (recursive_retrieve): Bypass host checking only if URL
5205         is ftp AND parent URL is not ftp.
5206
5207         * ftp-basic.c (ftp_request): Print out Turtle Power.
5208
5209         * ftp.c (ftp_loop): Call ftp_retrieve_glob with 0 if there's no
5210         wildcard.
5211         (ftp_retrieve_glob): Call ftp_loop_internal even on empty list, if
5212         not glob.
5213
5214         * http.c (gethttp): Be a little bit smarter about status codes.
5215
5216         * recur.c (recursive_retrieve): Always reset opt.recursive when
5217         dealing with FTP.
5218
5219 1997-01-18  Hrvoje Niksic  <hniksic@srce.hr>
5220
5221         * retr.c (retrieve_url): New variable location_changed; use it for
5222         tests instead of mynewloc.
5223         (retrieve_url): Allow heuristic adding of html.
5224
5225         * url.c (url_filename): Don't use the `%' in Windows file names.
5226
5227         * http.c (http_loop): Always time-stamp the local file.
5228
5229         * http.c (http_loop): Ditto.
5230
5231         * ftp.c (ftp_retrieve_list): Use it.
5232
5233         * utils.c (my_touch): New function.
5234
5235         * ftp.c (ftp_retrieve_list): Use #ifdef HAVE_STRUCT_UTIMBUF
5236         instead of #ifndef NeXT.
5237
5238         * utils.c (strptime): New version, by Ulrich Drepper.
5239
5240 1997-01-17  Hrvoje Niksic  <hniksic@srce.hr>
5241
5242         * http.c (haccepts_none): Renamed from `haccepts_bytes'.
5243         (gethttp): If haccepts_none(), disable ACCEPTRANGES.
5244         (http_loop): Would remove ACCEPTRANGES.
5245
5246         * ftp.c (getftp): Call ftp_list with NULL.
5247
5248 1997-01-15  Hrvoje Niksic  <hniksic@srce.hr>
5249
5250         * html.c (ftp_index): Don't print minutes and seconds if we don't
5251         know them; beautify the output.
5252
5253         * ftp.c (getftp): Don't close the socket on FTPNSFOD.
5254
5255 1997-01-14  Hrvoje Niksic  <hniksic@srce.hr>
5256
5257         * utils.c (strptime): New function.
5258         (strptime): Don't use get_alt_number.
5259         (strptime): Don't use locale.
5260         (match_string): Made it a function.
5261
5262 1997-01-12  Hrvoje Niksic  <hniksic@srce.hr>
5263
5264         * http.c (http_atotm): New function.
5265         (http_loop): Use it.
5266
5267         * atotm.c: Removed from the distribution.
5268
5269         * http.c (base64_encode_line): Rewrite.
5270
5271 1997-01-09  Hrvoje Niksic  <hniksic@srce.hr>
5272
5273         * ftp.c (getftp): Use ftp_expected_bytes; print size.
5274
5275         * ftp-basic.c (ftp_response): Use ftp_last_respline.
5276         (ftp_expected_bytes): New function.
5277
5278         * ftp.c (getftp): Print the unauthoritative file length.
5279
5280         * ftp-ls.c: Renamed from ftp-unix.c.
5281         (ftp_parse_ls): Moved from ftp.c.
5282         (ftp_parse_unix_ls): Recognize seconds in time spec.
5283         (ftp_parse_unix_ls): Recognize year-less dates of the previous
5284         year.
5285
5286 1997-01-08  Hrvoje Niksic  <hniksic@srce.hr>
5287
5288         * ftp-basic.c: Don't declare errno if #defined.
5289
5290         * host.c (ftp_getaddress): Check for sysinfo legally.
5291
5292 1997-01-08  Darko Budor  <dbudor@diana.zems.fer.hr>
5293
5294         * connect.c (iread): Use READ.
5295
5296 1996-12-23  Hrvoje Niksic  <hniksic@srce.hr>
5297
5298         * url.c: Recognize finger, rlogin, tn3270, mid and cid as valid
5299         schemes.
5300
5301 1996-12-22  Hrvoje Niksic  <hniksic@srce.hr>
5302
5303         * host.c (ftp_getaddress): Allow `.' in hostname.
5304
5305 1996-12-26  Darko Budor <dbudor@zems.fer.hr>
5306
5307         * wget.h: READ and WRITE macros for use instead of read and write
5308         on sockets, grep READ *.c, grep WRITE *.c
5309
5310         * wsstartup.c: new file - startup for winsock
5311
5312         * wsstartup.h: new file
5313
5314         * win32decl.h: new file - fixup for <errno.h> and winsock trouble
5315
5316         * configure.bat: Configure utility for MSVC
5317
5318         * src/Makefile.ms,config.h.ms: new files for use with MSVC 4.x
5319
5320 1996-12-22  Hrvoje Niksic  <hniksic@srce.hr>
5321
5322         * version.c: Released 1.4.3-pre.
5323
5324         * utils.c (prnum): Accept long.
5325         (legible): Use prnum().
5326
5327         * connect.c (make_connection): Accept port as short.
5328         (bindport): Ditto.
5329
5330         * http.c (gethttp): Use search_netrc.
5331
5332 1996-12-21  Hrvoje Niksic  <hniksic@srce.hr>
5333
5334         * ftp.c (getftp): Use search_netrc.
5335
5336         * netrc.c (free_netrc): New function.
5337
5338         * init.c (home_dir): New function.
5339
5340         * url.c (convert_links): Allow REL2ABS changes.
5341
5342 1996-12-21  Gordon Matzigkeit  <gord@gnu.ai.mit.edu>
5343
5344         * netrc.c: New file.
5345         (parse_netrc, maybe_add_to_list): New functions.
5346
5347 1996-12-17  Hrvoje Niksic  <hniksic@srce.hr>
5348
5349         * retr.c (retrieve_url): Reset opt.recursion before calling
5350         ftp_loop if it is reached through newloc.
5351
5352         * init.c (run_wgetrc): Print the wgetrc path too, when reporting
5353         error; don't use "Syntax error", since we don't know if it is
5354         really a syntax error.
5355
5356 1996-12-16  Hrvoje Niksic  <hniksic@srce.hr>
5357
5358         * utils.c (acceptable): Extract the filename part of the path.
5359
5360         * recur.c (recursive_retrieve): Call acceptable() with the right
5361         argument; would bug out on wildcards.
5362
5363         * init.c (parse_line): Likewise.
5364
5365         * html.c (htmlfindurl): Cast to char * when calling stuff.
5366
5367 1996-12-15  Hrvoje Niksic  <hniksic@srce.hr>
5368
5369         * ftp.c (getftp): Use ftp_pasv.
5370
5371         * ftp-basic.c (ftp_request): Accept NULL value.
5372         (ftp_pasv): New function.
5373
5374         * options.h (struct options): Add passive FTP option.
5375
5376 1996-12-15  Hrvoje Niksic  <hniksic@srce.hr>
5377
5378         * url.c (parseurl): Debug output.
5379
5380         * utils.c (path_simplify): New one, adapted from bash's
5381         canonicalize_pathname().
5382
5383 1996-12-14  Hrvoje Niksic  <hniksic@srce.hr>
5384
5385         * ftp.c (getftp): Don't discard the buffer.
5386
5387         * retr.c (get_contents): New parameter nobuf.
5388
5389 1996-12-13  Shawn McHorse  <riffraff@txdirect.net>
5390
5391         * html.c (htmlfindurl): Recognize <meta contents="d; URL=...".
5392
5393         * init.c (setval): Strip the trailing slashes on CVECDIR.
5394
5395 1996-12-13  Hrvoje Niksic  <hniksic@srce.hr>
5396
5397         * init.c: Make excludes and includes under CVECDIR instead of
5398         CVEC.
5399
5400 1996-12-13  Shawn McHorse  <riffraff@txdirect.net>
5401
5402         * url.c (get_urls_html): Skip "http:".
5403
5404 1996-12-13  Hrvoje Niksic  <hniksic@srce.hr>
5405
5406         * utils.c (strcasecmp): From glibc.
5407         (strncasecmp): Also.
5408         (strstr): Also.
5409
5410         * url.c: Added javascript: to the list of URLs prefixes.
5411
5412 1996-12-12  Shawn McHorse  <riffraff@txdirect.net>
5413
5414         * recur.c (retrieve_robots): Print the warning message only if
5415         verbose.
5416
5417 1996-12-12  Gregor Hoffleit  <flight@mathi.uni-heidelberg.DE>
5418
5419         * ftp.c (ftp_retrieve_list): Use NeXT old utime interface.
5420
5421 1996-12-12  Hrvoje Niksic  <hniksic@srce.hr>
5422
5423         * systhings.h: New file.
5424
5425         * ../configure.in: Check for utime.h
5426
5427         * ftp.c: Check whether we have unistd.h.
5428
5429 1996-11-27  Hrvoje Niksic  <hniksic@srce.hr>
5430
5431         * recur.c (recursive_retrieve): Send the canonical URL as referer.
5432         (recursive_retrieve): Call get_urls_html with the canonical URL.
5433
5434 1996-12-13  Kaveh R. Ghazi  <ghazi@caip.rutgers.edu>
5435
5436         * (configure.in, config.h.in, src/Makefile.in, src/*.[ch]): Add
5437         ansi2knr support for compilers which don't support ANSI style
5438         function prototypes and signatures.
5439
5440         * (aclocal.m4, src/ansi2knr.c, src/ansi2knr.1): New files.
5441
5442 1996-11-26  Hrvoje Niksic  <hniksic@srce.hr>
5443
5444         * url.c: Use it; Recognize paths ending with "." and ".." as
5445         directories.
5446         (url_filename): Append .n whenever file exists and could be a
5447         directory.
5448
5449         * url.h (ISDDOT): New macro.
5450
5451         * init.c (parse_line): Use unsigned char.
5452
5453         * url.c (get_urls_html): Cast to unsigned char * when calling
5454         htmlfindurl.
5455
5456         * html.c (htmlfindurl): Use unsigned char.
5457
5458         * version.c: Changed version to 1.4.3.
5459
5460 1996-11-25  Hrvoje Niksic  <hniksic@srce.hr>
5461
5462         * version.c: Released 1.4.2.
5463
5464         * ftp.c (getftp): Simplified assertion.
5465         (ftp_loop_internal): Remove symlink before downloading.
5466         (ftp_retrieve_list): Unlink the symlink name before attempting to
5467         create a symlink!
5468
5469         * options.h (struct options): Renamed print_server_response to
5470         server_response.
5471
5472         * ftp.c (rel_constr): Removed.
5473         (ftp_retrieve_list): Don't use it.
5474         (ftp_retrieve_list): Use opt.retr_symlinks.
5475
5476 1996-11-24  Hrvoje Niksic  <hniksic@srce.hr>
5477
5478         * main.c (main): New option retr_symlinks.
5479
5480         * url.c (convert_links): Print verbose message.
5481
5482 1996-11-24  Hrvoje Niksic  <hniksic@srce.hr>
5483
5484         * http.c (http_loop): Reset newloc in the beginning of function;
5485         would cause FMR in retrieve_url.
5486
5487 1996-11-23  Hrvoje Niksic  <hniksic@srce.hr>
5488
5489         * recur.c (convert_all_links): Find the URL of each HTML document,
5490         and feed it to get_urls_html; would bug out.
5491         (convert_all_links): Check for l2 instead of dl; removed dl.
5492
5493         * url.c (convert_links): Don't refer to freed newname.
5494
5495         * recur.c (recursive_retrieve): Add this_url to urls_downloaded.
5496
5497         * main.c (main): Print the OS_TYPE in the debug output, too.
5498
5499         * recur.c (recursive_retrieve): Check for opt.delete_after.
5500
5501         * main.c (main): New option delete-after.
5502
5503         * init.c (setval): Cleaned up.
5504
5505 1996-11-21  Hrvoje Niksic  <hniksic@srce.hr>
5506
5507         * Makefile.in (wget): Make `wget' the default target.
5508
5509         * ftp.c (ftp_loop_internal): Move noclobber checking out of the
5510         loop.
5511         (ftp_retrieve_list): Warn about non-matching sizes.
5512
5513         * http.c (http_loop): Made -nc non-dependent on opt.recursive.
5514
5515         * init.c (setnum): Renamed from setnuminf; New argument flags.
5516         (setval): Use it.
5517
5518         * main.c (main): Sorted the options.
5519         (main): New option --wait.
5520
5521 1996-11-21  Shawn McHorse  <riffraff@txdirect.net>
5522
5523         * html.c (htmlfindurl): Reset s->in_quote after getting out of
5524         quotes.
5525
5526 1996-11-20  Hrvoje Niksic  <hniksic@srce.hr>
5527
5528         * version.c: Changed version to 1.4.2.
5529
5530 1996-11-20  Hrvoje Niksic  <hniksic@srce.hr>
5531
5532         * version.c: Released 1.4.1.
5533
5534         * html.c (html_quote_string): New function.
5535         (ftp_index): Use it.
5536         (htmlfindurl): A more gentle ending debug message.
5537
5538         * ftp.c (ftp_loop): Check for opt.htmlify.
5539
5540         * init.c: New command htmlify.
5541
5542         * ftp.c (getftp): Nicer error messages, with `'-encapsulated
5543         strings.
5544         (ftp_loop): Print size of index.html.
5545
5546         * init.c (setval): Implement "styles".
5547
5548         * main.c (main): New option dotstyle.
5549
5550 1996-11-19  Hrvoje Niksic  <hniksic@srce.hr>
5551
5552         * ftp.c (getftp): Close the master socket in case of errors, after
5553         bindport().
5554
5555         * connect.c (bindport): Initialize msock to -1.
5556
5557         * ftp.c (getftp): Initialize dtsock to -1.
5558
5559         * connect.c (closeport): Don't close sock if sock == -1.
5560
5561 1996-11-18  Hrvoje Niksic  <hniksic@srce.hr>
5562
5563         * init.c (setnuminf): Nuked default value -- just leave unchanged.
5564         (setval): Don't send default values.
5565         (defaults): Use DEFAULT_TIMEOUT -- aaargh.
5566
5567         * options.h (struct options): Use long for dot_bytes.
5568
5569         * init.c (setquota): Renamed to setbytes.
5570         (setval): Use setbytes on DOTBYTES.
5571
5572 1996-11-17  Hrvoje Niksic  <hniksic@srce.hr>
5573
5574         * ftp.c (getftp): Initialize con->dltime.
5575
5576         * recur.c (recursive_retrieve): Use same_host instead of
5577         try_robots; simply load robots_txt whenever the host is changed.
5578         (recursive_retrieve): Free forbidden before calling parse_robots.
5579
5580 1996-11-16  Hrvoje Niksic  <hniksic@srce.hr>
5581
5582         * retr.c (show_progress): Use them.
5583
5584         * options.h (struct options): New options dot_bytes, dots_on_line
5585         and dot_spacing.
5586
5587 1996-11-16  Mark Boyns  <boyns@sdsu.edu>
5588
5589         * recur.c (recursive_retrieve): Retrieve directories regardless of
5590         acc/rej rules; check for empty u->file.
5591
5592 1996-11-14  Hrvoje Niksic  <hniksic@srce.hr>
5593
5594         * init.c (setval): Use it.
5595
5596         * utils.c (merge_vecs): New function.
5597
5598         * init.c (setval): Reset the list-type functions when encountering
5599         "".
5600
5601 1996-11-14  Shawn McHorse  <riffraff@txdirect.net>
5602
5603         * recur.c (recursive_retrieve): Use base_url instead of this_url
5604         for no_parent.
5605
5606 1996-11-14  Shawn McHorse  <riffraff@txdirect.net>
5607
5608         * html.c (htmlfindurl): Reset s->in_quote after exiting the quote.
5609
5610 1996-11-13  Hrvoje Niksic  <hniksic@srce.hr>
5611
5612         * utils.c (sepstring): Rewrote; don't use strtok.
5613
5614         * recur.c (recursive_retrieve): Enter assorted this_url to slist
5615         when running the first time.
5616         (retrieve_robots): Warn to ignore errors when robots are loaded.
5617
5618         * utils.c (load_file): Moved from url.c.
5619
5620         * http.c: Made static variables const too in h* functions.
5621
5622         * main.c (main): Renamed --continue-ftp to --continue.
5623
5624         * recur.c (recursive_retrieve): Use it.
5625
5626         * utils.c (frontcmp): New function.
5627
5628         * url.c (accdir): New function.
5629
5630         * html.c (htmlfindurl): Recognize <area href=...>.
5631
5632         * ftp.c (ftp_retrieve_dirs): Implemented opt.includes.
5633
5634         * init.c (setval): Free the existing opt.excludes and
5635         opt.includes, if available.
5636
5637         * main.c (main): New option -I.
5638
5639 1996-11-12  Hrvoje Niksic  <hniksic@srce.hr>
5640
5641         * ftp.c (ftp_retrieve_glob): Do not weed out directories.
5642
5643         * version.c: Changed version to 1.4.1.
5644
5645 1996-11-11  Hrvoje Niksic  <hniksic@srce.hr>
5646
5647         * version.c: Released 1.4.0.
5648
5649 1996-11-10  Hrvoje Niksic  <hniksic@srce.hr>
5650
5651         * main.c (main): Free com and val after parse_line.
5652         (printhelp): Reorder the listing.
5653
5654         * http.c: More robust header parsing.
5655
5656         * http.c: Allow any number of spaces, or no spaces, precede ':'.
5657         (hskip_lws): New function.
5658         (haccepts_bytes): New function.
5659         (gethttp): Use it.
5660
5661         * init.c (setval): Check header sanity.
5662         (setval): Allow resetting of headers.
5663
5664 1996-11-10  Hrvoje Niksic  <hniksic@srce.hr>
5665
5666         * http.c (http_loop): Don't use has_wildcards.
5667
5668         * http.c (gethttp): Free all_headers -- would leak.
5669
5670         * recur.c (recursive_retrieve): Initialize depth to 1 instead of
5671         0 -- this fixes a long-standing bug in -rl.
5672
5673 1996-11-09  Hrvoje Niksic  <hniksic@srce.hr>
5674
5675         * ftp.c: Use -1 as "impossible" value for con->fd.
5676
5677         * url.h (URL_SEPARATOR): Don't treat `*' and `+' as separators.
5678
5679         * init.c (parse_line): Use isalpha.
5680
5681         * ftp-unix.c: Use HAVE_UNISTD_H.
5682
5683         * mtch.c (has_wildcards): Don't match \.
5684
5685         * http.c (http_loop): Warn on HTTP wildcard usage.
5686
5687 1996-11-08  Hrvoje Niksic  <hniksic@srce.hr>
5688
5689         * url.c (url_filename): Do not create numbered suffixes if
5690         opt.noclobber -- would bug out on -nc.
5691
5692 1996-11-07  Hrvoje Niksic  <hniksic@srce.hr>
5693
5694         * recur.c (parse_robots): Don't chuck out the commands without
5695         arguments (`Disallow:<empty>' didn't work).
5696         (parse_robots): Compare versions lowercase.
5697         (parse_robots): Match on base_version, not version_string!
5698         (parse_robots): Handle comments properly.
5699         (parse_robots): Match versions in a sane way.
5700
5701         * init.c: Print nicer error messages.
5702
5703         * version.c: Changed version to 1.4.0.
5704
5705 1996-11-06  Hrvoje Niksic  <hniksic@srce.hr>
5706
5707         * version.c: Released 1.4.0-test2.
5708
5709         * init.c (run_wgetrc): Close fp.
5710
5711         * ftp.c (ftp_retrieve_dirs): Allocate the correct length for
5712         u->dir.
5713
5714 1996-11-06  Hrvoje Niksic  <hniksic@srce.hr>
5715
5716         * init.c (setquota): Allow inf as quota specification.
5717
5718 1996-11-05  Hrvoje Niksic  <hniksic@srce.hr>
5719
5720         * ftp.c (ftp_retrieve_dirs): Return QUOTEXC if quota exceeded.
5721         (ftp_retrieve_glob): Return QUOTEXC on quota exceeded.
5722
5723         * main.c (main): Check for quota by comparison with downloaded
5724         stuff, not from status.
5725
5726         * connect.c (select_fd): Should compile on HPUX without warnings now.
5727
5728         * ftp.c (ftp_get_listing): Check whether ftp_loop_internal
5729         returned RETROK.
5730
5731 1996-11-04  Hrvoje Niksic  <hniksic@srce.hr>
5732
5733         * ftp.c (ftp_retrieve_glob): Print the pattern nicely.
5734         (getftp): Return FTPRETRINT on control connection error.
5735
5736         * html.c (htmlfindurl): Recognize <embed src=...> and
5737         <bgsound src=...>.
5738         (ftp_index): Handle username and password correctly.
5739
5740         * main.c (main): Made `-np' a synonim for --no-parent.
5741
5742 1996-11-02  Hrvoje Niksic  <hniksic@srce.hr>
5743
5744         * ftp.c (ftp_loop): Check for opt.ftp_glob too before calling
5745         ftp_retrieve_glob.
5746
5747         * version.c: Changed version to 1.4.0-test2.
5748
5749 1996-11-02  Hrvoje Niksic  <hniksic@srce.hr>
5750
5751         * version.c: Released 1.4.0-test1.
5752
5753         * url.c (str_url): Don't use sprintf when creating %2F-prefixed
5754         directory.
5755         (convert_links): Removed definition of make_backup.
5756
5757         * http.h: Removed definition of MAX_ERROR_LENGTH.
5758
5759         * host.c (ftp_getaddress): Check for "(none)" domains.
5760
5761         * ftp.c (ftp_retrieve_dirs): Docfix.
5762
5763         * http.c (gethttp): Use ou->referer instead of u->referer.
5764
5765         * retr.c (retrieve_url): Reset u to avoid freeing pointers twice;
5766         this was known to cause coredumps on Linux.
5767
5768         * html.c (ftp_index): Cast the argument to local_time to time_t *.
5769
5770 1996-11-01  Hrvoje Niksic  <hniksic@srce.hr>
5771
5772         * connect.c (select_fd): Use exceptfds -- once and for all.
5773
5774         * retr.c (retrieve_from_file): Free filename after
5775         recursive_retrieve.
5776         (retrieve_from_file): Send RFIRST_TIME to recursive_retrieve on
5777         first-time retrieval.
5778         (retrieve_from_file): Return uerr_t; new argument, count.
5779         (retrieve_from_file): Break on QUOTEXC.
5780
5781         * init.c (setquota): Fixed a bug that caused rejection of
5782         non-postfixed values..
5783
5784 1996-10-30  Hrvoje Niksic  <hniksic@srce.hr>
5785
5786         * version.c: Changed name to wget.
5787
5788         * connect.c (iread): Smarter use of select.
5789         (select_fd): Set errno on timeout.  If not timeout, return 1
5790         instead of 0.
5791
5792 1996-10-29  Hrvoje Niksic  <hniksic@srce.hr>
5793
5794         * ftp.c (ftp_loop_internal): Don't use con->cmd before
5795         establishing it.
5796
5797 1996-10-26  Hrvoje Niksic  <hniksic@srce.hr>
5798
5799         * http.c (gethttp): Send correct referer when using proxy.
5800         (gethttp): Use struct urlinfo ou to access the relevant data; send
5801         correct authorization in all cases.
5802
5803         * host.c (same_host): Use skip_uname to skip username and
5804         password.
5805
5806         * url.c (skip_uname): New function.
5807         (parseurl): Use it.
5808
5809         * host.c (same_host): Do not assume HTTP -- same_host should now
5810         be totally foolproof.
5811
5812         * url.c (skip_proto): New function.
5813         (parse_uname): Use it.
5814
5815         * http.c (gethttp): Create local user and passwd from what is
5816         given.
5817
5818         * url.c (parseurl): Check for HTTP username and password too.
5819
5820 1996-10-25  Hrvoje Niksic  <hniksic@srce.hr>
5821
5822         * config.h.in: Removed #define gethostbyname R...
5823
5824 1996-10-22  Hrvoje Niksic  <hniksic@srce.hr>
5825
5826         * version.c: Changed version to 1.4.0-test1.
5827
5828 1996-10-21  Hrvoje Niksic  <hniksic@srce.hr>
5829
5830         * version.c: "Released" 1.4b29.
5831
5832         * recur.c (recursive_retrieve): Check for no_parent.
5833
5834         * init.c (setval): Option update.
5835
5836         * main.c (main): New option no-parent.
5837
5838         * options.h (struct options): New variable no_parent.
5839
5840         * recur.c (recursive_retrieve): Only files are checked for
5841         opt.accepts and opt.rejects.
5842         (recursive_retrieve): Check directories for opt.excludes.
5843         (recursive_retrieve): Make the dir absolute when checking
5844         opt.excludes.
5845
5846         * html.c (htmlfindurl): Recognize <applet code=...> and <script
5847         src=...>
5848
5849 1996-10-18  Hrvoje Niksic  <hniksic@srce.hr>
5850
5851         * ftp.c (getftp): Do not line-break assert entries at all.
5852         (ftp_retrieve_dirs): docfix.
5853
5854         * connect.c (select_fd): Use fd + 1 as nfds.
5855
5856         * version.c: Changed version to 1.4b29.
5857
5858 1996-10-18  Hrvoje Niksic  <hniksic@srce.hr>
5859
5860         * version.c: "Released" 1.4b28.
5861
5862         * ftp.c (ftp_loop_internal): Check whether f->size == len and
5863         don't continue the loop if it is.
5864         (ftp_get_listing): Remove list_filename on unsuccesful loop.
5865
5866 1996-10-17  Hrvoje Niksic  <hniksic@srce.hr>
5867
5868         * ftp.c (ftp_loop_internal): Use strcpy to initialize tmp.
5869         (getftp): Do not use multiline assert.
5870
5871         * http.c (hparsestatline): Use mjr and mnr instead of major and
5872         minor, which don't compile on Ultrix.
5873         (http_loop): Use strcpy() to initialize tmp.
5874
5875         * all: Geturl -> Fetch
5876
5877 1996-10-17  Hrvoje Niksic  <hniksic@srce.hr>
5878
5879         * recur.c (parse_robots): Fixed an off-by-one bug when looking for
5880         ':'.
5881
5882         * html.c (htmlfindurl): Fixed several possible off-by-one bugs by
5883         moving `bufsize &&' to the beginning of each check in for-loops.
5884
5885         * recur.c (parse_robots): Close fp on exit.
5886
5887         * url.c (mymkdir): Check for each directory before creating.
5888
5889 1996-10-16  Hrvoje Niksic  <hniksic@srce.hr>
5890
5891         * version.c: Changed version to 1.4b28.
5892
5893 1996-10-16  Hrvoje Niksic  <hniksic@srce.hr>
5894
5895         * version.c: "Released" 1.4b27.
5896
5897         * init.c (parse_line): Use isspace.
5898         (parse_line): Free *com on all errors.
5899
5900         * ftp.c (ftp_loop): Change FTPOK to RETROK before exiting.
5901         (delelement): Use next instead of f->next and prev instead of
5902         f->prev.
5903         (delelement): Free the members of the deleted element.
5904
5905         * http.c (http_loop): Do not return RETROK on code != 20x.
5906
5907         * init.c (cleanup): Free opt.user_header.
5908         (cleanup): Free opt.domains.
5909
5910         * url.c (freelists): Moved to cleanup().
5911
5912         * http.c (hparsestatline): Docfix.
5913
5914         * main.c (main): Return with error status on unsuccesful
5915         retrieval.
5916
5917         * init.c (setval): Do not remove listing when mirroring.
5918
5919         * url.c (url_filename): Use opt.fileprefix.
5920
5921         * ftp.c (ftp_get_listing): Use url_filename to get filename for
5922         .listing.
5923
5924         * main.c (main): New option: -rn.
5925
5926 1996-10-15  Hrvoje Niksic  <hniksic@srce.hr>
5927
5928         * Makefile.in (RM): Added RM = rm -f.
5929
5930         * host.c (clean_hosts): New function.
5931         (free_hlist): Just free the list, no reset.
5932
5933         * version.c: Changed version to 1.4b27.
5934
5935 1996-10-13  Hrvoje Niksic  <hniksic@srce.hr>
5936
5937         * version.c: "Released" 1.4b26.
5938
5939         * retr.c (retrieve_from_file): If call get_urls_html with
5940         opt.spider to make it silent in spider mode.
5941
5942         * url.c (str_url): Use CLEANDUP instead of URL_CLEANSE.
5943
5944         * url.h (CLEANDUP): New macro.
5945
5946         * http.c (gethttp): Fixed a bug that freed location only when it
5947         was NULL.
5948
5949         * retr.c (retrieve_url): Free url if it will not be stored,
5950         i.e. newloc is NULL.
5951
5952         * html.c (htmlfindurl): Handle exiting from quotes correctly; the
5953         old version would bug out on <a href="x#a"href="y">.
5954
5955         * html.h (state_t): New member in_quote.
5956
5957         * html.c (htmlfindurl): Free s->attr at the beginning of
5958         attr-loop.
5959
5960         * recur.c (recursive_retrieve): Recognize RCLEANUP.
5961         (tried_robots): Make hosts a global variable.
5962         (recursive_retrieve): Free constr after URL host optimization.
5963         (tried_robots): Free urlinfo before exiting.
5964
5965         * utils.c (free_slist): New function.
5966
5967         * recur.c (recursive_retrieve): Use flags to add cleanup
5968         possibility.
5969
5970         * main.c (main): Free filename after recursive_retrieve.
5971
5972         * http.c (gethttp): Store successful responses too.
5973
5974 1996-10-12  Hrvoje Niksic  <hniksic@srce.hr>
5975
5976         * all: Constified the whole source.  This required some minor
5977         changes in many functions in url.c, possibly introducing bugs -- I
5978         hope not.
5979
5980         * ftp-basic.c: Removed last_respline.
5981
5982         * http.c (gethttp): Free type.
5983
5984         * host.c (same_host): Free real1 and real2.
5985
5986         * main.c (main): New option --spider.
5987
5988         * retr.c (get_contents): Don't reset errno.
5989
5990         * main.c (main): Sorted the options.
5991
5992         * connect.c (iread): Set errno to ETIMEDOUT only if it was left
5993         uninitialized by select().
5994
5995         * http.c (http_loop): Print the time when the connection is
5996         closed.
5997         (gethttp): Debug-print the HTTP request.
5998
5999 1996-10-11  Hrvoje Niksic  <hniksic@srce.hr>
6000
6001         * connect.c (iread): Do not try reading after timeout.
6002
6003         * main.c (main): Would bug out on -T.
6004
6005         * connect.c (select_fd): Do not use exceptfds.
6006         (iread): Set ETIMEDOUT on select_fd <= 0.
6007
6008         * version.c: Changed version to 1.4b26.
6009
6010 1996-10-10  Hrvoje Niksic  <hniksic@srce.hr>
6011
6012         * version.c: "Released" 1.4b25.
6013
6014         * ftp-unix.c (ftp_parse_unix_ls): Ignore lines without file name
6015         or link name.
6016
6017         * http.c (gethttp): Add errcode to struct hstat.
6018         (http_loop): Use it.
6019
6020         * url.c (no_proxy_match): Simplify using char** for no_proxy.
6021
6022         * options.h (struct options): Make opt.no_proxy a vector.
6023
6024         * utils.c (sepstring): Use !*s instead of !strlen(s).
6025
6026         * init.c (setval): Set opt.maxreclevel to 0 on --mirror.
6027         (getperms): Use ISODIGIT instead of isdigit.
6028
6029         * ftp.c (getftp): Print time.
6030
6031         * main.c (main): Use legible output of downloaded quantity.
6032
6033         * ftp.c (getftp): Use elapsed_time().
6034         (ftp_loop_internal): Use rate().
6035
6036         * http.c (http_loop): Add download ratio output; Use rate().
6037
6038         * utils.c (rate): New function.
6039
6040 1996-10-09  Hrvoje Niksic  <hniksic@srce.hr>
6041
6042         * http.c (http_loop): Use timer.
6043
6044         * ftp.c: Split to ftp-basic.c and ftp.c
6045
6046         * utils.c (reset_timer): New function.
6047         (elapsed_time): New function.
6048
6049         * retr.c (show_progress): Make bytes_in_line and offs long; should
6050         work on 16-bit machines.
6051
6052 1996-10-08  Hrvoje Niksic  <hniksic@srce.hr>
6053
6054         * url.c (in_acclist): New argument backward.
6055
6056         * ftp.c (ftp_retrieve_glob): Use acceptable() to determine whether
6057         a file should be retrieved according to suffix.
6058         (ftp_get_listing): Check the return value of unlink; Do not call
6059         ftp_retrieve_dirs if depth reached maxreclevel.
6060         (ftp_retrieve_dirs): Check whether the directory is in
6061         exclude-list.
6062
6063         * main.c (main): Print the version number at the beginning of
6064         DEBUG output.
6065         (main): Use strrchr when creating exec_name.
6066
6067         * ftp.c (ftp_retrieve_glob): Do not close control connection.
6068
6069         * version.c: Changed version to 1.4b25.
6070
6071 1996-10-07  Hrvoje Niksic  <hniksic@srce.hr>
6072
6073         * version.c: "Released" 1.4b24.
6074
6075         * Makefile.in: Rewrite.
6076
6077         * ftp.c (ftp_loop_internal): Likewise.
6078
6079         * retr.c (time_str): Check for failed time().
6080
6081         * html.c (htmlfindurl): Recognize <fig src> and <overlay src> from
6082         HTML3.0.
6083
6084         * retr.c (time_str): Return time_t *.
6085
6086         * connect.c (bindport): Close msock on unsuccesful bind.
6087         (bindport): The same for getsockname and listen.
6088
6089         * retr.c (retrieve_url): Allow any number of retries on
6090         proxy.
6091
6092         * http.c (gethttp): Do not treat errno == 0 as timeout.
6093         (http_loop): Likewise.
6094         (http_loop): Cosmetic changes.
6095
6096         * connect.c (iread): Set errno to ETIMEDOUT in case of timeout.
6097
6098         * retr.c (get_contents): Reset errno.
6099
6100         * ftp.c (getftp): Minor fixes.
6101
6102 1996-10-06  Hrvoje Niksic  <hniksic@srce.hr>
6103
6104         * http.c: Do not use backups.
6105
6106         * geturl.1 (WARNING): Warn that man-page could be obsolete.
6107
6108         * getopt.c (getopt_long): Moved to getopt.c
6109
6110         * geturl.texi: Enhanced.
6111
6112         * main.c (main): Use it.
6113
6114         * recur.c (convert_all_links): New function.
6115
6116         * utils.c (add_slist): New argument flags.
6117
6118         * recur.c (recursive_retrieve): Update a list of downloaded URLs.
6119         (parse_robots): Do not chuck out empty value fields.
6120         (parse_robots): Make yourself welcome on empty Disallow.
6121
6122         * version.c: Changed version to 1.4b24.
6123
6124 1996-10-06  Hrvoje Niksic  <hniksic@srce.hr>
6125
6126         * version.c: "Released" 1.4b23.
6127
6128         * ftp.c (ftp_loop_internal): Get the time after getftp.
6129
6130         * Makefile.in (install.info): New target.
6131         (install): Use it.
6132
6133         * http.c (http_loop): Fix output when doing -O.
6134
6135 1996-10-05  Hrvoje Niksic  <hniksic@srce.hr>
6136
6137         * geturl.texi: New file.
6138
6139         * main.c (main): Do not print the warnings and download summary if
6140         opt.quiet is set.
6141
6142         * version.c: Changed version to 1.4b23.
6143
6144 1996-10-05  Hrvoje Niksic  <hniksic@srce.hr>
6145
6146         * "Released" 1.4b22.
6147
6148         * atotm.c (atotm): Use True and False instead of TRUE and FALSE,
6149         to avoid redefinition warnings.
6150
6151         * host.c (store_hostaddress): Use memcpy() to copy the address
6152         returned by inet_addr.
6153
6154         * version.c: Changed version to 1.4b22.
6155
6156 1996-10-04  Hrvoje Niksic  <hniksic@srce.hr>
6157
6158         * version.c: "Released" 1.4b21.
6159
6160         * ftp-unix.c (ftp_parse_ls): Renamed to ftp_parse_unix_ls.
6161
6162         * ftp.c (ftp_port): Use conaddr.
6163         (getftp): Print the file length.
6164         (ftp_retrieve_list): Check the stamps of plain files only.
6165
6166         * connect.c (closeport): Do not call shutdown().
6167         (conaddr): New function.
6168
6169         * html.c (ftp_index): Made it dfp-aware.
6170
6171         * init.c (cleanup): New name of freemem. Close opt.dfp.
6172
6173         * ftp.c (getftp): Use opt.dfp if it is set.
6174
6175         * ftp-unix.c (ftp_parse_ls): Recognize time in h:mm format.
6176
6177         * ftp.c (ftp_retrieve_dirs): Fixed a bug that caused incorrect
6178         CWDs to be sent with recursive FTP retrievals.
6179
6180 1996-10-03  Hrvoje Niksic  <hniksic@srce.hr>
6181
6182         * recur.c (parse_robots): Made it more compliant with "official"
6183         specifications.
6184
6185         * http.c: New function.
6186
6187         * ftp-unix.c (ftp_parse_ls): Added better debug output.
6188
6189         * ftp.c (getftp): Print out the LIST in case of
6190         opt.print_server_response.
6191
6192         * version.c: Changed version to 1.4b21.
6193
6194 1996-10-01  Hrvoje Niksic  <hniksic@srce.hr>
6195
6196         * version.c: "Released" 1.4b20.
6197
6198         * README: Update.
6199
6200         * http.c (gethttp): Preset lengths of various headers instead of
6201         calculating them dynamically.
6202         (gethttp): Check for 206 partial contents.
6203
6204 1996-09-30  Hrvoje Niksic  <hniksic@srce.hr>
6205
6206         * configure.in: Set SYSTEM_GETURLRC to $libdir/geturlrc
6207
6208         * http.c (gethttp): Send the port number in the Host: header.
6209
6210 1996-09-29  Hrvoje Niksic  <hniksic@srce.hr>
6211
6212         * http.c (gethttp): Send host: header.
6213         (gethttp): Add the possibility of user-defined headers.
6214         (gethttp): Move decision about pragma: no-cache to http_loop,
6215         where it belongs.
6216         (gethttp): Pass a struct instead of enormous argument list.
6217         (http_loop): Use a new, fancier display format.
6218         (ftp_loop): Likewise.
6219
6220         * main.c: (hangup): Turn off buffering of the new log file.
6221
6222         * install-sh: Likewise.
6223
6224         * config.sub: Replace with the one in autoconf-2.10
6225
6226         * geturl.1: Update.
6227
6228         * init.c: New options httpuser and httppasswd.
6229
6230         * http.c: (base64_encode_line): New function.
6231         (gethttp): Send authentication.
6232
6233         * connect.c (make_connection): Use store_hostaddress.
6234
6235 1996-09-28  Hrvoje Niksic  <hniksic@srce.hr>
6236
6237         * host.c (store_hostaddress): New function.
6238
6239         * NEWS: Update.
6240
6241         * http.c (hgetrange): New function.
6242         (gethttp): Use ranges.
6243
6244         * utils.c (numdigit): Accept long instead of int.
6245
6246         * http.c (http_loop): Add restart capabilities.
6247
6248         * ftp.c (ftp_retrieve_glob): Fixed a bug that could cause matchres
6249         being used uninitialized.
6250         (ftp_retrieve_list): Similar fix.
6251
6252         * host.c (add_hlist): Fixed a bug that could cause cmp being used
6253         uninitialized.
6254
6255         * url.c (construct_relative): New function.
6256
6257         * recur.c (recursive_retrieve): Use it.
6258
6259         * retr.c (convert_links): New function.
6260
6261 1996-09-27  Hrvoje Niksic  <hniksic@srce.hr>
6262
6263         * url.c (free_urlpos): New function.
6264
6265         * recur.c (recursive_retrieve): Adapt.
6266
6267         * url.c (get_urls_html): Return a linked list instead of a vector.
6268
6269         * url.c (get_urls_file): Return a linked list instead of a vector.
6270
6271         * geturl.1: Update.
6272
6273         * http.c (gethttp): Implement it.
6274
6275         * init.c (setval): New option: SAVEHEADERS
6276
6277         * ftp.c (ftp_loop_internal): Do not set restval if listing is to
6278         be retrieved. Lack of this test caused bugs when the connection
6279         was lost during listing.
6280
6281         * retr.c (retrieve_url): Fixed a bug that caused
6282         coredumps. *newloc is now reset by default.
6283         (retrieve_url): Lift the twenty-tries limit on proxies.
6284
6285         * version.c: Changed version to 1.4b20.
6286
6287 1996-09-20  Hrvoje Niksic  <hniksic@srce.hr>
6288
6289         * version.c: "Released" 1.4b19.
6290
6291 1996-09-19  Hrvoje Niksic  <hniksic@srce.hr>
6292
6293         * ftp.c (ftp_loop_internal): Renamed from ftp_1fl_loop.
6294         (getftp): Changed prototype to accept ccon *.
6295
6296 1996-09-17  Hrvoje Niksic  <hniksic@srce.hr>
6297
6298         * ftp.c (ftp_retrieve_list): Fixed a bug that caused setting
6299         incorrect values to files pointed to by symbolic links.
6300         (ftp_1fl_loop): Do not count listings among the downloaded URL-s.
6301
6302 1996-09-16  Hrvoje Niksic  <hniksic@srce.hr>
6303
6304         * url.c (mkstruct): Do not prepend "./" in front of a pathname.
6305
6306         * main.c (main): New option: --user-agent.
6307
6308         * geturl.1: Ditto.
6309
6310         * init.h: Ditto.
6311
6312         * init.c (setval): Ditto.
6313
6314         * main.c (main): Rename "server-headers" to "server-response".
6315
6316         * ftp-unix.c (ftp_parse_ls): Check for asterisks at the end of
6317         executables in 'ls -F' listings.
6318
6319 1996-09-15  Hrvoje Niksic  <hniksic@srce.hr>
6320
6321         * url.c (parseurl): Remove realloc() and sprintf().
6322         (str_url): Get rid of sprintf().
6323
6324         * recur.c (recursive_retrieve): Enable FTP recursion through proxy
6325         servers.
6326
6327         * url.h (URL_CLEANSE): Made it else-resistant.
6328         (USE_PROXY): New macro.
6329
6330 1996-09-14  Hrvoje Niksic  <hniksic@srce.hr>
6331
6332         * NEWS: Update.
6333
6334         * version.c: Changed version to 1.4b19.
6335
6336 1996-09-14  Hrvoje Niksic  <hniksic@srce.hr>
6337
6338         * version.c: "Released" 1.4b18.
6339
6340         * url.c: Made it reallocate space exponentially.
6341
6342 1996-09-14  Drazen Kacar  <dave@fly.cc.fer.hr>
6343
6344         * html.c (htmlfindurl): Added <frame src> and <iframe src> among
6345         the list of stuff to fetch.
6346
6347 1996-09-13  Hrvoje Niksic  <hniksic@srce.hr>
6348
6349         * url.c (get_urls_html): Fixed a bug that caused SIGSEGV's with
6350         -Fi.
6351
6352         * html.c (htmlfindurl): Rewrite.
6353
6354         * http.c (gethttp): Use opt.proxy_cache.
6355
6356         * main.c (main): Added --cache option.
6357
6358         * ftp.c (ftp_response): Print server response if opt.print_server
6359         response is set.
6360         (getftp): Print newlines after each request if the server response
6361         is to be printed.
6362         (ftp_response): Copy the last response line to last_respline.
6363
6364         * http.c (gethttp): Add Pragma: nocache for retried
6365         proxy-retrievals.
6366
6367         * ftp.c (getftp): Use it.
6368
6369         * retr.c (buf_discard): New function.
6370
6371         * ftp.c (ftp_response): Use buf_readchar().
6372         (getftp): Flush the control connection buffer before calling
6373         get_contents().
6374
6375         * retr.c (buf_readchar): New function.
6376         (buf_flush): New function.
6377         (get_contents): Use buf_readchar() instead of read(x, x, 1).
6378         (get_contents): Use buf_flush.
6379
6380 1996-09-12  Hrvoje Niksic  <hniksic@srce.hr>
6381
6382         * ftp.c: Incorporate changes to ftp_response.
6383
6384         * ftp.c (ftp_response): Allocate the server response dynamically,
6385         as in read_whole_line and fetch_next_header.
6386
6387         * utils.c (read_whole_line): Fixed a bug that prevented reading
6388         the last line if it is not \n-terminated. Also fixed a possible
6389         memory overflow.
6390
6391         * http.c (fetch_next_header): Return malloc-ed string as large as
6392         needed.
6393         (gethttp): Use new fetch_next_header.
6394
6395 1996-09-12  Hrvoje Niksic  <hniksic@srce.hr>
6396
6397         * http.c (hgetlen): Compute the header length the first time only.
6398         (hgettype): Ditto.
6399         (hgetlocation): Ditto.
6400         (hgetmodified): Ditto.
6401
6402 1996-09-11  Hrvoje Niksic  <hniksic@srce.hr>
6403
6404         * sample.geturlrc: Update.
6405
6406 1996-09-10  Hrvoje Niksic  <hniksic@srce.hr>
6407
6408         * http.c (http_loop): Ditto.
6409
6410         * ftp.c (getftp): Open the output file as binary.
6411
6412         * version.c: Changed version to 1.4b18.
6413
6414 1996-09-10  Hrvoje Niksic  <hniksic@srce.hr>
6415
6416         * version.c: "Released" 1.4b17.
6417
6418         * ftp-unix.c (ftp_parse_ls): If unable to open file, return NULL
6419         instead of failed assertion.
6420
6421 1996-09-09  Hrvoje Niksic  <hniksic@srce.hr>
6422
6423         * ftp.c (ftp_get_listing): Add a numbered suffix to LIST_FILENAME
6424         if a file of that name already exists.
6425
6426 1996-09-05  Hrvoje Niksic  <hniksic@srce.hr>
6427
6428         * ftp.c (ftp_1fl_loop): Handler FTPPORTERR and FOPENERR correctly.
6429
6430         * config.h.in: Define gethostbyname as Rgethostbyname when using
6431         Socks.
6432
6433         * configure.in: Check for -lresolv if using Socks.
6434
6435         * version.c: Changed version to 1.4b17.
6436
6437 1996-07-15  Hrvoje Niksic  <hniksic@srce.hr>
6438
6439         * version.c: "Released" 1.4b16.
6440
6441         * http.c (gethttp): More intelligent check for first line of HTTP
6442         response.
6443         (gethttp): Would bug out on time-stamping.
6444
6445         * version.c: Changed version to 1.4b16.
6446
6447 1996-07-11  Hrvoje Niksic  <hniksic@srce.hr>
6448
6449         * version.c: Released 1.4b15.
6450
6451         * http.c (http_loop): Print \n after the loop entry, not before.
6452
6453         * url.c (url_filename): Use ISDOT.
6454
6455         * url.h (ISDOT): New macro.
6456
6457         * recur.c (recursive_retrieve): Change only opt.recursive for
6458         following FTP.
6459
6460 1996-07-11  Antonio Rosella <antonio.rosella@agip.it>
6461
6462         * socks/geturl.cgi: Fixed version No.
6463
6464         * socks/download-netscape.html: Ditto.
6465
6466         * socks/download.html: Changed socks.html to download.html.
6467
6468 1996-07-11  Hrvoje Niksic  <hniksic@srce.hr>
6469
6470         * url.c (url_filename): Check for opt.dirstruct instead for
6471         opt.recursive && opt.dirstruct.
6472
6473         * init.c (defaults): Ditto.
6474         (defaults): Reset dirstruct by default.
6475         (setval): Set opt.dirstruct whenever setting recursive.
6476
6477         * init.h: Removed FORCEDIRHIER.
6478
6479         * INSTALL: Added -L to socks-description.
6480
6481         * version.c: Changed version to 1.4b15.
6482
6483 1996-07-10  Hrvoje Niksic  <hniksic@srce.hr>
6484
6485         * version.c: "Released" 1.4b14.
6486
6487         * geturl.1: Update AUTHOR to include Rosella as contributor.
6488
6489         * NEWS: Update.
6490
6491         * socks/geturl.cgi: Simplified command creation, nuked <blink>.
6492
6493         * socks/geturl.cgi: Wrap nutscape extensions within if $netscape.
6494         (cal_time): Fix == to eq.
6495
6496         * socks/geturl.cgi: GPL-ized with permission of A. Rosella.
6497
6498         * geturl.1 (hostname): Moved URL CONVENTIONS to the beginning.
6499
6500         * Makefile.in: Use @VERSION@.
6501
6502         * configure.in: Check version from version.c.
6503
6504         * socks/geturl.cgi: Changed /pub/bin/perl to /usr/bin/perl.
6505
6506         * socks/download.html: Created from download-netscape.html, made
6507         HTML-2.0 compliant.
6508
6509         * recur.c (recursive_retrieve): Set opt.force_dir_hier when
6510         following FTP links from recursions.
6511
6512 1996-07-09  Hrvoje Niksic  <hniksic@srce.hr>
6513
6514         * url.c (mymkdir): Fixed a bug that prevented mymkdir() to create
6515         absolute directories correctly.
6516
6517         * version.c: Changed version to 1.4b14.
6518
6519 1996-07-09  Hrvoje Niksic  <hniksic@srce.hr>
6520
6521         * version.c: "Released" 1.4b13.
6522
6523         * url.c (make_backup): New function.
6524
6525         * http.c (http_loop): Make a backup copy of the local file (using
6526         rename(2)) before opening it.
6527
6528         * main.c (main): Added --backups.
6529
6530         * host.c (ftp_getaddress): Bail out on failed mycuserid().
6531         (ftp_getaddress): Check for leading dot on MY_DOMAIN.
6532         (ftp_getaddress): Check for empty, null or (null) domain.
6533
6534         * url.c (get_urls_html): If this_url is NULL, the base must have a
6535         protocol.
6536         (parseurl): Use has_proto.
6537
6538         * retr.c (retrieve_url): Warn when proxy is used with more than 20
6539         retries.
6540
6541         * url.c (mkstruct): Create the directory (calling mymkdir()) only
6542         if it is not already there.
6543         (has_proto): New function.
6544         (get_urls_html): Eliminate the remaining call to findurl -- use
6545         has_proto.
6546
6547         * geturl.1: Ditto.
6548
6549         * main.c: Change -X to -x.
6550
6551         * url.c (url_filename): Simplify creation of filename if
6552         prefix_files is set.
6553         (url_filename): Simplify everything. And I do mean *everything*.
6554         (mkstruct): Add dir_prefix before hostname.
6555         (path_simplify): Fixed a bug that caused writing outside the path
6556         string in case of "." and ".." path strings.
6557
6558 1996-07-06  Hrvoje Niksic  <hniksic@srce.hr>
6559
6560         * init.c: Added --mirror.
6561
6562         * main.c (main): Added -X to force saving of directory hierarchy.
6563
6564         * ftp.c (ftp_retrieve_list): Added recursion depth counter.
6565         (ftp_retrieve_list): Check whether quota is exceeded.
6566
6567         * url.c (get_urls_html): Skip leading blanks for absolute URIs.
6568
6569         * http.c (gethttp): Use referer if present.
6570
6571         * recur.c (recursive_retrieve): Set u->referer before calling
6572         retrieve_url.
6573
6574         * url.c (newurl): Use memset to nullify the struct members.
6575         (freeurl): Free the referer field too.
6576
6577         * url.h: Added referer to urlinfo.
6578
6579         * geturl.1: Updated the manual to document some of the new features.
6580
6581         * utils.c (numdigit): Moved from url.c.
6582
6583         * README: Rewritten.
6584
6585         * config.h.in: Add the support for socks.
6586
6587         * configure.in: Add the support for socks.
6588
6589         * url.c (url_filename): If the dir_prefix is ".", work with just
6590         the file name.
6591         (url_filename): Do not look for .n extensions if timestamping if
6592         turned on.
6593
6594         * retr.c (show_progress): Skip the over-abundant restval data, and
6595         print the rest of it with ',' instead of '.'.
6596
6597 1996-07-05  Hrvoje Niksic  <hniksic@srce.hr>
6598
6599         * retr.c (show_progress): Changed second arg. to long (as it
6600         should be).
6601         (show_progress): Moved to retr.c.
6602         (get_contents): Moved to retr.c.
6603
6604         * version.c: Change version to 1.4b13.
6605
6606 1996-07-05  Hrvoje Lacko <hlacko@fly.cc.fer.hr>
6607
6608         * url.c (in_acclist): Would return after the first suffix.
6609
6610 1996-07-04  Hrvoje Niksic  <hniksic@srce.hr>
6611
6612         * version.c: "Released" 1.4b12.
6613
6614         * url.c (path_simplify): More kludgifications.
6615         (get_urls_html): Use new parameters for htmlfindurl.
6616
6617         * html.c: Removed memorizing "parser states", since the new
6618         organization does not require them.
6619
6620         * init.c (run_geturlrc): Use read_whole_line.
6621
6622         * ftp-unix.c (ftp_parse_ls): Use read_whole_line.
6623
6624         * recur.c (parse_robots): Use read_whole_line.
6625
6626         * utils.c (read_whole_line): New function.
6627
6628         * recur.c (tried_robots): Use add_slist/in_slist, *much* cleaner.
6629
6630         * host.c (ngethostbyname): Call inet_addr just once. Yet to be
6631         tested on OSF and Ultrix.
6632         (add_hlist): New function.
6633         (free_hlist): New function.
6634         (search_host): New function.
6635         (search_address): New function.
6636         (realhost): Use search_host, search_address and add_hlist.
6637         (same_host): Replaced realloc() with strdupdelim(), made
6638         case-insensitive, fixed a memory leak.
6639
6640         * html.c (ftp_index): Fixed tm_min and tm_sec to be tm_hour and
6641         tm_min, like intended.
6642
6643         * version.c: Change user agent information to
6644         Geturl/version.
6645
6646 1996-07-03  Hrvoje Niksic  <hniksic@srce.hr>
6647
6648         * utils.c: Renamed nmalloc.c to utils.c, .h likewise.
6649
6650         * url.c (acceptable): Always accept directories.
6651
6652         * ftp-unix.c (ftp_parse_ls): Support brain-damaged "ls -F"-loving
6653         servers by stripping trailing @ from symlinks and trailing / from
6654         directories.
6655
6656         * ftp.c (ftp_loop): Debugged the "enhanced" heuristics. :-)
6657
6658         * url.c (skip_url): Use toupper instead of UCASE.
6659
6660         * host.c (sufmatch): Made it case-insensitive.
6661
6662         * url.c (match_backwards_or_pattern): Fixed i == -1 to j == -1.
6663         (match_backwards): New function, instead of
6664         match_backwards_or_pattern.
6665
6666         * recur.c (recursive_retrieve): Increased performance by
6667         introducing inl, which reduces number of calls to in_slist to only
6668         one.
6669
6670         * ftp.c (ftp_loop): Enhanced the heuristics that decides which
6671         routine to use.
6672
6673         * main.c (printhelp): Removed the warranty stuff.
6674
6675 1996-07-02  Hrvoje Niksic  <hniksic@srce.hr>
6676
6677         * url.c (add_slist): Simplify.
6678         (match_backwards_or_pattern): New function.
6679         (in_acclist): Use match_backwards_or_pattern.
6680         (matches): Remove.
6681
6682 1996-06-30  Hrvoje Niksic  <hniksic@srce.hr>
6683
6684         * ftp.c (ftp_loop): Call ftp_index on empty file names, if not
6685         recursive.
6686
6687         * html.c (ftp_index): Fixed to work. Beautified the output.
6688
6689         * ftp.c (ftp_retrieve_glob): Another argument to control whether
6690         globbing is to be used.
6691         (ftp_retrieve_list): Compare the time-stamps of local and remote
6692         files to determine whether to download.
6693
6694 1996-06-29  Hrvoje Niksic  <hniksic@srce.hr>
6695
6696         * ftp.c (rel_constr): New function.
6697
6698         * retr.c (retrieve_from_file): Check for text/html before
6699         retrieving recursively.
6700
6701         * main.c (main): Check whether the file is HTML before going into
6702         recursive HTML retrieving.
6703
6704         * ftp.c (ftp_retrieve_list): Manage directories.
6705         (ftp_retrieve_glob): Pass all the file-types to ftp_retrieve_list.
6706         (ftp_1fl_loop): Fixed a bug that caused con->com to be incorrectly
6707         initialized, causing bugchecks in getftp to fail.
6708
6709         * configure.in: Check for symlink.
6710
6711         * ftp.c (ftp_retrieve_list): Added support for symlinks.
6712
6713         * version.c: "Released" 1.4b10.
6714
6715         * atotm.c (atotm): Redeclared as time_t.
6716
6717         * init.c: New variable "timestamping".
6718
6719         * main.c (main): New option 'N'.
6720
6721         * http.c (hgetlocation): Case-insensitive match.
6722         (hgetmodified): New function.
6723         (http_loop): Implement time-stamping.
6724
6725 1996-06-28  Hrvoje Niksic  <hniksic@srce.hr>
6726
6727         * version.c: Changed version to 1.4b10
6728
6729         * atotm.c: New file, from phttpd.
6730
6731         * options.h (struct options): New parameter timestamping.
6732
6733         * version.c: 1.4b9 "released".
6734
6735         * recur.c (recursive_retrieve): Used linked list (ulist) for
6736         faster storing of URLs.
6737
6738         * url.c (get_urls_html): Removed the old kludge with comparing the
6739         outputs of htmlfindurl and findurl.
6740         (get_urls_html): Added better protocol support here.
6741         (create_hash): Removed, as well as add_hash and in_hash.
6742         (addslist): New function.
6743         (in_slist): ditto
6744
6745         * version.c: Released 1.4b8, changed version to b9.
6746
6747 1996-06-27  Hrvoje Niksic  <hniksic@srce.hr>
6748
6749         * ftp.c (freefileinfo): New function.
6750         (delelement): New function.
6751
6752         * everywhere: GPL!
6753
6754         * ftp.c (ftp_loop): Use ccon.
6755         (ftp_retrieve_glob): Likewise.
6756
6757         * ftp.h: Define ccon, to define status of control connection.
6758
6759         * ftp.c (ftp_get_listing): New function.
6760         (ftp_retrieve_more): New function.
6761         (ftp_retrieve_glob): New function.
6762
6763 1996-06-25  Hrvoje Niksic  <hniksic@srce.hr>
6764
6765         * configure.in: Removed the search for cuserid().
6766
6767         * init.c (getmode): Renamed to getperms.
6768
6769 1996-06-24  Hrvoje Niksic  <hniksic@srce.hr>
6770
6771         * version.c: New version.
6772
6773         * main.c (hangup): New function, that handles hangup. Hangup
6774         signal now causes geturl to stop writing on stdout, and to write
6775         to a log file.
6776
6777         * ftp.c (getftp): "Released" 1.4b7.
6778
6779         * html.c (htmlfindurl): Ignore everything inside <head>...</head>.
6780         (ftp_index): Use fileinfo/urlinfo.
6781
6782         * ftp-unix.c (ftp_parse_ls): New function.
6783         (symperms): New function.
6784
6785         * ftp.c (ftp_1fl_loop): New function, to handle 1-file loops.
6786
6787         * retr.c (retrieve_url): Added FTP support.
6788
6789 1996-06-23  Hrvoje Niksic  <hniksic@srce.hr>
6790
6791         * geturl.h: Removed NOTFTP2HTML enum.
6792         Added DO_LOGIN, DO_CWD and DO_LIST. LIST_ONLY is obsolete.
6793
6794         * ftp.c (getftp): Resynched with urlinfo.
6795         (getftp): Removed HMTL-ization of index.html from getftp.
6796
6797         * version.c: 1.4b6 "released".
6798
6799         * options.h (options): New struct, to keep options in.
6800
6801         * http.c (http_loop,gethttp): Synched with proxy.
6802
6803         * retr.c (retrieve_url): Implemented proxy retrieval.
6804
6805         * main.c (main): Use retrieve_from_file.
6806
6807 1996-06-22  Hrvoje Niksic  <hniksic@srce.hr>
6808
6809         * retr.c (retrieve_from_file): New function.
6810
6811         * url.c (parseurl): Modified to return URLOK if all OK. Protocol
6812         can be found in u->proto.
6813
6814         * ftp.c (ftp_response): Fixed to accept multi-line responses as
6815         per RFC 959.
6816
6817         * recr.c (recursive_retrieve): Take newloc from retrieve_url.
6818
6819         * url.c (mymkdir): Removed the file of the same name, if one
6820         exists.
6821         (isfile): New function.
6822         (mkstruct): Fixed the '/' glitches.
6823         (path_simplify): Hacked to treat something/.. correctly.
6824
6825 1996-06-21  Hrvoje Niksic  <hniksic@srce.hr>
6826
6827         * http.c (gethttp): Close the socket after error in headers.
6828         (http_loop): HEOF no longer a fatal header.
6829
6830         * loop.c (retrieve_url): When dt is NULL, do not modify it. This
6831         simplifies the syntax of calling retrieve_url.
6832
6833         * recr.c (recursive_retrieve): Modified to use get_urls_html.
6834
6835         * url.c (get_urls_file): New function.
6836         (get_urls_html): New function.
6837
6838         * recr.c (recursive_retrieve): Patched up to conform to the
6839         standards.
6840
6841         * http.c (gethttp): Synched with the rest...
6842         (gethttp): Treat only CONREFUSED specially, with connection
6843         errors.
6844
6845         * init.c,geturl.1,http.c (http_loop): Removed kill_error.
6846
6847 1996-06-20  Hrvoje Niksic  <hniksic@srce.hr>
6848
6849         * http.c (http_loop): New function.
6850
6851         * loop.c: Removed *lots* of stuff from retrieve_url.
6852
6853         * url.c (parseurl): Changed to work with urlinfo. Integrated
6854         username finding and path parsing.
6855         (newurl): New function.
6856         (freeurl): New function.
6857         (mkstruct): Removed the old bogosities, made it urlinfo-compliant.
6858         (url_filename): Likewise.
6859         (path_simplify): Accept relative paths too.
6860         (opt_url): Made urlinfo-compliant, removed bogosities.
6861         (path_simplify): Expanded to accept relative paths.
6862         (str_url): A replacement for hide_url
6863         (decode_string): Fixed a bug that caused malfunctioning when
6864         encountering an illegal %.. combination.
6865         (opt_url): Removed the argument. Dot-optimizations are now default.
6866
6867         * nmalloc.c (strdupdelim): New function.
6868
6869         * url.h: Added the urlinfo structure
6870
6871 1996-06-19  Hrvoje Niksic  <hniksic@srce.hr>
6872
6873         * url.c (hide_url): Thrown out the protocol assertion. Do not
6874         change the URL if the protocol if not recognized.
6875         (findurl): Put continue instead of break.
6876
6877 1996-06-18  Hrvoje Niksic  <hniksic@srce.hr>
6878
6879         * sample.geturlrc: Changed the defaults to be commented out and
6880         harmless (previous defaults caused pains if copied to
6881         ~/.geturlrc).
6882
6883         * http.c (gethttp): Print the HTTP request in debug mode.
6884
6885         * connect.c (iread): Added EINTR check loop to select-ing
6886         too. EINTR is now correctly handled with select().
6887
6888         * TODO: new file
6889
6890 1996-05-07  Hrvoje Niksic  <hniksic@srce.hr>
6891
6892         * host.c (same_host): Made the function a little bit more
6893         intelligent regarding diversified URL syntaxes.
6894
6895         * url.c (skip_url): Spaces are now skipped after URL:
6896
6897         * Released 1.3.1 with the patch to prevent crashing when sending
6898         NULL to robot* functions and the patch to compile "out of the box"
6899         on AIX.
6900
6901         * recr.c (recursive_retrieve): Added checking whether this_url is
6902         NULL when calling the robot functions.
6903
6904         * ChangeLog: New file.